视频监控数据存储技术方案.docx
《视频监控数据存储技术方案.docx》由会员分享,可在线阅读,更多相关《视频监控数据存储技术方案.docx(14页珍藏版)》请在冰豆网上搜索。
视频监控数据存储技术方案
视频监控数据存储技术方案
第一章方案概述
监控行业概述
监控技术从上个世纪80年代进入我国以来,随着安防需求的急剧增加一直在飞速开展,从技术层面上来看,已经经历了多个不同的开展阶段。
随着计算机技术的开展和网络的普及,目前,视频监控已经开展到了网络多媒体监控系统。
新一代视频监控管理系统与前几代视频监控系统的根本区别在于,其不再局限于简单地完成对视频信号的处理、传输、控制,其核心乃是对基于IP网络的多媒体信息〔视频/音频/数据〕提供一个综合、完备的管理控制平台。
网络多媒体监控系统以网络为依托,以数字视频的压缩、传输、存储和播放为核心,以智能实用的图像分析为特色,并与报警系统、门禁系统整合到一个使用平台上,引发了视频监控行业的一次技术革命,迅速受到了安防行业和用户的关注。
网络多媒体监控管理系统,可以广泛用于多媒体视讯调度指挥、网络视频监控和会议、多媒体网上直播、网络教学、远程医疗等各个方面。
网络多媒体监控系统由网络多媒体监控管理平台和前端信息采集设备组成,其核心是网络多媒体监控管理平台。
网络多媒体监控管理平台集计算机网络、通信、视频处理、流媒体、和自动化技术于一身,是视频、音频、数据和图示一体化的解决方案,兼备网络视频监控、视频会议、视频直播等功能,具有超大规模组网能力,是构建于LAN/Internet网络之上、支持多种传输方式的综合多媒体业务管理平台,其应用已远远超出监控本身所涵盖的内容。
网络多媒体视频效劳器〔NetworkMediaVideoSever,NMVS〕负责前端的视频处理局部,它同时具备了网络视频效劳器的网络传输功能和硬盘录像机的存储功能〔VideoSever+DVR〕,NMVS是一种对视频、音频、数据进展压缩、存储及处理的专用计算机设备,它在视频监控、网络教学、IP视频会议、视频直播及视频点播等方面都有广泛的应用。
NMVS采用最先进的MPEG4或H.264等压缩格式,在符合技术指标的情况下对视频数据进展压缩编码,以满足存储和传输的要求。
视频监控存储需求特点
1〕对存储的容量需求弹性比拟大,存储容量的多少随着画面质量的提高、画面尺寸的增大、视频线路的增加都会成倍的增加容量需求。
2.〕对存储的性能要求不高,但是需要能够满足长时间的连续数据读写,数据流量大但访问请求数量低。
3.〕数据保存周期短,一般的监控场所数据保存一定时间〔如1个月〕以后便可以删除。
近年来存储技术高速开展,存储设备价格不断下降,专业存储系统具备了在视频监控行业广泛应用的根底。
第二章用户需求
监控系统用户为小区派出所,需要对辖区内的重要区域采取视频监控的措施,保障辖区内的平安。
具体情况如下:
1〕共有10个派出所,分别对各自辖区进展监控,并分别存储视频监控数据。
2〕每个派出所共控制300个左右摄像头,10个派出所一共3000个摄像头。
3〕摄像头的视频监控格式采用CIF格式。
4〕所有摄像头全天候24小时监控本辖区。
5〕视频监控数据要求保存1个月。
第三章存储空间计算
用户采用的CIF视频存储格式每路摄像头的码率约为500kb/s,1路摄像头每天的数据量约为5GB,24小时监控,视频数据存储1个月,那么每个派出所所需要的存储空间为:
500kb/8*3600*24*30*300≈45.3TB
考虑一定的冗余空间,我们建议每个派出所配置46-48TB的磁盘空间。
第四章传输带宽计算
CIF视频格式每路摄像头的码率为500kb/s,即每路摄像头所需的数据传输带宽为500kb/s,每个派出所全部300路摄像头所需的数据传输带宽为:
500kb/8*300≈19MB/s
大局部磁盘阵列都能满足这样的带宽要求。
另外,目前市面上主流的视频效劳器都能支持100-200路左右的摄像头,而根据用户每个派出所控制300个左右摄像头的实际需求,可以推算出每个派出所最多只需3-4台视频效劳器。
第五章方案设计原那么
5.1严密结合用户的实际需求
存储区域网建立是视频监控数据存储系统的根底,它直接地影响到视频监控数据的平安性,可用性,因此只有严密结合实际需求才能设计出一套切实可行而又行之有效技术的方案,我们对监控行业的需求做了认真的分析研究,并且将用户地具体需求一步一步地细化,然后结合其他地区存储区域网以往网络集成的经历,从而制定了本方案。
5.2保持技术上的先进性
存储区域网络建成后的不仅要能够满足目前的应用需求,而且还要能够为将来的存储区域网开展打下良好的根底,这就要求在技术方案必须保持具备相当的先进性,从而保障网络建成后在相当一段时间之内不会落伍,不会被淘汰,因此本方案中采用先进的体系构造、软硬件技术设备,使系统在未来保持尽可能长的生命周期,即到达提高信息化水平、实现先进管理思想的目标,又保护对新系统的投资。
5.3开放式模块化系统
模块化的系统构造方便用户的升级管理,开放式的系统有利于和其他系统的互联实现资源的有效共享。
具体针对用户存储系统的特殊性和数据的重要性,以及长时间的数据存储和随时地查询调用等读写数据的要求,整个监控视频数据存储系统必须具备以下特点:
1〕高可用性
能应对大量数据传输、交换,长时间的不连续的数据读写,重要数据的存储和妥善保存,确保数据的平安性。
2〕高性能(负载均衡和并行处理)
对网络数据读写的实时性和网络调用数据提高响应的速率。
3〕高灵活性
必须满足用户系统增减容量的需求,及根据效劳器应用的灵活配置,保证存储系统的扩展性。
4〕高性价比
必须考虑一次性软硬件本钱的投入,及最终用户在系统维护方面技术和资源的投入,同时必须充分考虑到投资的时效性。
5.4采用标准化的技术和产品
在方案设计中,所有硬件、软件和网络产品必须坚持标准化原那么,遵从国际化组织所制定的各种国际标准及各种工业标准,从而使系统实现具有如下特点:
1〕可移植性
系统中所开发的各种应用软件具有良好的可移植性。
2〕可扩展性
主机、存储设备、网络、应用系统均要有良好的扩展能力。
3〕互联性
构建网络灵活,支持各种网络构造以及多种通信媒体,实现跨平台、跨应用的各种设备和网络的互联。
4〕兼容性
随着时间的推移,监控系统还有可能面临升级或增加设备,这就使得在不同时期建立起来的网络信息系统大多都采用的是不同品牌不同技术性能的产品,因此,存储产品的兼容性显得更加的重要,必须要与市面上的主流产品相兼容。
5.5系统的易管理性和稳定性
任何一个网络的建立都需要考虑到应当方便用户的管理,另外所建成的网络系统需要是一个稳定性好、可靠性高的系统,监控系统的稳定性更是重中之重,一旦系统或是重要数据产生任何的严重错误,将造成不可估量的损失和后果。
第六章NAS、FCSAN、IPSAN比拟
根据用户的多效劳器连接存储设备的需求,目前,市面上满足这一需求的主流存储架构有NAS、SAN两种,而SAN又可分为FCSAN和IPSAN两种。
下面就针对监控行业对存储的需求特点,结合用户的实际应用,将这三种存储架构进展一个比拟。
6.1NAS存储架构
1〕文件级数据存储
NAS设备最主要的应用就是企业或部门内部的文件共享。
由于NAS本身就是一台瘦效劳器,有自己的操作系统和文件系统,可以直接与本地局域网连接,提供文件级的数据共享,但NAS设备无法成为效劳器的本地硬盘,无法提供数据块的存储。
2〕带宽有限
NAS是在局域网中传输,且有自己的操作系统和文件系统,这些因素都会导致NAS设备的带宽降低,增加NAS设备的读写响应时间。
6.2FCSAN
1〕高性能
FCSAN最大的优势在于其出色的性能。
目前的主流FC产品的带宽为2Gb/s,4Gb/s产品也已经相当普遍,这是FCSAN高性能的标志。
而光纤磁盘本身的高性能,也为FC磁盘阵列提供了高速运转的根底。
2〕扩展性强
FCSAN的扩展能力很强,1个光纤通道最大可支持127个设备〔即磁盘〕,而一台光纤阵列至少会有2个以上的光纤通道,有的甚至更多,这就意味着用户购置一台光纤阵列产品就可以通过连接OD来安装更多的磁盘。
另外,FCSAN还可以方便的通过光纤交换机来扩展磁盘阵列。
3〕本钱较高
FCSAN的高性能带来的另外一个特点就是高本钱,从光纤阵列本身到光纤磁盘再到光纤交换设备、光纤HBA卡等周边设备的本钱都是最高的,而采用光纤磁盘阵列带来的管理维护本钱,也将是用户一笔不小的开支。
4〕传输距离有限
光纤的传输距离最大为10公里,如果需要更长的数据传输距离,只能增加光纤中转设备,而一般用户是无法承受如此高昂的费用的。
6.3IPSAN
IPSAN中所采用iSCSI通信协议是internetSmallputerSystemInterface的缩写,实际上是一个互联协议,是SAN构造的一种。
通过将SCSI协议封装在IP包中,使得SCSI协议能够在LAN/WAN中进展传输。
IPSAN的特点、优势
IPSAN的特点
1〕为存储区域网定义(SANs)。
IPSAN是SAN的一种,通过IP实现的SAN,即IPSAN.
2〕支持数据库应用所需的基于块的存储。
虽然是通过IP传输,但iSCSI却是基于块的存储,这有别于NAS的基于文件的存储。
3〕基于TCP/IP,iSCSI是被封装在IP包中进展传输的,所以它具有TCP/IP的所有优点,诸如可靠传输,可路由等。
4〕建立和管理基于IP的存储设备,主机和客户端之间的连接是建立在广泛使用的,为大家所熟悉的开放标准上的
5〕提供高级的IP路由,管理和平安工具。
现有的绝大局部网络管理工具都可以用来管理IPSAN.
IPSAN的优势
与FCSAN一样,IPSAN也属于SAN大家庭中的一员,它的优点正是FCSAN目前存在的普遍缺点。
1〕低本钱
由于通过以太网进展传输,企业可以利用现有的以太网设施来部署iSCSI存储网络,而不需要更改企业的网络体系,所以他的部署本钱比拟低。
由于对以太网的熟悉程度都比拟高,所以培训和维护管理的费用也大大降低。
2〕协议本身没有距离限制
由于使用TCP/IP进展传输,他不但可以在局域网中进展部署,也可以跨过路由设备在广域网中进展部署,大大扩展了iSCSI存储网络的部署范围。
灵活的拓扑构造:
iSCSI不但可以在局域网内部署,还可以在广域网内部署,拓扑构造非常灵活。
3〕易于使用
即使是多个厂家的设备:
iSCSI构造简单,容易理解,协议通用,不同厂家的产品可以有机的结合起来共同使用,极大地保护了企业的投资。
4〕易于扩展
由于iSCSI存储系统可以直接在现有的网络系统中进展组建,并不需要改变网络体系,加上运用交换机来连接存储设备,对于需要增加存储空间的企业用户来说,只需要增加存储设备就可完全满足,因此,iSCSI存储系统的可扩展性高。
综上所述,针对视频监控用户的需求和数据存储应用特点,IPSAN架构无疑是最适宜的,其较FCSAN的本钱优势,较NAS的性能优势和数据块级的存储都为IPSAN成为最适合视频监控系统应用的先天性优势。
第七章方案设计
7.1UITBS2000IPSAN存储方案
7.1.1方案说明
1)每个派出所的300路摄像头连接在视频效劳器或其他视频采集设备上,视频效劳器再与存储设备通过千兆以太网双绞线相连。
2)每个派出所采用7台UITBS2000磁盘阵列,满配共安装112块500GB的SATA-II硬盘。
3)每台BS2000磁盘阵列的15块硬盘创立为RAID5,剩余一块硬盘作为热备盘,以确保存储数据的平安性,保证数据在常规情况下不会丧失。
4)每台BS2000磁盘阵列为16个磁盘位,满配后,每台阵列的容量为〔16-2〕*500=7TB〔注:
减去的2块硬盘是创立RAID5和热备盘所需的2块〕,7台磁盘阵列的总容量为49TB。
考虑磁盘的实际容量与理论容量不符,且还需为整个监控系统预留一定的冗余度,那么49TB的容量空间完全可以满足用户需求的。
7.1.2方案拓扑图
图表1
一个派出所视频存储示意图〔下同〕
7.1.3方案配置清单 注:
以下配置清单为一个派出所所需设备〔下同〕
7.1.4方案特点
1)管理性
BS2000磁盘阵列可以通过阵列前面的液晶面板和超级终端对阵列进展配置、管理、维护和监控,可在液晶面板中查看阵列当前的状态和运行情况,及配置信息,并且在阵列出现故障、读写错误或其他异常时,液晶面板上会显示错误信息,并有蜂鸣报警,以及时通知管理员。
毫无疑问,BS2000的前液晶面板的设计为系统管理员带来了极大的方便,并能够让管理员迅速地掌握阵列的操作。
上述所有的操作都只能对单台阵列进展管理,多台阵列一起使用时,只能对每台阵列分别进展维护管理。
2)稳定性
由于每台BS2000磁盘阵列的16个盘位都有各自的控制器,大大增加了单台磁盘阵列的稳定性。
BS2000所有的部件都是全冗余设计,防止了单点故障。
这些部件在出厂前都进展了严格的稳定性测试,保证磁盘阵列在出现一般性故障时不会造成数据读写中断,或数据丧失等严重后果。
另外,BS2000还提供了一系列的报警和平安机制,如声音报警、报警等,所以,BS2000可以完全满足视频监控系统对存储设备稳定性的要求。
3)扩展性
由于监控数据的增长很快,且带有一定的不确定性,所以对于视频监控系统来说,扩展性也是比拟重要的方面。
BS2000磁盘阵列不能连接扩展柜,需要通过增加磁盘阵列来到达扩容的目的。
相对来说,BS2000更适合于小容量的数据存储。
7.2UITBS3000eIPSAN存储方案
7.2.1方案说明
1〕每个派出所的300路摄像头连接在视频效劳器或其他视频采集设备上,视频效劳器再与存储设备通过千兆以太网双绞线相连。
2〕每个派出所采用3套UITBS3000e磁盘阵列,每台磁盘阵列再连接2个扩展柜,全部安装500GB的SATA-II硬盘。
3〕每台BS3000e磁盘阵列的主柜和扩展柜均各自分别创立RAID5,且在每个磁盘阵列和扩展柜上都采用一块硬盘作为热备盘,以确保存储数据的平安性,保证数据在常规情况下不会丧失。
4〕每台BS3000e磁盘阵列为15个磁盘位,扩展柜为12个磁盘位,满配后,整个存储系统的容量为〔15+12+12-6〕*500=16.5TB〔注:
减去的6块硬盘是创立RAID5和热备盘所需的2块,1台磁盘阵列加2个扩展柜那么为6块〕,3套存储系统的总容量为49.5TB。
同样,49.5TB的容量空间完全可以满足用户需求的。
7.2.2方案拓扑图
7.2.3方案配置清单序号
7.2.3方案配置清单
7.2.4方案特点
1〕管理性 BS3000e是采用WEB方式进展管理的,只需对BS3000e设置一个IP地址,就可以通过浏览器访问其控制器的管理界面,这也就意味着在远程就可以完成对BS3000e进展配置、管理、维护、查看状态等所有的操作,这也是与BS2000的管理方式的不同之处。
另外,所有的OD都由主阵列来统一管理,减少了维护点。
在阵列出现故障、错误时,BS3000e也同样会通过蜂鸣报警、等各种方式通知管理员。
2〕稳定性 BS3000e是UIT公司的高端iSCSI产品,其性能和稳定性都非常好。
且与其他的iSCSI产品不同,BS3000e的双控制器设计,也增加了系统的稳定性,阵列其他所有部件也都是全冗余设计,而OD扩展柜也有自己独立的冗余电源、散热部件。
另外,值得一提的是BS3000e主阵列与OD扩展柜之间是通过SAS电缆传输数据的,其高达12Gb的带宽,保证了主阵列与OD之间的数据高速读写,用户根本不用为阵列与扩展柜之间数据传输的带宽及延时问题担忧。
3〕扩展性 每台BS3000e磁盘阵列最多可以连接3个扩展柜,支持51块磁盘,需要更多磁盘时,那么要增加磁盘阵列的主柜。
BS3000e的扩展能力较BS2000相对更好一些,更适合数据量中等的数据存储应用。
7.3UITBM3800BFCSAN存储方案
7.3.1方案说明 1) BM3800B有8个2Gb光纤接口,可自定义为主机或磁盘通道,最大可支持直连7台效劳器,所以,在本方案中,采用UITBM3800B光纤磁盘阵列不需要光纤交换机,视频效劳器直接与存储设备相连
2) BM3800B采用的是控制器独立设计,通过连接磁盘柜来增加容量。
由于BM3800B的8个光纤通道可自定义为主机或磁盘通道,而每个光纤通道最大可连接127个设备〔即磁盘〕,所以,BM3800B最大可支持840块磁盘。
本方案中,BM3800B需要连接112块硬盘。
3) 每个派出所采用1台UITBM3800B磁盘阵列,连接7台16个SATA盘位的OD磁盘柜,共安装112块500GB的SATA-II硬盘。
4) 每台BM3800B磁盘阵列的OD都创立为RAID5,同样在每台OD上都采用一块硬盘作为热备盘,以确保存储数据的平安性,保证数据在常规情况下不会丧失。
5) 整个存储系统的容量为〔16-2〕*500=7TB,7台OD的总容量为49TB,同样为用户保存了一定的冗余空间。
7.3.2方案拓扑图
图表 3
7.3.3方案配置清单
7.3.4方案特点
1)管理性
BM3800B是UIT公司光纤产品中面向中高端用户的一款光纤产品,在本方案中,每个派出所只需一台BM3800B磁盘阵列,这对用户的管理维护带来了方便,所有的磁盘柜都连接在BM3800B控制器的磁盘通道接口上,由控制器统一管理。
与BS3000e一样,BM3800B也是采用的WEB管理方式,通过浏览器对控制器进展配置、管理、维护操作的,这同样也为需求在远程或网络为管理、监控阵列的用户提供了简单的操作方法。
2)稳定性
BM3800B是UIT公司针对海量数据存储需求用户而专门设计的。
与上述两款阵列不同,BM3800B将磁盘阵列的控制器模块独立出来,独立的电源及散热部件,合理的内部构造和更加高性能的CPU及内存,都保证BM3800B的稳定性是三款产品中最好的。
而且,BM3800B还可以将双控制器或三控制器建立集群,排除阵列的单点故障,使其可用性高达99.9999%。
另外,8个独立的可自定义为主机或磁盘通道的光纤接口,使BM3800B更加灵活,在效劳器数量不多时,为用户节省光纤交换机的投入,在需要连接更多磁盘时,又可以轻松调节。
本方案中,7台OD最少只需1个磁盘接口即可。
3)扩展性
如上所述,一台BM3800B控制器最大可支持840块硬盘,这是由于其最多可以设定7个磁盘通道,而每个光纤磁盘通道最多可连接127块硬盘来决定的,这是一个非常惊人的数字,在存储业界内,UITBM3800B绝对是扩展性能最好的磁盘阵列。
由于BM3800B优秀的扩展性,最大420TB的容量,所以非常适合50TB、100TB以上的海量数据存储应用。
7.4方案价格比拟
图片说明:
根据下列图,我们可以看出本方案中所涉及到的3款产品在不同的存储容量需求时,其本钱是不同的:
1〕30TB容量存储以下时〔200路摄像头以下〕,BS3000e有很好的性价比。
2〕30-50TB容量存储时〔200-350路摄像头〕,BS2000的价格优势有所表达,而BM3800B良好的扩展性那么具有更好的性价比。
3〕50TB容量存储以上时〔350路摄像头以上〕,BM3800B无疑是性价比最好的选择。
图表4