《2019年整理BD平安城市视频监控数据存储技术方案.doc》由会员分享,可在线阅读,更多相关《2019年整理BD平安城市视频监控数据存储技术方案.doc(20页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、平安城市视频监控数据存储技术方案第一章 方案概述 监控行业概述监控技术从上个世纪80年代进入我国以来,随着安防需求的急剧增加一直在飞速发展,从技术层面上来看,已经经历了多个不同的发展阶段。随着计算机技术的发展和网络的普及,目前,视频监控已经发展到了网络多媒体监控系统。新一代视频监控管理系统与前几代视频监控系统的根本区别在于,其不再局限于简单地完成对视频信号的处理、传输、控制,其核心乃是对基于IP网络的多媒体信息(视频/音频/数据)提供一个综合、完备的管理控制平台。革命,迅速受到了安防行业和用户的关注。网络多媒体监控管理系统,可以广泛用于多媒体视讯调度指挥、网络视频监控和会议、多媒体网上直播、网
2、络教学、远程医疗等各个方面。 网络多媒体监控系统由网络多媒体监控管理平台和前端信息采集设备组成,其核心是网络多媒体监控管理平台。网络多媒体监控管理平台集计算机网络、通信、视频处理、流媒体、和自动化技术于一身,是视频、音频、数据和图示一体化的解决方案,兼备网络视频监控、视频会议、视频直播等功能,具有超大规模组网能力,是构建于LAN/Internet网络之上、支持多种传输方式的综合多媒体业务管理平台,其应用已远远超出监控本身所涵盖的内容。网络多媒体视频服务器(Network Media Video Sever,NMVS)负责前端的视频处理部分,它同时具备了网络视频服务器的网络传输功能和硬盘录像机的
3、存储功能(Video Sever + DVR),NMVS是一种对视频、音频、数据进行压缩、存储及处理的专用计算机设备,它在视频监控、网络教学、IP视频会议、视频直播及视频点播等方面都有广泛的应用。NMVS采用最先进的MPEG4或H.264等压缩格式,在符合技术指标的情况下对视频数据进行压缩编码,以满足存储和传输的要求。 视频监控存储需求特点1)对存储的容量需求弹性比较大,存储容量的多少随着画面质量的提高、画面尺寸的增大、视频线路的增加都会成倍的增加容量需求。 2.)对存储的性能要求不高,但是需要能够满足长时间的连续数据读写,数据流量大但访问请求数量低。 3.)数据保存周期短,一般的监控场所数据
4、保存一定时间(如1个月)以后便可以删除。 近年来存储技术高速发展,存储设备价格不断下降,专业存储系统具备了在视频监控行业广泛应用的基础。第二章 用户需求监控系统用户为小区派出所,需要对辖区内的重要区域采取视频监控的措施,保障辖区内的安全。具体情况如下: 1) 共有10个派出所,分别对各自辖区进行监控,并分别存储视频监控数据。 2) 每个派出所共控制300个左右摄像头,10个派出所一共3000个摄像头。 3) 摄像头的视频监控格式采用CIF格式。 4) 所有摄像头全天候24小时监控本辖区。 5) 视频监控数据要求保存1个月。第三章 存储空间计算用户采用的CIF视频存储格式每路摄像头的码率约为50
5、0kb/s,1路摄像头每天的数据量约为5GB,24小时监控,视频数据存储1个月,则每个派出所所需要的存储空间为: 500kb/8*3600*24*30*30045.3TB 考虑一定的冗余空间,我们建议每个派出所配置46-48TB的磁盘空间。第四章 传输带宽计算CIF视频格式每路摄像头的码率为500kb/s,即每路摄像头所需的数据传输带宽为500kb/s,每个派出所全部300路摄像头所需的数据传输带宽为: 500kb/8*30019MB/s 大部分磁盘阵列都能满足这样的带宽要求。 另外,目前市面上主流的视频服务器都能支持100-200路左右的摄像头,而根据用户每个派出所控制300个左右摄像头的实
6、际需求,可以推算出每个派出所最多只需3-4台视频服务器。第五章 方案设计原则51紧密结合用户的实际需求存储区域网建设是视频监控数据存储系统的基础,它直接地影响到视频监控数据的安全性,可用性,因此只有紧密结合实际需求才能设计出一套切实可行而又行之有效技术的方案,我们对监控行业的需求做了认真的分析研究,并且将用户地具体需求一步一步地细化,然后结合其他地区存储区域网以往网络集成的经验,从而制定了本方案。52保持技术上的先进性存储区域网络建成后的不仅要能够满足目前的应用需求,而且还要能够为将来的存储区域网发展打下良好的基础,这就要求在技术方案必须保持具备相当的先进性,从而保障网络建成后在相当一段时间之
7、内不会落伍,不会被淘汰,因此本方案中采用先进的体系结构、软硬件技术设备,使系统在未来保持尽可能长的生命周期,即达到提高信息化水平、实现先进管理思想的目标,又保护对新系统的投资。53开放式模块化系统模块化的系统结构方便用户的升级管理,开放式的系统有利于和其他系统的互联实现资源的有效共享。具体针对用户存储系统的特殊性和数据的重要性,以及长时间的数据存储和随时地查询调用等读写数据的要求,整个监控视频数据存储系统必须具备以下特点:1)高可用性 能应对大量数据传输、交换,长时间的不间断的数据读写,重要数据的存储和妥善保存,确保数据的安全性。2)高性能(负载均衡和并行处理) 对网络数据读写的实时性和网络调
8、用数据提高响应的速率。3)高灵活性 必须满足用户系统增减容量的需求,及根据服务器应用的灵活配置,保证存储系统的扩展性。4)高性价比 必须考虑一次性软硬件成本的投入,及最终用户在系统维护方面技术和资源的投入,同时必须充分考虑到投资的时效性。54采用标准化的技术和产品在方案设计中,所有硬件、软件和网络产品必须坚持标准化原则,遵从国际化组织所制定的各种国际标准及各种工业标准,从而使系统实现具有如下特点:1) 可移植性 系统中所开发的各种应用软件具有良好的可移植性。2) 可扩展性 主机、存储设备、网络、应用系统均要有良好的扩展能力。3) 互联性 构建网络灵活,支持各种网络结构以及多种通信媒体,实现跨平
9、台、跨应用的各种设备和网络的互联。4)兼容性 随着时间的推移,监控系统还有可能面临升级或增加设备,这就使得在不同时期建立起来的网络信息系统大多都采用的是不同品牌不同技术性能的产品,因此,存储产品的兼容性显得更加的重要,必须要与市面上的主流产品相兼容。55系统的易管理性和稳定性任何一个网络的建设都需要考虑到应当方便用户的管理,另外所建成的网络系统需要是一个稳定性好、可靠性高的系统,监控系统的稳定性更是重中之重,一旦系统或是重要数据产生任何的严重错误,将造成不可估量的损失和后果。第六章 NAS、FC SAN、IP SAN比较根据用户的多服务器连接存储设备的需求,目前,市面上满足这一需求的主流存储架
10、构有NAS、SAN两种,而SAN又可分为FC SAN和IP SAN两种。下面就针对监控行业对存储的需求特点,结合用户的实际应用,将这三种存储架构进行一个比较。61 NAS存储架构1)文件级数据存储 NAS设备最主要的应用就是企业或部门内部的文件共享。由于NAS本身就是一台瘦服务器,有自己的操作系统和文件系统,可以直接与本地局域网连接,提供文件级的数据共享,但NAS设备无法成为服务器的本地硬盘,无法提供数据块的存储。2)带宽有限NAS是在局域网中传输,且有自己的操作系统和文件系统,这些因素都会导致NAS设备的带宽降低,增加NAS设备的读写响应时间。62 FC SAN1)高性能FC SAN最大的优
11、势在于其出色的性能。目前的主流FC产品的带宽为2Gb/s,4Gb/s产品也已经相当普遍,这是FC SAN高性能的标志。而光纤磁盘本身的高性能,也为FC磁盘阵列提供了高速运转的基础。2)扩展性强FC SAN的扩展能力很强,1 个光纤通道最大可支持127个设备(即磁盘),而一台光纤阵列至少会有2个以上的光纤通道,有的甚至更多,这就意味着用户购买一台光纤阵列产品就可以通过连接JBOD来安装更多的磁盘。另外,FC SAN还可以方便的通过光纤交换机来扩展磁盘阵列。3)成本较高FC SAN的高性能带来的另外一个特点就是高成本,从光纤阵列本身到光纤磁盘再到光纤交换设备、光纤HBA卡等周边设备的成本都是最高的
12、,而采用光纤磁盘阵列带来的管理维护成本,也将是用户一笔不小的开支。4)传输距离有限光纤的传输距离最大为10公里,如果需要更长的数据传输距离,只能增加光纤中转设备,而一般用户是无法承受如此高昂的费用的。63 IP SANIP SAN中所采用iSCSI通信协议是internet Small Computer System Interface的缩写,实际上是一个互联协议,是SAN结构的一种。通过将SCSI协议封装在IP包中,使得SCSI协议能够在LAN/WAN中进行传输。IP SAN的特点、优势 IP SAN的特点 1) 为存储区域网定义 (SANs) 。IP SAN是SAN的一种,通过IP实现的S
13、AN,即IPSAN. 2) 支持数据库应用所需的基于块的存储。虽然是通过IP传输,但iSCSI 却是基于块的存储,这有别于NAS的基于文件的存储。 3) 基于TCP/IP,iSCSI是被封装在IP包中进行传输的,所以它具有TCP/IP的所有优点,诸如可靠传输,可路由等。 4) 建立和管理基于IP的存储设备,主机和客户端之间的连接是建立在广泛使用的,为大家所熟悉的开放标准上的 5) 提供高级的IP路由,管理和安全工具。现有的绝大部分网络管理工具都可以用来管理IPSAN. IP SAN 的优势 与FC SAN一样,IP SAN也属于SAN大家庭中的一员,它的优点正是FC SAN目前存在的普遍缺点。
14、 1) 低成本 由于通过以太网进行传输,企业可以利用现有的以太网设施来部署iSCSI存储网络,而不需要更改企业的网络体系,所以他的部署成本比较低。由于对以太网的熟悉程度都比较高,所以培训和维护管理的费用也大大降低。 2) 协议本身没有距离限制 由于使用TCP/IP进行传输,他不但可以在局域网中进行部署,也可以跨过路由设备在广域网中进行部署,大大扩展了iSCSI存储网络的部署范围。 灵活的拓扑结构:iSCSI不但可以在局域网内部署,还可以在广域网内部署,拓扑结构非常灵活。 3) 易于使用 即使是多个厂家的设备:iSCSI结构简单,容易理解,协议通用,不同厂家的产品可以有机的结合起来共同使用,极大
15、地保护了企业的投资。 4) 易于扩展 由于iSCSI存储系统可以直接在现有的网络系统中进行组建,并不需要改变网络体系,加上运用交换机来连接存储设备,对于需要增加存储空间的企业用户来说,只需要增加存储设备就可完全满足,因此,iSCSI存储系统的可扩展性高。 综上所述,针对视频监控用户的需求和数据存储应用特点,IP SAN架构无疑是最合适的,其较FC SAN的成本优势,较NAS的性能优势和数据块级的存储都为IP SAN成为最适合视频监控系统应用的先天性优势。第七章 方案设计71 UIT BS2000 IP SAN存储方案711方案说明1) 每个派出所的300路摄像头连接在视频服务器或其他视频采集设
16、备上,视频服务器再与存储设备通过千兆以太网双绞线相连。 2) 每个派出所采用7台UIT BS2000磁盘阵列,满配共安装112块500GB的SATA-II硬盘。 3) 每台BS2000磁盘阵列的15块硬盘创建为RAID5,剩余一块硬盘作为热备盘,以确保存储数据的安全性,保证数据在常规情况下不会丢失。 4) 每台BS2000磁盘阵列为16个磁盘位,满配后,每台阵列的容量为(16-2)*500=7TB(注:减去的2块硬盘是创建RAID5和热备盘所需的2块),7台磁盘阵列的总容量为49TB。考虑磁盘的实际容量与理论容量不符,且还需为整个监控系统预留一定的冗余度,则49TB的容量空间完全可以满足用户需
17、求的。 712方案拓扑图图表 1 一个派出所视频存储示意图(下同) 713方案配置清单 注:以下配置清单为一个派出所所需设备(下同)714方案特点1) 管理性BS2000磁盘阵列可以通过阵列前面的液晶面板和超级终端对阵列进行配置、管理、维护和监控,可在液晶面板中查看阵列当前的状态和运行情况,及配置信息,并且在阵列出现故障、读写错误或其他异常时,液晶面板上会显示错误信息,并有蜂鸣报警,以及时通知管理员。毫无疑问,BS2000的前液晶面板的设计为系统管理员带来了极大的方便,并能够让管理员迅速地掌握阵列的操作。上述所有的操作都只能对单台阵列进行管理,多台阵列一起使用时,只能对每台阵列分别进行维护管理
18、。2) 稳定性由于每台BS2000磁盘阵列的16个盘位都有各自的控制器,大大增加了单台磁盘阵列的稳定性。BS2000所有的部件都是全冗余设计,避免了单点故障。这些部件在出厂前都进行了严格的稳定性测试,保证磁盘阵列在出现一般性故障时不会造成数据读写中断,或数据丢失等严重后果。另外,BS2000还提供了一系列的报警和安全机制,如声音报警、E-mail报警等,所以,BS2000可以完全满足视频监控系统对存储设备稳定性的要求。3) 扩展性由于监控数据的增长很快,且带有一定的不确定性,所以对于视频监控系统来说,扩展性也是比较重要的方面。BS2000磁盘阵列不能连接扩展柜,需要通过增加磁盘阵列来达到扩容的
19、目的。相对来说,BS2000更适合于小容量的数据存储。72 UIT BS3000e IP SAN存储方案721方案说明1) 每个派出所的300路摄像头连接在视频服务器或其他视频采集设备上,视频服务器再与存储设备通过千兆以太网双绞线相连。 2) 每个派出所采用3套UIT BS3000e磁盘阵列,每台磁盘阵列再连接2个扩展柜,全部安装500GB的SATA-II硬盘。 3) 每台BS3000e磁盘阵列的主柜和扩展柜均各自分别创建RAID5,且在每个磁盘阵列和扩展柜上都采用一块硬盘作为热备盘,以确保存储数据的安全性,保证数据在常规情况下不会丢失。 4) 每台BS3000e磁盘阵列为15个磁盘位,扩展柜
20、为12个磁盘位,满配后,整个存储系统的容量为(15+12+12-6)*500=16.5TB(注:减去的6块硬盘是创建RAID5和热备盘所需的2块,1台磁盘阵列加2个扩展柜则为6块),3套存储系统的总容量为49.5TB。同样,49.5TB的容量空间完全可以满足用户需求的。 722方案拓扑图723方案配置清单 序号723方案配置清单724方案特点1) 管理性 BS3000e是采用WEB方式进行管理的,只需对BS3000e设置一个IP地址,就可以通过浏览器访问其控制器的管理界面,这也就意味着在远程就可以完成对BS3000e进行配置、管理、维护、查看状态等所有的操作,这也是与BS2000的管理方式的不
21、同之处。另外,所有的JBOD都由主阵列来统一管理,减少了维护点。在阵列出现故障、错误时,BS3000e也同样会通过蜂鸣报警、E-mail等各种方式通知管理员。2) 稳定性 BS3000e是UIT公司的高端iSCSI产品,其性能和稳定性都非常好。且与其他的iSCSI产品不同,BS3000e的双控制器设计,也增加了系统的稳定性,阵列其他所有部件也都是全冗余设计,而JBOD扩展柜也有自己独立的冗余电源、散热部件。另外,值得一提的是BS3000e主阵列与JBOD扩展柜之间是通过SAS电缆传输数据的,其高达12Gb的带宽,保证了主阵列与JBOD之间的数据高速读写,用户根本不用为阵列与扩展柜之间数据传输的
22、带宽及延时问题担忧。3) 扩展性 每台BS3000e磁盘阵列最多可以连接3个扩展柜,支持51块磁盘,需要更多磁盘时,则要增加磁盘阵列的主柜。BS3000e的扩展能力较BS2000相对更好一些,更适合数据量中等的数据存储应用。72 UIT BS3000e IP SAN存储方案 721方案说明1) 每个派出所的300路摄像头连接在视频服务器或其他视频采集设备上,视频服务器再与存储设备通过千兆以太网双绞线相连。 2) 每个派出所采用3套UIT BS3000e磁盘阵列,每台磁盘阵列再连接2个扩展柜,全部安装500GB的SATA-II硬盘。 3) 每台BS3000e磁盘阵列的主柜和扩展柜均各自分别创建R
23、AID5,且在每个磁盘阵列和扩展柜上都采用一块硬盘作为热备盘,以确保存储数据的安全性,保证数据在常规情况下不会丢失。 4) 每台BS3000e磁盘阵列为15个磁盘位,扩展柜为12个磁盘位,满配后,整个存储系统的容量为(15+12+12-6)*500=16.5TB(注:减去的6块硬盘是创建RAID5和热备盘所需的2块,1台磁盘阵列加2个扩展柜则为6块),3套存储系统的总容量为49.5TB。同样,49.5TB的容量空间完全可以满足用户需求的。 722方案拓扑图723方案配置清单724方案特点1) 管理性 BS3000e是采用WEB方式进行管理的,只需对BS3000e设置一个IP地址,就可以通过浏览
24、器访问其控制器的管理界面,这也就意味着在远程就可以完成对BS3000e进行配置、管理、维护、查看状态等所有的操作,这也是与BS2000的管理方式的不同之处。另外,所有的JBOD都由主阵列来统一管理,减少了维护点。在阵列出现故障、错误时,BS3000e也同样会通过蜂鸣报警、E-mail等各种方式通知管理员。2) 稳定性 BS3000e是UIT公司的高端iSCSI产品,其性能和稳定性都非常好。且与其他的iSCSI产品不同,BS3000e的双控制器设计,也增加了系统的稳定性,阵列其他所有部件也都是全冗余设计,而JBOD扩展柜也有自己独立的冗余电源、散热部件。另外,值得一提的是BS3000e主阵列与J
25、BOD扩展柜之间是通过SAS电缆传输数据的,其高达12Gb的带宽,保证了主阵列与JBOD之间的数据高速读写,用户根本不用为阵列与扩展柜之间数据传输的带宽及延时问题担忧。3) 扩展性 每台BS3000e磁盘阵列最多可以连接3个扩展柜,支持51块磁盘,需要更多磁盘时,则要增加磁盘阵列的主柜。BS3000e的扩展能力较BS2000相对更好一些,更适合数据量中等的数据存储应用。73 UIT BM3800B FC SAN存储方案731方案说明 1) BM3800B有8个2Gb光纤接口,可自定义为主机或磁盘通道,最大可支持直连7台服务器,所以,在本方案中,采用UIT BM3800B光纤磁盘阵列不需要光纤交
26、换机,视频服务器直接与存储设备相连 2) BM3800B采用的是控制器独立设计,通过连接磁盘柜来增加容量。由于BM3800B的8个光纤通道可自定义为主机或磁盘通道,而每个光纤通道最大可连接127个设备(即磁盘),所以,BM3800B最大可支持840块磁盘。本方案中,BM3800B需要连接112块硬盘。 3) 每个派出所采用1台UIT BM3800B磁盘阵列,连接7台16个SATA盘位的JBOD磁盘柜,共安装112块500GB的SATA-II硬盘。 4) 每台BM3800B磁盘阵列的JBOD都创建为RAID5,同样在每台JBOD上都采用一块硬盘作为热备盘,以确保存储数据的安全性,保证数据在常规情
27、况下不会丢失。 5) 整个存储系统的容量为(16-2)*500=7TB,7台JBOD的总容量为49TB,同样为用户保留了一定的冗余空间。 732方案拓扑图图表3733方案配置清单734方案特点 1) 管理性 BM3800B是UIT公司光纤产品中面向中高端用户的一款光纤产品,在本方案中,每个派出所只需一台BM3800B磁盘阵列,这对用户的管理维护带来了方便,所有的磁盘柜都连接在BM3800B控制器的磁盘通道接口上,由控制器统一管理。与BS3000e相同,BM3800B也是采用的WEB管理方式,通过浏览器对控制器进行配置、管理、维护操作的,这同样也为需求在远程或网络为管理、监控阵列的用户提供了简单
28、的操作方法。 2) 稳定性 BM3800B是UIT公司针对海量数据存储需求用户而专门设计的。与上述两款阵列不同,BM3800B将磁盘阵列的控制器模块独立出来,独立的电源及散热部件,合理的内部结构和更加高性能的CPU及内存,都保证BM3800B的稳定性是三款产品中最好的。而且,BM3800B还可以将双控制器或三控制器建立集群,排除阵列的单点故障,使其可用性高达99.9999%。另外,8个独立的可自定义为主机或磁盘通道的光纤接口,使BM3800B更加灵活,在服务器数量不多时,为用户节省光纤交换机的投入,在需要连接更多磁盘时,又可以轻松调节。本方案中,7台JBOD最少只需1个磁盘接口即可。 3) 扩
29、展性 如上所述,一台BM3800B控制器最大可支持840块硬盘,这是由于其最多可以设定7个磁盘通道,而每个光纤磁盘通道最多可连接127块硬盘来决定的,这是一个非常惊人的数字,在存储业界内,UIT BM3800B绝对是扩展性能最好的磁盘阵列。由于BM3800B优秀的扩展性,最大420TB的容量,所以非常适合50TB、100TB以上的海量数据存储应用。74方案价格比较 图片说明: 根据下图,我们可以看出本方案中所涉及到的3款产品在不同的存储容量需求时,其成本是不同的: 1)30TB容量存储以下时(200路摄像头以下),BS3000e有很好的性价比。 2)30-50TB容量存储时(200-350路摄像头),BS2000的价格优势有所体现,而BM3800B良好的扩展性则具有更好的性价比。 3)50TB容量存储以上时(350路摄像头以上),BM3800B无疑是性价比最好的选择。图表 4第 20 页