《大华监控云存储部署方案计算机存储_计算机-存储.pdf》由会员分享，可在线阅读，更多相关《大华监控云存储部署方案计算机存储_计算机-存储.pdf（10页珍藏版）》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、 大华监控云存储部署方案 Final revision by standardization team on December 10,2020.1.1产品形态 一套完整云存储系统包括元数据服务器，云存储数据存储节点 元数据服务器：DH-CSS9064X（最常见）云存储数据节点：最常见的型号为DH-CSS7024S-ERD,长的和EVS、WR差不多，其它还有36盘位、48盘 位 DH-CSS7024S-ERD（最常见）1.2云存储组网 1.2.1确认数据节点型号 通过标签或者网口数量判断是否为直存设备：通过存储节点标签标注的信息判断：其中直存型号包括：DH-CSS7124S-ERD,DH-CSS
2、7124S-10GERD,DH-CSS7124S-ESD 即最后一位是“D”结尾的设备支持直存 通过存储节点的网卡数量判断：直存设备一般有9个网口（其中一个是web 口），带万兆光口的存储节点有7个网卡（其中一个是web 口）只有5个网卡的设备一定是转存的设备 1.2.2组网说明 a）元数据服务器：最新的机器正常悄况下3、4两个网口作为心跳口，两台元数据服 务器之间用两根网线直连；1、2两个网口接到存储段交换机，交换机上对应端口需 要做链路聚合。心跳网口网线宜连 注,如果足早期的元数据服务器,心跳口对能足1.2网口.请根据实际情况判斯。b）云转存节点：4个网口插满接到存储交换机，交换机上对应的
3、4个端口做链路聚 合:WEB 口不插网线。c）云直存节点：Exl、Ex2、Ex3、Ex4四个网口做成一组绑定，一般做存储网段，四个 网口插满接到存储交换机，交换机上对应4个端口做链路聚合；1、2、3、4四个网 口做成一组绑定，作为业务网段（与存储网段不在同一个子网），其中任意两个接 到业务段交换机，交换机上对应2个端口做链路聚合；WEB 口不插网线。宜存节点组网连接图.存储扁接满四根网线.业务端至少两根网线 云存储搭配实战平台和公安平台使用时，为避免公安网应用等问题，可以采用同网 段部署，不区分业务和存储网段（即存储和业务用同一个子网）（如下图）。PS：公安平台客户帰云下報及实战客户竭郁希要访
4、问sdk接口上传及下载，存储节点配置双网卡后默认网关是业务段的.导致客户端 无法访问存储段iP-云转存组网图（以双网段为例）：见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网
5、段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务云转存的常见组网方式（以标准部署双网段为例）如下图所示，流媒体服务器需配置两 个网段，一个是业务网段和前端业务进行通信，另一个是存储网段，用于云存储内部通 信使用。存储网段在vlanl.业务网段ttvlan2.vlan M通过三层互相通信.滾媒体服务器必須采用双网段.元数据眼务器能够访何到平台 存储交换机独立.采用双网段 云直存组网图（以双网段为例）：云直存的常见组网方式如下图所示，云存储节点上需要配置两个网段，一个是业务网段 和前端业务进行通信，另一个是存储网段
6、，用于云存储内部通信及数据交互使用。云直存转存混合部署组网（以双网段为例）:1.2.3 FAQ Q：云存储为什么要采用双网段部署 A：云存储数据恢复的速度达到TB/小时，所以采用存储网络和业务网络分开部署，避免 存储数据节点之间大量数据交互影响正常业务功能使用。Q：云直存是什么，和EVS直存是一样的吗，转存和直存的区别是什么 A：云直存和EVS直存完全不一样，EVS只是把录像本地，云直存把前端码流拉过后需要 通过存储网络把数据切片分别存储到各个云存储数据节点。直存和转存区别在于直存节点在提供数据存储的功能外，集成了流媒体转发功能，即云 直存二云转存+流媒体服务器 参考下图：宜存节点=转存节点+
7、流媒体眼务器 因此，直存节点节省了流媒体服务器，同时，在保证转发性能的基础上，直存节点和转 存节点可以混合部署。Q：云直存的转发性能是否有折扣，现场的卡口是否可以挂在云直存上 A：云直存硕件上做了提升，转发性能也能达到7OOMb。云直存也支持图片转发，但是视 频服务器和图片服务器只能开启一个。1.3设备IP配置 设 备 到位 后，提 前 规划好ip（以直 存为 例），修改 设备ip信 息 例 如ip规 划如 下：设备信息 存储网段 业务网段 元数据服务器1 (CSS9064)元数据服务器2 虚拟ip 目录ip 存储节点1(CSS7124S-ERD)61 存储节点2 62 存储节点3 63 存储
8、节点4 64 存储节点5 65 见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储
9、网段不在同一个子网其中任意两个接到业务存储节点6 流媒体服务器1 67 流媒体服务器2 68 存储节点：（）通过web界面修改 2015年12月后生产的直存存储节点集成了 dss模块，可以通过网线直连1号网口（注 意：不是exl网口）,在ie浏览器输入打开配置界面，修改绑定网卡1（业务段ip地 址）和绑定网卡2（存储段ip地址）的ip（注意：保存时提示输入ehtl的ip地址 时，随意配置一个即可）绑定网卡输入对应业务ip地址 绑定网卡2：数据对应存储ip地址 ethl网卡随意配一个地址即可：（二）通H ipinstall匸具修改 使用方法：1、安装 ipinstall 2、笔记本直连元数据服务
10、器第一个网口（无法搜索到设备则换一个网口）3、打开ipinstall,可以搜索到对应的设备 4、双击需要修改ip的设备，填入对应的ip,子网掩码，网管，输入密码（12个8）,点击修改即可（如果提示修改失败，请点击右上角刷新页面）5、如果无法搜索到ip,则需要手动修改。（三）手动修改ip方法一：1）首先通过串口登录（或者网线直连存储节点1号网口，默认），通过终端模拟软件（CRT或xshell）登陆，用户名admin密码 输入密码：弹出如下界面，选择Network Configuration 选择yes 输入对应ip信息：Ip address：ip 地址 Netmask：子网掩码 Gat way：
11、网关 输入完毕后选择“0K”，按回车键报错配置信息（四）手动修改ip方法二：1）首先通过串口登录（或者网线直连存储节点1号网口，默认），通过终端模拟软件（CRT 或 xshell）登陆，用户名：root 密码 dahuacloud 2）修改网卡配置文件：vi/etc/network/interfaces 3）按i”进入编辑模式，修改bondO和bondl的ip,子网掩码，网关，bondO为业务 ip,bondl 为数据 ip 4）修改完毕后，按“esc”退出编辑模式，然后按“：”再输入”wq“保存退出 5）输入：xconf-s/etc/network/interfaces 保存配置到 dom
12、盘 6）重启网卡：/etc/networking restart 7）输入：辻config查看ip信息 元数据服务器：通过ipinstall修改ip 手动修改：1）通过网线直连1号网口（或者3号网口），默认，通过终端模拟软件（CRT或 xshell）登录，用户见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到
13、存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务名 root 密码 dahuacloud 2）修改网卡配置文件：vi/etc/sysconfig/network-scripts/ifcfg-bondO 3）按“i”进入编辑模式，修改bondO的ip,子网掩码，网关。4）修改完毕后，按“esc”退出编辑模式，然后按“：”再输入”wq“保存退出 5）重启网卡：/etc/network
14、 restart 6）输入：辻config査看ip信息 IF配置完毕后请按照云存储组网方式通过网线把设备和交换机互连。根据配置好的ip信息:设备信息 存储网段 业务网段 元数据服务器1 元数据服务器2 MDS虚拟ip CS虚拟ip 在chrome浏览器输入：/EFS/本地IP:元数据服务器1的实际ip 对端IP:元数据服务器2的实际ip MDS虚拟IP：已经规划好的MDS虚拟ip CS虚拟IP：已经规划好的CS虚拟ip 输入对应的ip后点“确定”，配置需要一分钟，请耐心等待。配置完成后可以通过csip/EFS即 第一次登陆运维因为没有添加存储节点，对外sdk端口显示关闭，所以打红义是正常的。添
15、加云存储数据节点的ip 新增节点ip后点击“添加”即可，so easy!根本不需要建riad等其他操作，动态扩容也是添 加ip就行！存储节点添加完毕后系统容量口动识别：存储用户容量分配：添加存储用户（类似于网盘）：适用场景：一套云存储对接多个平台（如弋，-T.实战平台），一个平台对应一个存储用户，就相当于我们每个人都有属于自己的个人网盘 用户名：例如dss-c,默认存储用户root.不可删除。权限：私有-其他用户不可见；可读-其他存储用户可以搜索到本用户的bucket；可读写-其他用 户可以把数据写到本用户 密码：输入密码 密码确认：确认密码 昵称：例如公安平台 Bucket数上限:配置100
16、0000即可，不够再加 容量上限：你就是管理员，根据数据量分配大小 1.5配额上限设置 1、总容量（磁盘格式化后的可用容量）见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段
17、四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务2、存储节点容量之和 3、用户可配容量上限:容量：3二容 1*1024（是系统利用率，是云存储需要预留10%容量作为系统恢复空间，1024是单位转化为G）1.6云直存分布式配置 浏览器打开分布式流媒体配宜界面，例如：，用户划：admin密码：123456 存储配置分页中，配宜云存储 目录服务器地址：cs虚拟ip 端 口：默认38100 用户名：root或者英他用户名 密码：123456 N+M 模式：4+1 配置从模式：ip地址：填写本地业务段ip地址 扩展地址：填
18、写本地存储段ip地址 填写完毕后点击“应用”，设备将会重启 设置“从模式”后，可以在中心平台管理界而搜索到对应从服务器 注意：视频服务器和图片服务器只能启用一个（只能用于转发视频或者转发图片）。点击编辑”按钮，可以启用从服务器 服务器类型：可选用归属服务器（默认）、备用服务器（冗余考虑）是否启动：是否启用从服务器的视频/图片转发功能 可选备用服务器：可以把设宜为的备用服务器，44宕机后，45自动接管。1.7平台对接云存储 登录-C管理端下载配宜工具 登录DSS-系统配置工具，配置云存储 云存储配置：IP地址：云存储CS虚拟ip 端 口：38100 用户名：存储用户 见云存储数据节点最常见的型号
19、为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务密码：对应存储用户的密
20、码 数据冗余模式：4+1 PTS配置项：基本配置同上 添加虚拟盘符，相当于每个卡扣对应多个bucket,可以增加图片写入并发量，有利于提 升性能。配置录像计划.普通配额限制、配额限制 开启录像计划 设置普通配额 在系统设置-参数配置 注意：配置限制必须启用，否则无法录像 至此，-C平台对接云存储已经完成，其他平台对接云存储操作方法类似，换汤不换药 1.8云直存PTS配置 卡口采用云存储模式，请参照下面的说明按照实际需要配置文件，之后重启服务。vi/opt/dss/PTS/1、云存储服务环境配置项 2、云存储Bucket名称配置项，可复用原来的存储路径配置，只是配置有格式限制 StoragePa
21、th TruePdth二d IsWrite二1 ForSpecialUse二0 bucketame 其中 TruePath 必须有并且保持唯,bucketName为用户手动输入Bucket名称，只支持1-63字节，不能出现以下字符 :*I/rdrytftyfy 该路径配置项至少配置一个，该路径的配置个数表示写云线程数，当数据量比较大时，请多配置儿个，并且bucketName最好不要一样，以保证读写性能。3、数据存储模式配置：3 0：标准异步存储模式 2、CQFS 存储模式 3、EFS云存储模式 4、超时设置 1000 写超时重试次数 2 每次写超时休眠时间以ms为单位建议上 限做限制最多不超过
22、10ms否则影响写性能 5、图片删除配置 5 默认为5云存储删除CQFS不用 360 图片保留天数 以天为单位 安装完毕后重启dss服务，/opt/见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做
23、成一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务1.9云存储校时配置 登录云存储运维界面，配置NTP IP为中心平台ip地址 确认中心平台服务器已经开启ntp服务 使用xshell登录中心平台终端：rootdahuatech#/etc/ntpd status ntpd(pid 17339)is running 示例：假如ip信息如下：设备信息 存储网段 业务网段 元数据服务器1(CSS9064)元数据服务器2 虚拟ip 目录ip 存储节点1(CSS7124S-ERD)61 存储节点2 62
24、 存储节点3 63 存储节点4 64 存储节点5 65 存储节点6 根据ip信息编借对应关系:配置网闸信息：登录大华云存储管理平台，点击网闸配置:见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成
25、一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务2云浓缩第二步，重启CS服务，主备都需要操作 rootlocalhostCatalogServer#/etc/csdriverrestart 第三步，cloudview验证 IP：ip使用CS目录ip或者对应外网ip Port：使用映射后的对应端口（此处以38180为例）Usename：用户名 Password：密码 登录正常后验证上传及下载功能 2.1产品形态 云计算一体机：型号：DH-CCS7100X-LA/DH-CCS7100X-MA/D
26、H-CCS7100X-HA 注：一体机山四个节点组成，每个节点左上角的网口是IPMA网口，可选配，方便管 理。实际使用时把每个节点的第一个网口（NIC1）连接到交换机，需要四根网线。前面板：后面板：2.2组网方式 云汁算一体机山四个刀片服务器组成，开机时请注意把所有的节点开机，开机后把各个 节点的网口 1（NIC1）接入到存储交换机（配存储段ip）。云浓缩和云存储在同一个存儲网段 配置前请提前准备好5个IP（四个为实IP,其中一个为虚拟IP）IP配置及修改 通过ipinstall修改ip 手动修改：1）通过网线直连1号网口（或者3号网口），默认，通过终端模拟软件（CRT或 xshell）登录，
27、用户名 root 密码 dahuacloud 2）修改网卡配置文件：vi/etc/sysconfig/network-scripts/ifcfg-ethO 3）按“i”进入编辑模式，修改bondO的ip,子网掩码，网关。4）修改完毕后，按“esc”退出编辑模式，然后按“：”再输入”wq“保存退出 5）重启网卡：/etc/network restart 6）输入：ifconfig查看ip信息 2 3安装部署 注：前三步可能需要研发支持 1、上传最新的浓缩摘要安装包至A节点，并解压 2、拷贝/home/hadoop/Installation/scripts/至/目录下，通过vi修改运维安装脚本中所
28、有ij点的 ip cp/home/hadoop/Installation/scripts/vi/见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段四个网口插满接到存储交换机交
29、换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务3、添加可执行权限，并执行脚本安装云汁算运维系统 chmod+x sh install输入“yes”开始安装运维 4、打开chrome浏览器，输入A节点ip加8067端口登录运维界而（用户爼和密码都是admin）填入相关配置信息：IP Address：各个节点的ip地址 Virtual Address：云浓缩虚拟ip地址 EFS Address：云存储（EFS）CS 地址 EFS Port：云存储服务端口，默认38100 EFS Username：云存储存储用户名称，默认root EFS Pa
30、ssword：云存储对应存储用户的密码，root用户的密码是123456 EFS Bucket：云浓缩对应的Bucket,默认dsa EFS N+M Mode：根据节点数量选择对应的冗余模式，混合安装默认就两个存储节点，选 择1+1即可。EFS Version：根据云存储版本选择对应的版本即可 时间配置：手动配置系统时间 System Channel WSDL:用于通道浓缩，修改对应的ip地址为-C平台的ip地址 填写完毕后，点击“开始安装”，等待安装完毕 2.4对接实战平台 云计算服务地址:浓缩虚拟ip/hummer-api/services/（验证浓缩接口是否正常：在浏览器中输入浓缩虚拟i
31、p/hummer-api（例如），如果接口 正常，会弹出hello worldM，也可以在运维中查看服务是否运行。）实战平台云存储配置项：见云存储数据节点最常见的型号为长的和差不多其它还有盘位盘位最常见云存储组网确认数据节点型号通过标签或者网口数量判断是否为直存设备通过存储节点标签标注的信息判断其中直存型号包括即最后一位是结尾的设备支持直口只有个网卡的设备一定是转存的设备组网说明元数据服务器最新的机器正常悄况下两个网口作为心跳口两台元数据服务器之间用两根网线直连两个网口接到存储段交换机交换机上对应端口需要做链路聚合心跳网口网线宜连注如足的个端口做链路聚合口不插网线云直存节点四个网口做成一组绑定一般做存储网段四个网口插满接到存储交换机交换机上对应个端口做链路聚合四个网口做成一组绑定作为业务网段与存储网段不在同一个子网其中任意两个接到业务