大华监控云存储部署方案

1、1 云存储 1.1 产品形态 一套完整云存储系统包括元数据服务器，云存储数据存储节点 元数据服务器： DH-CSS9064X （最常见） 云存储数据节点： 最常见的型号为 DH-CSS7024S-ERD ，长的和 EVS 、 NVR 差不多，其它还有 36 盘位、 48 盘位 DH-CSS7024S-ERD （最常见） 1.2 云存储组网 1.2.1 确认数据节点型号 通过标签或者网口数量判断 是否为直存设备 ： 通过存储节点标签标注的信息判断： 其中直存型号包括： DH-CSS7124S-ERD ，DH-CSS7124S-10GERD ， DH-CSS7124S- ESD 即最后一位是 “D

2、”结尾的设备支持直存 通过存储节点的网卡数量判断： 直存设备一般有 9 个网口（其中一个是 web 口），带万兆光口的存储节点有 7 个网卡（其中一个是 web 口） 只有 5 个网卡的设备一定是转存的设备 1.2.2 组网说明 a）元数据服务器： 最新的机器正常情况下 3、4 两个网口作为心跳口， 两台元数据服务器之间用两根网线直连； 1、2 两个网口接到存储段交换机，交换机上对应端口需要做链路聚合。 心跳网口网线直连 注：如果是早期的元数据服务器，心跳口可能是 1、2 网口，请根据实际情况判断。 b）云转存节点： 4个网口插满接到存储交换机，交换机上对应的 4个端口做链路聚合； WEB 口

3、不插网线。 c）云直存节点： Ex1 、Ex2 、Ex3 、Ex4 四个网口做成一组绑定，一般做存储网段，四个网口插满接到存储交换 机，交换机上对应 4 个端口做链路聚合； 1、 2、3、4 四个网口做成一组绑定，作为业务网段（与存储网段 不在同一个子网 ），其中任意两个接到业务段交换机， 交换机上对应 2 个端口做链路聚合； WEB 口不插网线。 直存节点组网连接图，存储端接满四根网线，业务端至少两根网线 云存储搭配实战平台和公安平台使用时， 为避免公安网应用等问题， 可以采用同网段部署， 不区分业务和存 储网段（即存储和业务用同一个子网） （如下图） 。 PS：公安平台客户端云下载及实战客

4、户端都需要访问 sdk 接口上传及下载，存储节点配置双网卡后默认网关是业务段的，导致客户端无法访问存储段 ip。 云转存组网图（以双网段为例） ： 云转存的常见组网方式（以标准部署双网段为例）如下图所示，流媒体服务器需配置两个网段，一个是业务网段 和前端业务进行通信，另一个是存储网段，用于云存储内部通信使用。 存储网段在 vlan1，业务网段在 vlan2， vlan 间通过三层互相通信，流媒体服务器必须采用双网段，元数据服务器能够访问到平台 存储交换机独立，采用双网段 云直存组网图（以双网段为例） ： 云直存的常见组网方式如下图所示， 云存储节点上需要配置两个网段， 一个是业务网段和前端业务

5、进行通信， 另 一个是存储网段，用于云存储内部通信及数据交互使用。 云直存转存混合部署组网（以双网段为例） ： 1.2.3 FAQ Q：云存储为什么要采用双网段部署 A ：云存储数据恢复的速度达到 TB/ 小时，所以采用存储网络和业务网络分开部署，避免存储数据节点之间大量 数据交互影响正常业务功能使用。 Q ：云直存是什么，和 EVS 直存是一样的吗，转存和直存的区别是什么 A ：云直存和 EVS 直存完全不一样， EVS 只是把录像本地，云直存把前端码流拉过后需要通过存储网络把数据 切片分别存储到各个云存储数据节点。 直存和转存区别在于直存节点在提供数据存储的功能外，集成了流媒体转发功能，即

6、云直存=云转存 +流媒体服 务器 参考下图： 直存节点 =转存节点 +流媒体服务器 因此，直存节点节省了流媒体服务器，同时，在保证转发性能的基础上，直存节点和转存节点可以混合部署。 Q：云直存的转发性能是否有折扣，现场的卡口是否可以挂在云直存上 A ：云直存硬件上做了提升，转发性能也能达到700Mb。云直存也支持图片转发，但是视频服务器和图片服务器 只能开启一个。 1.3 设备 IP 配置 设备到位后，提前规划好 ip（ 以直存为例 ），修改设备 ip 信息 例如 ip 规划如下： 设备信息 存储网段 业务网段 元数据服务器 1（CSS9064） 元数据服务器 2 虚拟 ip 目录 ip 存储

7、节点 1（ CSS7124S-ER）D 存储节点 2 存储节点 3 存储节点 4 存储节点 5 存储节点 6 流媒体服务器 1 流媒体服务器 2 存储节点： （一）通过 web 界面修改 2015年 12月后生产的直存存储节点集成了 dss模块，可以通过网线直连 1号网口（注意：不是 ex1网口），在 ie 浏览器输入打开配置界面，修改绑定网卡1（业务段 ip 地址）和绑定网卡 2（存储段 ip 地址）的 ip（注意：保存 时提示输入 eht1的 ip 地址时，随意配置一个即可） 绑定网卡 1：输入对应业务 ip 地址 绑定网卡 2：数据对应存储 ip 地址 eth1 网卡随意配一个地址即可：

8、 （二）通过 ipinstall 工具修改 使用方法： 1、安装 ipinstall 2、笔记本直连元数据服务器第一个网口（无法搜索到设备则换一个网口） 3、打开 ipinstall ，可以搜索到对应的设备 4、双击需要修改 ip 的设备，填入对应的 ip，子网掩码，网管，输入密码（ 12 个 8），点击修改即可（如果提示 修改失败，请点击右上角刷新页面） 5、如果无法搜索到 ip ，则需要手动修改。 （三）手动修改 ip 方法一： 1）首先通过串口登录（或者网线直连存储节点1号网口，默认） ，通过终端模拟软件（ CRT或 xshell）登陆，用 户名 admin 密码 输入密码： 弹出如下界

9、面，选择 Network Configuration 选择 yes 输入对应 ip 信息： Ip address： ip 地址 Netmask：子网掩码 Gatway ：网关 输入完毕后选择 “OK”，按回车键报错配置信息 （四）手动修改 ip 方法二： 1）首先通过串口登录（或者网线直连存储节点1号网口，默认） ，通过终端模拟软件（ CRT或 xshell）登陆，用 户名 root 密码 dahuacloud 2）修改网卡配置文件： vi /etc/network/interfaces 3）按“ i”进入编辑模式，修改 bond0 和 bond1 的 ip ，子网掩码，网关， bond0 为

10、业务 ip， bond1 为数据 ip 4）修改完毕后，按“ esc”退出编辑模式，然后按“： ”再输入” wq“保存退出 5）输入： xconf -s /etc/network/interfaces 保存配置到 dom 盘 6）重启网卡： /etc/networking restart 7）输入： ifconfig 查看 ip 信息 元数据服务器： 通过 ipinstall 修改 ip 手动修改： 1）通过网线直连 1 号网口（或者 3 号网口），默认，通过终端模拟软件（ CRT 或 xshell）登录，用户名 root 密 码 dahuacloud 2）修改网卡配置文件： vi /etc/

11、sysconfig/network-scripts/ifcfg-bond0 3）按“ i”进入编辑模式，修改 bond0 的 ip ，子网掩码，网关。 4）修改完毕后，按“ esc”退出编辑模式，然后按“： ”再输入” wq“保存退出 5）重启网卡： /etc/network restart 6）输入： ifconfig 查看 ip 信息 IP 配置完毕后请按照云存储组网方式通过网线把设备和交换机互连。 1.4 系统配置 根据配置好的 ip 信息： 设备信息 存储网段 业务网段 元数据服务器 1 元数据服务器 2 MDS虚拟 ip CS虚拟 ip 在 chrome 浏览器输入： /EFS/ 本

12、地 IP ：元数据服务器 1 的实际 ip 对端 IP ：元数据服务器 2 的实际 ip MDS虚拟 IP ：已经规划好的 MDS虚拟 ip CS虚拟 IP ：已经规划好的 CS虚拟 ip 输入对应的 ip 后点 “确定 ”，配置需要一分钟，请耐心等待。 配置完成后可以通过 csip/EFS 即 第一次登陆运维因为没有添加存储节点，对外 sdk 端口显示关闭，所以打红叉是正常的。 添加云存储数据节点的 ip 新增节点 ip 后点击“添加”即可， so easy ！根本不需要建 riad 等其他操作，动态扩容也是添加 ip 就行！ 存储节点添加完毕后系统容量自动识别： 存储用户容量分配： 添加存

13、储用户（类似于网盘）： 适用场景：一套云存储对接多个平台（如 -C，-T ，实战平台），一个平台对应一个存储用户，就相当于我 们每个人都有属于自己的个人网盘 用户名：例如 dss-c ，默认存储用户 root ，不可删除。 权限：私有-其他用户不可见； 可读-其他存储用户可以搜索到本用户的 bucket ；可读写-其他用户可以把数 据写到本用户 密码：输入密码 密码确认：确认密码 昵称：例如公安平台 Bucket 数上限：配置 1000000 即可，不够再加 容量上限：你就是管理员，根据数据量分配大小 1.5 配额上限设置 1、总容量（磁盘格式化后的可用容量） 2、存储节点容量之和 3、用户可

14、配容量上限： 容量 3=容量 1*1024 （是系统利用率，是云存储需要预留 10%容量作为系统恢复空间， 1024 是单位转化为 G） 1.6 云直存分布式配置 浏览器打开分布式流媒体配置界面， 例如：，用户名： admin 密码： 123456 存储配置分页中，配置云存储 目录服务器地址： cs 虚拟 ip 端 口：默认 38100 用户名： root 或者其他用户名 密码： 123456 N+M 模式： 4+1 配置从模式： ip 地址：填写本地业务段 ip 地址 扩展地址：填写本地存储段 ip 地址 填写完毕后点击“应用” ，设备将会重启 设置“从模式”后，可以在中心平台管理界面搜索到

15、对应从服务器 注意：视频服务器和图片服务器只能启用一个（只能用于转发视频或者转发图片） 点击“编辑”按钮，可以启用从服务器 服务器类型：可选用归属服务器（默认） 、备用服务器（冗余考虑） 是否启动：是否启用从服务器的视频/图片转发功能 可选备用服务器：可以把设置为的备用服务器， 44 宕机后， 45 自动接管。 1.7 平台对接云存储 登录-C 管理端下载配置工具 登录 DSS-系统配置工具，配置云存储 云存储配置： IP 地址：云存储 CS 虚拟 ip 端 口： 38100 用户名：存储用户 密码：对应存储用户的密码 数据冗余模式： 4+1 PTS 配置项： 基本配置同上 添加虚拟盘符，相当

16、于每个卡扣对应多个bucket，可以增加图片写入并发量，有利于提升性能。 配置录像计划、普通配额限制、配额限制 开启录像计划 设置普通配额 在系统设置 -参数配置 注意：配置限制必须启用，否则无法录像 至此， -C 平台对接云存储已经完成，其他平台对接云存储操作方法类似，换汤不换药 1.8 云直存 PTS 配置 卡口采用云存储模式，请参照下面的说明按照实际需要配置文件，之后重启服务。 vi /opt/dss/PTS/ 1、云存储服务环境配置项 2、云存储 Bucket 名称配置项，可复用原来的存储路径配置，只是配置有格式限制 bucketName其中 TruePath 必须 有并且保持唯一，

17、bucketName 为用户手动输入 Bucket 名称,，只支持 1-63字节，不能出现以下字符 ：* ？ | / rdrytftyfy 该路径配置项至少配置一个，该路径的配置个数表示写云线程数，当数据量比较大时，请多配置几个，并且 bucketName 最好不要一样，以保证读写性能。 3、数据存储模式配置： 0：标准异步存储模式 2、 CQFS 存储模式3、EFS云存储模式 写超时重试次数 每次写超时休眠时间以 ms 为单位 建议上限做限制最多不超过 图片保留天数 以天为单位 3 4、超时设置 1000 2 10ms 否则影响写性能 5、图片删除配置 默认为 5 云存储删除 CQFS 不用

18、 5 360 安装完毕后重启 dss 服务， /opt/ 1.9 云存储校时配置 登录云存储运维界面，配置 NTP IP 为中心平台 ip 地址 确认中心平台服务器已经开启 ntp 服务 使用 xshell 登录中心平台终端： rootdahuatech # /etc/ntpd status ntpd (pid 17339) is running. 示例： 假如 ip 信息如下： 设备信息 存储网段 业务网段 元数据服务器 1(CSS9064) 元数据服务器 2 虚拟 ip 目录 ip 存储节点 1( CSS7124S-ER)D 存储节点 2 存储节点 3 存储节点 4 存储节点 5 存储节点

19、 6 根据 ip 信息编辑对应关系： 配置网闸信息： 登录大华云存储管理平台，点击网闸配置： 第二步，重启 CS 服务，主备都需要操作 rootlocalhost?CatalogServer#?/etc/csdriver?restart 第三步， cloudview 验证 IP ： ip 使用 CS 目录 ip 或者对应外网 ip Port ：使用映射后的对应端口（此处以 38180 为例） Usename：用户名 Password：密码 登录正常后验证上传及下载功能 2 云浓缩摘要 2.1 产品形态 云计算一体机： 型号： DH-CCS7100X-LA / DH-CCS7100X-MA /

20、DH-CCS7100X-HA 注：一体机由四个节点组成，每个节点左上角的网口是 IPMA 网口，可选配，方便管理。实际使用时把每个节点 的第一个网口（ NIC1 ）连接到交换机，需要四根网线。 后面板 : 2.2 组网方式 云计算一体机由四个刀片服务器组成，开机时请注意把所有的节点开机，开机后把各个节点的网口1（NIC1 ）接 入到存储交换机（配存储段 ip ）。 云浓缩和云存储在同一个存储网段 配置前请提前准备好 5 个 IP（四个为实 IP，其中一个为虚拟 IP） IP 配置及修改 通过 ipinstall 修改 ip 手动修改： 1）通过网线直连 1 号网口（或者 3 号网口），默认，通

21、过终端模拟软件（ CRT 或 xshell）登录，用户名 root 密 码 dahuacloud 2）修改网卡配置文件： vi /etc/sysconfig/ network-scripts /ifcfg-eth0 3）按“ i”进入编辑模式，修改 bond0 的 ip ，子网掩码，网关。 4）修改完毕后，按“ esc”退出编辑模式，然后按“： ”再输入” wq“保存退出 5）重启网卡： /etc/network restart 6）输入： ifconfig 查看 ip 信息 2.3 安装部署 注：前三步可能需要研发支持 1、 上传最新的浓缩摘要安装包至 A 节点，并解压 2、拷贝 /home/hadoop/Installation/scripts/ 至 /目录下，通过 vi 修改运维安装脚本中所有节点的 ip cp /home/