cStor云存储系统测试报告.doc

cstor云存储系统测试方案 cstor云存储系统测试报告 目 录一、概述31.1 编写目的31.2 系统简介31.3 测试范围3二、测试环境42.2 设备配置42.3 测试工具52.3.1 iozone5三、测试用例63.1 1:1备份功能验证63.2 业务适应性测试133.2.1 用于大、小文件和各种视频文件存储133.3 功能测试133.3.4存储节点数据容错能力133.3.5 卷管理193.3.6 设备监控管理213.4 云视频转码功能测试223.4.1 mp4视频格式转码测试223.4.2 ts视频格式转码测试233.5 安全测试233.5.1 用户配额分配及管理233.5.2 用户权限管理243.6可靠性测试263.6.1 写元数据服务器故障263.6.2 写存储节点故障293.6.3读元数据服务器故障343.6.4 读存储节点故障383.7性能测试423.7.1存储系统并发性能423.7.2 1个客户端2个chunkserver，测试5g大小文件423.7.3 1个客户端4个chunkserver,双副本，测试5g大小文件433.7.4 2个客户端2个chunkserver,双副本，测试5g大小文件453.7.5 2个客户端4个chunkserver,双副本，测试5g大小文件453.7.6 性能测试总结：47一、概述1.1 编写目的编写cstor版本测试用例,目的是通过全面测试手段来保证文件读写性能是否满足要求,本测试报告参考人员包括:开发人员、测试人员、相关管理人员、及相关客户等。1.2 系统简介cstor云存储系统由元数据节点和存储节点构成。元数据节点采用主备方式。运用自适应副本管理技术进行容错。所有存储节点同时担任对外服务功能，客户端分别挂载到不同元数据服务器中访问云存储系统。1.3 测试范围cstor版本测试，主要包括基本功能、可靠性、稳定性和性能等，通过验证不同场景测试，实现系统要求达到用户使用要求。二、测试环境2.2 设备配置软件配置软件名称软件版本数量（套）说明cstor云存储系统cstor v2.0版本1存储硬件配置设备配置备注ip服务端1dell r710+dell md1220:cpu: intel x5660*2 2.8ghz内存: 24gb ddr3 硬盘: sas 300gb 3.5 15k rpm网卡: 板载 4端口千兆网卡 dell md1220存储: 24块2.5寸 10k 300gb 硬盘os: centos 6.2 x64192.168.3.3服务端2dell r710+dell md1220:cpu: intel x5660*2 2.8ghz内存: 24gb ddr3 硬盘: sas 300gb 3.5 15k rpm网卡: 板载 4端口千兆网卡 dell md1220存储: 24块2.5寸 10k 300gb 硬盘os: centos 6.2 x64192.168.3.4服务端3dell r720xd: cpu: intel xeon e5-2690*2 2.8ghz 内存：4gb*8 ddr3 1333mhz 硬盘： 2*300gb 10k 2.5寸 sas 6gb/s硬盘 （系统盘） 24*300gb 10k 2.5寸 sas 6gb/s硬盘 （数据盘）网络：1 板载网卡 broadcom 57800 2个1gbe 网口 和2个10gbe network adaptor 2 外接网卡 intel 10gb x520-sr2 双端口万兆以太网卡 os: rhel 6.2 x64192.168.3.5客户端cpu: intel xeon e5-2609*2 2.4ghz 4core/6.4gt/s内存：4gb*4 ddr3 1333mhz 硬盘：10*300gb 10k 2.5寸 sas 6gb/s硬盘网络：broadcom四端口1gbe 千兆以太网卡（带toe和iscsi卸载） 192.168.3.1192.168.3.2192.168.3.6192.168.3.72.3 测试工具2.3.1 iozone是一款基于文件系统测试的基准工具，可以在不同的操作系统下，对不同种类的文件系统的读写性能进行测试，主要用于查看某种文件系统下对于处理io的吞吐量，以此反映该文件系统的整体性能表现。可以测试read, write, re-read, re-write, read backwards, random read, random write等不同的模式下的文件系统的性能。具体iozone参数说明，请见附件： 三、测试用例3.1 1:1备份功能验证项目1:1备份功能验证用例名称1:1备份功能验证用例编号cstor-fun-001重要性重要测试目的测试1:1备份时文件是否正常读写，备份因子显示正常。预置条件1、 按照测试组网图搭建测试环境；2、 元数据服务运行正常；3、 存储节点服务运行正常；4、 cstor系统中默认1:1备份因子；5、 客户端挂载成功。测试步骤1、 客户端中写入1.ts文件，写入成功后输入cstorgetgoal /mnt/cstor/1.ts，显示文件备份因子为2份；2、 客户端中读出1.ts文件。预期结果文件成功读写，并且备份因子显示为2份。备注：1：通过cstorgetgoal命令查看文件副本数为2：rootr710 cstor# cstorgetgoal 1.ts 1.ts: 2使用cstorfileinfo能看到副本分布rootr710 cstor# cstorfileinfo 1.ts 1.ts:chunk 0: 0000000000000f7d_00000001 / (id:3965 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 1: 0000000000000f7e_00000001 / (id:3966 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 2: 0000000000000f7f_00000001 / (id:3967 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 3: 0000000000000f80_00000001 / (id:3968 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 4: 0000000000000f81_00000001 / (id:3969 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 5: 0000000000000f82_00000001 / (id:3970 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 6: 0000000000000f83_00000001 / (id:3971 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 7: 0000000000000f84_00000001 / (id:3972 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 8: 0000000000000f85_00000001 / (id:3973 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 9: 0000000000000f86_00000001 / (id:3974 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 10: 0000000000000f87_00000001 / (id:3975 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 11: 0000000000000f88_00000001 / (id:3976 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 12: 0000000000000f89_00000001 / (id:3977 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 13: 0000000000000f8a_00000001 / (id:3978 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 14: 0000000000000f8b_00000001 / (id:3979 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 15: 0000000000000f8c_00000001 / (id:3980 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 16: 0000000000000f8d_00000001 / (id:3981 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 17: 0000000000000f8e_00000001 / (id:3982 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 18: 0000000000000f8f_00000001 / (id:3983 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 19: 0000000000000f90_00000001 / (id:3984 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 20: 0000000000000f91_00000001 / (id:3985 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 21: 0000000000000f92_00000001 / (id:3986 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 22: 0000000000000f93_00000001 / (id:3987 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 23: 0000000000000f94_00000001 / (id:3988 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 24: 0000000000000f95_00000001 / (id:3989 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 25: 0000000000000f96_00000001 / (id:3990 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 26: 0000000000000f97_00000001 / (id:3991 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 27: 0000000000000f98_00000001 / (id:3992 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 28: 0000000000000f99_00000001 / (id:3993 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 29: 0000000000000f9a_00000001 / (id:3994 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 30: 0000000000000f9b_00000001 / (id:3995 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 31: 0000000000000f9c_00000001 / (id:3996 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 32: 0000000000000f9d_00000001 / (id:3997 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 33: 0000000000000f9e_00000001 / (id:3998 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 34: 0000000000000f9f_00000001 / (id:3999 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 35: 0000000000000fa0_00000001 / (id:4000 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 36: 0000000000000fa1_00000001 / (id:4001 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 37: 0000000000000fa2_00000001 / (id:4002 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:9422chunk 38: 0000000000000fa3_00000001 / (id:4003 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.4:9422chunk 39: 0000000000000fa4_00000001 / (id:4004 ver:1) copy 1: 192.168.3.4:9422 copy 2: 192.168.3.5:94223.2 业务适应性测试3.2.1 用于大、小文件和各种视频文件存储项目业务适应性测试用例名称业务适应性测试用例编号cstor-ada-001重要性重要测试目的测试cstor存储系统是否支持大、小文件和各种视频文件存储预置条件1、 按照测试组网图搭建测试环境；2、 文件系统运行正常；测试步骤3、 客户端中连续读写10个1g大文件；4、 客户端中连续读写10个1m小文件；5、 客户端中连续读写10个500m视频文件；预期结果大、小和视频文件读写成功，并可正常打开备注：通过cp文件测试可以cp成功3.3 功能测试3.3.4存储节点数据容错能力项目可管理性测试用例名称存储节点数据容错能力用例编号cstor-fun-001重要性重要测试目的测试存储节点故障情况下数据的自动恢复功能预置条件1、 按照测试组网图搭建测试环境；2、 存储系统默认1:1个副本3、 客户端挂载成功4、 修改master.cfg文件：replications_delay_init = 300replications_delay_disconnect = 3600测试步骤1、 客户端写文件成功2、 任意将一个存储节点断掉3、 过了配置时间后，检查断电的存储节点数据分布预期结果断电丢失副本能够被自动恢复到存储系统在线的其他存储节点上备注1：断开ip为192.168.3.4的chunkserver服务2：通过cstorfileinfo查看当前文件副本情况：chunk 0: 0000000000000f7d_00000001 / (id:3965 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.5:9422chunk 1: 0000000000000f7e_00000001 / (id:3966 ver:1) copy 1: 192.168.3.5:9422chunk 2: 0000000000000f7f_00000001 / (id:3967 ver:1) copy 1: 192.168.3.3:9422chunk 3: 0000000000000f80_00000001 / (id:3968 ver:1) copy 1: 192.168.3.5:9422chunk 4: 0000000000000f81_00000001 / (id:3969 ver:1) copy 1: 192.168.3.3:9422chunk 5: 0000000000000f82_00000001 / (id:3970 ver:1) copy 1: 192.168.3.5:9422chunk 6: 0000000000000f83_00000001 / (id:3971 ver:1) copy 1: 192.168.3.3:9422chunk 7: 0000000000000f84_00000001 / (id:3972 ver:1) copy 1: 192.168.3.5:9422chunk 8: 0000000000000f85_00000001 / (id:3973 ver:1) copy 1: 192.168.3.3:9422chunk 9: 0000000000000f86_00000001 / (id:3974 ver:1) copy 1: 192.168.3.5:9422chunk 10: 0000000000000f87_00000001 / (id:3975 ver:1) copy 1: 192.168.3.3:9422chunk 11: 0000000000000f88_00000001 / (id:3976 ver:1) copy 1: 192.168.3.5:9422chunk 12: 0000000000000f89_00000001 / (id:3977 ver:1) copy 1: 192.168.3.3:9422chunk 13: 0000000000000f8a_00000001 / (id:3978 ver:1) copy 1: 192.168.3.5:9422chunk 14: 0000000000000f8b_00000001 / (id:3979 ver:1) copy 1: 192.168.3.3:9422chunk 15: 0000000000000f8c_00000001 / (id:3980 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.5:9422chunk 16: 0000000000000f8d_00000001 / (id:3981 ver:1) copy 1: 192.168.3.5:9422chunk 17: 0000000000000f8e_00000001 / (id:3982 ver:1) copy 1: 192.168.3.3:9422chunk 18: 0000000000000f8f_00000001 / (id:3983 ver:1) copy 1: 192.168.3.5:9422chunk 19: 0000000000000f90_00000001 / (id:3984 ver:1) copy 1: 192.168.3.3:9422chunk 20: 0000000000000f91_00000001 / (id:3985 ver:1) copy 1: 192.168.3.5:9422chunk 21: 0000000000000f92_00000001 / (id:3986 ver:1) copy 1: 192.168.3.3:9422chunk 22: 0000000000000f93_00000001 / (id:3987 ver:1) copy 1: 192.168.3.5:9422chunk 23: 0000000000000f94_00000001 / (id:3988 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.5:9422chunk 24: 0000000000000f95_00000001 / (id:3989 ver:1) copy 1: 192.168.3.5:9422chunk 25: 0000000000000f96_00000001 / (id:3990 ver:1) copy 1: 192.168.3.3:9422chunk 26: 0000000000000f97_00000001 / (id:3991 ver:1) copy 1: 192.168.3.5:9422chunk 27: 0000000000000f98_00000001 / (id:3992 ver:1) copy 1: 192.168.3.3:9422chunk 28: 0000000000000f99_00000001 / (id:3993 ver:1) copy 1: 192.168.3.5:9422chunk 29: 0000000000000f9a_00000001 / (id:3994 ver:1) copy 1: 192.168.3.3:9422chunk 30: 0000000000000f9b_00000001 / (id:3995 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.5:9422chunk 31: 0000000000000f9c_00000001 / (id:3996 ver:1) copy 1: 192.168.3.5:9422chunk 32: 0000000000000f9d_00000001 / (id:3997 ver:1) copy 1: 192.168.3.3:9422chunk 33: 0000000000000f9e_00000001 / (id:3998 ver:1) copy 1: 192.168.3.5:9422chunk 34: 0000000000000f9f_00000001 / (id:3999 ver:1) copy 1: 192.168.3.3:9422chunk 35: 0000000000000fa0_00000001 / (id:4000 ver:1) copy 1: 192.168.3.5:9422chunk 36: 0000000000000fa1_00000001 / (id:4001 ver:1) copy 1: 192.168.3.3:9422chunk 37: 0000000000000fa2_00000001 / (id:4002 ver:1) copy 1: 192.168.3.5:9422chunk 38: 0000000000000fa3_00000001 / (id:4003 ver:1) copy 1: 192.168.3.3:9422 copy 2: 192.168.3.5:9422chunk 39: 0000000000000fa4_00000001 / (id:4004 ver:1) copy 1: 192.168.3.5:94223：等待数据块备份完成；通过cstorfileinfo查看副本情况：4：读出文件，用md5sum对比原始文件与云存文件内容rootr710 # md5sum /mnt/cstor/1.ts （云存文件）0a4fd5adaae1d7e035c7d6fb966673c9 /mnt/cstor/1.tsrootr710 # md5sum /root/3.75_mpeg2_2.6g.ts （原始文件）0a4fd5adaae1d7e035c7d6fb966673c9 5：文件内容正确，测试通过3.3.5 卷管理3.3.5.1卷扩容项目卷管理测试用例名称添加卷用例编号cstor-fun-001重要性重要测试目的测试卷容量增加后系统是否可正常显示，磁盘空间正常显示预置条件1、 按照测试组网图搭建测试环境；2、 网管监控系统及其数据库运行正常测试步骤1、 卷中增加两个或三个存储节点；2、 卷中可查看增加的存储节点；3、 网管页面中可查看到增加的存储节点。预期结果卷中增加存储节点后容量显示正常、磁盘显示正常。备注1：启用192.168.3.3和192.168.3.4两台chunkserver，使用df-h查看挂在目录空间rootr710 # df -hfilesystem size used avail use% mounted on/dev/sda1 256g 19g 225g 8% /tmpfs 12g 88k 12g 1% /dev/shmcstormaster:9421 13t 5.2g 13t 1% /mnt/cstor2：增加192.168.3.4的chunkserver，使用df-h查看空间rootr710 # df -hfilesystem size used avail use% mounted on/dev/sda1 256g 19g 225g 8% /tmpfs 12g 88k 12g 1% /dev/shmcstormaster:9421 18t 5.2g 18t 1% /mnt/cstor3：集群能动态扩容，测试通过3.3.5.2 卷缩减项目卷管理测试用例名称卷缩减用例编号cstor-fun-002重要性重要测试目的测试卷容量缩减后系统是否可正常显示，磁盘空间正常显示预置条件1、 按照测试组网图搭建测试环境；2、 网管监控系统及其数据库运行正常测试步骤1、 卷中删除两个或三个存储节点；2、 卷中可查看当前缩减后存储信息；3、 网管页面中可查看到卷中相关信息。预期结果卷中缩减存储节点后容量显示正常、磁盘显示正常。备注1：通过df-h查看当前存储空间rootr710 # df -hfilesystem size used avail use% mounted on/dev/sda1 256g 19g 225g 8% /tmpfs 12g 88k 12g 1% /dev/shmcstormaster:9421 18t 5.2g 18t 1% /mnt/cstor2：停止一台chunkserver服务，使用df-h查看空间rootr710 # df -hfilesystem size used avail use% mounted on/dev/sda1 256g 19g 225g 8% /tmpfs 12g 88k 12g 1% /dev/shmcstormaster:9421 13t 5.2g 13t 1% /mnt/cstor3：集群能动态缩减存储空间，测试通过3.3.6 设备监控管理3.3.6.1 设备中增加存储节点项目设备监控管理用例名称设备中增加存储节点用例编号cstor-fun-001重要性重要测试目的测试设备中增加存储节点，可正常显示。预置条件1、 按照测试组网图搭建测试环境；2、 网管监控系统及其数据库运行正常测试步骤1、 如需在已添加的卷中增加节点时，进入到卷管理页面，勾选卷中的需增加存储节点，点击“删除卷”按钮；2、 卷删除成功后，点击“添加卷”按钮，把刚才删除的卷再添加一次，增加的存储节点可显示在设备中了。预期结果卷中增加存储节点成功，并且可正常显示，磁盘显示正常。备注：测试通过3.3.6.2 设备中删除存储节点项目设备监控管理用例名称设备中删除存储节点用例编号cstor-fun-002重要性重要测试目的测试设备中删除存储节点后，可正常显示。预置条件1、 按照测试组网图搭建测试环境；2、 网管监控系统及其数据库运行正常测试步骤1、 如需删除卷中存储节点时，进入设备管理页面中；2、 设备中选择存储节点，显示的列表中点击“删除设备”按钮。预期结果1、设备中卷中被删除存储节点已不存在，并且显示正常，磁盘显示正常；2、设备信息中，存储节点显示正常，容量空间也显示正常。备注：测试通过3.4 云视频转码功能测试3.4.1 mp4视频格式转码测试项目云视频转码功能测试用例名称mp4视频格式转码测试用例编号cstor-fun-001重要性重要测试目的:测试视频文件在cstor系统下转码mp4格式成功预置条件:1、 cstor系统环境正常运行；2、 云转码处理节点服务正常运行；3、 云转码webserver服务正常运行。测试步骤:1、打开云转码web页面中，用户登录到页面中；2、进入任务管理页面中，选择一个需转码的本地文件，输出文件格式选择“mp4”格式，点击“开始转码”按钮。预期结果:mp4格式文件转码成功，转码后的视频文件正常播放备注：1：在云转码web界面中选择testmpeg.mpeg转为ts，总码流率900kbps，视频编码格式h.264，视频分辨率800*600，长宽比4:3，音频编码格式aac，音频码率128kbps，音频通道数2，分片数6。点击转码后，结果如预期。:2：通过。3.4.2 ts视频格式转码测试项目云视频转码功能测试用例名称ts视频格式转码测试用例编号cstor-fun-002重要性重要测试目的:测试视频文件在cstor系统下转码ts格式成功预置条件:1、 cstor系统环境正常运行；2、 云转码处理节点服务正常运行；3、 云转码webserver服务正常运行。测试步骤:1、打开云转码web页面中，用户登录到页面中；2、进入任务管理页面中，选择一个需转码的本地文件，输出文件格式选择“ts”格式，点击“开始转码”按钮。预期结果:1：ts格式文件转码成功，转码后的视频文件正常播放备注：在云转码web界面中选择testwmv.wmv转为mp4，总码流率1200kbps，视频编码格式mpeg2，视频分辨率352*288，长宽比4:3，音频编码格式mpeg1 layer2，音频码率64kbps，音频通道数2，分片数4。点击转码后，结果如预期。2：通过。3.5 安全测试3.5.1 用户配额分配及管理项目安全性测试用例名称用户配额分配用例编号cstor-saf-001重要性重要测试目的正确为用户分配使用空间预置条件1、 按照测试组网图搭建测试环境；2、网管监控系统及其数据库运行正常测试步骤1、登陆网管监控系统界面，进入用户管理页面2、进行添加用户操作，设置该用户配额为50g3、可对用户配额进行修改预期结果1、用户配额设置成功；2、用客户端挂载时，用户配额显示正确。3、用户配额修改成功备注1：添加用户rootopara1 bin# cstoruseradd -m 192.168.3.130 -u admin -p 123456 -d x -q 10insert user information successful2：使用该用户登录cstor系统3：查看用户空间为10gb，并与其他用户空间隔离4：测试通过3.5.2 用户权限管理项目安全性测试用例名称用户配额分配用例编号cstor-saf-002重要性重要测试目的为用户设置响应的权限后，用户权限使用正确预置条件1、 按照测试组网图搭建测试环境；2、网管监控系统及其数据库运行正常测试步骤1、登陆网管监控系统界面，进入用户管理页面2、进行添加用户操作，设置该用户配额为10g，并设置响应的权限：读，读、写，读、写、删除3、通过客户端验证用户权限预期结果用户权限设置正确。备注1：使用cstoruserupate命令修改用户权限为只读2：向目录中写入数据rootr710 mnt# cp 7.pub /mnt/cstor1cp: cannot create regular file /mnt/cstor1/7.pub: permission denied3：写入失败4：再增加一用户rootopara1 bin# cstoruseradd -m 192.168.3.130 -u admin01 -p 123456 -d r -q 10insert user information successful5：修改用户为可读写权限!rootopara1 bin# cstoruserupdate -m 192.168.3.130 -u admin01 -d rwuptate user information successfu6：删除用户文件，删除失败rootr710 cstor1# rm -rf *rm: cannot remove 1.ts: permission deniedrm: cannot remove 4913: permission deniedrm: cannot remove a.tx: permission deniedrm: cannot remove a.txt: permission deniedrm: cannot remove a_txt.swp: permission denied7：测试通过3.6可靠性测试3.6.1 写元数据服务器故障3.6.1.1写文件过程中，断开主元数据网线项目可靠性测试用例名称主元数据网络异常用例编号cstor-cre-001重要性重要测试目的测试主备元数据出现故障的情况下，系统是否可继续提供服务且数据不丢失，同时故障后的数据自动恢复。预置条件1、 cstor2.0系统环境运