宏杉科技存储产品及解决方案介绍

1、宏杉科技存储产品及解决方案介绍目录CONTENT公司全产品010203全闪存产品对象产品第一部分 产品线介绍发展以创新为本发布存储规法论：存储七项式、数据中心五分区发布国内首个国产芯片企业级自主可控存储产品发布V4引擎 业界最高业务连续性标杆创新MacroSAN+商业模式发布分布式文件、对象、云计算数据管理解决方案发布Mach系列高性能NVMe全闪存产品发布下一代高端阵列7000G2、5500G2发布企业级云计算创新架构CloudSAN发布AF、AFT系列全闪存产品全闪存与存储阵列统一架构存储网络工业协会(SNIA)全球首家中国投票会员发布CRAID技术、对称双活存储技术SDAS发布全球首款双

2、矩阵架构最高端产品MS7000发布MS2500、MS3000、MS5500产品201720162010-20152018-2019 宏杉全存储家族混合阵列MS3000G2MS5500G2MS7000G2MS5500G2/5000AFMS7000G2-AFT/AF文件及对象备份解决方案备份一体机备份服务器网关备份软件PCI-E交换机MS2500G2MS3000G2-AF/AFTV4MS2500G2AFMach全闪存32Gb FC25/100Gb 以太网交换机和板卡基 础 软 硬 件FC交换机XAN基础架构MOFS分布式文件存储一体化NASMOFS分布式文件网关双活存储快照备份海量对象存储混合云方

3、案异地灾备私有云方案海量文件存储一体化非线编一体化视频平台性能优化存储虚拟整合虚拟机优化云平台优化高性能计算大数据分析应用优化方案非结构化/大数据方案数据保护方案云方案MacroSAN+MOSS对象存储NAS网关存储软件快照镜像双活分层在线全局重删克隆备份复制自动精简配置在线压缩无中断数据迁移VVoLIDDCCRAID闪存荷尔蒙以太网交换机CloudSANAllFile MOFSCloudObject MOSSAllBackup：Tina技 术 方 案统 一 管 理CloudSUN第二部分 全闪存市场分析从HDD到SSD的发展趋势IDC：数据存储五大趋势之全闪存不NVMe第一个基于NVMe的存

4、储平台于2016年发布，定位为 丏用工作负载的共享高性能存储，而今年主流存储设备 厂商都已迚入该市场。预测显示，2019年全球NAFA收 入将超过20 亿美元， 到2021 年， 全球NAFA 将驱劢 50%以上外部存储市场。IDC: 2018年存储市场增长态势基本定局， 全闪存成最大推劢力闪存特性闪存的主要优势带宽SAS 7.2K80-100MB/sSAS 10K100-150MB/sSAS 15K125-175MB/sSSD400-550MB/s更高IOPSIOPSSAS 7.2K76SAS 10K155SAS 15K180SSD8.4W（读）2.5W（写）更大带宽更低延迟数据延迟SAS

5、7.2K4.16ms+9msSAS 10K2.9ms+3.5msSAS 15K2ms+3.5msSSD55s（读）66s（写）注：数据取自Intel和希捷的官网，型号分别为、DC S3610 400GB、SAS15KST300MP0005、ST1200MM0088、ST4000NM0033寿命 成本MLCTLCQLCSLC闪存颗粒约10万次擦写寿命约3000-1万次擦写寿命约500-1000次擦写寿命约150次擦写寿命性能2种状态 表示1bit数据4种状态 表示2bit数据8种状态 表示3bit数据16种状态 表示4bit数据根据NAND闪存中电子单元密度的差异， 闪存颗粒可以分为SLC （

6、单层次存储单 元）、MLC（双层存储单元）、TLC（三 层存储单元）和QLC（四层存储单元）。NVMe的时代CPUNVMe SSDPCIe总线CPUSAS 控制SAS扩展SAS SSDNVMe-oF是一种基于NVMe设计的块存储通信协议， 一种全新的高性能端到端数据传输方式类别NVMeSCSI适配硬件接口64Gbps (PCI0-E x8 3.0)12Gbps (SAS 3.0)幵发队列数655351队列深度65536254协议效率直接与PCI-E总线 迚行传输需PCI-E到SAS协议转换平均响应时间100 s3 msNVMe硬盘可直接与CPU通信，无需协议转换，拥有高效的数据通道和超低延迟M

7、ach系列是宏杉科技全新推出的基于NVMe协议的全闪存阵列。支持48控制器横向扩展，双控制器3T超大缓存、50块2.5英寸NMVe SSD 、100个PCIe3.0通道交换带宽。 全方位地释放闪存颗粒的性能，提供数倍于传统闪存阵列的读写性能。*NVMe SSD降价速度快于SAS SSD， 终将成为企业级SSD的主流*NVMe-oF实现NVMe在PCIe总线上的扩展， 来撼动SCSI在SAN中的统治地位NVMe-OF介绍NVMe-oFNVMe over Fabric 是指将用于块存储的非易失性存储，连接到 网络。NVMe-oF 定义了一个通用架构，它支持一系列存储网络 结构，是用于存储网络结构乊

8、上的NVMe块存储协议。目标基于消息的模型通过网络在主机和目标存储设备之间发送请求和 响应，即实现本地NVMe设备与进距离NVMe设备的连接，丐延 迟丌超过10s。 。类型NVMe over Fabric 支持把 NVMe 映射到多个 Fabrics 传输选项， 主要包括 FC、 InfiniBand、 RoCE v2、 iWARP 和 TCP。NVMf宏杉全闪产品Mach系列AFT系列AF系列宏杉科技全闪存产品家族Mach系列极致性能全闪存：全新NVME全闪存MS7770G2-MachMS7370G2-MachAF系列高性价比全闪存：高性价比，用于替换传统阵列MS7000G2-AFMS558

9、0G2-AFAFT系列高性能全闪存：高端全闪存，面向关键型业务MS7000G2-AFTMS5580G2-AFTMS3000G2-AFMS2500G2-AFMS5500-AFMS3000G2-AFTMach 产品概述MS7000G2-Mach整机5U高双控50块2.5英寸NMVe SSD400万IOPS/50盘位，性能线性增长 最多48控制器扩展，双控缓存3TB 采用新一代至强多核高性能处理器双 控 制 器 后 端 总 带 宽 1600Gbps 10/25/100GE、16/32Gb FC高性能IO卡支持SSD SSD SSD SSD SSD SSD SSD SSD SSD SSDSSD SSD

10、 SSD SSD SSD SSD SSD SSD SSD SSDSSD SSD SSD SSD SSD SSD SSD SSD SSD SSDSSD SSD SSD SSD SSD SSD SSD SSD SSD SSDSSD SSD SSD SSD SSD SSD SSD SSD SSD SSD前端总线CPUCPURoot ComplexSwitch Chip前端总线CPUCPURoot ComplexSwitch Chip强大的硬件架构Mach系列NVMe将CPU与闪存迚行直接连接，这 种架构拥有高效的数据通道和超低延迟每一块SSD都采用两条独立PCI-E数据通道与控制器相连，一共有100

11、条独 立的数据通道，总传输带宽高达1600Gb/s50块盘400万IOPSAF、AFT硬件架构前端总线CPUCPUSAS ControllerSAS Expander前端总线CPUCPUSAS ControllerSAS Expander前端总线CPUCPUSAS ControllerSAS Expander前端总线CPUCPUSAS ControllerSAS Expander采用2根SAS3.0每交换单元承载25线缆与后端磁块SSD，独享8根盘柜相连SAS3.0线缆，带SSD SSDSSD SSDSSD SSDSSD SSDSSD SSD宽384Gb/s。实现“每25盘位SSDSSDSSD

12、SSDSSDSSDSSDSSDSSD SSDSSD SSD SSDSSD SSD SSDSSD SSD SSDSSD SSD SSDSSD SSD SSD40万IOPS的线性增长”SSD SSD SSDSSD SSD SSDSSD SSD SSDSSD SSD SSDSSD SSD SSDAF系列AFT系列矩阵式全交换闪存通道架构传统闪存架构闪存优化技术：闪存荷尔蒙FlashHormoneFlashHormone是宏杉科技针对SSD读写特性开发的一项性能优化专利技术宏杉FlashHormone技术能够有效解决传统读写算法对SSD的性能制约，并且保护SSD使用寿命宏杉FlashHormone技术

13、针对每次写入数据无论是追加新写还是改写现有数据，都重新分配一个空间写入；无论用户是什么样的业务模型，所有的写数据都可以均 匀的分布到丌同的SSD上，写入的数据是合幵为一个满条带后一次写入SSD，从而避免了RAID写流程所需的数据回读的过程。闪存荷尔蒙FlashHormone技术优势0110写IO技术价值一，规避RAID写惩罚技术价值二，RAID条带零冲突技术价值三，SSD磨损均衡2写入的IO都是满条带写入在新的空白条带上， 不再需要多次回读数据重新校验再写入， 避免了RAID算法写惩罚，不管是 什么RAID级别，写惩罚值均为1。将每个写IO均写在新的条带上，而不 针对乊前的条带迚行变劢，因此，

14、也不存 在某些条带发生IO冲突，条带冲突为零。不论是追加写还是修改写，数据实际 写在了新的条带上，幵丐分布在不同 的硬盘上，保证了数据分散存放， 使得SSD磨损的均衡，保证了全 闪存的寿命和稳定性。Deduplication Processing重复数据删除（重删）是一种节约存储空间的技术，通常情况下，在数据存储池内是有很多重复的数据， 重删则是将这些重复的数据找出并处理的技术。重删示意图 简单地说重删，就是将N份重复的数据仅 保留1份，并将N-1份数据的地址指针指 向唯一的那一份。举一个例子，我们常用Foxmail管理邮件 的收发，一般的小体积附件会直接附在 这封邮件中并发送给收件人；如果是

15、超 大附件发送，会先将你的附件上传到中 转站，然后收件人收到一个链接，如果 有需要再去下载，否则这个超大附件不 会保留在本地而是仅保留一份副本在服 务器上。（这虽然不是重删的应用，但其实就是重删的意义，即多份重复的数 据，仅保留一份就好了）+MetaData重复数据删除Step3：若存在一样的指纹信息，则删除此新数据，若不存在一致 的指纹，则写入新数据Step1：对传入数据进行扫描分割并计算每个数据块的指纹（哈希值）tep2：将新写入的数据的指纹与现有指纹库比对这种实现过程主要表现为在线重删的过程，目前，在存储主流业界均采用这种形式。重删的原理无损重删进行哈希计算后，发现“指纹”相 同后， 再

16、进行数据比较（ 进行 XOR校验），再确认是否为重复 数据，这种算法能够完全避免哈 希冲突，不会丢失任何数据。有损重删进行重删算法后，就确认被计算 的数据是否为重复的数据，这种 算法不能从根本上避免哈希冲突， 是有数据丢失的风险的。只适用 于对数据准确性要求不高的情况。Or我司采用无损重删的设计，能够保证重删数据的安全性。主流厂商选择无损重删的方式居多无损重删和有损重删优点缺点在线重删无额外的存储空间要求；可以减少写盘次数，减少对RAID和磁盘资源的占用；在全闪存阵列中能有效减少全闪 存设备中SSD盘的数据写入量， 延长了SSD盘的寿命，从而降低 数据失效的风险。影响IO的性能，增加了IO的延

17、迟，且对缓存的设计有较高的要求后端重删不影响写IO响应时间，对前对业务 没有显著影响重删过程占用系统资源。数据写入到消除重复数据前，需要确保有足够的存储空间。和在线重删相比，SSD盘的写入 次数显著增加，对延长SSD盘的 寿命没有帮助。CACHEDisk刷盘 写IO 重删计算重删计算目前，在线重删是业界主流的重删方式，我司重删方式也是在线重删在线重删和后台重删MS5500G2-AFT SPC-1性能测试设备型号MS5580G2-AFT增强版 384块 SAS SSDIOPS 高达610万平均延迟0.3ms，最大延迟0.45ms成功案例高端全闪案例项目名称产品配置铁路总公司MS7040-AFT*

18、2陕西省环境保护厅MS7040-AFT*2国家税务总局贵州省税务局八控制器MS7040-AF浙江石油MS7370G2-Mach*2河北省交管局MS7040-AFT重庆高法MS7370G2-Mach*2第三部分 MOSS对象存储市场分析云服务厂商AWSAli OSSTencent COSQingStor.传统存储厂商MacroSANHuaweiHDSInspureEMC软件定义SDSXskySandstone中国主存储市场下滑，而管理非结构化数据 的二级存储需求快速增长。2019年上半年中国二 级存储收入同比增长254，而全球为9。二级 存储已经占中国总体存储收入的27。19年H1全球与中国主存

19、储 VS 二级存储市场情况市场 分析HDS HCP软硬一体化20+6 Erasure Code (EC) 数据保护版本管理压缩加密G10网关2U服务器计算节点4个网关起配S10节点4U服务器60盘位S10使用20+6的Extent Group, 每个节点最大支持56个数据磁盘，同时支持6个 磁盘故障S10节点AS13000G5-M36AS13000G5-M12AS13000G5-M25AS13000G5-E36AS13000G5-M72基于Ceph开发基于Ceph开发每个厂商硬件带盘数也不一致XSKY/杉岩统一数据平台iSCSI | FC | SCSI | RBDNFS | CIFS | FT

20、PNFS | S3延展集群快照复制精简配置业务QoS恢复QoSWORM多版本磁盘漫游分层存储 整池扩容硬件管理集群管理拓扑管理云集成SNMP事件中心运维中心配置拓扑生命周期管理副本| EC故障域数据双活快照一基致性于组快c照ep卷h克开隆发异地备份多站点在线迁移多路径负载均衡 高链路级加密功能传输基重删本云为归档Cep压h缩自V带AAI 功能CSI宏杉MOSS缓存：256GB，电源带电池缓存刷至内置SSD；高度：4U， 16*2.5/3.5板载： 14*GE+4*10GE， 2个IO扩展模块带盘数：单台带盘数184块；MS2500G2-16M 前面板MS2500G2-16M 后面板MOSS对象

21、存储资源池vLUNvLUNvLUNvLUNv1v1024Node-1/vLUNxxxNode-5/vLUNxxxv2Node-100/vLUNxxx桶名+文件名哈希计算vNNode-50/vLUNxxx哈希环客户端客户端客户端客户端客户端vLUN流媒体金融票据数据归档内容管理Bucket1Bucket2软件自研产品可维护性强可灵活支持客户二次开发支持客户API接口需求定制丰富的软件功能检索查询WORM多版本性能/容量配额巡检机器人/IDDC高可靠性硬件可提供6个9的可靠性节点可故障硬盘数高部件全冗余服务响应公司重点产品研发投入大研发现场支持MOSS灵活检索MOSS可针对桶进行自由灵活的检索，可

22、对系统元数据、用户元数据就进行精确查询和 模糊匹配。能有效满足文档管理系统的需求，达到毫秒级响应，保障业务无忧。系统元数据查询文件名称目录名称修改时间01用户元数据查询按用户自定义元数据内容查询，例如： 姓名、年龄、性别等02灵活检索支持精确查询、模糊匹配支持对查询结果设置显示范围支持选择内部桶或外部桶进行查询支持对对象最后修改日期范围进行查询03未使用“含有前缀的临时URL”功能时：每份文件上传需申请一个URL每次上传都需经过TCP/IP三次握手等过程低效传输，消耗大量系统资源客户端同时上传大量文件时系统资源紧张！省政中心办公支出报表.doc省政中心预算报表.doc使用“含有前缀的临时URL

23、”功能时：所有前缀相同的对象只需申请一个临时URL只需经过一次TCP/IP三次握手等过程高效传输，减少系统资源负担申申请请IIPP资资源源Bucket省政中心业务近10年业务报表100份文件省政中心近15年预算报表1000份文件500份文件有效解决多文件并发上传难题采用临时URL数据更安全VS企业网盘系统企业网盘中有大量的图片、文档等非结构化数据100次URL500次URL1000次URLMOSS对象存储 传统对象存储客户端1客户端1客户端1100份文件500份文件1000份文件申请1次URL申请1次URL申申请请1次URL系统资源紧张临时文件1临时文件2临时文件3临时文件4保留文件1保留文件2过期3天过期3天过期3天过期3天有效期内有效期内Bucket2：删除过期三天的文件基于批量删除API通过配置规则定期删除桶内对象每个桶最多可设置1000条规则为什么要使用生命周期管理？在企业数据中心中存在海量的数据，运维人员常需要定期手动清理。MOSS生命周期管理能够让系统按照策略定期清理数据，简化了工作难度。Bucket1：删除前缀为“临时”的文件意外上传同名文件导致数据丢失 误操作删除重要文件，怎么办？Object.pdfnullObject.pdfnull创建覆盖Object.txtVersion1Object.txtVersion2Object.t