FusionCube数据库超融合平台技术白皮书

1、 DOCPROPERTY Product&Project Name DOCPROPERTY DocumentName 华为FusionCube虚拟化一体机 技术白皮书华为专有和保密信息 版权所有 华为技术有限公司文档版本 DOCPROPERTY DocumentVersion V1.1 ( DOCPROPERTY ReleaseDate 2013-05-08)FusionCube数据库超融合平台技术白皮书 STYLEREF Contents 目 录 DOCPROPERTY Product&Project Name DOCPROPERTY DocumentName 华为FusionCube虚拟化

2、一体机 技术白皮书目 录 TOC h z t 标题 1,1,标题 2,2,标题 3,3,标题 7,1,标题 8,2,标题 9,3,Heading1 No Number,1 HYPERLINK l _Toc508737538 2.1 系统架构 错误！文档中没有指定样式的文字。 STYLEREF 7 错误！文档中没有指定样式的文字。 DOCPROPERTY Product&Project Name DOCPROPERTY DocumentName 华为FusionCube虚拟化一体机 技术白皮书FusionCube数据库超融合基础设施系统架构如下是FusionCube数据库超融合基础设施的总体架构

3、图：华为FusionCube数据库基础设施是华为公司IT产品线的旗舰产品。FusionCube遵循开放架构标准，于12U机框中融合刀片服务器、分布式存储及网络交换机为一体，无需外置存储、交换机等设备，并集成了分布式存储引擎和管理软件，资源可线性扩展、平滑扩容。FusionCube Center：负责FusionCube的资源管理及操作维护等综合管理功能，提供Web方式的统一维护界面；整个系统的业务集中呈现，提供用户管理、统一硬件监控、告警，存储资源配置等功能。FusionStorage：使用分布式云存储技术，将多个刀片服务器的本地硬盘虚拟成共享存储池，Scale-Out架构水平扩展，提供高性能

4、高可靠的块存储业务。硬件平台：使用E9000硬件平台，支持计算、存储、交换、电源模块化设计，都在E9000框内部署完成，计算和存储节点按需混配，支持SAS硬盘和PCIe SSD卡，支持10GE和InfiniBand交换网络。 华为FusionCube基于华为自研的硬件平台，自研的分布式存储软件，并进行了深度的集成和优化，具有如下特点：高性能硬件平台：提供高密度计算节点与框内高速交换板，12U支持32CPU/8T内存计算能力，背板交换能力达15.6Tbps，单框出口带宽可达160Gbps。高速InfiniBand网络：计算和存储节点之间可通过56 Gbps 高速InfiniBand网络交互，保证

5、了数据库节点之间的高速Cache同步和存储面网络的高速IO访问。高性能SSD存储：存储节点支持使用SSD卡替代传统的机械硬盘做为存储设备，获得比硬盘高30倍以上的IOPS能力。分布式存储：华为自研FusionStorage分布式存储软件，Scale-Out架构水平扩展，采用NVDIMM或SSD Cache加速，消除系统磁盘IO瓶颈。高可靠计算可靠性：数据库应用组成集群，单个计算节点故障不影响业务的正常使用。存储可靠性：数据支持两副本或三副本，任意节点故障都不影响系统中存储数据的访问。节点或存储磁盘故障后后系统会进行数据重构，恢复成多副本，1T数据重构时间30分钟。强一致性协议，确保副本数据完全

6、相同，支持数据掉电保护。网络可靠性：10GE网络和IB网络均采用双平面冗余架构。统一管理计算、存储、网络资源统一管理，单一用户界面。自动监控IT资源和系统运行状态，告警统一呈现，支持告警转Email。支持计算和存储节点按需扩容，支持扩盘，扩刀片，扩框。统一管理FusionCube数据库基础设施的统一运维管理系统是通过FusionCube Center实现。FusionCube Center提供硬件管理、用户管理等功能。作为数据库基础设施的统一Portal，完成全系统各种资源的生命周期维护。FusionCube Center提供了如下主要功能：统一资源管理：通过将不同系统的资源对象采集到一起，建

7、立统一的资源管理模型对使用者提供统一的、一体化的资源管理体验，包括各种资源的监控和告警。告警统一监控：有别于传统的参考架构，服务器，存储，交换机的告警是各自厂家的监控系统分别呈现，FusionCube统一监控所有部件的状态和告警，简化运维，并且告警支持转邮件。基于角色的访问控制：基于角色的访问控制（RBAC）是实施面向企业安全策略的一种有效的访问控制方式。其基本思想是，对系统操作的各种权限不是直接授予具体的用户，而是在用户集合与权限集合之间建立一个角色集合。每一种角色对应一组相应的权限。一旦用户被分配了适当的角色后，该用户就拥有此角色的所有操作权限。这样做的好处是，不必在每次创建用户时都进行分

8、配权限的操作，只要分配用户相应的角色即可，而且角色的权限变更比用户的权限变更要少得多，这样将简化用户的权限管理，减少系统的开销。硬件自动发现与扩容：系统会自动发现一体机内部的所有硬件并扫描硬件的规格信息。用户可以在创建资源池的时候直接选择系统发现的硬件，系统自动完成这些硬件的软件安装、网络配置并将硬件加入资源池。系统扩容的时候也可以自动发现新加入的硬件，并且用户将硬件加入资源池的时候自动化完成所有的配置工作。深度融合以下示例说明了FusionCube数据库基础设施的融合硬件形态：华为FusionCube数据库基础设施采用业界一流的模块化设计的组件，提供多种产品规模的组合，并提供单一厂家服务，满

9、足各种业务范围的需求。华为FusionCube使用的计算/存储/网络都是华为自身的设备，使用计算，存储，网络垂直整合的融合架构硬件平台，高带宽低时延多协议交换能力，NoSAN，内置分布式存储软件，提升应用性能。华为FusionCube实现软硬件深度的整合，是真正的一体化的数据库基础设施。弹性扩容FusionCubes数据库基础设施可按全网容量设计一次性方案规划，在局点交付上线后可根据业务需要实现弹性扩容、按需扩容，不影响已有业务的连续性。当服务器资源不足时，可增加集群内计算刀片。当存储资源不足时，可以增加计算存储刀片或单独增加存储硬盘。当一框资源不够时，简单叠加机框和布线即可。FusionCu

10、be集群的扩展是线性扩展，在线扩容，各个集群计算、存储资源独立，运维管理仍然通过同一套管理系统来实现。预集成华为FusionCube依托华为高效的端对端交付能力，能从用户报价开始，根据用户业务需求，直接交付给用户预集成的产品，极大地简化了用户的安装、调测时间，从几周甚至数月的调测时间缩减到几天之内。预集成包括的内容：硬件预安装：设备上柜、线缆预绑 带柜运输：立柜运输 自动化配置部署：上电硬件自动发现，快速初始化，存储集群自动创建以及自动配置基础网络等。分布式存储软件高性能是企业级存储系统需要满足的关键需求。但是，在最近几年，持续为所有的应用长期提供高性能支持变成了尤其艰巨的挑战。这是因为屡经证

11、实，传统的存储系统架构无法通过成功扩展性能来跟上前所未有的存储数据增长步伐。另外高端存储作为独立网元，不但需要专门管理和维护，而且价格昂贵，让一般企业望而却步。分布式存储FusionStorage作为一种与计算融合的存储软件，通过在FusionCube上部署该软件，可以将所有服务器或刀片的本机磁盘组织成一个虚拟存储资源池，在某些使用场景下完全替换外置SAN。FusionStorage使计算和存储高度融合，达到高性能、高可靠、高性价比。领先的分布式架构：FusionStorage存储软件的创新设计采用全分布式的架构：分布式管理集群，分布式哈希数据路由算法，分布式无状态机头、分布式智能Cache等

12、，这种架构使得整个存储系统没有单点故障。 高性能和高可靠性：FusionStorage存储软件在所有磁盘中实现负载的均衡，数据打散存放，不会出现热点，高效的路由算法和分布式Cache技术（可以将服务器内存用作读写Cache）保证了高性能。FusionStorage支持多个数据副本，每个副本分配在不同服务器/不同磁盘上，单个硬件设备的故障不影响业务，3副本情况下数据可用性达到11个9。同时FusionStorage的强一致性复制协议确保各个数据副本的一致性，一个副本写入，多个副本读取，写数据采用掉电保护Cache。并行快速故障重建：数据分片在资源池内打散，硬盘故障后，可在全资源池范围内自动并行重

13、建，1TB数据重建 30分钟，CPU占用率小于10。易扩展和超大容量：FusionStorage的分布式无状态机头可横向扩展，存储与计算同步平滑扩容，支持非烟囱式超大容量扩展。计算存储深度融合：FusionStorage存储软件部署在挂载本地硬盘的服务器上，把各服务器的本地硬盘组织成一个虚拟的资源池，替代外置的存储设备，天然支持计算和存储设备的高度融合，节省外置存储的购置成本并且统一维护。分布式机头FusionStorage采用无状态的分布式软件机头，机头程序部署在各个服务器上，无集中式机头的性能瓶颈。单个服务器上软件机头只占用较少的CPU资源，提供比集中式机头更高的IO处理能力，当扩充存储刀

14、片资源时，机头随之也扩充，彻底消除IO瓶颈。分布式缓存FusionStorage实现了计算和存储的融合，缓存和带宽都均匀分布到各个服务器节点上。FusionStorage集群内各服务器节点的硬盘使用独立的I/O带宽，不存在独立存储系统中大量磁盘共享计算设备和存储设备之间有限带宽的问题。FusionStorage将服务器部分内存用作读缓存，NVDIMM或SSD用作写缓存，数据缓存均匀分布到各个节点上，所有服务器的缓存总容量远大于采用外置独立存储的方案。即使采用大容量低成本的机械硬盘，FusionStorage仍然可以发挥很高的IO性能，整体性能提升13倍，同时提供更大的有效容量。与外置SAN存储

15、基本性能对比如下：带宽和时延 计算存储融合 外置存储体系 带宽：（Disk Cache/FlashApp） 每盘100MB(本地化带宽吞吐量) 每盘20MB (后端SAS 6GB，80%利用率) IO时延 本地数据：本机访问 本端数据：1次TCP/IP交换远端数据：1次TCP/IP交换远端数据：1次TCP/IP交换；1次PCIE交换（多控制器情况下）大容量分布式Cache 每盘250M Cache，随刀片扩展所有盘共用 Cache 精简配置FusionStorage提供了精简配置机制，为用户提供比实际物理存储更多的虚拟存储资源，当在多用户数据中心场景使用时该特性可以节省更多的初始存储投资，因为

16、用户开始并不会完全占满所分配的存储空间。相比直接分配物理存储资源，可以显著提高存储空间利用率。采用分布式Hash技术，天然支持分布式自动精简配置(Thin Provisioning)， 且无任何性能下降（IPSAN扩展空间时需要耗费额外的性能）。精简配置如图示意，虚线框代表卷还未被分配的空间。高性能SSD存储用户和应用的几何级增长，处理器与存储性能的极度不平衡发展，导致I/O失衡现象越发明显，只有加速数据读写性能才能维持业务稳定运行，提升用户体验效果。特别是在数据仓库应用中，海量数据分析的应用对存储吞吐量提出了极高的要求。PCIe SSD直接与CPU通信，缩短存储访问路径，结合Flash高速的

17、读写性能，极大的提升存储性能，解决存储IO瓶颈。华为FuisonCube支持为高性能应用设计的分布式SSD存储系统，拥有比传统的机械硬盘（SATA/SAS）更高的读写性能。华为SSD卡的性能特点如下：Device-based架构：减小对主机资源的消耗，降低对主机的依赖。多级多通道并发处理技术：最大限度的发挥Flash颗粒性能，提供高带宽。智能的自适应回收算法：有效地减小性能波动，使产品更适合于数据库等业务应用。可调节超供因子架构：用户可以灵活设置设备的可见容量，增加冗余空间来提高小数据块随机写性能，以满足不同的应用场景。异步命令队列技术：可同时处理256条读写命令，提高Flash操作的并发性，

18、提供高IOPS。DMA地址散聚技术：提高单次读写请求的数据量，从而获得高IO带宽。原生PCIe接口：提供更大的带宽，有效降低IO延时。华为SSD卡的可靠性特点如下：增强的ECC纠错算法：提供比Flash颗粒要求更高的纠错能力，为设备的可靠性带来有效的保证。内置类RAID5算法：基于通道进行纠错，在单通道发生错误后，可以恢复数据。专利的Flexible RAID算法：能在发生通道失效后，将恢复后的数据继续进行RAID保护。智能磨损平衡技术：智能均衡Flash颗粒磨损压力，有效延长设备的使用寿命。高级Flash访问技术：组合应用Flash颗粒的Read retry和Adaptive read技术，

19、有效保证数据的有效性。数据巡检技术：周期性的巡检数据，提前预防错误的发生。支持掉电保护：当服务器异常下电时，确保SSD 卡内的数据不丢失。高速IB交换网络FusionCube采用业界先进基于RDMA技术的InfiniBand网络，提高了数据库的吞吐量和响应速度，提升了客户的用户性能体验。在数据库一体机采用InfiniBand组网，用于存储节点和数据库节点（计算节点）间通信，同时实现双链路的可靠性冗余。FusionCube采用的高速InfiniBand网络具有以下特点：56Gbps FDR InfiniBand，超高速互联标准成熟多级胖树组网，平滑容量扩容近似无阻塞通信网络，数据交换无瓶颈微妙级

20、通信时延，计算存储信息及时传递无损网络QOS，数据传送无丢失主备端口多路径通信，冗余通信无忧可靠网络设计服务器逻辑上分为三个平面：业务平面、存储平面和管理平面，且三个平面之间是隔离的，保证最终用户不能破坏基础平台。存储平面：服务器上存储间通过存储网络二层直接互通。存储设备为数据库应用提供存储资源。业务平面：为用户提供业务通道，为数据库物理计算刀片的通信平面，对外提供业务应用连接，可针对不同业务网段细分VLAN进行访问隔离。管理平面：负责整个系统的管理、业务部署、系统加载等的通信。FusionCube数据库基础设施业务平面和管理平面采用10GE以太网进行组网。而存储面采用56Gb InfiniB

21、and网络进行通信。每个平面实现双链路的可靠性冗余，保证系统可靠性。计算存储网络融合硬件E9000机框E9000刀片服务器（以下简称：E9000）是华为公司研发的一款刀片服务器产品，提供12U空间，可安装华为E9000系列计算节点、存储节点以及相应的资源扩展节点。E9000的主要特性与功能如下所示。可横插8个全宽计算节点或者16个半宽计算节点，支持槽位拆分。可安装6个电源模块，支持N+N冗余，支持热插拔。可安装14个风扇模块，支持N+1冗余，支持热插拔。4个（2对）交换槽位，支持Eth/FC/FCoE/IB等多种交换协议类型，支持直出I/O接口。机箱中配置两个管理模块，以主、备方式运行，并支持

22、主备倒换和热插拔，主要用于对机箱内设备的管理。在机箱前面板的下方配置一块液晶显示屏，主要用于对机箱基本信息进行设置，和机箱部件的运行状态的监控。E9000机框外观如图所示：E9000刀片FusionCube数据库一体机主要使用如下类型的刀片：CH121 V3 2S计算刀片、CH220 V3 2S IO扩展存储刀片、CH222 V3 2S存储刀片、CH242 V3 4S计算刀片。其它类型的刀片不在本文列举。CH121 V3刀片外观：CH121 V3为半宽的2S计算刀片，可用做MCNA(管理节点)和DBN(数据库计算节点)，规格如下表：形态 半宽单槽2P刀片服务器 处理器 1/2 个Intel X

23、eon E5-2600 v3处理器 内存插槽 24个DDR4 DIMM插槽，最大内存容量1.5TB 硬盘数量 2个2.5英寸SAS或SATA硬盘，支持2 x PCIe SSD盘 RAID支持 支持RAID0、1内置Flash 支持2 x Micro SD / 2 x SATA DOM / 1 x U-disk(USB 3.0) PCIe扩展 支持扩展2个PCIe x16 MEZZ扣卡 支持扩展1个PCIe x16全高半长的标准卡操作系统支持 Microsoft Windows Sever 2008/2012Red Hat Enterprise LinuxSUSE Linux Enterpris

24、e ServerCitrix XenServer VMware ESX 工作温度 5-40 尺寸（WDH） 210mm537.2mm60.46mm CH220 V3 IO扩展存储刀片外观：CH220 V3为全宽2S的IP扩展性刀片，最大可配置6张SSD卡，一般作为高性能数据库场景存储节点使用。规格如下表：形态 全宽单槽2P刀片服务器 处理器 1/2 个Intel Xeon E5-2600 v3处理器 内存插槽 16个DDR4 DIMM插槽，最大内存容量1TB 硬盘数量 2个2.5英寸SAS或SATA硬盘，支持2 x PCIe SSD硬盘 RAID支持 支持RAID0、1内置Flash 支持2

25、x Micro SD / 2 x SATA DOM / 1 x U-disk(USB 3.0)PCIe扩展 支持扩展4个MEZZ扣卡（x16和x8各2个）支持扩展6个PCIe3.0 x16标准卡，可以支持 3种组合模式：6个FHHL单槽位 /1个FHFL双槽位+4个FHHL单槽位 /2个FHFL双槽位 操作系统支持 Microsoft Windows Sever 2008/2012Red Hat Enterprise LinuxSUSE Linux Enterprise ServerCitrix XenServer VMware ESX 工作温度 5-40 尺寸（WDH） 423mm537.2

26、mm60.46mmCH222 V3刀片外观：CH222 V3为全宽2S存储刀片，最大可配置15个2.5” SAS盘，一般用于较大容量数据库场景的存储节点，规格如下表：形态 全宽单槽2P刀片服务器 处理器 1/2 个Intel Xeon E5-2600 v3处理器 内存插槽 24个DDR4 DIMM插槽，最大内存容量1.5TB 硬盘数量 15个2.5英寸SSD、SAS或SATA硬盘 RAID支持 支持RAID 0、1、10、5、50、6、60, 512MB/1GB RAID Cache LSI Raid 2208,2308,3008等 内置Flash 支持2 x Micro SD / 2 x S

27、ATA DOM / 1 x U-disk(USB 3.0)PCIe扩展 支持扩展2个MEZZ扣卡(PCIe x16) 支持扩展1个PCIe x16 FHHL标准卡 操作系统支持 Microsoft Windows Sever 2008/2012Red Hat Enterprise LinuxSUSE Linux Enterprise ServerCitrix XenServer VMware ESX 工作温度 5-40 尺寸（WDH） 423mm537.2mm60.46mmCH242 V3刀片外观：CH242 V3为全宽4S计算刀片，一般用作高计算能力需求或HANA数据库的计算节点，规格如下表

28、：形态 全宽单槽4S刀片服务器 处理器 2/4 个 Intel Xeon E7 v2/E7 v3全系列处理器，最大支持18核，165W内存插槽 配置E7 V2 处理器时，支持32个DDR3 DIMM插槽，最大带宽1600MHZ配置E7 V3 处理器时，支持32个DDR4 DIMM插槽，最大带宽1866MHZ硬盘数量 支持8个SSD、SAS或SATA硬盘 RAID支持 支持RAID 0/1/10/5/50/6/60, 512MB/1GB RAID Cache 内置Flash 支持2 x Micro SD / 1 x U-disk(USB 3.0)PCIe扩展 支持扩展4个PCIe x16 MEZ

29、Z扣卡 支持扩展2个PCIe x16FHHL标准卡 操作系统支持 Microsoft Windows Sever 2008/2012Red Hat Enterprise Linex SUSE Linux Enterprise ServerCitrix XenServer VMware ESX 工作温度 5-40 尺寸（WDH） 423mm x 537.2mm x 60.46mm10GE交换FusionCube对外业务平面和管理平面采用CX310交换机，支持10GE网络，每框配置2个交换机，其支持的规格指标如下表所示：项目说明外观面板接口数量提供1个BMC串口和1个SYS串口。提供16个上行10

30、GE以太网光口。交换容量1.28 Tbit/s包转发率960Mpps 数据中心关键特性支持TRILL支持FCoE支持DCBX、PFC、ETSVLAN支持Access、Trunk、Hybrid方式支持default VLAN支持QinQ、增强型灵活QinQ支持MUX VLANQoS支持基于Layer2协议、Layer3协议、Layer4协议、802.1p优先级等的组合流分类支持ACL、CAR、Remark、Schedule等动作支持PQ、WRR、DRR、PQ+WRR、PQ+DRR等队列调度方式支持WRED、尾丢弃等拥塞避免机制支持流量整形安全和管理命令行分级保护，未授权用户无法侵入支持防止DOS

31、、ARP攻击功能、ICMP防攻击支持端口隔离、端口安全、Sticky MAC支持IP、MAC、端口、VLAN的组合绑定支持AAA、Radius、HWTACACS等多种认证方式支持RMONInfiniBand交换FusionCube数据面采用CX611 InfiniBand交换机，支持56Gb高速交换，每框配置2个交换机，其支持的规格指标如下表所示：项目说明外观面板接口数量提供1个BMC串口和1个SYS串口上行18个QDR/FDR InfiniBand QSFP+接口数据中心关键特性支持TRILLFusionCube数据库基础设施配置华为FusionCube数据库一体机提供灵活的配置方案，以满足

32、企业中小型数据中心到大型数据中心的业务负载及存储需求。数据库软件方面，支持OracleRAC/SybaseIQ/DB2/HANA/GBase等数据库，其中OracleRAC和HANA数据库已经有较为成熟的应用。FusionCube数据库基础设施涉及如下几种节点类型的配置。这些节点的配置可根据实际项目需求进行配置，也可直接使用华为的推荐配置（请参见配置规格指标的说明）。节点类型说明管理节点采用CH121 V3或CH222 V3刀片，其上部署FusionCube Center和FusionStorage Manager。DB节点1采用CH121 V3刀片，其上部署数据库软件和FusionStora

33、ge机头。DB节点2采用CH242 V3刀片，其上部署数据库软件和FusionStorage机头存储节点-类型1采用CH220 V3刀片，每块刀片上可以安装4块或者6块3.2 TB的SSD卡。存储刀片一起组成存储资源池。这种类型的存储刀片适合高性能场景。存储节点-类型2采用CH222 V3刀片，每块刀片上可以安装12块900 GB或1.2T的SAS盘，以及选配一块SSD卡做Cache。存储刀片一起组成存储资源池。这种类型的存储刀片适合大容量场景。数据库基础设施配置规格指标参数典型配置规格定制化配置规格数据库Oracle RAC 11g R2（或Sybase IQ，DB2等FusionCube兼

34、容数据库版本，软件许可另购）Oracle RAC / DB2 / Sybase IQ / 达梦等（软件许可另购）操作系统Oracle Linux 6.5, RHEL 6.6（软件许可另购）Oracle Linux 6.5, RHEL 6.6（软件许可另购）计算节点2节点CH121 V3( 2* E5-2699 V3, 16*16G, 2*600G SAS, 4*10 GE, 2*56G IB)2S刀片推荐配置如下：CH121 V3( 2* E5-2697 V3, 16*16G, 2*600G SAS, 4*10 GE, 2*56G IB) 或者CH121 V3( 2* E5-2699 V3,

35、16*16G, 2*600G SAS, 4*10 GE, 2*56G IB) 或者CH121 V3( 2* E5-2660 V3, 16*16G, 2*600G SAS, 4*10 GE, 2*56G IB) 4S刀片推荐配置如下：CH242 V3( 4* E7-4870 V2, 32*16G, 2*600G SAS, 4*10 GE, 4*56G IB) 或者CH242 V3( 4* E7-4830 V2, 32*16G, 2*600G SAS, 4*10 GE, 4*56G IB)除以上配置还可以根据项目实际需求灵活定制。存储节点3节点CH220 V3( 2* E5-2630 V3, 8*

36、16G, 2*600G SAS, 6* 3.2T SSD，2*10 GE, 4*56G IB)SAS盘存储节点推荐配置如下CH222 V3( 2* E5-2620 V3, 4*16G, 2*600G SAS, 12*900G SAS, 1.2T SSD, 2*10 GE, 2*56G IB) 或者CH222 V3( 2* E5-2620 V3, 4*16G, 2*600G SAS, 12*1.2T SAS, 3.2T SSD, 2*10 GE, 2*56G IB) 或者CH222 V3( 2* E5-2620 V3, 4*16G, 2*600G SAS, 12*1.8T SAS, 3.2T S

37、SD, 2*10 GE, 2*56G IB)SSD存储节点推荐配置如下：CH220 V3( 2* E5-2630 V3, 8*16G, 2*600G SAS, 6* 3.2T SSD，2*10 GE, 4*56G IB) 或者CH220 V3( 2* E5-2630 V3, 8*16G, 2*600G SAS, 6* 3.2T SSD，2*10 GE, 4*56G IB)除以上配置还可以根据项目实际需求灵活定制。管理节点1节点CH121 V3（2* E5-2620 V3, 8*16G, 2*600G SAS, 2*10GE）12节点，节点的推荐配置如下：CH121 V3（2* E5-2620 V3, 8*16G, 2*600G SAS, 2*10GE）CH222 V3（2* E5-2620 V3, 8*16G, 2*600G SAS, 2*10GE）除以上配置还可以根据项目实际需求灵