华为eSight-存储资源管理特性技术白皮书

i eSight 存储资源管理特性技术白皮书存储资源管理特性技术白皮书 华华为为技技术术有有限限公公司司 ii eSight 存储资源管理特性技术白皮书目 录 1 目目 录录 1 概述概述 1 2 存储资源管理面临的挑战存储资源管理面临的挑战 2 2 1 设备种类多 业务复杂 2 2 2 端到端解决方案复杂 2 2 3 容量管理复杂 2 2 4 存储设备监控复杂 3 3 解决方案解决方案 4 3 1 解决方案 4 3 1 1 多厂商异构集中管理 4 3 1 2 存储网络分析方案设计 6 3 1 3 容量管理设计方案 7 3 1 4 强大的报表处理能力 8 3 2 典型应用 10 3 2 1 设备接入 10 3 2 2 存储管理 11 3 2 3 主机管理 13 3 2 4 虚拟化管理 14 4 成功案例成功案例 15 4 1 华为数据中心解决方案 15 4 2 某信息数据中心解决方案 15 4 3 某医疗平台项目解决方案 16 5 参考资源参考资源 18 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 1 1 概述概述 eSight Storage Manager 是华为推出的存储资源管理软件 帮助企业提升管理效率 合 理利用物理和虚拟环境中的存储资源 产品具有如下管理特性 集中设备管理 集中设备管理 统一监控存储网络环境中的主机 虚拟机 交换机和华为及第三方存 储设备 存储网络分析 存储网络分析 自动发现和监控存储网络资源 分析解决存储网络中的各种故障和瓶 颈 存储报表管理 存储报表管理 提供华为自研的存储阵列和 NAS 的历史容量和历史性能统计功能 支 持存储池分配容量预测 容量管理 容量管理 汇总分析主机 虚拟机 虚拟化服务器的容量管理信息 通过预测容量使 用趋势 有效指导用户扩容 减容 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 2 2 存储资源管理面临的挑战存储资源管理面临的挑战 2 1 设备种类多 业务复杂 存储资源涉及的设备类型种类多 包括 统一存储 海量存储 数据保护等各种存储 设备 同时也需要监控 FC 同时涉及多个主流厂商的异构存储设备 包括 EMC NetApp IBM HP 浪潮 迪 菲特 曙光等存储设备 FC 交换机也涉及多种主流厂商 包括博科 Qlogic FC 交换 机 Cisco 等网络设备 2 2 端到端解决方案复杂 存储网络中涉及主机 虚拟化 交换机以及存储设备 网络内的数据也是在这些网络 节点之间流动 客户比较关心以下问题 如何能够直观展示主机 虚拟化 交换机以及存储设备之间的连接关系 如何能够方便的查看和监控各节点状态 如何在故障出现是能够快速找到影响范围 如何能提前分析存储网络的瓶颈 存储网络中端到端分析是一个负责的解决方案 2 3 容量管理复杂 容量管理涉及主机容量管理和存储设备容量管理 客户关注的问题 能否直观监控主机容量信息 能否预测未来容量趋势 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 3 2 4 存储设备监控复杂 存储设备需要监控的组件包括 控制器 硬盘 存储池 LUN 主机 每一种组件需 要监控的指标繁杂 客户需要通过监控这些指标 帮助分析存储设备中的各种故障和 瓶颈 因此 能否有效监控这些指标是一个重要课题 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 4 3 解决方案解决方案 3 1 解决方案 3 1 1 多厂商异构集中管理 存储设备管理 存储设备管理 支持多套华为存储设备的统一管理 包括华为统一存储 海量 存储和数据保护等各类 OceanStor 存储设备 能够兼容管理多个主流厂商的异构 存储设备 支持标准 SMI S 异构阵列接入 支持与设备管理软件集成 主机与虚拟化管理 主机与虚拟化管理 主机管理支持各种主流 Windows Linux 操作系统 支持 Agent Agentless 两种管理方式 支持 Agent 远程安装与升级维护 支持 VMware ESX ESXi Server HUAWEI FusionCompute 等虚拟化服务器管理 存储网络分析 存储网络分析 自动发现和监控存储网络资源 分析解决存储网络中的各种故 障和瓶颈 1 支持 SAN NAS 存储网络链路自动发现 提供全局拓扑和自定义拓扑两 种展现视图 实现主机 虚拟机 交换机 存储设备的端到端可视化路径监控 支持 FC 端口的性能指标分析 2 支持对华为阵列设备内物理和逻辑资源关联关系和 LUN 映射配置的可 视化视图展现 3 支持华为阵列设备的健康度分值评估 以便直观检查存储系统的运行状 态与稳定性 图 1 存储网络拓扑图界面 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 5 图 2 存储系统健康度评估界面 良好的兼容性和管理协议开放性 良好的兼容性和管理协议开放性 标准的南向管理协议 标准的南向管理协议 通过标准 SMI S 协议对接异构阵列设备 支持接收 SNMP V1 V2C V3 Trap 告警上报 开放的北向管理协议 开放的北向管理协议 提供资源 告警 性能北向接口 支持 REST SNMP FTP SFTP 等多种北向接口协议 灵活的集成接口 灵活的集成接口 支持 LDAP RADIUS 集中用户认证 支持与三方软件 SSO 集成 支持的设备列表 支持的设备列表 类类 型型 厂商厂商 产品产品 管理接口管理接口 Micros oft SQL Server 2005 2008 数数 据据 库库 Oracle Oracle10g Database 10 2 Oracle11g Database 11 1 11 2 SQL VMware ESX Server 4 1 5 0 5 1 Web Service VIj ava 虚虚 拟拟 机机 Huawei FusionCompute REST Novell SUSE Linux Enterprise Server 10 11 Red Hat Red Hat Enterprise Linux 4 5 6 主主 机机 Micros Windows Server 2003 2008 2008R2 2012 Agent less Agent eSight 存储资源管理特性技术白皮书Error No text of specified style in document 6 oft 全系列以太网交换机 华为 SNS2120 OEM Qlogic SNS2124 Brocade 300 SNS2224 Brocade 6505 SNS2248 Brocade 6510 FC FC IPIP 交交 换换 机机 Brocad e 24000 7500E 5140 5100 5020 5000 4020 2400 310E 300 200E DCX 4S SMI S SNMP 华为 S5000 S2600 VIS6300 VIS6600 VIS6600T S2600T S5000T N8000 VTL35 00E VTL6900 OceanStor 18000 OceanStor 9000 Dorado CSS CSE UDS SMI S REST SNMP EMC CLARiiON CX3 CX4系列 NetApp FAS3160 IBM DS8000 HP EVA4400 SMI S SNMP AS400 SNMP 浪潮 AS2000 OEM NetApp 7900 AS1000 G6 OEM NetApp 5480 AS1000 G3 OEM NetApp 4980 迪菲特 GS3992 OEM NetApp 3992 DS8348 OEM NetApp 3994 DS8340 OEM NetApp 3992 DS800 F10 OEM NetApp 4980 DS800 F20 OEM NetApp 4988 SMI S SNMP 存存 储储 设设 备备 曙光 DS600 F20 OEM Infortrend DS600 F10 OEM Infortrend SNMP 3 1 2 存储网络分析方案设计 存储网络分析管理子系统用来自动发现 SAN NAS 存储网络中的主机 虚拟机 交换机和存储设备之间的端到端链路关系 直观展示和监控各节点状态 提供 链路端口的性能指标分析 存储设备影响范围等功能 帮助用户分析解决存储 网络中的各种故障和瓶颈 产品使用 Twaver 开发包提供的丰富图形组件来实现存储网络拓扑图 综合使用 交换机地址转发表和链路层发现协议 LLDP 来自动发现链路连接关系 存储网络分析管理的业务逻辑主要有以下两个阶段 阶段一 1 设备接入时 会通知链路构造模块进行设备链路的发现 也会通知数据处 理模块将接入的网元转换为拓扑元素 拓扑节点 入库 链路构造完成后 除 将原始链路数据入库 用于原有的主机路径图展示 还会将链路转换为拓扑元 素 拓扑连接 入库 2 同时设备接入还对启动对交换机的性能采集 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 7 3 后台启动的告警轮询统计线程会定时查询 iEMP 的告警统计 并将各网元当 前的未恢复告警数量由数据处理模块附加给各网元对应的拓扑元素并入库 4 路径带宽利用率轮询线程还会从数据库根据路径查询并计算出带宽利用率 并由数据处理模块附加给对应的拓扑元素 5 用户在界面触发查看 查看 SAN 网络 主机路径图 性能等 动作 由展示 数据组装模块从数据库中查出对应的数据 并组装转换为对应的展示数据返回 前台 呈现给用户 阶段二 1 当用户已经打开 SAN 网络拓扑图时 前台消息处理模块会监听后台的消息 2 如果数据处理模块 检测到拓扑元素 节点和连接 的属性 节点名称 IP 状 态 未恢复告警数量 连接的带宽利用率等 发生变化时 通知前台的消息处理 模块 消息处理模块会主动刷新网络拓扑图 用户变可看到最新的拓扑数据 cmp 主 主 主 主 主 主 主 主 主 主 主 主 主 主 UI主 San主 主 主 主主 主 主 主 主 主 Twaver Flex 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 eSightIT iEmp 主 主 主 主 主 主 主 主 API Service 主 主 主 主 San主 主 主 主 San主 主 主 主 主 主 DashBoard UiService 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主 主主 主 主 主 主 主 主 主 主 查 查 查 查 查 查 notify notify notify notify osgirest BlazeDs notify 存储网络分析组件图 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 8 3 1 3 容量管理设计方案 容量管理组件汇总分析主机 虚拟机 虚拟化服务器的容量管理信息 包括容量使 用统计 容量热点分布 容量趋势预测等功能特性 容量管理通过预测一周 两周 三周及一个月之后的容量使用趋势 有效指导用户扩容 实现原理 容量采集器 按设定的采集任务 从设备侧周期性采集容量数据入库 容量预测器 使用容量预测算法每天一次定期处理采集到的历史容量数据 计算得出容量预测数据并保存入库 容量分析服务 接收浏览器查询请求 提 供各种容量分析结果数据和功能界面 3 1 4 强大的报表处理能力 丰富的报表功能丰富的报表功能 丰富的性能 容量报表功能 辅助用户进行性能瓶颈分析以及容量使用规划 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 9 图 1 报表功能图 预置报表 预置的性能与容量报表 方便用户快速 定期查看存储系统的性能 存储系统级别的性能概况 报告 LUN 端口 控制器 硬盘等过去 1 小时 24 小时的性能概况 对象级别的性能详情 对硬盘 端口 控制器 LUN 文件引擎节点等 对象报告过去 24 小时 7 天 30 天的性能详情 按照 IOPS 带宽 延时等 维度进行 Top5 统计 支持文件系统 存储池 精简 LUN 等对象报告过去 24 小时 7 天 30 天的容量利用率 自定义报表 用户自定义的性能和容量报表 满足用户对性能与容量报告的定制化需 求 存储系统的性能概况 自定义报告 LUN 端口 控制器 硬盘等过去一段时 间的整体性能概况 对象级别的性能详情 自定义报告硬盘 端口 控制器 LUN 文件引 擎节点等对象过去一段时间的性能详情 存储系统及对象级别的容量利用报告 自定义报告存储系统 文件系统 存储池 精简 LUN 等过去一段时间的容量利用状况 任务报表 利用自定义报表 辅助周期执行策略 定期执行用户关心的性能与容量报表 数据处理以及指标统计 数据处理以及指标统计 历史数据保存周期 性能数据 1 年 容量数据 2 年 2000 万级数据量下报表响应时间 30 秒以内 报表任务处理时长 10 分钟以内 阵列设备性能统计对象及指标 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 10 统计对象统计指标 硬盘利用率 队列长度 I O 时延 读 写 IOPS 读 写带 宽 读 写 IO 大小 服务时间 前端主机端口利用率 队列长度 I O 时延 读 写 IOPS 读 写带 宽 读 写 IO 大小 服务时间 控制器利用率 队列长度 I O 时延 读 写 IOPS 读 写带 宽 读 写 IO 大小 服务时间 Cache 利用率 CPU 利用率 LUN利用率 队列长度 I O 时延 读 写 IOPS 读 写带 宽 读 写 IO 大小 服务时间 读 写 Cache 命中率 存储池利用率 队列长度 I O 时延 读 写 IOPS 读 写带 宽 读 写 IO 大小 服务时间 图 2 报表统计指标 3 2 典型应用 3 2 1 设备接入 设备接入设备接入 存储 主机管理 虚拟化管理提供三种方式的设备接入 单个添加 自动发现 批量导入 单个添加方式主要应用在扩容等少量设备需要接入到 eSight 的场景 自动发现 和批量导入方式主要用在初始化部署等批量设备添加场景 另外批量导入方式 也可用在升级场景 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 11 拓扑监控拓扑监控 被管理存储添加到 eSight 网管系统后 在物理拓扑监控网元状态和告警状态 使用网元右键菜单导航到对应的管理功能执行各种运维操作 3 2 2 存储管理 存储资源可视化存储资源可视化 通过存储 SAN NAS 资源可视化 可以直观看到 SAN 前端主机端口 控制器 LUN 存储池 硬盘的完整路径 NAS 前端主机端口 控制器 文件系统 文件存储池 数据磁盘的完整路径 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 12 存储设备映射视图存储设备映射视图 直观看到存储设备 LUN 和主机的映射关系 存储系统健康度评估存储系统健康度评估 存储健康度提供对单个设备整体健康状态的评估 通过工作负载 异常 告警 统计三个维度展现设备的健康情况 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 13 Cloud Service 功能功能 Cloud Service 服务自动以邮件形式发送设备或网管信息至运维中心 运维中心 根据该信息 分析网管及设备运行状态 及时发现故障并提醒客户处理 回传信息包含存储设备的健康检查报告 事件日志包等 可以反映设备的软硬 件配置情况和故障状况 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 14 3 2 3 主机管理 主机基本信息监控主机基本信息监控 主机管理支持 Windows Linux 管理 能够展示主机基本信息 包括主机的名称 IP 操作系统类型 状态 告警等信息 同时能够展示硬件的 CPU 网口 HBA 硬盘的基本信息 主机文件系统 数据库 进程监控主机文件系统 数据库 进程监控 eSight 存储资源管理特性技术白皮书Error No text of specified style in document 15 3 2 4 虚拟化管理 虚拟化管理能够管理 ESXServer FA FC 等设备详情 包括设备基本信息 所 管理的虚拟机和数据存储统计 告警管理 硬件信息 网口 硬盘 HBA CPU 数据存储 虚拟机 虚拟交换机和端口等 eSight 存储资源管理特性