大型集团企业IT基础架构应用运维体系解决方案

大型集团企业IT基础架构应用运维体系解决方案人基础架构及应用运维服务总体方向人总体方向：•通过标准化运营流程、自动化监控管理工具、培养专业化人才，提供高质量的基础架构及应用运维服务，提升服务品质、降低运营成本。IT基础架构软件程序全部层级应用程序数据操作系统虚拟化虚拟化主机主机存储存储数据中心数据中心IT应用架构IT数据架构IT基础架构建基础架构及应用运维服务体系规划建服务台⒀(主动/被动+自动/人工)统一服务台(呼叫中心，电话，网页，移动，微信，QQ，邮件)应用环境⑿⑿统一运一运营服务平台（应营服务平台（应用运用运⑾⑾统一监测控制管理平台（应用运维）⑴环境定位及设迁移营服务平台（基础基础设施⑾⑷⑶⑸统一监测控制管理平台（基础架构）⑾⑷⑶⑸监控监控:HDS管理工具：SVOSOPScenteUnisphere备份监控：或监控工具：华为iBMC、惠普iLODRAC资源池化SCOMZabbix或Nagios⒆网络监控带宽管理上网行广域网加速华为监控会议管理直播管理远程软终端电话计费电话管理阿里云管理⒅风火水电汰换⑻（Oracle)(MS)⒇方案框架服务策略已购买、署使用：SolutionmanagerVcenter监控：无版本升级⑹⑺⑵IT资产管理(CMDB)⑴⑴机房定位及建设迁机房定位及建设迁移移组织⒂⒂供应商管理SAAS软件即服务平台服务化云管平台基础设施云化基础设施标准化打地基云计算视频会议备份容灾虚拟化网络数据库机房管理数据库存储行业云公司愿景与基础架构部的战略方向SAAS软件即服务平台服务化云管平台基础设施云化基础设施标准化打地基云计算视频会议备份容灾虚拟化网络数据库机房管理数据库存储行业云对内，面向应用团队及用户的敏捷支持：1.实现资源供给的敏捷交付2.实现故障的准确快速定位3.实现隐患的提前预防应对应用级CWDM数据级7国应用级容灾方案应用级CWDM数据级7国AA机房IT容灾体系建设支撑支撑IT业务连续性IT容灾技术选择应用类型Oracle（物理机）SQLServer（物理机）MySQL容灾技术OracleDataGuardSQLServerDBMirrorVMwareSRM+SAN存储异步复制文件服务，操作系统，应用程序SAN存储异步复制，Rsync/Robocopy虚拟机AD域/DNS等分布式部署应用ExchangeDAG分布式集群VMwareSRM+SAN存储异步复制应用分布式部署方式DistributedIT应用分级和分层分级核心重要一般>支撑面向客户交付的应用且停止服务会给公司造成重大损失。>期末财务关账直接相关的应用。>全员高频使用的应用，如邮件。>公司外部客户使用的关键应用。>支撑面向客户交付的应用且停止服务会给公司造成较大损失。>支撑公司内部运营的应用且停止服务会给公司造成较大损失。>停止服务会给业务造成运作不便（一般是非实时系统，业务有替代方案，可以Workaround，或对服务中断时间无特殊要求）分层主干辅助末端应用\工具承载关键信息流或者作为关键数据的数据源，具有内外部多个（两个及以上）交易数据集成关系并且直接影响利润或者财务数据完整性的应用；>作为主干应用的重要补充而存在；>承载部分业务操作或者数据处理，为主干应用的数据节点准备数据。支持局部业务效率提升，或者支持个性化的差异业务的应用/工具，应用功能上覆盖作业层过程管理或者数据加工、计算IT应用服务策略•基于XX当前的IT规模、IT管理成熟度及IT资源配置，将IT系统划分为容灾A级、容灾B级、容灾C级三个容灾需求等级，不同的容灾需求等级对应不同的容灾恢复要求•根据IT系统分层分级属性对IT系统进行评分，根据评分结果确定IT系统容灾需求等级；由于技术限制、业务特殊要求等例外情况导致的不能匹配分级标准的IT系统，根据实际情况进行级别调整容灾指标容灾级别容灾A级容灾B级RTO8小时2天MBCO70%50%30%容灾方式应用级容灾应用级容灾数据级容灾DRP审视每年一次每年一次每两年一次容灾演练每年一次每年一次每两年一次资源配置在容灾建设时满足MBCO在容灾建设时满足MBCO在容灾建设时满足需求，采用资源配置采用需求，采用资源配置采用MBCO需求，采用共享、独占、热站点配置模式共享、热站点配置模式温站点配置模式态关键活动流程支持交付IT灾难恢复全景图态关键活动流程支持交付需求管理建设管理运维管理事件处理应急响应灾难恢复服务重启危机管理(组织/协调/沟通)服务重建服务重建返回常态ITIT容灾生命周期管理流程事件管理流程事件管理流程灾难应急响应及宣告流程联系清单(灾难恢复及重续运行流程灾难恢复及重续运行流程CallTree）/模板（沟通模板…)/工具…灾难恢复报告灾后重建与返回流程灾后重建与返回流程8变更/需求传输操作流程集团ERP系统架构SAPBASIS职责作为SAP系统管理员的Basis,除服务器、存储等硬件管理外，还包括如下职责：郎丰利整理制作SAP标准三层系统架构开发系统（DevelopmentSystem）−SAP项目的实施系统，各种业务模块的客户化工作、相关的应用开发等在该系统中进行;测试系统（QualityAssuranceSystem）−SAP项目中为各种客户化和开发工作提供完整测试的系统，其中存有企业实际业务数据，用以验证客户化和开发的正确性。此系统也可作为上线前的最终用户培训环境;生产系统（ProductionSystem）−企业日常运转实际使用的系统，其中存有企业的完整业务数据，生产系统中不允许直接做客户化或开发.Client000SAP参考集团SAPReferenceClientClient300集成测试IntegrationTestClientClient310用户培训TrainingClientClient320数据转换DataConvertClientClientClient000SAP参考集团SAPReferenceClientClient300集成测试IntegrationTestClientClient310用户培训TrainingClientClient320数据转换DataConvertClientClient000SAP参考集团SAPReferenceClientClient600生产集团ProductionClient开发系统DEV测试系统QAS生产系统PRDClient610预生产集团Pre-ProductionClient整理制作郎丰利1519ClientClient000SAP参考集团SAPReferenceClientClientClient200定制集团GoldenClientClientClient210开发集团SandBoxClientClientClient220单元测试UnitTestClientClientClient230沙箱演练SandBoxClient变更/需求传输操作流程传输变更/需求请求者传输变更/需求请求审批者传输变更/需求管理员ABAP开发人员SAP系统集中监控–SAPsolutionmanagerSAP系统全方位监控端到端跟踪分析/根本原因分析•SAP各系统的OS、HANADB、系统的全面监控与警报，及时发现和定位问题，加强纠错能力。•全面记录和保存监控数据，生成系统效能趋势图，提升系统前瞻管理能力•SAP系统端到端问题跟踪分析，快速定位系统问题的根本原因6存储与备份存储的数据保护及申请资源的要求备份需求的申请流程及需要提供的信息备份信息推送及备份恢复演练备份系统架构图：数据异地双/单副本保存备份是离线存储的一种方式，XX当前使用的备份系统是：2.XX和XX两个备份域核心A类系统，如ERP，采用异地双副本方案；其他系统，采用异地交叉单副本（风险，最多损失一天数据）建设归档环境，把不常变化的冷数据归档，减少备份容量OpsCenterOpsCenter集中管理CWDM)APAPAPVMware FC-SW IP-SW NBUNBU5230ICONClient FC-SW///核心业务灾备VMware/核心业务ClientNBU5230NBU5230APPAPPAPPIP-SW5230数据归档的存储架构图5操作系统与数据库操作系统规范操作系统规范数据库规范与流程操作系统规范.服务器环境条件：–支持的操作系统：windows2008enterprisesR2、.规范要求：–提前沟通、申请服务器存储资源（至少提前2个工作日申请）；–windows平台优先使用2012standardR2,linux平台优先使用redhat6.8;–应用和数据库须分开部署；–数据库不能私自部署；–数据库仅支持内网部署，DMZ区使用需开通防火墙策略；–Linux平台应用包需部署在指定目录，定期清理应用日志;–资源使用完毕之后需及时、主动与服务器管理员沟通，释放资源；SQLAlwaysOn架构介绍SQLFailOver架构介绍明ORACLERAC架构介绍1,VIP：虚拟IP，是动态绑定到物理网卡上的，可以在节点间浮动，而网卡上的公共IP保持不变。2,scanIP：简单客户端连接名。做了域名解析后这是一个唯一的名称，在整个公司网络内部唯一，并且在DNS中可以解析为scanIP的ip地址，客户端连接的时候只需要知道这个名称，并连接即可。MYSQL主备架构–微V1,应用服务连接到主数据库读写；2,主数据库通过二进制日志把数据复制到从数据库；3,可在应用服务器更改配置实现主从数据库切换。服务渠道数据库规范与流程介绍服务渠道输），环境标准环境标准权限规范安全规范上线流程4虚拟化与云计算公有云（阿里云）热门产品虚拟化及云计算规范虚拟化及云计算资源申请流程虚拟化（VMWARE）架构介绍D.现状：）；公有云（阿里云）热门产品介绍-弹性计算:-数据库:-存储与CDN:-云盾:虚拟化及云计算规范介绍.服务器申请规范要求：–申请资源前，请提前准备应用架构及需求与虚拟化、云计算的万科负责人沟通并确认最终资源规格、分布，再进入平台提交资源申请流程；–新业务需求通过虚拟化及云计算实现，如业务特殊，必须使用硬件服务器，所属项目组需计划采购硬件服务器的预算，硬件规格由万科服务器对接人和申请人最终确认，并进行招投标采购硬件服务器；–申请人需明确应用级别，申请非硬件资源时满足3-6个月需求即可，不足时可申请扩容；–需通过堡垒机远程访问管理服务器，提前申请堡垒机工具使用权限；–阿里云上部署应用需在申请资源时提供所需的业务端口信息，默认所有端口是被禁止的；–阿里云资源开启后就开始计费,不再使用的资源需提前半个月通知管理员停止续费；–虚拟化资源不再使用时，请填写下线流程,回收资源，避免造成资源浪费或资源紧张；机房常见设备------机柜机柜规格：42U（U是国际通用的机柜内设备安装所占刀片服务器机房常见设备------服务器刀片服务器机房常见设备--路由器，交换机，防火墙，存储机房常见设备------UPS、精密空调UPS：不间断电源。是当交流电网（市电）输入发生异常或中断时，它可以继续向负载供电，并能够保证供电质量精密空调：可以给机房提供一个恒温恒湿的环境，24*365H全年持续工作。机房常见设备------消防、发电机消防：七氟丙烷在灭火过程中能保护设备发电机：市政停电后，长时间为IT设备供电SAP财务帐管理(模块) kingdeeIT服务管理（应用运维基础架构）SAP财务帐管理(模块) kingdeeIT服务管理（应用运维基础架构）流程交互实物资产管理系统（实物账+IT资产及配置项+低值办公）ITIT运营CMDB•公司全部实物资产，包括IT设备，软件，系统•行政资产•一线公司由公司管理资产，如网络设备，服务器等•所有财务资产与实物资产实现一一对应关系•两个系统实现实时对接，自动更新相关数据•一期实现公司及一线由公司管理资产•二期与SAP、CMDB打通实物资产管理系统建设思路（IT，行政）-CMDB示例巡检会前准备会中支持会后视频会议管理-服务精细化管理巡检会前准备会中支持会后标准标准设备标准会议室标准设备会议室会前沟通及会议流程会议准入会议关闭接入方式及责任分工会议监控客户回访网络标准参会方设备及系统确认网络监控分析复盘系统会前测试改进方案会议室预订系统带宽管理系统网络监控系统视频会议直播系统私有云•高度可扩展性、动态负载平衡及高利用率•核心数据与业务自己掌握，安全，适合核心内部应用•减少维护成本精细化管理（维护人员精兵化）•个性化业务需求（如：基础配置定制化）成本与运营分析成本与运营分析资源调度发放自动化监控运维全局统一纳管云管平台经理线上审批云管理平台经理线上审批管理员线上分配实时查询实时查询资源成本资源成本云管平台统一资源统一资源计算、存储、成本基础设施xx机房计算、存储xx机房计算、存储xx机房计算、存储阿里云（公有云）计算、存储、网络现在最大问题是申请及审批多次沟通，基础架构分配操作只需要半天，而审批沟通至少需要4天，未来：.申请人线上实时查询、自助申请，经理线上查询并审批，预估从原来的5天缩短到最多2天。.统一管理平台，对接各种云资源.统一资源使用分析及成本优化.统一对外交付资源提升资源交付效率统一监管控平台（基础架构）•整合所有监控系统运行、报警信息，并实时通知相关人员；•如发现问题，更新统一运营平台，生成工单；•实时监测资产变化信息，自动更新资产配置库。•运营数据量化分析，服务绩效考核统一运营服务平台（基础架构）基础设施统一监控平台（基础架构）IT资产管理(CMDB)自带集成监控自带集成监控自带集成监控Vcenter偏重管理，缺乏监控OPScenter，但没有备份监已安装未部署-123监控工具(事项管理)服务请求45678 统一运营服务平台-核心服务流程123监控工具(事项管理)服务请求45678 访问请求访问请求服务台输员员服务台访问管理服务请求事项管理职责说明：1.服务台按照《服务目录》的范围作为服务台的工作基础与范围2.超出范围部分工作分配给项目组或数据中心问题管理事件管理项目组员员服务台访问管理服务请求事项管理职