自动化工具.docx

CIO：IT运维自动化已成为企业必需品/cio/ 2010年06月29日09：23 来源：eNet硅谷动力 字号：小 | 大【文章摘要】当下,IT运维已经成为企业的必需品,企业关注的是如何提高IT运维的效率,从而实现IT资源利用率的最大化。国际知名调查机构Gartner调查发现,在IT运维成本中,源自技术或产品(包括硬件、软件、网络等)成本其实只占20%,而流程维护成本占40%,运维人员成本占40%。随着IT建设的不断深入和发展,IT系统的运行维护已经成为了CIO和IT部门普遍关注和不堪重负的问题。近日有一个调查问到目前CIO最关注的问题是什么时,大多数CIO表示最关心的是IT运维成本过高。原因是在过去的5年中,很多企业都实施了很多IT系统,使到IT运行越来越复杂,也越来越难管理。调查结果显示有50%的受访CIO认为IT运维成本过高的一个原因是IT运维的自动化做得还不够好,依靠手工流程来管理,不但使到运维效率不高,而且人力成本更是花费惊人。 当下,IT运维已经成为企业的必需品,企业关注的是如何提高IT运维的效率,从而实现IT资源利用率的最大化。国际知名调查机构Gartner调查发现,在IT运维成本中,源自技术或产品(包括硬件、软件、网络等)成本其实只占20%,而流程维护成本占40%,运维人员成本占40%。流程维护成本包括日常维护、变更管理、测试成本等;人员成本包括训练、教育、人员流失、招聘成本等。因此,如何提高IT运维管理效率,降低运维成本是时下IT界和CIO最热门的话题之一。 一.传统式IT运维管理面临挑战 目前许多企业的IT运维虽然已经实现从人工运维到计算机管理,但这只是处在“半自动化”的运维状态。因为这种IT运维仍然是等到IT故障出现后再由运维人员采取相应的措施,所以传统被动的、孤立的、半自动式的IT运维管理模式经常是让IT部门疲惫不堪。主要有以下几个方面: (1)运维人员被动低效率手工救火 在IT运维过程中,IT员工被动低效率手工救火,只有当事件已经发生并已造成业务影响时才能发现和着手处理。这种被动“救火”不但使IT运维人员终日忙碌,也使IT运维本身质量很难提高,导致IT部门和业务部门对IT运维的服务满意度都不高。目前绝大多数的企业的IT运维现状是如此:IT运维人员日常大部分时间和精力是处理一些简单重复的问题;由于故障预警机制不完善,往往是故障发生后或报警后才会进行处理,使到IT运维人员的工作经常是处于被动“救火”的状态,不但事倍功半而且故障还常常会出现恶性连锁反应。 (2)缺乏一套高效的IT运维机制支撑 目前许多企业现有的IT运维机制存在如下问题:IT运维管理过程中缺少自动化的运维管理模式,也没有明确的角色定义和责任划分,使到问题出现后很难快速、准确地找到根本原因,并及时地找到相应的人员进行修复和处理;或者是在问题找到后缺乏流程化的故障处理机制,而在处理问题时不但欠缺规范化的解决方案,也缺乏全面的跟踪记录。 (3)缺乏高效的IT运维技术工具 随着信息化建设的深入,企业IT系统日趋复杂,林林总总的网络设备、服务器、中间件、业务系统等让IT运维人员难以从容应对,即使加班加点地维护、部署、管理也经常会因设备出现故障而导致业务的中断,严重影响企业的正常运转。部分原因是企业缺乏事件监控和诊断工具等IT运维技术工具,因为在没有高效的技术工具的支持下故障事件很难得到主动、快速处理。 尽管IT运维管理的技术在不断进步,但实际上很多IT运维人员并没有真正解脱出来,原因并不复杂。目前的技术虽然能够获取IT设备、服务器、网络流量,甚至数据库的警告信息,但成千上万条警告信息堆积在一起更本没法判断问题的根源在哪里。还有,目前许多企业的更新管理绝大多数工作都是手工操作的。即使一个简单的系统变更或更新往往都需要运维人员逐一登录每台设备进行手工变更,当设备数量达至成百上千时,其工作量之大可想而知。而这样的变更和检查操作在IT运维中往往每天都在进行,占用了大量的运维资源。因此,实现运维管理工作的自动化对企业来说已迫在眉睫。 二.为什么自动化是IT运维的发展趋势？ (1)为什么IT运维需要自动化？ 现在随着IT运维管理工作的复杂度和难度的大大增加,仅靠过去几个“运维英雄”或“技术大拿”来包打天下已经行不通了,企业开始需要运用专业化、标准化和流程化的手段,来实现运维工作的自动化管理。因为通过自动化监控系统能及时发现故障隐患,主动的告诉用户需要关注的资源,以达到防患于未然。例如,全天候自动检测与及时报警能实现IT运维的“全天候无人值守”,大大降低IT运维人员的工作负担。而且,通过自动化诊断能最大限度地减少维修时间,提高服务质量。因此, 对于越来越复杂的IT运维来说,将纯粹的人工操作变为一定程度的自动化管理是一个重要发展趋势。 首先,IT运维流程自动化能够提高流程的可控性,可以基于业务需求来制定个性化的流程,使企业领导有机会看见他们的业务流程,对企业流程有一个深刻的分析和理解,进而改造和优化流程。其次,IT运维流程的自动化能提高透明度。因为随着业务需求1的变化可能会有多个版本出现,手工流程的不透明将会给流程定制和优化带来相当大的困难,而自动化流程可以使用户能够一目了然的看到整个流程的各个节点运转情况,自动化工具潜移默化地提升业务保障能力。再者,运维系统实行了自动化监控以后,通过工具自动监控对人的工作是一种减负,也是一种降低成本的表现。(2)IT运维自动化管理的具体内容 IT运维已经在风风雨雨中走过了十几个春秋,如今它正以一种全新的姿态摆在我们面前-自动化,这是IT技术发展的必然结果。现在,IT系统的复杂性已经客观上要求IT运维必须能够实现数字化、自动化维护。所谓IT运维管理的自动化是指通过将日常IT运维中大量的重复性工作,小到简单的日常检查、配置变更和软件安装,大到整个变更流程的组织调度,由过去的手工执行转为自动化操作,从而减少乃至消除运维中的延迟,实现“零延时”的IT运维。 简单的说,IT运维自动化是指基于流程化的框架,将事件与IT流程相关联,一旦被监控系统发生性能超标或宕机,会触发相关事件以及事先定义好的流程,可自动启动故障响应和恢复机制。自动化工作平台还可帮助IT运维人员完成日常的重复性工作(如备份,杀毒等),提高IT运维效率。同时,IT运维的自动化还要求能够预测故障、在故障发生前能够报警,让IT运维人员把故障消除在发生前,将所产生损失减到最低。 对于企业来说,要特别关注两类自动化工具:一是IT运维监控和诊断优化工具;二是运维流程自动化工具。这两类工具主要应用于:监控自动化,是指对重要的IT设备实施主动式监控,如路由器、交换机、防火墙等。配置变更检测自动化,是指IT设备配置参数一旦发生变化,将触发变更流程转给相关技术人员进行确认,通过自动检测协助IT运维人员发现和维护配置。维护事件提醒自动化,是指通过对IT设备和应用活动的时时监控,当发生异常事件时系统自动启动报警和响应机制,第一事件通知相关责任人。系统健康检测自动化,是指定期自动地对IT设备硬件和应用系统进行健康巡检,配合IT运维团队实施对系统的健康检查和监控。维护报告生成自动化,是指定期自动的对系统做日志的收集分析,记录系统运行状况,并通过阶段性的监控、分析和总结,定时提供IT运维的可用性、性能、系统资源利用状况分析报告。 三.建立高效IT运维自动化管理的步骤 作为CIO,如何在有限的投入下尽快建立高效的自动化IT运维体系是首要关注的问题,因为提高IT运维质量已经成为CIO当前面临的重要问题。以下是我的一些经验总结。 (1)建立自动化运维管理平台 第一步是要先建立IT运维的自动化监控和管理平台。通过监控工具实现对用户操作规范的约束和对IT资源进行实时监控,包括服务器、数据库、中间件、存储备份、网络、安全、机房、业务应用和客户端等内容,通过自动监控管理平台实现故障或问题综合处理和集中管理。例如,在自定义周期内进行自动触发完成对IT运维的例行巡检,形成检查报告。包括自动运行维护,以完成对系统补丁的同步分发与升级、数据备份、病毒查杀等工作。 (2)建立故障事件自动触发流程,提高故障处理效率 所有IT设备在遇到问题时要会自动报警,无论是系统自动报警还是使用人员报的故障,应以红色标识显示在运维屏幕上。然后IT运维人员只需要按照相关知识库的数据,一步一步操作就可以。因此,企业需要事先建立自动工单式流程管理,当设备或软件发生异常或超出预警指标时会触发相关的事件,同时触发相关工单处理流程给相关IT运维人员。IT运维人员必须在指定时间内完成流程所规定的环节与工作,以提高IT运维响应问题的效率。 (3)建立规范的事件跟踪流程,强化运维执行力度 首先需要建立故障和事件处理跟踪流程,利用表格工具等记录故障及其处理情况,以建立运维日志,并定期回顾从中辨识和发现问题的线索和根源。事实上许多实践也证明,建立每种事件的规范化处理和跟踪指南,可以减少IT运维操作的随意性和强化运维的执行力度,在很大程度上可降低故障发生的概率。同时,用户还应可以通过自助服务台、电话服务台等随时追踪该故障请求的处理状态。 (4)设立IT运维关键流程,引入优先处理原则 设立IT运维关键流程,引入优先处理原则是指要求CIO定义出IT运维的每个关键流程,不仅仅是定义流程是什么,还包括要指出每个关键流程对企业有什么影响和意义。同时,在设置自动化流程时还需要引入优先处理原则,例行的事按常规处理,特别事件要按优先级次序处理,也就是把事件细分为例行事件和例外关键事件。 总之,实现IT运维的自动化管理是指通过将IT运维中日常的、大量的重复性工作自动化,把过去的手工执行转为自动化操作。自动化是IT运维工作的升华,IT运维自动化不单纯是一个维护过程,更是一个管理的提升过程,是IT运维的最高层次,也是未来的发展趋势。(来源：比特网) 让IT自动化 业务导向的运维模式2011-05-04 19:11:51 来源：eNet硅谷动力 编辑：xz 作者： 评论：0 从手工账簿到财务软件，从柜台长龙到电子银行，从纸质流程到移动办公，IT让业务越来越自动化，越来越高效;但IT自身为什么不能更自动化.从手工账簿到财务软件，从柜台长龙到电子银行，从纸质流程到移动办公，IT让业务越来越自动化，越来越高效;但IT自身为什么不能更自动化些?什么时候网络管理员能摆脱四处救火的消防员形象?什么时候数据库管理员能够从容应对海量数据的监控、管理?什么时候系统管理员能够吃着火锅、唱着歌，就能确保系统正常运行呢?自动化 必须的2010年5月份，第三方研究公司Coleman Parkes Research的调查研究结果显示，企业的IT支出呈现出 70/30 规则，即与新的IT计划相比，企业70%的钱都花了现有系统的运维上。而IT运维人员70%的精力和时间都花在了日常巡检、系统发布、配置等基础运维工作上。的确是如此。在4月9日举行的“自动化：IT的未来惠普软件IT自动化用户研讨会”上，一位不愿透露姓名的某国有大型银行技术经理以其数据中心为例向记者介绍，复杂的架构、繁杂的工作、严格的流程、纷繁的系统、众多的管理团队和离散的操作，让系统运维工作占用了大量的资金和人力成本，但实际效果却不怎么样。因为集中复杂的服务器、网络和存储部署与多点分布的业务应用之间存在大量的相互依赖的关系，在复杂的架构下，“要手工做持续的大量变更非常容易出错，且前后不一致;而在运维组、调度组、安全组等不同的团队及系统之间的调度和协作也因缺乏标准化控制而凌乱;在各自独立的系统视图下对网络、服务器、存储等基础设施竖井式的分离管理也让运维工作不能体现出整体效应。”这位技术经理感慨地说。一方面，企业既需要用自动化工具替代手工操作，把IT人员从繁琐的日常运维工作中解放出来，使其不再做重复劳动，可以有更多的时间去做更具创新、更有价值的事情;另一方面自动化也能解决一旦系统出现问题后，各个岗位互相扯皮、责任不清的问题。“无论是从人工成本还是系统效率还是支撑业务创新的角度看，IT自动化都是必然的趋势。”中国工商银行数据中心安全部副总经理敦宏程肯定地对记者说。光大银行运行管理处项目经理张宪铎也对记者说，“各银行具体环境不太一样，得根据银行自己实际情况综合考虑，在风险可控的前提原则下，自动化应该是个大方向。业务导向的运维“现在很多监控、管理工作是孤立的，网络、服务器、数据库、业务之间不相互关联。一旦业务出现问题，没有一个统一、简单、可控的监控与管理，不能自动化，无法高效地解决问题。” 惠普全球运维管理资深专家Jonathan研讨会上以美国大型医疗药品供应商麦克森(McKesson)的数据中心自动化运维为例，介绍了当前IT运维的现状和难点和自动化IT的价值。当然，IT自动化的价值不只是在于保障系统本身的正常运行，降低运行成本，提高运行效率，更重要的是要高效、灵活地实现IT对业务的支撑，应对加速变化的业务流程，与业务融为一体，不断创新。惠普软件技术总监于志伟用医院急诊的例子介绍了瞬捷企业对IT自动化需求的必要性。“一名昏迷的病人被送进急诊室抢救，扫描一下，这名病人的病史、过敏史等所有信息就都展现在了医生面前，医生就可以对症采取急救措施了。在医院，时间就是生命。试想如果没有自动化的IT手段收集、快速查询、传输这些信息，抢救情况会多么糟糕，而单靠人工是不可能做到的。”另外，他也说，现在企业对CIO的期望，不再只是保证系统的可靠性和可用率，而是得面向业务，更加敏捷、高效地去适应业务流程，通过IT获取更多的业务机会、增长利润、体现竞争优势。而通常情况下，要实现这些CIO不得不还得面临的一个“残忍”现实是并没有增加新的IT预算。还是原来那些钱，但却要做更多事，那么CIO就必须简化IT，通过IT自动化实现创新的目标。在于志伟看来，IT自动化分为三个阶段：第一个阶段是单个任务自动化，用自动化工具取代日常手工作业，比如服务器自动巡检、自动化测试应用上线等，这样可以解放IT人力等资源投入到其他创新项目，这个阶段是目前大多企业都可以做到的;第二阶段是自动化IT流程，依据ITIL等标准化的最佳实践，实现配置、变更、事件等管理的自动化，将过去要用2-3个小时做的事情现在用几秒钟完成，这阶段是IT应用相对成熟的金融、电信等行业用户正在做的;而第三个阶段就是要实现服务自动化，比如上线一个ERP系统、CRM系统，过去可能需要5个月，而通过自动化，通过云服务就可以2个小时完成。于志伟说，怒目前很多企业都是已经实现了服务器、网络、存储等基础设施的自动化，而面向业务的流程和服务自动化则是大势所趋。Jonathan则针对目前IT运维的现状，提出企业先要整合网络、存储、服务器等各自的监控管理平台成一个平台，然后从业务出发，看业务需要落实什么，再将业务与IT紧密关联，并通过恰当的支持体系实现整个运维过程的自动化。在会上，惠普软件自动化专家陈禾也向与会嘉宾介绍了惠普针对数据库和中间件自动化的DMA解决方案。他认为，针对数据库和中间件自动化的DMA是基础架构到应用之间的一个连接纽带，是一个非常重要的连接点。关键是基础脚本库和流程库已经有两年数据中心自动化建设经验的某大型银行数据中心负责人向记者介绍了他们的经验。“我们当时做自动化建设的起因是运维工作面临着三大困难：一是随着数据中心的业务发展，运维的规模不断膨胀，管理体系不断增加，但人手却没有增加，有限的人手怎样面对复杂的运维环境是当时最突出的矛盾。第二个困难就是在配置管理部分，因为从系统安装到后期运维的整个运维生命周期内，配置管理信息非常多。作为普通的系统管理员，面对海量的配置要求，如何能一次性地、准确地奖信息输入电脑非常关键。第三就是在数据中心的日常项目管理方面，相关软件的部署和运维不能100%覆盖整个系统，总会有5%部分的系统是没有覆盖到的。这是因为今天的数据中心已经涵盖包括软件、传输、ITM监控等非常多的产品，普通的系统管理员很难全部掌握全部产品的运维知识和技能。”这位负责人说。如何解决这些困难呢?自动化是非常好的方法。从2009年开始，该行开始了自动化建设一期的建设。立项之初，项目就设立了三大目标，第一是做什么，就是要建立跨平台、面向服务的自动化运维管理体系。第二是怎么做，核心环节是什么，就是要发展不完善的基础脚本库和基础流程库，这两样是其整个自动化运维的核心关键。“只有把脚本库和流程库很规范地建设好后，才能在复杂的环境中推进自动化运维，否则虽然自动化在某些情况下能提高工作效率，还是会带来负面的风险。” 他说。第三就是组织架构，数据中心怎样协调系统部、应用部、运维部、调度部、安全部等各个技术水平不一的部门共同实施自动化，必须得有方法、有制度。“我们不断将自动化的知识、理念、平台的使用方法等做知识转移，让像系统部、应用部等技术能力较强的部门接受自动化工具，同时也协调一些流程管理部门，像安全部、调度部等，让他们的日常工作也越来越自动化。”经过两年的努力，该负责人介绍，该行已经实现了系统运维的自动化，包括配置信息的收集、系统日常健康检查等，把日常重复、简单、可控的工作，纳入自动化范畴;其次就是实现了一些操作的自动化，比如数据中心网上批量处理的自动化;还有灾备切换的自动化。他以系统健康检查自动化为例，向记者介绍他们的具体做法就是将健康检查的标准、规范的前提形成一些脚本，通过自动化运维平台定时地调用这些脚本，生成的报表可以快速地反馈到运维人员的信箱。“当时我们就是每天晚上大概三四点钟的时候，定时执行这个自动化任务。每天早上九点钟，系统管理员上班打开电脑就可以从他的邮箱里面看到昨天晚上整个系统的运维情况。他就不用再花时间到不同的平台上去检查这些参数，只要对这些报表进行浏览，再对他觉得有疑点的地方做正式的检查和排查。通过这种方式，在节省时间和人力成本的同时，确保了系统的可用性，降低了发生问题的风险。”自动化的前提是风险可控自动化虽是大势所趋，但记者采访发现，用户对于自动化还是非常谨慎的。敦宏程认为其实银行有些流程环节是必须要有人介入的，不能什么事都自动化。敦宏程认为，要推进自动化，供应商产品的成熟度也是他们要考虑琢磨的重中之重。因为曾经他们遭遇尴尬的自动化事件，有个项目中，他们需要部署几百台某其他品牌服务器，预备采取自动化部署方案，预留的部署时间就很短，结果在在第二天要投产之前发现自动化部署有问题，他们不得不把所有人集中在机房，一人几台机器趴在地板上连夜手工装机器。“可控性是我们考虑的第一要素。”北京京东方光电科技有限公司自动化部部长邢明海也表示，出于安全的考虑，需要从效率和控制两方面均衡考虑配比自动化和手工两种方式。张宪铎认为自动化和手工会有慢慢转化的过程，就像复杂和简单之间也是在慢慢转化一样。他说，目前对光大银行来说，可以自动化的还是那些常规性、重复性的简单操作，他们现在主要做的还是把相当于眼睛和耳朵的监控工作做到位，通过对基础设施和业务的监控，及时发现问题，保障系统和业务的可用性和连续性。推进自动化的最终原则就是风险可控，风险可控的前提下把繁琐操作自动化提高效率是好事，但如果风险不一定可控，就不能冒冒失失地推进自动化。饭要一口一口吃，路要一步一步走。企业的IT自动化之旅，得按部就班、循