IT运维综合管理解决方案.docx

1、IT运维综合管理解决方案IT运维综合管理解决方案1 运维管理的必要性 随着信息化建设的深入， IT综合管理在XXX运营商发展过程中担负起越来越重要的角色，XXX运营商利润来源也越来越依赖于IT系统的建设水平，而XXX运营商信息化的建设水平取决于两个方面，一个方面是基础设施的搭建，这是硬件基础，另一方面是管理层面，就是如何将已有的硬件基础设施的效能更好的发挥出来，这就和IT综合水平的高低息息相关。 如何及时了解系统的运行状况，有效地降低系统运行的风险，主动的发现并及时解决系统运行故障，让业务系统保持724小时的健康、持续、稳定、高效运行，这些都给IT综合管理水平提出了更高的要求，也是当前IT系统

2、运维管理普遍面临的巨大挑战。 而在IT综合上，业内人士普遍认为：由于XXX运营商对于各种信息化应用的持续建设，IT设备和信息系统多而复杂，然而系统的关联性却日益增强。往往一个信息系统出现问题，受影响的不再是单个系统，而是全部或部分系统。可是往往XXX运营商的实际状况是各种IT系统各自为战，缺乏整合和信息互通，缺少一个可以对系统进行全面管控的自动化监控管理平台是造成XXX运营商IT综合效率偏低，问题迭出的根本原因。 换句话说，如何把IT综合管理与的生产模式和管理系统进行科学匹配，已经是提升效率，增强核心竞争力的砝码。 当前IT管理系统越来越深入地切入管理决策，从网络管理向业务服务管理过渡、从参数

3、读取管理向智能分析管理过渡、从网管员设置与维护向多部门信息共享与协同管理过渡。在此基础上，传统的方式已经渐渐落伍，采用以XXX运营商业务为核心的IT综合管理迫在眉睫。 基于以上认识，对IT综合管理工作应该解决以下问题：A. 采用分系统的运维模式，缺乏统一集中管理 之前所采用的管理系统是分离、分立式的系统，而且是不同厂商的产品。这在产品的集成以及后期的更新维护上就产生了很大的问题。管理人员无法站在一个统一的高度去看待整个XXX运营商的IT综合管理问题，只能逐一、单个的去解决，网络设备出现问题就只能通过管理网络设备的运维系统来查找，服务器出现问题也只能通过服务器管理系统来查找原因，管理无法全方位顾

4、及网络、服务器、数据库、中间件以及大量标准应用等要素，不能实现统一集中的管理，导致出现故障时只能分系统排查，耗时费力，效率低下。同时，该运维管理模式也不能对出现的故障进行关联分析，不能快速找到故障的深层原因，从而在最短的时间内排除或预防隐患。B. 不能对系统综合管理，安全面临考验 运维部门担负着整个XXX运营商网络系统的建设和维护工作，虽然对自身信息安全的维护和管理日趋重视，并制定了严格的保密审核制度，但是因为缺乏对网络系统中网络设备、主机、应用程序、业务等方面的综合管理和控制，运维人员往往无法及时发现系统管理瓶颈及漏洞，致使XXX运营商面临一系列安全隐患： 首先是管理权限问题，随着XXX运营

5、商的信息化网络规模的扩大，设备及相应的管理人员也相应增多。由于运维人员角色及设备功能的不同，往往会存在同一个运维人员同时管理多台设备的情况，反之亦然。所以，容易导致系统权限管理混乱，导致部分运维人员违规操作、越权访问等问题，这就对管理人员的管理权限提出了更高的要求，必须保证正确的人管理正确的设备，正确的设备由正确的人负责，出现问题可以落实到人，落实到岗，使XXX运营商的网络安全管理得到保障。 其次是缺乏预防安全隐患的措施，由于缺乏IT综合管理管理，对于系统性的安全隐患不能做到事前告警，事前排除，从而导致隐患演变为故障。比如对于设备核心参数安全阀值的监控、机房环境的监控、网络流量的监控、资产安全

6、的监控、链路分配的监控等等。如果对这些系统设备不能做到透明化的综合监控，对出现的问题不能进行多系统、跨平台的横向和纵向关联分析，就不能从小问题中发现潜在的事件，也就不能对潜在的问题进行事前的分析和判断，从而指导运维人员进行预防工作，降低系统发生严重事件的风险。C. 运维人员工作量大，效率有待提高 据IDC在一项报告中指出，在XXX运营商信息化建设中，技术人员的工作量统计数据如下：XXX运营商应用开发占20.5%、数据库管理与维护占15.5%、XXX运营商应用系统维护占13.0%、系统管理与维护18.7%和网络管理与维护11.3%五大类，这几大类占XXX运营商信息化建设总人数的80%，而其中数据

7、库管理和维护、XXX运营商应用系统维护、系统管理和维护及网络管理与维护都属于IT综合管理管理的范畴。对于没有建设IT综合管理系统的XXX运营商，以上各个部分分别由不同的运维人员来管理和维护，将导致运维人员众多，运维效率低下，运维效果不理想。而采用IT综合管理系统后，这几部分工作都可以在一个平台上实现综合管理，让原来分散的管理模式变为集中统一的管理，将大大节省人力资源，提高工作效率，让更多的技术人员从繁琐的日常排查工作中解脱出来，把人力资源投向XXX运营商信息化建设中更需要的工作中。D. 运维部分与业务部门脱节，对业务辅助支撑效果不明显 运维部门原来的工作主要是保障XXX运营商IT系统不出现故障

8、，如果出现故障后需在第一时间进行排除，实现了这两点就达到了运维工作的基本要求，然而随着XXX运营商信息化要求的不断提高，业务系统与信息系统的融合越来越紧密，甚至一些业务系统对信息系统的支撑功能越来越依赖，一旦信息系统出现故障，将导致业务系统完全崩溃，甚至导致数据丢失，给业务发展带来不可挽回的损失。因此，在XXX运营商IT深化应用的今天，业务部门给运维部门提出了更高的要求，运维不仅仅是保障信息系统出现故障后及时排除，更要求对业务赖以支撑的IT系统做出健康状态进行检查，提前发现问题，提前预防问题，提前优化系统。甚至业务部门会要求运维部门对业务的使用状况进行监控，并提供业务使用的统计分析和报告，从而

9、优化和改造业务系统。在这种情况下，如果运维部门还停留在原来的工作方式上，将对XXX运营商的业务发展带来滞后效果，满足不了XXX运营商信息化建设的需求。E. XXX运营商IT投资缺乏决策依据 对于这样的企事业单位而言，IT系统庞大而复杂，IT系统的运营、维护和管理的难度与日俱增,与此同时，XXX运营商业务对IT系统的依赖程度越来越高，IT系统运维的压力也随之增大。但是，XXX运营商往往发现自己在IT综合方面投入大量资源，却收效甚微，XXX运营商整体信息化水平仍没有明显提高。导致出现这种情况的原因是因为XXX运营商IT投入缺乏决策依据，XXX运营商领导对XXX运营商整体信息化水平缺乏明晰的了解，很

10、难判断出XXX运营商信息化建设的短板在哪里？哪些投资是属于重复投资，哪些投资是属于不合理投资，哪些投资是紧迫必须的投资。比如一个业务系统，整个XXX运营商就只有很少数人在使用，但却配备了高性能的设备和高的带宽，甚至保留了大量备用IP地址，如果能够把这些信息都展示出来，XXX运营商领导就很容易判断这是一个不合理投资，就会对这样的投资提出改进意见。因此，如果建设了综合运维管理系统，这样的问题就能迎刃解决，通过对XXX运营商IT投资状况的清晰展示，对资产管理、链路管理和业务管理综合分析、以统计图表的形式向XXX运营商领导直观呈现，提供投资决策的科学依据。F. 不能满足不同层次的管理需要IT管理不能提

11、供完善的统计分析、趋势分析功能，为IT综合管理平台的系统扩容、业务发展提供可靠依据。IT综合管理平台应该具备合理、完善、可靠、综合、智能特性，具有配置、性能、故障、安全管理功能。对于不同级别的维护人员建设最终达到以下几个目标：对于决策层可以随时了解核心网络、设备的运行状况，科学考核中层管理人员及监控人员的工作效率和工作执行情况，通过IT综合管理平台找出网络中的管理盲点，合理规划和使用现有的人力资源和系统资源，避免由于技术黑盒而使IT综合管理不透明的现状。对于中层管理人员能从根本上减轻IT综合人员的工作负担，提高工作效率,方便IT综合人员对IT基础设施和业务服务进行高效管理，从总体上把握和控制系

12、统资源,提供高效的技术辅助手段，做到IT综合事前管理。有更多的精力去深层次分析、挖掘、设计和完善现有网络，使整个IT系统能更好的为核心业务系统服务。对于监控人员，可以让他们从繁重、重复的工作是解脱出来，对于简单故障可以通过IT综合管理平台能查出故障原因和分析出故障趋势，从而减轻管理人员的工作负担。 综上所述、作为一个信息化建设不断深入的大型XXX运营商，业务的发展给XXX运营商运维工作提出了新的要求，如果仍然保持原来的运维模式和运维管理方式，将很难满足XXX运营商的发展需要。原来的运维模式不仅运维效率不高，运维效果不能得到保证，更谈不上对业务系统的辅助支撑。因此，建设IT综合管理系统需要尽快提

13、上日程。 只有建立全面完整的IT综合管理平台，才能为管理提供足够多的管理元素，才能从不同的角度去看待不同的问题，才具有成为一个管理平台的基础。综合管理平台可以对XXX运营商组成网络服务的IT基础架构(从网络设备到服务的物理载体服务器，再到各种应用程序)进行了分层透明化的监视，从而为业务管理提供了数据支持，最终实现了以业务系统为对象的综合管理。 通过对所有IT资源的综合监控，实现了对底层IT基础设施的数据采集,然后对数据进行归并处理，最终通过功能展示层来呈现系统的运行情况，管理人员可以全方面的掌握XXX运营商的IT资源，实现了综合管控。需要强调的是，对XXX运营商的综合管理不仅仅是简单搭建一个平

14、台，将所有IT资源都管起来就解决问题了。重要的是，我们要在做好底层数据采集的基础上，对这些信息进行有效的整合利用，做到智能关联，能够进行准确的根原因定位分析。从而帮助XXX运营商去破解一个又一个的运维难题，做到协同、系统化的管理。 因此，IT综合管理，带来的不仅是管理模式改变，更重要的是强调对于XXX运营商IT资源的一体化管控，全面提升各部门协同管理、高效运作的能力，从而持续推XXX运营商的信息化建设，IT综合管理平台也将是XXX运营商IT综合管理发展的必然趋势所在。2 需求分析2.1 项目背景XXX运营商在信息化建设中一直是走在行业前沿的，集团有运营网、内部办公网、下属公司有各自的信息网。随

15、着信息化进程的飞速发展，电信业务用户和XXX运营商内部业务部门对IT 部门所提供信息的实用性要求也越来越高。为了应对日益激烈的市场竞争，XXX运营商对网络（业务的载体）提出了高水平服务的要求。这里的服务不仅仅是面向XXX运营商的外部用户，同样也面向内部的业务部门。针对不同业务部门、用户需要不同种类服务的要求，IT 运行维护人员需要有新的运行维护管理思想和工具以满足XXX运营商内部客户、外部客户对高质量服务的期待。只有高水平的运行维护支持系统，才能确保服务的高可靠性。另外，随着信息化的多年建设，所采用的网络技术和网络系统本身日益复杂。由于对现有的系统缺乏有效的管理手段，导致了对计算机环境缺乏统一

16、全面的了解，对计算机资源分布和性能分布缺乏有效的监控手段，对系统故障和效率下降缺乏预警，缺乏分析工具。因此，迫切要求建立一套可行的运行维护支持系统来提高网络资源的运维效率，实现对整个网络的透明化管理，确保整个网络的服务质量，减少混合网络管理环境下的管理和控制网络运营成本。与此同时，该系统还应该具有强大的扩展性，为XXX运营商最终实现IT服务管理的最佳化和流程化提供坚实的基础。2.2 项目需求本次运维管理平台建设主要有以下几方面的需求：1、拓扑管理2、故障告警管理3、综合性能分析4、报表管理5、配置管理6、局数据管理7、网管系统自身管理和相应的操作维护管理及相关技术要求（系统必须具备良好的可操作

17、、可维护，能够方便地实施分域、分层、全权设置用户对不同的业务网络的各项物理元素和逻辑元素进行有效地管理）8、安全认证管理9、IP网络流量分析管理模块10、资产管理模块11、综合图像、报表信息大屏幕显示具体来说，为了确保XXX运营商各业务系统安全、高效、稳定地运行，提高管理水平，满足客户日益增长的服务需要，提供最安全最周到的服务保障，树立自己的行业形象，并结合现今行业发展水平，利用先进技术，采用安全可靠的设计方案，将监控系统集成化，网络化。所以要求新一代监控系统分为集团总部、下属单位二级网络管理模式，以XXX运营商总部做为整个系统的网络中枢，各下属单位为二级网络管理结点，建立一个安全、高效、先进

18、的远程网络监控体系。新的平台应能够很好的满足XXX运营商信息网络系统管理的实际需求，具备良好的实用性，能够提供强大的故障监测和故障信息处理平台。平台能够实现目前XXX运营商对全集团网络系统、应用系统的属地化管理原则，实现两级监控、二级管理的信息网络综合监测管理模式。能够根据各级管理运行管理范围和责任划分实际情况，灵活定义和界定检测管理的边界，根据实际需求选择和定义对相关检测信息的显示形式和统计方法。对重要的应用系统和网络核心环节能够实现全面的检测和状态管理。对包括网络环境、主机系统、资产管理在内的各种设备和应用进行跨厂家、跨平台的统一管理；要求提供网络产品管理、服务器管理、应用服务管理、设备环

19、境等进行监控等功能；提供了较快速的故障告警信息；能针对各厂家产品提供统一的管理界面；提供比较丰富和实用的管理工具；提供被监视设备的的故障日志；操作方便，能够提供大量的网络设备和应用系统的性能和状态的真实数据、方便实用的事件统计功能；能对这些系统提供的数据进行整理和分析，结合运行考核办法，制订应用于XXX运营商信息网络各级运行管理的数据集。2.3 建设目标要求根据XXX运营商运维管理平台的建设需求，针对运维管理平台所维护的主机和应用服务进行监测、预警与管理，对各种网络设备和各种物理资源与逻辑资源进行管理。提供完善的网络及业务统计分析、趋势分析功能，为运维管理平台的系统扩容、业务发展提供可靠依据。

20、运维管理平台具备合理、完善、可靠、综合、智能的配置、性能、故障、安全管理功能。能够根据分层的运维管理模式，从根本上减轻系统管理人员的工作负担，提高工作效率,方便系统管理人员对网络系统、应用系统状态信息进行有效管理，能够按需求实现上级管理结点对下级管理结点的全部或部分的状态检测信息、故障报警信息的自动获取，从总体上把握和控制系统资源和系统状态,提供有效的技术辅助手段理顺用户的系统运行管理工作流程和系统维护管理工作流程，合理规划和使用现有的人力资源和系统资源。平台应能够很好的满足XXX运营商信息网络系统管理的实际需求，具备良好的实用性，能够提供强大的故障监测和故障信息处理平台。平台建设必须满足安全

21、性与可靠性原则，对现有的各类应用业务的稳定运行不应产生影响，能够实现总部、下属单位二级分层管理，保证信息网络系统安全稳定运行。3 效益分析 3.1 管理效益通过IT运维综合管理系统的实施，可以实现信息系统运行状态的统一监测和事前管理，提升信息化运维管理水平。 通过对一体化信息系统建设提供强有力支撑，确保业务系统特别是关键应用的全可靠运行。 通过运行数据的统计分析，推动KPI考核体系的实施。 能对重大运维事件及时发现，能对XXX运营商网络的异常流量和异常事件进行追踪，实现全网全业务系统故障定位，及早隔离处理全网性异常事件，提高信息系统整体运行水平。 全局督促管理，以指标统计来验证管理效果，可以做

22、到公正客观，科学有效。 提高IT服务质量，提升信息系统运行管理部门的责任感和使命感。3.2 社会效益系统平台的建设有利于实现电力业务信息系统的真正的利用，保证系统的稳定运行，为公众提供更好的服务，提高对公众的服务水平，应对市场经济条件下XXX运营商生产系统的建设和维护。运维系统的建设是电力XXX运营商提高办公自动化，实现内部信息的共享、互换和连线作业，建设更新、更完善的生产业务环境，为社会、民众服务提供一个统一的平台。这些目标的实现是需有强有力的建设和管理来支撑的，只有良好的系统管理才能够稳定的运行和充分的使用网络资源。3.3 经济效益一个有效的系统管理能够提高系统的使用水平，提高系统的利用率

23、。对于一个没有管理的系统来说，运行正常的可能性是很低的，而对于一个没有良好的系统管理的IT系统来说，要想高效率的运行也是很困难的。IT综合管理系统平台通过对整个生产系统的自主管理，能够提高各种资源的使用效率，发现各种运行瓶颈，有效的调整和增加各种生产系统运行资源，降低业务运行成本。IT综合管理系统能够预防各种即将出现的问题，并能及时的解决各种已经出现的系统运行问题，降低运行和维护成本，高效、低耗地为社会公众提供优质的服务。4 IT运维管理解决方案4.1 综合监控在的管理思想里，综合监控主要是供值班人员使用的功能，此功能的设计是本着简单、直观、有效的原则，把值班人员最关心的信息通过该功能菜单进行

24、检索和呈现。用户可以在监控总览中进行监控总览、查看设备运行、线路流量、峰值流量、查看告警、桌面总览等操作。 综合监控是系统对所有被管对象的一个大屏综合展示窗口，展现直观方便、关联性强。 用户可以配置自己个性化的监控首页，这样就可以让用户把自己最关心的东西，一进系统就能马上看到。 通过业务视图展现各类服务逻辑，并对服务系统的诸多业务关键参数（KPI）进行监控，作为服务管理的基础。 支持全网设备负载自动TOP N排序，主动告诉用户哪些设备需要关注，全网运行的隐患在哪里。 全网告警预览。让用户一幕了然了解网络中的问题所在。 业务在线用户数从用户关注使用情况的角度反映业务系统状态，提供有多少使用者在线

25、、使用者都是谁他的IP地址区域所属部门、流量以及趋势图，帮助用户了解业务访问量的分布状态。 自动生成全网设备运行统计率报表。方便用户了解全网的设备运行状况。A. 监控总览的功能 为用户提供快捷方便的流量界面，把用户经常关心的参数指标，呈现在用户面前。 网络运行总览：列表形式显示物理拓扑图上全部设备的运行状态，并以不同颜色等级动态显示CPU和MEM运行状态。可按设备名称、IP地址、CPU占用率、内存占用率和等级进行排序，简洁明了显示网络设备的基本运行状况。该列表信息30秒自动刷新一次。 未撤销告警：显示当前系统正在发生的告警或未恢复的历史告警信息，包括告警描述、发生时间、优先级和告警源。该页面3

26、0秒自动刷新一次。 服务总览：列出当前服务拓扑图上所有的服务器和应用服务运行状况，鼠标右键单击指定服务器可设置监控项参数或关闭所有监控项，设置成功后会在该设备后出现监控点，并以不同颜色等级动态显示监控状态。B. 峰值流量的功能 为用户提供链路中峰值流量、平均流量的一个呈现，让用户实时掌握网络中流量的分布。 该功能可以查看所有线路最近一周的流量信息。页面中可以选择最近一周内的任意一天来查看，以列表形式显示线路名称、平均流量、峰值流量峰值出现时间、帧平均流量、峰值帧流量峰值出现的时间。C. 告警总览的功能 让用户实时掌握网络的各种告警信息，让用户可以及时的处理故障。 按告警类型显示未恢复的告警信息

27、。包括告警时刻、设备、告警内容。下图是CPU和Memery的前十名的使用情况D. 服务总览的功能 通过鲜明的颜色，可以让用户迅速知道各项服务现在的运行状态是什么。 该界面将服务拓扑图的内容以树状图形式进行展现，本界面按照服务器系统类别和服务类别进行分类，其中图示为重要检测点，为普通检测点，鼠标停留在图示上会出现该图示所代表的内容和具体监控值，所有信息一目了言。 下图是监控项设置的菜单图4.2 网络管理系统同时提供物理拓扑和逻辑拓扑，前者强调物理，即真实网络的动态反映；后者强调逻辑，即宏观网络静态反映。之所以在发现结果上采用了物理拓扑图，并不是因为逻拓扑不重要。而是因为从绝大多数的客户角度出发，

28、物理拓扑所能提供的价值要远大于逻辑拓扑。物理拓扑图是作为支撑系统的最基本也是最直接的一种发现问题机制，具有举足轻重的地位。支持逻辑拓扑图，让用户对自己网络的IP子网分布一目了然。还可以自动发现网络中新增设备（IP节点）。且逻辑拓扑图是自动、实时发现的。 支持机房拓扑，让管理人员不需要去机房就可以看到整个机房的运行情况。机房拓扑和网络拓扑、业务拓扑关联，可以方便的互相跳转，进而调用相应的功能。 在大型的网络中，通过节点或线路的定位，可以迅速找到用户想要找的设备和链路。 支持设备端口的VLAN划分，简化部分管理员日常的配置工作。 拓扑生成的时候能够以任意节点为中心发起搜索。 可以真实反映整个网络的

29、运行状态，直观的反映设备的分布情况、负载状况和设备属性以及线路的实时流量。 通过颜色简单明了的告诉用户网络中负载和流量的压力所在，主动告诉用户的关注点在哪里，动态通知用户可能的故障隐患。 自定义设备和链路的中文名称，下标显示，让用户摆脱枯燥的IP地址，更方便快速识别设备的用途。 真实的面板图展示，让用户直观的从图上就可以查看端口流量，关闭、打开端口、端口下联设备，可以迅速定位问题点。A. 网络管理的优势 支持逻辑拓扑图，让用户对自己网络的IP子网分布一目了然。还可以可以自动发现网络中新增设备（IP节点）。且逻辑拓扑图是自动、实时发现的。 支持机房拓扑，让管理人员不需要去机房就可以看到整个机房的

30、运行情况。机房拓朴和网络拓朴、业务拓朴关联，可以方便的互相跳转，进而调用相应的功能。 在大型的网络中，通过节点或线路的定位，可以迅速找到用户想要找的设备和链路。 支持设备端口的VLAN划分，简化部分管理员日常的配置工作。 拓扑生成的时候能够以任意节点为中心发起搜索。 可以真实反映整个网络的运行状态，直观的反映设备的分布情况、负载状况和设备属性以及线路的实时流量，可以对全网设备的负载、线路流量进行历史记录和回放，方便历史故障回溯和分析。 通过颜色简单明了的告诉用户网络中负载和流量的压力所在，主动告诉用户的关注点在哪里，动态通知用户可能的故障隐患。 自定义设备和链路的中文名称，下标显示，让用户摆脱

31、枯燥的IP地址，更方便快速识别设备的用途。 真实的面板图展示，让用户直观的从图上就可以查看端口流量，关闭、打开端口、端口下联设备，可以迅速定位问题点。B. 拓扑图生成算法综合管理平台中的自动物理拓扑生成功能是精心设计、自主研发完成的功能，能够迅速搜索整个网络内的所有节点，一次性获得网络中所有路由器、交换机、服务器、PC 等管理单元的数据。并且能够自动判断并勾画出设备间的冗余连接、备份连接、均衡负载连接等关系，完成网络拓扑发现。a) 通用拓扑生成算法自动物理拓扑生成支持跨厂商设备的通用生成算法，无须用户的人工干预，能够从网管机出发，自动依据网络路由信息、IP地址信息，按照“广度优先”的树结构遍历

32、算法，逐层对网络上的所有IP地址进行扫描与SNMP测试，对于采用SNMP管理协议的各厂商网络产品，包括无线网络产品、网络防火墙、安全产品、打印机、服务器、主机系统，自动查找整个网络的路由设备、网络交换机、电源、打印机以及主机等支持SNMP协议的设备，能自动辨识各生产厂商、设备类型、设备端口信息、设备面版图等信息。在完成网络设备的遍历与发现后，综合管理平台将从各网络设备中读取RFC组织定义的各种标准MIB信息，去伪存真，综合分析、计算各网络设备之间的真实端口连接关系，辨别设备连接线路的类型、连接速率，提供各网络设备之间的准确的连接关系，包括设备间的冗余连接、备份连接、均衡负载连接，从而为用户提供了一份真实的网络物理连接关系图。b) CDP专用算法综合管理平台还特别针对CISCO厂商所提供的CDP信息开发了专用网络拓扑图算法，能够自动