项目背景及目标

近几年新疆农村信用社业务发展快速，IT已经成为重资产，更成为银行经营命脉的重要保障；业务持续性无中断要求对IT管理提出了更高的诉求，信息系统数量增长迅速，现有基础监控系统、运维管理平台等运维管理工具已不能满足当前业务运维需求，同时现有运行维护管理水平与合规化、系统化、透明化和标准化还存在一定距离。

随着大数据概念的提出，IT的运维管理已经从系统化、集约化、数据化、向智能化发展，基于大数据的一体化智能运维平台可以提供了从基础设施、数据库中间件、系统应用进程到业务交易系统的一整套运维管理解决方案。为提高运维自动化水平、打造智能化运维体系，提升生产系统运行的可靠性、稳定性和可用性，同时提升交易过程监控的智能化水平，逐步利用运维大数据加强业务风险防控，新疆农村信用社现需建设智能化运维管理平台。

项目方案

本系统是一套汇聚集中监控、操作自动化、流程一体化、执行可视化的智能运维操作管理平台，以实现IT基础架构及日志的全面监测，日常重复运维操作的自动执行，同时借助基于大数据平台的事件中心、配置及关联关系管理、融合日志分析的可视化运维平台，规范业务执行流程、提高了工作效率，增强了操作可靠性，提升了运维的安全性，实现“监、管、控”一体化运维管理。

a.监测：实现对基础设备、网络性能等各类IT基础设施的监测，同时需要构建起应用性能监测；形成集中的基础监控平台。

b.管理：遵循ITIL流程，实现IT运维的事件、变更、发布、问题、配置的规范化流程管理；通过建立统一事件中心、实现数据驱动的主动式事件管理；

c.控制：运用自动控制平台实现对各类IT资源、各类应用的自动化管理；同时运用大数据分析技术进行智能化控制。

结合多年金融行业数据中心运维管理体系的建设经验，以“监、管、控”为基础交付给客户全面监测、自动化控制、智能告警、事件管理、快速定责、精确定位、规范变更、配置管理、运营评估等多维度多功能的智能运维管理平台系统，协助新疆农信建立一套数据中心运维全生命周期管理体系。

1．全面监测：采用多类监控产品，将从基础设施运行状态、用户体验等多个视角，监测应用系统的可用性、健康度和性能，实时监测系统用户体验和性能。

2．智能告警：采用动态基线等智能化预警技术，*****时间通过短信、APP、微信、邮件、工单等方式将故障内容快速、准确通知到责任人。

3．快速定责：针对应用系统中断、缓慢等故障，通过应用感知型监控产品，从网络、服务器、应用等多个视角对应用故障进行分析和定位，对故障点进行快速判断和定责。

4．精确定位：逐步采用代码级应用服务端监控产品、日志分析工具、应用感知型网络流量监控产品，对应用系统关联的程序代码、网络性能和状态、系统运行日志进行深入分析，精确定位应用系统故障点。

5．规范变更：参照ITIL实践，通过智能化运维管理平台建立规范的变更管理流程，确保IT设备、IT应用变更的合规性，降低变更影响风险。

运营评估：充分挖掘运维数据的可用性，建立一套多数据源、多用户视角、沉淀专家经验的运营评估管理平台，建立面向客户感知的、面向业务体验的、面向运行质量，围绕主题的（性能、故障、考核）、多维度（物理资源、虚拟资源、应用性能）的运营分析能力，主动分析系统故障、性能，分析问题、评估瓶颈，为“决策层、管理层、执行层”，提供决策支持。

创新点

本系统是一套汇聚集中监控、操作自动化、流程一体化、执行可视化的智能运维操作管理平台。主要包括：

1.构建融合的集中基础监控平台，实现对多数据中心的IT基础设施和业务系统的集中一体化监控，集中基础监控平台支持监控数据或告警的统一管理。

2.建设动态配置管理平台，通过智能运维元数据管理及基础设备组件和系统之间的关联关系，支撑监控、巡检、事件管理、变更管理的消费。

3.建设统一事件管理平台，实现主动式的IT事件统一监控和管理，构建覆盖多种监控渠道的事件集中处理、智能定级和业务影响分析，实现智能故障定位。

4.建设基于动态配置管理消费的IT服务管理平台，充分结合新疆农信IT服务管理的实际诉求，支持场景化的事件、变更、问题流程管理、支持与配置管理联动的变更影响分析；

5.建设运维大数据分析平台，平台集成日志采集和分析功能，形成运维数据仓库；并且基于运维数据仓库为基础构建大数据分析模型进行信息预警、趋势分析、数据挖掘等，实现主动式运维管理。

建设个性化运维看板，实现融合日志分析的业务视角智能监控可视化。采取实时监控结合运维日志分析的方式，实现从“点”到“线”至“面”全业务或应用群视角的主动式运维。

技术实现特点

本系统采取基于大数据的智能运维解决方案可以充分借鉴了传统数据中心的运维管理佳实践理念，同时结合了AIOPS等互联网数据中心运维的成功实践，形成了经过成功实践的智能运维个性化解决方案。基于大数据的智能运维解决方案具备从数据中心运维的监视、管理、控制和体验的维度管理的特点。同时，智能运维解决方案以自动化巡检、监控为基础，依托智能关系及配置管理，从事件驱动的视角实现了数据中心监控与维护管理的有效联动和整合。

项目过程管理

项目分为两个阶段：

1.2018年11月到2019年2月：实现对IT基础设施的监测，同时构建符合新疆农村信用社的IT服务流程(包括服务、变更、问题、事件管理）

2.2019年2月到2019年7月：实现对重要信息系统的应用级监控、实现运维场景面板、实现自动化模块平台等功能。

运营情况

系统目前处于试运行期，总体运行比较平稳。在监控指标及阀值设定中还存在优化待改进之处。事件、问题、工单的扭转仍需进一步完善，彻底实现电子流程化办公。

项目成效

1、主机网络、数据库、应用级的事前预警监控为保障业务生产系统的稳定运行提供了一定措施手段。事件中心的事中定位分析，为及时解决IT事件提供了技术保障。

2、ITSM的服务流程极大的缩减了纸质工单的传递时间流程，提高了处理IT运维事件的响应速度，提升了IT运维质量。

3、自动化模块搭载IT应急处置的功能实施，有效的节约了人力成本、降低了人为操作风险因素。

经验总结

整个项目建设周期短、人员紧缺，涉及的覆盖面较广，专业复杂度、技术性要求较高，为保证项目的顺利开展实施，采用了分阶段分模块的迭代上线部署方式，优先搭建整体项目平台的基础架构，分模块逐步上线推广，试运行期间不断优化调整。终历时8个月的时间完成了整个系统的全部功能，达到了项目的预期。