ONEPSOFT | 软考学习知识库
为加快财政信息系统一体化建设,推动财政治理能力提升,某省积极推进财政云体系建设,依托云计算、大数据等新一代信息技术,将财政数据集中存储、统一管理,并面向各级财政部门、预算单位以及税务、人民银行等外部部门提供数据共享交换服务。2021年11月,财政云数据共享交换平台完成核心模块对接,进入全面使用阶段。由于该平台承载着全省财政收支数据的汇集、清洗和交换任务,一旦发生重大故障,轻则影响数据上报,重则干扰国库资金调度,因此在这个关键阶段,服务应急预案管理对保障平台持续稳定运行尤为重要。该平台每月汇聚的财政收支明细数据达数亿条,与人民银行、税务等部门的数据交换涉及资金结算环节,对时延和数据完整性要求极高。我公司中标了某省财政厅财政云数据共享交换平台运维服务项目,合同金额152.7万元,服务期一年。由于我有大型政务信息系统运维管理的成功经验,公司任命我为项目负责人。我按照服务级别协议要求组建了以我为项目负责人的运维团队,其中4名操作岗工程师常驻现场提供技术保障,6名技术岗资深技术人员提供后台支持。
由于该项目与全省财政数据调度工作息息相关,其梳理、支持和整合协调难度大,稍有疏忽就可能影响财政业务办理,厅领导对此高度重视。因此,除了做好基础运维工作外,我特别注重应急预案管理,从风险评估、制订应急预案、成立应急响应组织、应急演练、监测与预警等几个方面开展工作。下面结合项目实践进行论述。
一、风险评估
财政云数据共享交换平台的业务由多种业务流程和信息系统的支撑组成,信息系统的连续可用是业务正常开展的关键,一旦发生重大事件,对业务的影响是致命的。因此,项目开展之初,我们就重点考虑信息系统的连续性要求,开展应急预案相关工作。要顺利开展应急预案工作,首先需要通过风险评估找出信息系统面临的潜在威胁,预测这些威胁可能造成的损失,从而决定采用何种应急处理方式。在本项目中,我们通过用户访谈、请教专家、召开内部会议等方式,识别出触发应急预案的重大事件主要包括:自然灾害引起的对IT系统的破坏;网络通信故障导致的系统重大故障;电源电路问题导致的系统重大故障;云平台数据库、操作系统、存储等故障导致的系统故障;网络安全问题引发的重大突发事件;应用系统本身发生的重大故障等六类情形。结合历史运行数据和同行业案例,我们对各类风险的发生概率和影响程度进行了评估分级,其中网络通信故障和数据库故障被列为高风险项,作为预案编制的重点对象。
二、制订应急预案
风险评估完成后,我们列出了系统可能面临的重大威胁,形成风险评估表。在规划设计阶段,我组织人员讨论,制订了应急预案编制计划,明确应急预案须符合法律法规要求,并结合系统实际进行分析,明确职责分工,同时保证在部署实施和运营阶段有足够的能力和资源实施该计划。随着项目进入部署实施阶段,我们正式启动应急预案的制订工作,针对风险评估表、组织过程资产和服务范围说明书,邀请公司风险管理专家,共同制订了某省财政云数据共享交换平台应急预案管理办法,确定了应急组织机构与职责、预案体系和响应程序、重大事件预防和应急保障、应急演练及培训等主要内容。编制完成后,我将预案呈交用户方管理人员,并组织专家评审会对预案进行评审,由于预案结合实际、定位合理、科学规范,得到了评审人员的一致认可。
三、成立应急响应组织
应急预案制订完成后,我着手推进应急响应组织的建立。本次项目的应急响应组织主要由应急响应领导小组和应急处理工作组构成。由于应急处理事务需要用户方密切配合,我邀请用户方信息中心领导担任应急响应领导小组组长,我担任副组长,统筹应急预案管理相关事宜,协调整体应急工作;应急处理工作组由用户方各系统管理人员、我方资深运维工程师和后台专家团队组成,负责对系统进行监测、预判重大事件,并在事件发生后及时响应处置。同时,我们将工作责任分解落实到个人,建立各系统相关人员联络表,每月召开安全生产工作通气会,对可能产生风险的问题进行沟通,确保应急组织始终处于激活状态。领导小组每月听取应急处置情况汇报,审议预案修订事项,保证组织运转常态化。
四、应急演练
参照应急预案管理办法,依托应急响应组织,为达到"平时多流汗、战时少流血"的目标,我们针对预案中各类重大事件的专项处理措施开展应急演练。演练的具体活动包括:一是演练启动,我们选择"网络通信故障引发系统重大事件"和"数据库异常导致业务中断"两个假设场景,参演人员按照应急领导小组通知集合,由领导小组组长宣布演练开始;二是演练执行,参演人员根据控制信息和指令,按照演练方案规定的程序开展应急处置,本次采用桌面推演方式进行,我安排第三方评估小组对演练过程进行文字和影像记录;三是演练结束,演练目的、内容和程序按计划完成后,由总指挥宣布演练结束;四是评估与总结,评估小组汇总记录结果,填写应急演练情况评估表,并召开总结会进行经验教训总结;五是成果运用,对演练暴露的问题及时整改,对演练中发现的薄弱环节明确整改责任人和完成时限,纳入改进任务表跟踪闭环,例如在首次演练中,我们发现预案对后勤保障的考虑不足,应急人员处理网络故障时缺少必要的串口调试线缆,发现后我们完善了预案,建立改进任务表,加强后勤物资安排;六是文件归档和备案,将演练计划、方案、评估报告、改进计划等文档归档保存;七是考核与奖惩,对演练中表现优秀的人员进行表彰和奖励,调动大家的积极性。
五、监测与预警
监测与预警是应急预案管理的重要日常工作,做得好可以防患于未然。本着"谁主管谁负责、谁运行谁负责"的原则,除运维团队外,用户方各相关科室也需对所使用系统建立预警监测机制,发现问题及时上报。我方运维团队负责整体系统的安全监测工作,及时获取预警信息。预警信息来源包括监控平台的告警阈值、安全设备的日志分析、用户单位的上报以及重要时期的专项巡检,我们安排专人值守,确保预警信息在30分钟内得到确认和处理。在汇总监测和预警信息、判断有安全事件发生可能,或在重要敏感时期,可能发生较大安全事件时,我们按照红橙黄蓝四级机制,针对对应风险级别发出提醒或告警,及时安排采取应急措施。
2022年11月,本运维合同到期,通过我和团队的不懈努力,项目按时验收,平台持续稳定运行,有力保障了全省财政数据共享交换业务的正常开展,赢得了甲方领导的一致好评,并顺利续签了下一期合同。这些成果主要得益于成功的应急预案管理。回顾此次项目运维过程,我更加深刻地认识到应急预案管理的重要性,同时也认识到自身的不足,例如在年中一次存储设备扩容期间,由于现场技术人员临时紧张,应急处置响应略有滞后,后通过协调后台力量,问题得到妥善解决,未影响业务。今后我将认真总结经验,注重知识积累与知识转移,不断提升IT服务管理水平。