作者: 文章来源:宁夏生态环境厅 发布时间:2020-12-24 10:12 点击:
2020年12月22日凌晨01时33分,宁夏生态环境厅网络运维管理系统自动发送故障告警信息:告警类型为异常,告警级别为特急,告警内容为交换机无法连通。信息与应急中心人员接到自动告警信息后,意识到此故障若不及时排除,将会导致我厅工作人员办公终端无法访问网络,影响正常办公,值此大气污染攻坚关键时期,出现这样的问题将影响大气攻坚调度工作。信息与应急中心立即调度网络运维工程师一同赶往现场,连夜开展网络故障排查和处置。
凌晨02时10分,技术人员根据网络运维管理系统外网拓扑图显示,2楼、7楼和13楼配线间共计17台外网交换机红灯报警闪烁,是此次网络故障的主要节点。经初步排查确认故障原因为数据中心机房双核心交换机的虚拟化状态异常。经过抢修,04时17分将核心交换机进行软重启,尝试启动虚拟化进程,网络故障短暂修复。04时48分,网络再次发生故障,技术人员随即进行全面分析研究,确认数据中心机房双核心交换机虚拟化状态断开是由于网络环路导致,立即对网络环路封闭策略进行配置,并同步重启了双核心交换机。05时30分,经过一夜抢修设备故障彻底解决,网络恢复正常,为我厅工作人员办公营造了安全可靠的网络环境。
通过本次有效应对网络故障事件,既检验了工作人员应对网络突发事件的处置能力,也进一步提升了信息与应急中心工作人员的专业技术水平,为今后快速处置各类网络突发事件积累了经验。