容灾演练双月报｜美创助力某特大型通信基础设施央企顺利完成多个核心系统异地容灾演练
发布时间：2025-01-10
阅读次数： 30 次
2024年10月31日，工信部发布《工业和信息化领域数据安全事件应急预案（试行）》（工信部网安〔2024〕214号），明确相关网络设施、信息系统和无线电系统运行中断或严重异常8小时、12小时、24小时对应的数据安全事件等级，并给出数据安全事件应急处置流程，及事件上报、应急处置工作总结的报告模版和编写规范。
2024年11月27日，国家金融监督管理总局发布《银行保险机构数据安全管理办法》（金规〔2024〕24号），明确要求银行保险机构应当加强敏感级及以上数据的容灾备份、并定期进行数据可恢复性验证，确保数据完整有效、业务可恢复。
2024年12月11日，国家发改委公布《电力监控系统安全防护规定》，明确重要电力监控系统应当建立系统备用和恢复机制，对重要设备冗余配置，对重要的数据定期备份，并定期进行恢复性测试，支撑系统故障的快速处理和恢复，保障电力监控系统业务连续性。
【双十一大促 支付宝系统故障】
2024双11大促期间，支付宝出现异常。不少网友表示无法付款，付款时显示 “重复扣款”“支付失败”“服务异常” 等提示，其中余额宝提现未到账、花呗还款扣款成功但账单没清等情况也有发生。支付宝官微称因系统消息库出现局部故障，导致部分用户支付功能受影响，目前故障已修复。
【企业微信文档故障】
2024年12月2日上午，企业微信文档发生崩溃，不少企业员工打开腾讯文档网页端时显示“服务器异常，编辑内容暂无法保存”，或一直显示“访问已超时，请稍后再试”，导致无法使用。随后企业微信官微回应称此次故障是由于访问激增导致，已快速完成修复。
定期容灾演练可满足合规要求
保障灾难场景下快速逃生
◼︎ 2024年11月-12月，美创科技助力金融、中大型企业、医疗、卫健、公积金等行业在内的等35家单位顺利完成容灾演练、桌面演练、备份验证及灾难切换，有效帮助各政企单位验证应急响应能力和灾难恢复能力。
某特大型通信基础设施央企，是在深化国企改革、促进电信基础设施资源共享的背景下成立的大型国有通信基础设施服务企业，公司主要从事通信相关的配套设施的建设维护和运营。近年来，该央企加快数字信息基础设施建设，为各行业提供信息化服务，在数字治理中发挥重要作用。为了应对不可预期的故障及灾难性事件，该央企选取了三种复杂度不同的类型业务系统进行实战异地容灾演练，包括传统经典架构的东南亚运维监控系统、外部组件依赖性强且业务架构复杂性高的智能生产运维系统、以及多活分布式架构的运监系统，充分验证了从经典应用到分布式多活架构下的容灾能力。
2024年12月，为了周期性验证多套核心业务系统的容灾系统的可用性，确保生产端与灾备端两端数据一致、灾备数据可用，该央企协同美创专家团队成立了演练领导和执行小组，计划通过模拟相关核心业务系统故障，分阶段对多套系统进行异地桌面演练及容灾演练，以验证生产系统可向灾备中心的备用系统进行有效切换，要求RPO=0，RTO≤30分钟。
以智能生产运维系统从上海到异地灾备节点的容灾切换为例。演练于12月26日22:01:30开始，首先采用美创新一代 灾备一体化平台（DRCC）（点击了解）进行快速自动化预案评估，演练执行小组执行一键启动智能生产运维系统的主备切换，在充分保障备份任务完成和人工节点验证通过情况下，包括数据库、应用、NAS、中间件等各类资产节点均按照既定的演练预案完成切换，总耗时2分54秒。备端业务系统经过近1个小时的试运行后，成功验证备节点数据零丢失，容灾效果满足业务运行需求。
备节点验证切换有效后，演练执行小组利用DRCC自动生成的回切链路，一键完成异地灾备机房的智能生产运维业务回迁至上海本地数据中心，业务正常运行，共耗时2分56秒，完全满足RPO和RTO预期。
此次容灾演练全面检验了容灾备份系统的有效性。同时，美创还协助该央企对演练中出现的问题进行了深入的总结与复盘分析，并针对性地提出了优化措施。通过这一过程，该央企的灾难应对能力和数据保护机制得到了实质性的增强，为未来可能面临的突发情况打下了坚实的基础。
美创DRCC新一代 灾备一体化平台，将灾备建设所需的灾备运营管控能力以及容灾备份能力（包括：数据库同步、应用版本同步、海量文件同步、主机同步、数据备份）“ALL in ONE”，提供的日常监控、预案评估、容灾演练、一键切换等功能，充分满足用户一站式灾备运营诉求，保障演练场景和灾难场景下的敢切和快切，真正做到灾备能力可订购、灾备状态可感知、灾备演练可掌控、灾难切换可指挥，保障业务RPO/RTO目标。
灾备一体化平台架构
浙公网安备 33010502006954号 
