广东华兴银行成功完成同城灾备中心真实接管演练
OCT 24 2020
GUANGDONG HUAXING BANK
中国·广东·广州
广东华兴银行圆满完成同城灾备真实接管
序- 2020年10月24日凌晨,广东华兴银行成功完成了全行关键业务由岗顶主数据中心到南沙同城灾备中心的自动化切换,重要业务在同城灾备中心稳定运行了一个会计日,并顺利于2020年10月25日凌晨回切至岗顶主数据中心,标志着广东华兴银行同城灾备真实接管演练圆满完成。
一、演练背景- 根据《转发关于开展中小银行机构业务连续性相关风险整治工作的通知》(汕银保监办发[2020]5号)相关要求,为提高业务连续性水平,验证同城灾备中心能够迅速接管业务,确保重要业务持续运营,广东华兴银行进行了本次同城灾备真实接管演练。行领导对本次灾备真实接管演练高度重视,成立了专项工作小组,由分管风险管理和信息科技的行领导担任组长,法律与合规部(业务连续性主管部门)、信息科技部、数字银行部、交易银行部、营运管理部、零售银行部、普惠金融事业部、风险管理部、审计部以及广州分行、深圳分行、珠海分行、江门分行等总分行机构参与了本次演练工作。
- 本次同城灾备切换实现同城灾备中心对我行重要业务的真实接管,演练系统范围包含核心系统、支付系统、柜面系统、个人网银、企业网银、手机银行等35个业务系统,重要系统覆盖率100%,涉及的业务包括个人储蓄业务、汇兑业务、银行卡业务、零售电子银行业务、公司存款业务、企业电子银行业务、理财业务、第三方存管业务、代销业务(含基金、保险、信托)、个人投融资平台业务、零售贷款业务、公司授信业务、电话银行业务等13项重要业务。
二、演练范围
二、演练范围
- (一)自动化:同城灾备真实接管涉及数据库ADG切换、F5流量切换等多个操作,操作内容繁琐,工作量较大,为缩短人工操作时间、降低人工操作失误的风险,本次同城灾备真实接管通过自动化工具软件进行。利用自动化工具编排切换流程,整合需要执行的脚本,实现同城灾备切换的“一键式”处理。
三、演练方式
- (二)可视化:由信息科技部自主设计开发的同城真实接管演练监控大屏,基于网络流量镜像的实时解析、及“一键式”工具的联动,使整个切换过程实现全部可视化。
三、演练方式
- (三)移动化:将自动化工具、监控大屏接入我行移动OA系统,实现掌上数据共享,提高异地协同办公能力。
三、演练方式
- (一)数据库两地三中心高可用架构在数据库容灾技术选择上,利用Oracle的最高可用体系结构(MAA)架构,建设了完整的两地三中心数据库级联灾备架构体系,由存储同步技术优化为数据库同步技术,在数据安全、可靠性、同步效率及灵活性方面均得到提升:1、数据更安全: 数据逻辑错误规避;2、可靠性更高: QA架构,实现读写分离,备数据库始终处于可查询,可校验状态,确保高可用性和一致性;3、数据同步效率提升:在线REDO日志复制与归档日志复制相结合,在线REDO日志复制技术数据传输效率高;4、切换灵活:仅需数据库主备切换即可完成。在主数据中心与同城灾备中心搭建Oracle数据库集群,通过ADG技术实现数据库的同步复制,通过ADG主备库切换实现同城灾备中心数据库服务的接管。
四、技术要点
(二)虚拟化架构+F5负载均衡实现应用双活
通过虚拟化技术对资源进行统一管理,在主数据中心与同城灾备中心部署相互独立的集群,并通过统一集群管理工具,对主备数据中心的虚拟化集群进行统一管理,实现资源的统一调配及主机故障的迁移切换;采用负载均衡技术实现数据中心间应用系统的双活及流量的切换;存储层面,虚拟化集群的datastore均来自各数据中心的集中存储,应用系统的多个节点虚拟机同时布署在两个数据中心的两套存储上;主数据中心存储采用存储双活架构,同时保存两份数据在本地的存储集群上,实现本地高可用。
四、技术要点
- 本次同城灾备真实接管演练通过充分的利用自动化工具技术,做到了技术切换管理快速高效和风险可控的有机统一,演练过程零数据丢失,灾备关键指标RTO和RPO均高于预期,同城接管一个会计日,达到了演练总体目标,同时为两地三中心的蓝图迈出重要的一步。
25日02时14分,回切至主中心运行。回切整体耗时3分钟(RTO<3分钟),数据零丢失(RPO=0)。切换完成后各系统运行平稳,业务办理正常。
24日02时07分,同城灾备中心正式接管。切换整体耗时7分钟(RTO<7分钟),数据零丢失(RPO=0)。切换完成后各系统运行平稳,业务办理正常。
- 进行了基础软件版本升级、数据库版本升级、应用系统同城双活改造、桌面演练等,为本次演筑牢了坚实的基础。
第四阶段:回顾总结 (Check,Act)
第三阶段:服务回切 (Do)第二阶段:正式接管 (Do)
第一阶段:前期准备 (Plan)
五、同城灾备真实接管演练记事
花絮(主中心现场)
花絮(同城灾备中心现场)
花絮(分行验证)
力创城市精品 打造百年华兴