宁夏银行事故造成系统中断37小时 - 金融行业 - ITPUB论坛－专业的IT技术社区

wangjia

银行二部（2014）187号正式发全国文件，对宁夏银行事故的描述大致如下2014年7月1日，宁夏银行核心系统数据库出现故障，导致该行（含异地分支机构）存取款、转账支付、借记卡、网上银行、ATM和POS业务全部中断。
   
    经初步分析，在季末结算业务量较大的情况下，因备份系统异常导致备份存储磁盘读写处理严重延时，备份与主存储数据不一致，在采取中断数据备份录像操作后，造成生产数据库损坏并宕机。因宁夏银行应急恢复处置机制严重缺失，导致系统恢复工作进展缓慢，直至7月3日5点40分核心系统才恢复服务，业务系统中断长达37小时40分钟，其间完全依靠手工办理业务。
   
    该事件的根本原因是在于该行安全生产意思薄弱、应急管理体系缺失、应急处置过程混乱。该行核心系统数据库版本严重老化，且2007年至今未购买核心数据库的维保服务，核心系统长期缺乏维护，事故发生后，无法获得系统供应商及时技术支持。系统恢复过程中，缺乏应急预案和准备，长时间无法实施有效处置，导致业务恢复缓慢，对银行运营产生较为严重影响。
飞康CDP保驾护航宁夏银行灾备实战演练
2010年05月11日 14:46 来源：IT168网站 作者：IT168存储频道 编辑：李隽
【IT168 资讯】近日，宁夏银行在本行的真实生产系统上进行了灾备实战演练并获得圆满成功，充分验证了宁夏银行核心业务系统本地/异地一体化应用级灾难备份系统的应急响应能力、灾难恢复能力、异地切换能力。此次演练模拟了数据库瘫痪和数据中心火灾两种突发情况下的应急响应及容灾恢复，演练的各个环节全部由宁夏银行的技术人员自行响应、操作完成。宁夏银行的相关领导、飞康公司以及来自全国各地十多家城市商业银行、农村信用社的30余位领导共同见证了本次灾备演练的完整过程。
2009年，宁夏银行开始规划核心业务系统的灾备系统建设，其灾备建设的目标是：按照国家《信息系统灾难恢复规范》(GB/T 20988)灾难恢复第五级标准相关要求，建设核心业务系统的本地和异地的一体化应用级灾难备份系统。2010年4月初，在短短3个星期的施工期和测试期之后，宁夏银行便利用飞康持续数据保护(CDP)技术，建立起了本地和异地一体化的、分层次的应用级灾难恢复体系。
飞康CDP是一种精细度极细的数据块级别保护技术，能够从任何应用系统中采用实时方式提取每一刻的数据，并且将当前数据和历史轨迹完整保存起来。在任何故障发生时，实现当前数据和历史轨迹数据的瞬间恢复的能力。飞康CDP不仅可以将各时间点数据(每一秒钟)在本地保存实现备份，也能够通过智能化的精简异地传输技术将数据轻松传递到异地，是唯一具备全部异地和本地容灾和备份元素的新一代容灾方案。
本次演练主要包括了两种“突发情况”：数据库系统瘫痪和数据中心发生火灾——前者模拟宁夏银行生产中心数据库系统发生崩溃瘫痪的严重故障，测试根据需要启动应急响应流程，进行本地的数据库系统恢复;后者模拟生产中心发生大火，测试根据应急流程进行从银川到西安的异地切换。
整场演练全部在真实的生产环境进行，步骤衔接流畅，而且恢复速度让在场观摩人员无不惊叹，两个场景的演练时间加起来不过10分钟：第一场数据库瘫痪演练，4分钟成功恢复完成;第二场火灾演练，6分钟系统异地切换成功。
本次宁夏银行灾备系统实战演练的圆满成功，无疑为金融系统的灾难恢复体系划定了全新的建设标准。
〇〇 发表于 2014-8-4 10:59

飞康CDP保驾护航宁夏银行灾备实战演练
2010年05月11日 14:46 来源：IT168网站 作者：IT168存储频道 编辑： ...
这不是说很成功么？ 哦，仔细看了看，是2010的事，估计这两年没人理睬了，所以才出事故吧
说明维保的重要性！
很多公司领导们都不是很重视，如何说明其重要性是系统维护人员的重要职责