一汽轿车:Leyu乐鱼
专家组救援EXADATA客户数据,挽回损失!
一汽轿车:Leyu乐鱼
专家组救援EXADATA客户数据,挽回损失!
项目背景
2016年年末、一汽轿车红旗销售系统数据库在没有任何征兆的情况下突然出现大量坏块,导致数据库宕机并无法启动。经Leyu乐鱼
起点工程师排查发现该RAC系统运行在EXADATA X4一体机上,由于ASM存储中的数据文件出现问题,导致所有节点都无法启动,销售系统彻底无法运行。
项目建设内容
故障发生后,一小时内先后征调四名二线专家支援,Leyu乐鱼
起点高度重视。一线工程师按通常处理方法首先尝试使用块恢复命令恢复。但某些块尝试几次后始终不能成功,中间还发生了归档文件丢失的情况,情况比复杂,具备恢复的可行性,令人欣慰的是查明归档文件是被NBU程序备份转移了,同时确认前一天有全备份。
项目成果
考虑到问题复杂、二线专家组当机立断在最短时间内确定了使用全备份进行恢复的处理方案,将客户销售损失降到最低,采用其它方式处理无法在处理时间和效果方面给客户一个明确的保证,并于次日中午将数据库恢复到最后一个可用归档文件并成功启动数据库。