服务器数据全没了!一次RAID5崩溃引发的思考...

服务器
事件发生在Linus工作室乔迁之际,主力军Whonnock服务器中途崩掉,自动下线关机,宕机导致电脑全卡,离开了服务器,啥也干不了啊!

事件发生在Linus工作室乔迁之际,主力军Whonnock服务器中途崩掉,自动下线关机,宕机导致电脑全卡,离开了服务器,啥也干不了啊!

怎样快速恢复?重组RAID很容易破坏原数据。Linus团队尝试把文件全部转移到其unRAID Vault备份服务器,期待系统能重新上线。

此时Linus却发现

这台服务器由三组RAID5构成,24块SSD在Windows内全部并成一块,如果任意一组RAID5彻底损坏,全部数据就会丢失,经检查,当时仅有不到10%的数据备份完成。

重建服务器?这可不是件易事,有可能会变得更糟。为了诊断出原因,这位小哥首先把服务器转移到另一台机箱,换一套新的SATA背板再接上更强的电源就可以了吧?...

[[243330]]

小哥甚至换用另一张LSI RAID控制卡,试图导入阵列,虽然这玩意儿检测到了磁盘,形成了阵列,但就是无法正常导入,几乎前14个小时都花在了联系专业数据恢复服务上!!

服务商也只能通过SSH命令远程将文件包导回故障服务器,帮助恢复那组挂掉的RAID5。下载远程恢复平台后,试着重启磁盘,接上UPS(不间断电源)后,小哥心想,要是能有个能接入24个磁盘的主板或HBA集成卡来恢复数据就更好了,他准备在每个RAID5重建时,8个一组依次接入主板,但RAID5偏偏死活不让其他软件直接访问磁盘原数据,把磁盘全拔出来直接连主板,按理说该重新启动了,虽然磁盘在BIOS里能被检测到,但困难重重,PCIE端口错误,SATA口全部未检测到 …

如果失去任意一组RAID5中的3块磁盘挂掉

意味着所有RAID数据再也找不回了

word天,真的要吃土?

此时,系统持续处于无法启动状态

实在让人恼火

小哥表示自己有坐过山车的赶脚了,要知道Whonnock服务器里存着很多正在制作的视频项目,还没来及备份就… 其中一段视频,光租设备录制就花了一千多刀,处理视频的模板、台词模板、用户协议等一大堆重要文件都在这台服务器上,异地备份服务器还没装好,如果这些数据没了,蓝瘦香菇…

网友不禁感叹:小哥够大胆,在服务器中用SSD重组RAID,SSD一旦挂掉,数据是完全不可能恢复的!用机械盘组RAID会更安全。

这20分钟的视频让观众的心随着小哥跌宕起伏,好在经过重新挂载文件,原数据恢复正常!

 

 

虽然服务器最终恢复正常,但团队始终冒着极高风险,并为此付出了时间和精力,业务效率受到了重大影响。这还只是个小型服务器,若在上市企业或政府平台的大规模数据中心中出现此类问题,后果不堪设想,任何一丁点儿差错带来的直接经济损失不可估量!!

责任编辑:武晓燕 来源: DOIT
相关推荐

2018-12-27 09:09:35

2019-11-04 10:37:53

MongoDB宕机日志

2022-11-29 21:26:26

跨域配置

2015-07-17 10:05:03

面试思考

2018-03-02 10:42:44

2010-04-28 17:14:52

Google服务器

2021-11-01 17:29:02

Windows系统Fork

2022-12-26 10:42:00

康普中国

2013-09-13 09:27:42

服务器LinuxApache

2013-12-24 13:59:03

2020-03-22 15:17:17

服务器科技芯片

2023-05-16 14:14:00

大数据数据版本

2017-08-24 17:37:18

DNS缓存分析

2016-09-08 22:54:14

2013-12-23 09:38:11

2020-03-14 14:17:01

服务器X86虚拟化

2022-09-14 12:01:35

服务器入侵篡改,

2019-10-09 11:42:10

分布式取钱异步流程

2022-05-17 10:41:20

接口JSON数据

2020-03-20 10:00:12

服务器网络攻击黑客
点赞
收藏

51CTO技术栈公众号