2021年3月10日凌晨00:47,欧洲最大的云服务与托管服务提供商 OVHcloud 位于法国斯特拉斯堡的数据中心园区发生严重火灾,起火点位于 SBG2 数据中心楼内。火势迅速蔓延,SBG2 整栋五层建筑(占地约500平方米)被完全烧毁;相邻的 SBG1 数据中心四个机房被毁;SBG3 的 UPS(不间断电源)系统受损;SBG4 虽未受物理损坏,但因园区整体断电而停止服务。
事故导致约 360 万个网站下线,1.2 万至 1.5 万名客户的业务受到影响,其中包括法国政府部分网站、蓬皮杜艺术中心官网、游戏《Rust》的欧洲服务器等。部分客户数据永久丢失,且无法恢复。火灾同时暴露了该数据中心在消防设计和应急管理方面的多重系统性缺陷。
2021年3月10日 00:47,SBG2 数据中心一层电力室内的一台电气逆变器发生起火。消防部门接警后迅速赶赴现场,但火势在初期即表现出异常猛烈的发展态势。消防员到达时,发现电力室门外出现超过一米的电弧闪光,伴随巨大的放电声响。
当地电力公司(Électricité de Strasbourg)人员约于 01:20 抵达现场,但由于 SBG2 未配备通用电气切断开关,无法在电力室实施集中断电。电力切断操作持续受阻,直至 03:29 左右才最终完成断电,此时距离起火已过去近三小时。在此期间,电流持续流入电力系统逆变器,部分客户的服务器在起火后仍维持运行状态。
断电延迟期间,火势已从电力室向外蔓延。SBG2 采用的自然冷却(free-cooling)设计,依赖建筑内部两个内庭院形成“烟囱效应”促进空气流通以冷却服务器,但在火灾情境下,这一设计反而成为火势垂直蔓延的加速通道,两个内庭院起到了“火灾烟囱”的作用。至凌晨 04:09,SBG2 整栋建筑被完全摧毁。
02:54,消防部门对园区实施隔离并封闭周边区域。05:30 起,出于安全原因,园区在省政府的指挥下禁止 OVHcloud 团队进入。SBG1 中四个机房被烧毁、八个机房完好,SBG3 的 UPS 系统处于宕机状态,SBG4 无物理损伤,但三个数据中心均无法在当日恢复运营。
根据 Bas-Rhin 省消防局于 2022 年发布的调查报告,起火源头指向 SBG2 一层电力室内的一台电气逆变器。火灾发生前一天,该 UPS 系统刚完成维护作业,OVHcloud 创始人 Octave Klaba 在事故初期曾表示,维护后的 UPS 系统是“早期怀疑对象”。不过,OVHcloud 始终未正式公布起火原因,称需等待官方正式报告。
Bas-Rhin 消防局的调查报告对 SBG2 的消防设计提出了严厉批评,指出的核心缺陷包括:
(1)无自动灭火系统。SBG2 未安装自动灭火装置,火灾初期无法得到有效抑制,错失了最佳扑救窗口。
(2)无通用电气切断开关。缺乏集中断电能力导致电力切断耗时近三小时,是火势扩大和扑救困难的关键因素。
(3)木质天花板耐火等级严重不足。电力室采用木质天花板,耐火极限仅为1小时,远不能满足数据中心关键基础设施的消防要求。
(4)自然冷却设计形成“烟囱效应”。建筑内部两个庭院在火灾中成为垂直火势通道,加速了火焰从一层向整栋楼的蔓延。
(5)铅酸电池产生有毒烟气。UPS 系统中的铅酸电池在燃烧过程中释放有毒烟雾,增加了消防作业的风险和难度。
设施 | 受损程度 |
SBG2 | 整栋五层建筑完全烧毁 |
SBG1 | 4个机房被毁,8个机房完好 |
SBG3 | UPS 系统受损,服务器状态待查 |
SBG4 | 无物理损伤,因园区断电停运 |
约 360 万个网站因火灾下线。受影响客户覆盖政府、文化机构、游戏、加密货币、电信等多个领域:
法国政府:data.gouv.fr 等政府数据平台无法访问;
蓬皮杜艺术中心:官网无法访问,发布通告说明情况;
游戏《Rust》:Facepunch Studios 证实所有欧洲服务器数据全部丢失,数据中心恢复后也无法找回;
其他:加密货币交易所 Deribit 博客、网络威胁情报公司 Bad Packets、免费国际象棋服务器Lichess.org、加密工具VeraCrypt 等均受影响。
·
事故中最严重的后果是大量客户数据的永久性丢失。关键问题在于:大量客户未将数据备份至斯特拉斯堡园区之外。OVHcloud 虽在法国拥有17个数据中心,但斯特拉斯堡园区内的备份数据与主数据同处一地,园区整体故障时备份同步失效。《Rust》开发方明确表示,即使数据中心重新上线,也无法恢复任何数据。这一事件从根本上暴露了“同园区备份不等于灾备”的行业认知盲区。
火灾发生后,OVHcloud 建议所有斯特拉斯堡客户立即启动灾难恢复计划(DRP)。公司调集欧洲其他15个数据中心的资源,为受影响客户提供替代基础设施,并协助客户实施 DRP。
恢复时间线方面:SBG1 和 SBG4 的供电恢复估计于 3月15日完成,SBG3 的恢复预计于 3月19日完成。SBG2 因完全烧毁,无恢复可能。
2022年至2023年间,OVHcloud 面临多起法律诉讼。超过 130 名客户加入集体诉讼,另有四家企业单独提起诉讼,集体索赔金额约 1000 万欧元。
2023年3月,法国里尔商事法院作出首起判决,认定 OVHcloud 未能履行其承诺的数据备份服务义务,判令其向两名客户分别赔偿 10 万欧元和 15 万欧元,合计 25 万欧元。法院查明 OVHcloud 在客户数据存储位置上存在误导性陈述,且在归还服务器前已将数据擦除。此后又有多起类似判决陆续作出。
2021年5月,OVHcloud 公布了“超韧性”(Hyper Resilience)三点计划,核心内容包括:将内部备份迁移至由四个数据中心组成的专属异地备份区域;对所有数据中心开展消防系统全面排查与升级;强化园区间的冗余架构设计。
2022年9月,OVHcloud 在斯特拉斯堡原址建成并启用了新的数据中心。新设施在设计上做出了根本性改变:安装了自动喷淋灭火系统;将电池组和电力设备移至数据大厅之外独立区域;消防分隔和建筑材料标准均大幅提升。这一设计调整直接回应了2021年火灾报告中指出的每一项核心缺陷。
OVHcloud SBG2 火灾是数据中心行业历史上损失最为严重的事故之一。其教训可归纳为三个层面:
第一,消防设计的合规性不等于充分性。SBG2 未被归类为 Seveso 高风险设施,其消防标准在当地法规框架下可能“合规”,但木质天花板、无自动灭火、无集中断电等缺陷在真实火灾情境下被证明完全不足以保护一座五层数据中心建筑。
第二,同园区备份不是灾备。 数百家客户将备份数据与生产数据置于同一园区,园区整体失效时备份与生产数据同时丢失。异地备份(off-site backup)是任何关键业务数据保护的底线要求。
第三,云服务商不承担客户的数据保护责任。OVHcloud 在事故后通知客户“启动灾难恢复计划”,但 DRP 的制定和执行责任在于客户自身。企业将基础设施外包给云提供商,并不能将数据安全和业务连续性的最终责任一并外包