
誤作動した煙感知器がJane Streetのニューヨーク唯一のデータセンターを危機に陥れかけた経緯
Jane Streetのニューヨーク・データセンターで煙感知器が誤作動し、冷却装置が停止する事態が起きた。スタッフは、スプリンクラーで機器が損傷する前に機器の電源コードを引き抜いた。
Michael Bacarella 氏は、2026年11月10日付のブログ記事で、この事案の経緯と事後対応を明らかにした。
発生の経緯
煙感知器は、隣接する準備室で請負業者が切断作業を行った際に粉じんが舞い上がり、作動したとされる。この感知器は、冷却装置(CRAC)を停止させる配線になっていた。その結果、機械室が過熱し、加圧式のスプリンクラーが作動する危険が生じた。
筆者によると、筆者は機械室に駆けつけ、室内の機器から電源コードを引き抜いた。モニターの温度は141 Fから上昇を続け、143.6 Fで上昇が止まったという。
停止時間は最小限にとどまった。事案当日は主要なニューヨーク市場が休場日であり、業務は翌朝に再開された。
事後の対応
事案の後、Jane Streetは次の対応を取った。
- スプリンクラーはそのまま残された
- 手順と監視カメラの運用が強化された
- 事務所の入る建物でのサーバー運用が継続された
また、筆者はOCamlで監視システムを作成した。このシステムは、Linuxサーバーに毎分温度を問い合わせて平均値を算出し、平均値が上昇している場合にシステムチームへ通知する仕組みである。
筆者の見立て
- 煙感知器と冷却装置の停止の組み合わせを、事業継続を脅かしかねない深刻な問題だと論じている。
- 多くのサーバーで温度が一斉に上昇していることは、冷却の全般的な故障を意味すると解釈している。
- 機械室を廊下の向かいに置いていたのは、誰かが常に電源コードを引き抜けるようにするためだったと解釈している。そのうえで、スプリンクラーからサーバーを守るためにこうした対応を取ることは想定されていなかったと推察している。
- 時にはLinuxサーバーに直接温度を問い合わせることが、最も確実な手段だと論じている。
- 原子力潜水艦での勤務経験を持つJane Streetのパートナーが、この監視システムを承認しただろうと予想している。
この記事は元記事の事実のみに基づいて自動生成されました。
出典
- 媒体名: Michael Bacarella
- 元記事タイトル: How a false smoke alarm almost drowned Jane Street’s only NYC datacenter
- URL: https://michael.bacarella.com/2026/11/10/false-smoke-alarm-jane-street-datacenter/