データセンターで火災、サーバー稼働を一時停止!
Jun
21
今朝、シアトル時間午前2時から我々が使用するシアトル
データセンターで無停電電源のバッテリーの入れ替えがあ
りました。電源のリダンダンシー(冗長化)をするために
サーバーには A,B,C,D の4電源が入っています。今日の入
れ替えは A 電源のバッテリー入れ替えでした。
2時からスタートした作業は順調に終了して2時半には、
APC のスタッフなども帰り始めました。それから2時間が
過ぎた4時過ぎ(日本時間の土曜日午後8時)に入れ替え
た UPS D スイッチから発煙しました。
この発煙により消防が到着、A, C, D 電源への電気供給を
物理的にストップしました。片っ端から電源スイッチを OFF
にしていったそうです。しかし、発煙(消防は出火と言って
います)は UPS から発生しています。ですから給電を止め
てもバッテリーで電気供給は継続されるために、発煙はと
まりませんでした。そこで消防は、物理的に UPS のクロー
ジャを破壊・・・良く感電しなかったものです。
この時点で C と D の UPS がシャットダウンしました。
このためデータセンター内のサーバーへの電源供給が停止
する状態が発生しました。
6時には UPS を外した形で全てのサーバーへの電源供給は
復旧しています。現在使用不可能になった D UPS からの
給電を A UPS に入れ替える作業を行っています。
この事故が発生しましたことを深くお詫び申し上げます。ま
た、この事故でメールの遅延が発生いたしました。現在、
データセンター運営スタッフが全力で対応いたしております
ので日本時間の日曜日午前2時までには正常に戻ると考えて
おります。
役にはたちませんが、私もデータセンターに来て、スタッフ
のじゃまにならないよう今このリポートを書いています。
Pacific Software Publishing, Inc.
内倉
ken.uchikura@pspinc.com
Posted at 2008-06-21 10:36
People Who Wowed This Post
Posted at 2008-06-22 08:34
People Who Wowed This Post
Posted at 2008-06-21 17:08
People Who Wowed This Post
Posted at 2008-06-22 08:36
People Who Wowed This Post
Posted at 2008-06-21 18:28
People Who Wowed This Post
Posted at 2008-06-22 08:37
People Who Wowed This Post
Posted at 2008-06-21 22:10
People Who Wowed This Post
Posted at 2008-06-22 08:38
People Who Wowed This Post