hylomによる
2008年12月19日 17時38分の掲載
西新宿と言うと大手のK社? 部門より。
西新宿と言うと大手のK社? 部門より。
あるAnonymous Coward 曰く、
さくらインターネットの西新宿データセンターで火災騒ぎがあり、サーバがダウンした。同社のお知らせによると、2008年12月19日 12時35分頃に電源設備から発煙し、一部のラックへの電源供給が停止されているとのこと。14:05更新の情報では、「6F Aゾーンの配電盤3台、6F Bゾーンの配電盤2台の片系統もしくは両系統の電源供給停止」という状況らしい。早急な復旧を望みたい。
このデータセンターにはさくらインターネット以外にも多数の企業がサーバーを設置していたようで、この影響によりいくつかのサイトが現在アクセス不能になっているようだ。
次世代データセンター (スコア:5, おもしろおかしい)
ブラックボックスを越えた?データセンターが崩壊しても自分で逃げる稼働式サーバ
http://blogs.itmedia.co.jp/infra/2008/11/post-04df.html [itmedia.co.jp]
コメントを書く
GREEがダウンしたのはこのせいか (スコア:4, 参考になる)
コメントを書く
Re:GREEがダウンしたのはこのせいか (スコア:2, 参考になる)
> 原因:データセンターの設備障害
-- takeyoshi
コメントを書く
親コメント
NHKのニュースになってた (スコア:4, 参考になる)
西新宿データセンターの概要
UPSも焼け石に水。
あと今回の被害を受けたのは占有サーバで、共用サーバは影響受けてないようです。
LA見ても、とりあえず落ちてません [sakuratan.com]。
コメントを書く
ここも、だね (スコア:1)
コメントを書く
ここはひどいインターネットですね (スコア:1)
#そういうことにしたほうが面白いってことなんだろうけども。
コメントを書く
Re:ここはひどいインターネットですね (スコア:3, すばらしい洞察)
コメントを書く
親コメント
こういうのって (スコア:1, 興味深い)
こういうのが出ちゃうと、今落ちてるサーバーの物理的場所が推測できるので。
顧客には平謝りするけど、セキュリティ上は出さないものだと思ってました。
借りている某所で、給電システムのショートが発生して
センター丸ごと落ちたときは表ざたにはなりませんでした。
また、別の1社でも電気系が落ちたのを内々に聞きましたが
これも表ざたになってないですね。
コメントを書く
Re:こういうのって (スコア:2, 興味深い)
コメントを書く
親コメント
人いなさすぎ… (スコア:1)
-------- tear straight across --------
コメントを書く
Re:いっぱいいっぱいいっぱい (スコア:1, すばらしい洞察)
コメントを書く
親コメント
Re:いっぱいいっぱいいっぱい (スコア:2, 参考になる)
> そのときに片系がダウンするようなしょぼいところに入ってるの?
片系がダウンするも何も、サーバに供給している電源線を電路から解放してもらわないと感電します。
ふつーの企業では、充電箇所の作業や活線近接作業は禁止行為です。
つまりはサーバをシャットダウンしてもらわないと、出来ないのですけど。
それでも絶縁工具を使えば大丈夫だとやらせる客もいるし、やれという上司もいる。
事故が起きたら「活線作業とは聞いていなかった。現地の判断で作業したと思う」といって
上司は逃げると思われます。同様に客も逃げるでしょう。
ps.
分電盤のMCCBまわりにホコリがたまって、トラッキング火災でしょうかね。
コメントを書く
親コメント
Re:いっぱいいっぱいいっぱい (スコア:5, 興味深い)
>結局電源停止状態になりません?
普通は片系に寄せられても賄える様にするから、
>データセンタの電源が厳しい
ことになるんですが、片系に寄せられない様な二重化ってあるんですかね?
>うちは駄目だから絶対ACで
追い打ちをかけるつもりはないけど、ファシリティの関係者もしくは
その上の人がさぼっていると思いますよ。
某所でサーバ導入した時に「すんません、片系間に合わないんで、
片系で構築中はやっていけませんか?」というのがあった。
「電源障害テストも構築作業に入るんですけど...」
「ん?そのテストはいつごろですか?それまでに間に合わせられるか調整します」
とかいったやりとりがありました。
そのデータセンタでは、三系多重で、通常二系統のA系B系運用。
A系/B系どちらか落ちたら、すぐに残りのC系が介入してダウン無し...
という話だったのですが、どうもC系介入時に結構なノイズが走る。
その波形や電圧の遷移とかをまとめた資料見せてもらったことがある。
(こんなに荒いノイズなら)瞬断の方がましだ..というベンダーや、
素直に片系落としてくれた方が被害が少ないという基盤設計者まで
出てきて、にぎやかでした。
コメントを書く
親コメント
Re:関連ストーリー (スコア:1)
コメントを書く
親コメント
Re:都市伝説が・・・ (スコア:5, 参考になる)
- 非常にクリーンである(水分や毒の粉をまき散らさない
- 早期に消化(というか酸化の抑制)が可能
- 設備が高く、扱いに正しい知識が必要(何でもかんでもぶっかけりゃ良いってものではない)
- 設置基準が厳しい
という特徴があり、データセンター(含む図書館)や、クリーンルーム等も含む、汚損による損害が非常に懸念されるところや、駐車場や燃料など非常に燃えやすいものを扱う場所で多く使用されれます。で、それにも二種類あり
- ハロンガス消火設備
- 二酸化炭素消火設備
の二種類があります。実はこれは微妙に扱いが異なります。ハロン式の特徴は
- 基本的に人体に無害
- 臭いがあり、温度が高いとすごく臭い。
- 温度が常温であるため、冷却作用はないが、結露もない。冷却効果がほぼないため、酸素が流入すると、再燃の可能性が高い。
- オゾン層を破壊する物質であるため(広い意味でフロンの仲間)現在製造はほとんど行われていない。(厳密には規制対象ではないが、作ってないらしい)
二酸化炭素式の特徴は- 人体に有害。
- 無味無臭
- 噴射温度が低いため、冷却効果があり、比較的再燃の可能性を抑える
- 入手が非常に簡単。(産業廃棄物)そのため、新規設備はこちらの方が多い?らしい
という感じで、結構違います。ということで、ガス施設の場合は、元AC氏の指摘の通りガスの排気の他、ガスは燃焼を止めるだけなので、再燃の可能性高く、普通の水等で消した場合に比べて検証を慎重にしなければならないため、実際には鎮火宣言が出されるのが長かったりして、復旧には時間がかかる傾向があります。
ただまぁ、水をぶっかけるとか、粉をぶっかけるとかするよりは早いのでしょうが……。
#書いたはいいものの、おふとぴ気味なのでAC
コメントを書く
親コメント
Re:都市伝説が・・・ (スコア:2, 参考になる)
酸素濃度10%以下になると危険になりますが、そこまでリッチな施主を見たことがありません
イナージェンやハロンも同様です。CO2がやばいのは酸素濃度以上に、CO2の毒性による
ものだったかと思います。確か濃度4%超えるとやばいのに、消火必要濃度が4%以上だったよ
うな・・・
とはいえ、採用してる消火システムって表に出ないし気にもされないから同じ認識されてるん
ですよね。
コメントを書く
親コメント
Re:都市伝説が・・・ (スコア:3, 興味深い)
ラックの間で作業をしている時には、サーバ群の轟音で避難放送が全然聞き取れませんでした。あれじゃ死にます。
#本番のときはラックへの電源供給を断つから問題ないのかな?
コメントを書く
親コメント
Re:都市伝説が・・・ (スコア:2, 興味深い)
>…どこが「汚損による損害が非常に懸念される」のかと!
>おいてあるのは、ただのディスクレスパソコンでした。
80年代以前のメインフレーム・ベクトル計算機時代には
周辺入出力装置としてのミニコンや、ラインプリンター、オープンリールテープドライブなどが
おいてあった部屋なのでしょう。
今では不要になったので模様替えをしてタダのPC部屋になっている、と。
私の母校もそうでした。計算機センターの古参の技官に聞くといいですよ。
-- wildcard
コメントを書く
親コメント
無停電電源装置はあるけど (スコア:1, 興味深い)
コメントを書く
親コメント
「都市」最強伝説が・・・ (スコア:1, すばらしい洞察)
データセンター事業とそれに依存するサービスの危うさというか... マシンには最高の環境とはいいますが。
ネットワークインフラが広帯域で割と安価な都心の一等地に置かねばならず、自ずと資本力が問われ、プレイヤーが限られる。そしてヨリによって専用サーバー置き場だったからこのざまです。
# またいつもの都市VS田舎にしたくはないですが
{原子力|水力}発電所の近い辺境に置けないもんかね、と思ってしまった次第ですよ。
この件でデータセンター事業者も、間借りしているサービス運営者もデータセンター分散を真剣に考え始めるでしょうけど、結局さくらが東京大阪に分散二重化しましたとか、運営者が複数データセンター事業者にサーバー分けて置きましたとかなって終わるのかな。
# 安全保障(軍事)上、東京大阪なんて最たる狙われポイントじゃ...
コメントを書く
親コメント
seesaaもだめだね (スコア:2, 参考になる)
SAKURA Internet // 2008年12月19日 障害発生のお知らせ「西新宿データセンター」
http://www.sakura.ad.jp/news/archives/20081219-001.news [sakura.ad.jp]
現在、サーバーセンターの障害は復旧しておりますが、正常にサービスの提供を行うため、弊社内において検証作業を行っております。
ご迷惑をおかけいたしますが、今しばらくお待ちいただきますようお願い申し上げます。
となってるのでここも影響しているみたい
コメントを書く
親コメント
Re:暫くspamが減るな。 (スコア:1)
コメントを書く
親コメント
Re:つーかさくらだし (スコア:1)
さくらインターネットはコロケーションサービス (ラック貸し) もやっています。
HIRATA Yasuyuki
コメントを書く
親コメント
Re:関連ストーリー (スコア:1)
今回もGREEやsonet blogがダウンしたことで、なるほどあそこにサーバがあるわけか、と分かったわけですが、Debianの時も日頃お世話になってたサーバが、ホスト名という名前だけでなく、はるか遠い設置場所にある実体を持つものとして感じられるようになってちょい感慨深かったです。
コメントを書く
親コメント