ページ内ジャンプ:

スラッシュドット・ジャパン 全文検索

アレゲなニュースと雑談サイト

さくらインターネットのデータセンター、リアルに炎上してサーバダウン

hylomによる 2008年12月19日 17時38分の掲載
西新宿と言うと大手のK社？ 部門より。
インターネット

あるAnonymous Coward 曰く、

さくらインターネットの西新宿データセンターで火災騒ぎがあり、サーバがダウンした。同社のお知らせによると、2008年12月19日 12時35分頃に電源設備から発煙し、一部のラックへの電源供給が停止されているとのこと。14:05更新の情報では、「6F Aゾーンの配電盤3台、6F Bゾーンの配電盤2台の片系統もしくは両系統の電源供給停止」という状況らしい。早急な復旧を望みたい。

このデータセンターにはさくらインターネット以外にも多数の企業がサーバーを設置していたようで、この影響によりいくつかのサイトが現在アクセス不能になっているようだ。

関連ストーリー

セキュリティ: 2ちゃんねるのサーバー、「世界最強」宣言 66 コメント
全日空のシステム障害は「有効期限切れ」が原因 53 コメント
Google曰く「信頼性は劣るかもしれないハードウェアを２倍の数揃える方がよい」 140 コメント
レンタルサーバー屋がさじを投げたら 52 コメント
OCNバックボーンが重大障害 103 コメント
ソフトバンクのデータセンター事業、ヤフーに売却へ 71 コメント
Linux: Debian NOC、炎上 87 コメント
さくらインターネットのデータセンター、リアルに炎上してサーバダウン | ログイン/アカウントの作成 | 110 個のコメント | コメント検索
表示オプション しきい値:

  • 次世代データセンター (スコア:5, おもしろおかしい)

    Anonymous Coward : 2008年12月19日 18時00分 (#1476838)
    こんな時のために、データセンターはこうしていかないと･･･。

    ブラックボックスを越えた？データセンターが崩壊しても自分で逃げる稼働式サーバ
    http://blogs.itmedia.co.jp/infra/2008/11/post-04df.html [itmedia.co.jp]

  • GREEがダウンしたのはこのせいか (スコア:4, 参考になる)

    birmoc (36042) : 2008年12月19日 16時57分 (#1476784)
    現在トップページが

    いつもGREEをご利用いただきありがとうございます。

    12月19日12:35頃から、GREEにアクセスできない障害が発生しております。
    現在、復旧作業中となります。
    今しばらくお待ちくださいますようお願いいたします。

    皆様にはご迷惑をおかけし大変申し訳ございません。
    今後ともGREEをよろしくお願いいたします。
    になっている。時間ぴったり。

  • NHKのニュースになってた (スコア:4, 参考になる)

    kanina (16615) : 2008年12月19日 18時32分 (#1476859) 日記
    らしい。
    西新宿データセンターの概要

    １． 西新宿データセンターの概要
    （１）所在地 東京都新宿区西新宿
    （２）総床面積 3,200 ㎡（地上８階建ビルの２フロアを賃借）
    （３）サービス開始日 平成18 年６月１日
    （４）地震対策 免震構造（ビル本体）
    （５）設置ラック数 500 ラック（第一期・第二期合計）
    （６）事務スペース ラックルーム以外のスペースをハウジング顧客等に有料提供
    （７）消火設備 ガス消火設備・超高感度煙検知装置（火災予兆検知装置）
    （８）空調設備 床下吹出方式（水冷式高効率年間冷房・空冷式電算機用）
    （９）セキュリティ 非接触型ＩＣカード・生体認証（指紋）での入退室管理
    （10）電力受電方式 特別高圧２系統受電方式
    （11）非常用自家発電装置 ガスタービン式発電装置 2000KVA ２台
    （12）無停電電源装置 ｎ+1 冗長構成UPS 400KVA ６台
    http://www.sakura.ad.jp/ir/pdf/60601-ir.pdf [sakura.ad.jp]

    UPSも焼け石に水。
    あと今回の被害を受けたのは占有サーバで、共用サーバは影響受けてないようです。
    LA見ても、とりあえず落ちてません [sakuratan.com]。
  • 発煙というニュースのはずなのに、ここでは何で炎上になってるんですかね。

    #そういうことにしたほうが面白いってことなんだろうけども。

  • こういうのって (スコア:1, 興味深い)

    Anonymous Coward : 2008年12月19日 19時20分 (#1476906)
    表に出るんですねぇ。

    こういうのが出ちゃうと、今落ちてるサーバーの物理的場所が推測できるので。
    顧客には平謝りするけど、セキュリティ上は出さないものだと思ってました。

    借りている某所で、給電システムのショートが発生して
    センター丸ごと落ちたときは表ざたにはなりませんでした。

    また、別の１社でも電気系が落ちたのを内々に聞きましたが
    これも表ざたになってないですね。
  • ＼(^o^)／＜PTSに誰も並んでねぇ～
    --
    -------- tear straight across --------

  • Re:いっぱいいっぱいいっぱい (スコア:1, すばらしい洞察)

    Anonymous Coward : 2008年12月19日 18時07分 (#1476843)
    そんな設計してたら、法定電源点検どうすんの？

    • Re:いっぱいいっぱいいっぱい (スコア:2, 参考になる)

      Anonymous Coward : 2008年12月19日 22時25分 (#1476998)
      > >法定電源点検どうすんの？
      > そのときに片系がダウンするようなしょぼいところに入ってるの？
      片系がダウンするも何も、サーバに供給している電源線を電路から解放してもらわないと感電します。
      ふつーの企業では、充電箇所の作業や活線近接作業は禁止行為です。
      つまりはサーバをシャットダウンしてもらわないと、出来ないのですけど。

      それでも絶縁工具を使えば大丈夫だとやらせる客もいるし、やれという上司もいる。
      事故が起きたら「活線作業とは聞いていなかった。現地の判断で作業したと思う」といって
      上司は逃げると思われます。同様に客も逃げるでしょう。

      ps.
      分電盤のMCCBまわりにホコリがたまって、トラッキング火災でしょうかね。
    • 1個のコメント が現在のしきい値以下です。

  • Re:いっぱいいっぱいいっぱい (スコア:5, 興味深い)

    yasudas (5610) : 2008年12月19日 18時11分 (#1476844) 日記
    ＞片系では全てのサーバに電源が供給できず、ブレーカダウンで
    ＞結局電源停止状態になりません？

    普通は片系に寄せられても賄える様にするから、

    ＞データセンタの電源が厳しい

    ことになるんですが、片系に寄せられない様な二重化ってあるんですかね？

    ＞うちは駄目だから絶対ACで

    追い打ちをかけるつもりはないけど、ファシリティの関係者もしくは
    その上の人がさぼっていると思いますよ。

    某所でサーバ導入した時に「すんません、片系間に合わないんで、
    片系で構築中はやっていけませんか？」というのがあった。
    「電源障害テストも構築作業に入るんですけど...」
    「ん？そのテストはいつごろですか？それまでに間に合わせられるか調整します」
    とかいったやりとりがありました。

    そのデータセンタでは、三系多重で、通常二系統のA系B系運用。
    A系/B系どちらか落ちたら、すぐに残りのC系が介入してダウン無し...
    という話だったのですが、どうもC系介入時に結構なノイズが走る。
    その波形や電圧の遷移とかをまとめた資料見せてもらったことがある。

    (こんなに荒いノイズなら)瞬断の方がましだ..というベンダーや、
    素直に片系落としてくれた方が被害が少ないという基盤設計者まで
    出てきて、にぎやかでした。
  • ありがとうございます。追加しました。

  • Re:都市伝説が・・・ (スコア:5, 参考になる)

    Anonymous Coward : 2008年12月19日 19時18分 (#1476905)
    ついでに便乗させてもらうと、ガス消火設備の特徴は
    • 非常にクリーンである（水分や毒の粉をまき散らさない
    • 早期に消化（というか酸化の抑制)が可能
    • 設備が高く、扱いに正しい知識が必要(何でもかんでもぶっかけりゃ良いってものではない)
    • 設置基準が厳しい
    という特徴があり、データセンター（含む図書館)や、クリーンルーム等も含む、汚損による損害が非常に懸念されるところや、駐車場や燃料など非常に燃えやすいものを扱う場所で多く使用されれます。

    で、それにも二種類あり
    • ハロンガス消火設備
    • 二酸化炭素消火設備
    の二種類があります。実はこれは微妙に扱いが異なります。
    ハロン式の特徴は
    • 基本的に人体に無害
    • 臭いがあり、温度が高いとすごく臭い。
    • 温度が常温であるため、冷却作用はないが、結露もない。冷却効果がほぼないため、酸素が流入すると、再燃の可能性が高い。
    • オゾン層を破壊する物質であるため（広い意味でフロンの仲間）現在製造はほとんど行われていない。（厳密には規制対象ではないが、作ってないらしい）
    二酸化炭素式の特徴は
    • 人体に有害。
    • 無味無臭
    • 噴射温度が低いため、冷却効果があり、比較的再燃の可能性を抑える
    • 入手が非常に簡単。（産業廃棄物）そのため、新規設備はこちらの方が多い？らしい
    という感じで、結構違います。

    ということで、ガス施設の場合は、元AC氏の指摘の通りガスの排気の他、ガスは燃焼を止めるだけなので、再燃の可能性高く、普通の水等で消した場合に比べて検証を慎重にしなければならないため、実際には鎮火宣言が出されるのが長かったりして、復旧には時間がかかる傾向があります。

    ただまぁ、水をぶっかけるとか、粉をぶっかけるとかするよりは早いのでしょうが……。

    #書いたはいいものの、おふとぴ気味なのでAC
    • Re:都市伝説が・・・ by Anonymous Coward (スコア:1) 2008年12月19日 19時41分
    • Re:都市伝説が・・・ by eureca (スコア:1) 2008年12月19日 20時14分

      • Re:都市伝説が・・・ (スコア:2, 参考になる)

        Anonymous Coward : 2008年12月20日 9時30分 (#1477130)
        窒素消火の場合、酸素濃度１３％を目安にしており生命に（あまり）影響はないです
        酸素濃度１０％以下になると危険になりますが、そこまでリッチな施主を見たことがありません

        　イナージェンやハロンも同様です。ＣＯ２がやばいのは酸素濃度以上に、ＣＯ２の毒性による
        ものだったかと思います。確か濃度４％超えるとやばいのに、消火必要濃度が４％以上だったよ
        うな・・・

        　とはいえ、採用してる消火システムって表に出ないし気にもされないから同じ認識されてるん
        ですよね。

      • Re:都市伝説が・・・ (スコア:3, 興味深い)

        i_i (22332) : 2008年12月20日 1時27分 (#1477077)
        某所のデータセンターで作業をしていた時にちょうど消防設備の点検に遭遇したのですが、
        ラックの間で作業をしている時には、サーバ群の轟音で避難放送が全然聞き取れませんでした。あれじゃ死にます。

        ＃本番のときはラックへの電源供給を断つから問題ないのかな？
      • Re:都市伝説が・・・ by meta (スコア:1) 2008年12月20日 4時22分
      • 1個のコメント が現在のしきい値以下です。
    • Re:都市伝説が・・・ by kjm (スコア:1) 2008年12月21日 3時19分
    • Re:都市伝説が・・・ by udonium (スコア:1) 2008年12月21日 16時30分

    • Re:都市伝説が・・・ (スコア:2, 興味深い)

      wildcard (416) : 2008年12月20日 16時28分 (#1477321)
      >うちの学校、「端末室」(名前はただの名残です)がハロンでしたが。
      >…どこが「汚損による損害が非常に懸念される」のかと！
      >おいてあるのは、ただのディスクレスパソコンでした。

      80年代以前のメインフレーム・ベクトル計算機時代には
      周辺入出力装置としてのミニコンや、ラインプリンター、オープンリールテープドライブなどが
      おいてあった部屋なのでしょう。
      今では不要になったので模様替えをしてタダのPC部屋になっている、と。
      私の母校もそうでした。計算機センターの古参の技官に聞くといいですよ。
      --
      -- wildcard
    • 2個のコメント が現在のしきい値以下です。

  • 無停電電源装置はあるけど (スコア:1, 興味深い)

    Anonymous Coward : 2008年12月19日 21時40分 (#1476974)
    会社の一室に普通のパソコン並べてネットに接続しているだけのレンタルサーバーなので、火事や地震はもちろん停電しただけで終了です。レンタルしているお客様は全て法人・各種団体ですが、金曜の夜から月曜の朝まで停電で止まっていても電話ひとつかかってきたことないです。

  • 「都市」最強伝説が・・・ (スコア:1, すばらしい洞察)

    Anonymous Coward : 2008年12月19日 22時05分 (#1476986)
    SEESAAもでした。 [seesaa.net]

    データセンター事業とそれに依存するサービスの危うさというか...　マシンには最高の環境とはいいますが。
    ネットワークインフラが広帯域で割と安価な都心の一等地に置かねばならず、自ずと資本力が問われ、プレイヤーが限られる。そしてヨリによって専用サーバー置き場だったからこのざまです。
    # またいつもの都市VS田舎にしたくはないですが
    {原子力|水力}発電所の近い辺境に置けないもんかね、と思ってしまった次第ですよ。

    この件でデータセンター事業者も、間借りしているサービス運営者もデータセンター分散を真剣に考え始めるでしょうけど、結局さくらが東京大阪に分散二重化しましたとか、運営者が複数データセンター事業者にサーバー分けて置きましたとかなって終わるのかな。
    # 安全保障(軍事)上、東京大阪なんて最たる狙われポイントじゃ...

  • seesaaもだめだね (スコア:2, 参考になる)

    muon (34865) : 2008年12月19日 22時35分 (#1477002) 日記
    トップに
    SAKURA Internet // 2008年12月19日 障害発生のお知らせ「西新宿データセンター」
    http://www.sakura.ad.jp/news/archives/20081219-001.news [sakura.ad.jp]
    現在、サーバーセンターの障害は復旧しておりますが、正常にサービスの提供を行うため、弊社内において検証作業を行っております。
    ご迷惑をおかけいたしますが、今しばらくお待ちいただきますようお願い申し上げます。

    となってるのでここも影響しているみたい
  • 弊社でも、SPAM メールの急激な減少と、SSH 辞書攻撃の減少が観測できました。

  • さくらインターネットはコロケーションサービス (ラック貸し) もやっています。

    --
    HIRATA Yasuyuki
  • なつかしいですね。> Debian NOC炎上

    今回もGREEやsonet blogがダウンしたことで、なるほどあそこにサーバがあるわけか、と分かったわけですが、Debianの時も日頃お世話になってたサーバが、ホスト名という名前だけでなく、はるか遠い設置場所にある実体を持つものとして感じられるようになってちょい感慨深かったです。
  • 13個のコメント が現在のしきい値以下です。

このページのすべての商標と著作権はそれぞれの所有者が有します。 コメントやユーザ日記に関しては投稿者が有します。
のこりのものは、© 2001-2010 OSDN です。