Yahoo! Japanに障害発生、原因はロードバランサの物理障害 42
ストーリー by hylom
個人的にはあまり問題はなかったですが 部門より
個人的にはあまり問題はなかったですが 部門より
10月13日深夜、Yahoo! Japanにアクセスできなくなるという障害が発生した。hauncon 曰く、
Yahoo! Japanのトップにアクセスができなくなっている。繋がる場合でも画像が全くなかったり、かなりおかしな挙動。DNSの障害のような感じもするが、ちょっと原因は分からない。
という感じだったそうだ。
現在では障害は復旧しており、サイトトップには「昨日23時半より約1時間半の間、トップページがご利用いただきにくい状況でした。ご迷惑をおかけいたしましたこと、お詫び申し上げます」という謝罪文が一時掲載されていたとのこと(ITmediaの記事)。CNETの記事によると、障害の原因はロードバランサーの物理的障害だったそうだ。外部からの攻撃などの形跡は認められなかったそうだ。
0:53 (スコア:2)
11:40あたりからアクセス不能になっているようだ。さっきまでは、IP直打ちで何とかトップを見れるという状態だったので、DNSが怪しかったわけだが、つい先ほどからとりあえずアクセスは可能になりつつあるような感じ。ただし今のところイメージは全滅。
SONYもどうも落ちてる風味で何があったんだろうね。
Hauncon
Re:0:53 (スコア:2)
Hauncon
物理的な障害 (スコア:2, おもしろおかしい)
物理的な障害、かつ、外部からの攻撃などの形跡は認められない
→中の人が「ゴルァ、ロードバランサ、てめぇ(ドッカンドッカン)」
屍体メモ [windy.cx]
物理障害? (スコア:1, 興味深い)
Re:物理障害? (スコア:1, 興味深い)
IP直打ちだと表示してたのでその辺かも
Re: (スコア:0)
掃除のおばちゃんが、電源ケーブルに足引っ掛けたとか....
Re: (スコア:0)
DNSでIPアドレス回してるだけのロードバランサが壊れたのかな。そんなことあんの?
Re:0:53 (スコア:2)
DNSラウンドロビンとロードバランサの機能は別物かと思いますが
Re:0:53 (スコア:1)
しーっ
無粋ですよ(はーと)
Re:0:53 (スコア:1, 参考になる)
ロードバランサにも色々あります。一般的な、HTTPやHTTPSをバランシングするものもあれば、
送信元IPに基づいて、地理的、回線的に近かったり、もしくは今高速にアクセスできる
拠点のIPアドレスを返すようなDNSのロードバランシングもあります。
原因は負荷分散サーバの不具合だった (スコア:2, 参考になる)
>DNSの障害のような感じもするが、
拡散希望: JPRS広報からのお知らせ。13日夜に発生していたyahooなどにアクセスできないという事象( [twitter.com]http://bit.ly/cHK4vu [bit.ly] )について、JPRSのDNSの障害によるものという情報が一部で流れているようですが、そのような事実はありません。
JP DNSでco.jpのNSをひこうとして答が返ってこないのは、co.jpがDNS上でゾーンとして独立していないからで、正しい挙動です。詳しくはこちら。 [twitter.com]http://jprs.jp/tech/dnsuis/info002.html [jprs.jp]
Yahoo!JAPAN障害、原因は負荷分散サーバの不具合 [itmedia.co.jp]
ま昨夜はYahooショッピングでボーナスポイントキャンペーン [yahoo.co.jp](毎月第二水曜日22:00~翌2:00開催)がありましたし、先ごろ価格誤表示で休止になったバリバリ家電ヤフーショッピング店 [yahoo.co.jp]にアクセス集中したせいかなと。ま今日の昼間は知りませんが。
モデレータは基本役立たずなの気にしてないよ
オークション (スコア:2)
ヤフーオークションで大損した人がいると噂に聞いたのですけど、実際どうなんでしょう?
オークションは締め切り間際に値段が上がることが多いので、その時間帯誰もアクセスできなくなると、予想外の安値がついちゃった可能性があるのでは・・・
Re:オークション (スコア:1, すばらしい洞察)
それは開始時の値段設定に問題があっただけでは・・・
Re: (スコア:0)
出品者都合でキャンセルすれば良いんじゃないでしょうか
Re:オークション (スコア:1, 興味深い)
Yahoo側の問題なのでYahoo側で何らかの救済処置があるべきだと思うのですが。
落札者が既に支払いを済ましていたらもっとメンドクサイことに…
Re: (スコア:0)
> Yahoo側の問題なので
規約読んでないけどたぶんこういう事故に対して免責されていると思いますよ。つーかいくら途中で打ち切りになったとはいえその落札価格に不満があるのはおかしいですよ。最初から「この金額なら売っていいよ」という値段をつけろってだけ。それを怠って事故に巻き込まれたのだから、授業料として悪い評価は甘受すべきだと。
Re: (スコア:0)
じゃあ何でその価格で出したんだよ。
実際[非常に悪い]出品者だよそれは。
そういえば (スコア:1)
かなり昔にYahoo!Newsを見ていたらIISのエラーページが表示されたことがあったっけ。
そのときは会社で閲覧してたけど、うちの社内のインフラにIISは無く、どう見てもYahooがWindowsサーバをどこかで使用しているようにしか見えなかった。
今もY!ではFreeBSD使ってるのかな?
FreeBSD (スコア:1)
Netcraft What's That Site Running Results [netcraft.com]の結果はFreeBSDらしい。
DNSラウンドロビンとロードバランサ (スコア:1)
こういったものが障害で壊れるって通常ありうることですか?
普通なら壊れる前に入れ替えるんですよね?
ヤフージャパンの母体のソフトバンクさんって
価格で一生懸命がんばっているところですから
やっぱり限界ギリギリまで機器を使い続けてるのかなぁ?
財務内容も結構大変そうなので。
そっちの心配をしてしまいました。
Re: (スコア:0)
冗長化してても、その辺の仕掛けにバグがったり、これまた障害があったりで機能しなくなることがありますね。
かなりの数を多重化してても、連鎖的に死んだ例を見たことがあります。
もちろん、可能性は低いんですけど、無いとは言い切れないのが哀しいところ。
マルチベンダにして、複数種で構成すれば確率をかなり下げられますけど、割に合うのか考える必要があります。
Re: (スコア:0)
>>普通なら壊れる前に入れ替えるんですよね?
風の息づかいを感じろってことですね
Re:DNSラウンドロビンとロードバランサ (スコア:1)
(このコメント以外への返信者の方も)
そもそも「DNSラウンドロビンとロードバランサ」って
普通のPCに毛の生えたようなサーバーなんですかね。
私はYahooや大手ポータルサイトは
もっと信頼性の高いものを使っていると想定してました。
なおかつデータセンターや回線も冗長化していると。
まだ使えるうちに処分して秋葉の中古サーバー屋あたりに流れるのはそいつらだろうと。
そうでもないのが当たり前なんですかね?
壊れるって当然あるんでしょうがなんとなく違和感を感じたのです
>LBの二重化していない?
このコメントと同じ違和感です
もしかしたら高価な高信頼性のLBがで一台にしてるのかもしれないし
安いものを複数で冗長化しているのかもしれない
現状のアクセスの多い会社はどうしているのか知りたかったのです。
複数代の連鎖障害もありうるでしょう
が、それを想定してホットorコールドスタンバイがあり、
保守担当がすぐに切り替えるのが当然だと思ってました。
実際のところどうなんでしょう?
運用畑の人、教えてください。
Re:DNSラウンドロビンとロードバランサ (スコア:1)
運用畑ではないですが、運用畑の人と話をすることもあるのでちょっとだけ。
ポータルといってもさまざまなので、全体を高信頼性にするということはないですよ。今回も、ヤフオクのページは表示されなかったようですが、引き落としや決済は問題なかったわけで、お金にからむところは念入りだと思います。
LIVE-GON(リベゴン)
Re: (スコア:0)
Re: (スコア:0)
壊れてないものをいじるなって原則があってな。
酷使してるからそろそろ寿命だろうと思って交換したら初期不良品だった、なんてことになったら目も当てられん。
#普通はエージングすると思うがそれだって万能ではないし。
ヤフオクの終了が集中する時間じゃね (スコア:1)
Google使いには? (スコア:0)
Re: (スコア:0)
Googleが約40分間おかしな動作をした時に比べると、
やけに静かだったなぁと思った。
あのときは大騒ぎだった。
Re: (スコア:0)
素朴な疑問 (スコア:0)
次のニュースは (スコア:0)
Re:次のニュースは (スコア:1, おもしろおかしい)
「物理的障害」ときたら次は「化学的障害」でしょう。
Re: (スコア:0)
Re:次のニュースは (スコア:2)
#ありそうで怖い
Re:次のニュースは (スコア:1)
Re: (スコア:0)
経済学的障害にはなったんじゃないですかね
Re: (スコア:0)
先月もあったね (スコア:0)
yahoo.comのメッセージが出てた。リロードすると数回に1回出てきたんでLBか、
バランスされたサーバの1台が可哀想なことになってるのかと思ってたよ。
確か、f9.top.vip.tnz.yahoo.co.jp だったと思う。
7月にはセキュリティ証明書が不正な不具合が (スコア:0)
7月にはセキュリティ証明書が不正でログインできないという事象が発生していました。そのときも今回のように半日ほどだけお詫び文章を出して後は何事も無かったかのようにしていました。ヤフー!Japanがどういう会社か見せつけられたような気がしました。ニュースになっていないだけでちょくちょく不具合起こしているんだと思います。
いちおう中の人ブログで触れられてはいますが、普通の人はこんなの見ないでしょ。
【解決済み】ログイン不具合のお知らせ [yahoo.co.jp]
Re: (スコア:0)
「普通の人はこんなの見ない」で思ったけど、アマゾンでもこないだシステム障害があった
(表示がおかしいから問い合わせたら障害があったと言われた)
注文時にギフト券の適用を行ってもメールにはギフト券が適用された金額が表示され、
注文の履歴から見るとギフト券が適用されていない金額になってた
この時ギフト券はきちんと消費されてた
今直ってるかどうかは知らない。その後のメールは何も来ないから
アマゾンの場合ってどこでこの手の障害の告知行ってるんだろう
いちいち問い合わせないと分からないのか・・・
ヤフーは調べれば何とか分かるけど、アマゾンは内緒だからもっと酷いということか
負荷分散 (スコア:0)
ロードバランサのロードバランシングが必要ですね!(ぇ