Cocolog、53時間の大規模メンテナンスに突入 56
ストーリー by yoosee
blogサービスは儲からなくて大変らしいですよ 部門より
blogサービスは儲からなくて大変らしいですよ 部門より
CocologベーシックユーザーのAnonymous Coward 曰く、
レスポンスの悪化やシステムバージョンアップの方法にユーザーの不満が出たり、先日48時間の大規模メンテナンス(時間は予告。実際は47時間半で終了)を行ったCocologが、今度は、前回を上回る53時間(予告)の大規模メンテナンスに突入した。対象はココログベーシック、プラス、プロ。ココログフリーのユーザーも一部影響を受ける。期間は12月5日(火)10:00から12月7日(木)15:00まで。
今回はシステムのバージョンアップに加えて、負荷分散を目的としたデータベース分割が行われる。メンテナンス中も閲覧は可能だが、投稿(moblog、XML-RPC/ATOM API経由も不可)、管理だけでなく、一部時間帯ではカウンターも動作しない。詳細はお知らせCocologの当該エントリを参照されたい。
それにしても、丸二日以上のメンテナンスは知名度を考えると異例ではないだろうか。ユーザーとしては、一刻も早い作業の完了を期待する。
通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:5, 参考になる)
BLOGの更新トランザクションやユーザの増加量というのは、おそらく一般ユーザの方が皆さんが思っているより多いです。
ほとんどのBLOGサイトが予算も期間もないために、スケーラビリティが確保できないまま見切り発車でスタートして今日を迎えている状態だと思うのですが、そんなシステム構成でそれなりの負荷分散対策を行うとなると、DB構造の変更・分割など結構根本的なメンテナンスが必要です。
その際に一括してDBのコンバートを行わないと一貫性が崩れるなどの理由で全面的に止とめざるを得ないというのは、よくある話かと。
#まあ、構成にもよるのでしょうが、せめて銀行のように深夜や年末などにメンテのために停止ができるのなら、もっと色々できるのになぁ、と思うことが多々あります。
#その点、mixiはなんだかんだ言ってすごいと思いますよ。
一般的にBLOGって裏方では様々な策を弄さないとならないわりに、予算がつかないので、担当者は大変だろうなぁ、と。。。
正直、閲覧が可能なだけでも頑張ってると思います。
#関係者じゃないけど、生暖かく見守って欲しいのでAC
Re:一度失った信頼の問題かと (スコア:2, 興味深い)
予定通りに終了しないことだと思います。
ココログは過去に、メンテを何度も延長して、障害に突入したことがあります。
このときの、メンテ延長や障害の報告が遅い、ブログから障害が分からない、
という後手後手の対応は多くのユーザーに不信感を残しました。
当時の障害お知らせブログ(臨時)のコメントには、
「丸一日以上編集できないなら、閲覧不可にして」という意見も。
この頃のココログは実際にレスポンスが重くて、
一般ブログが障害でも、有名人用のセレブは通常運用だったり、
後発の無料版「フリー」が有料版より高機能だったり、
古いユーザーほど不満が大きかったようです。
# 7月の大規模メンテ以降はだいぶよくなったと思います。
# デザイン目的だけでプロ(998円/月)使ってる方をお見かけすると、
# ココログは割高だなと、思ったりします。
# そういう自分はプラスです。プロにするならTypePadに引っ越したい。
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0)
mixiはスケーラビリティーを優先して、機能を犠牲にしているだけですよ。
mixiの機能ってどれも単純な仕組みじゃん。
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:2, すばらしい洞察)
「最小限の手間」で「最大限の効果」って、大成功じゃね?
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:1)
パフォーマンスとかユーザービリティーとかも、
満足させるべき必須の機能の一つだと思うんだが。
>「最小限の手間」で「最大限の効果」って、大成功じゃね?
右に同じ。
実際にはその逆の事例の方が多い罠。
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0)
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0, 荒らし)
>53時間というのも分からなくはありません。
(以下略)
53時間が妥当な数字なのかは、どういう作業をするかが
公開されていない以上、推測で判断するしかないですが
cocologのデータ全てを処理するのにどれだけ
そんなにかかるものなのでしょうか。
また作業時間をなるべく短くするような手順は
考えられなかったのでしょうかね。
例えば、全部ストップさせて長時間かけて全部やるよりは、
メンテ範囲をいくつかに分割して、一つ一つは短い時間で
やるとか、メンテまでの全て
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0)
# 面白いIDほとんど居なくなっちゃったから、間抜けなEの字とスラド遺産のSethタンくらいしか目に付かん
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0, 余計なもの)
>考慮する位には賢くなっても良いと思うぞ
いや、だから、
>できることは全てやった上で作業するのかも知れませんし、
と書いているじゃないですか。
ちょっとした長文を読める位には賢くなっても良いと思うぞ。
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0)
#言いたいことわかるし、これくらいならレスせんでもスルーできるって。
Re:通常の個人HPと比べたら負荷が違いすぎるんで・・・ (スコア:0)
>メンテ範囲をいくつかに分割して、一つ一つは短い時間で
>やるとか、
これを可能にすることが、メンテナンスの目的そのものです。
どこがウィークポイントになってるの? (スコア:2, 興味深い)
Six Apart - TypePad: TypePad ASP (タイプパッド ASP) [sixapart.jp]
復旧って言うのかな? (スコア:1)
'復旧に期待'てのも若干おかしいような?
cocologは使っている知り合いもいるのですが、
重いおもい~って言っていたので、これで快適に
なってくれるといいですね。
Re:復旧って言うのかな? (スコア:1)
以前の実績として予告時間より早めに完了していることがあるようなので、修正をした上で当該文自体はそのまま残します。
Re:復旧って言うのかな? (スコア:0)
# 元に戻られたら意味ないですね。
Re:復旧って言うのかな? (スコア:0)
>cocologは使っている知り合いもいるのですが、 重いおもい~って言っていた
よく重いって言われますけど、私は一度もそういう場面に出会ったことないんですよね。ライトユーザーなのかな。他のユーザーはどうなんでしょ。
Re:復旧って言うのかな? (スコア:2, 参考になる)
重かった理由はコメントスパムのせいではなかったかと思います。当時は一日何十とコメント
スパムを消さなければならなくてウンザリしてました。
#Insanely great!
#をかのゆ
Re:復旧って言うのかな? (スコア:1, おもしろおかしい)
なるほど、重いからヘヴィユーザと呼ばれるわけか。
Re:復旧って言うのかな? (スコア:0)
よく使う人ほど、サービス止まったら青くなって
「藁」をもつかむ思いでリロードするんですねw。
#判りにくい
Re:復旧って言うのかな? (スコア:0)
保存公開処理をすると
「直前に行った操作が原因でエラーになった」という画面になり、
仕方なくブラウザで前のページに戻ると、再読み込みされてしまうために
最終保存から今回の保存までのあいだに加えた変更などがすべて無に帰す
ようなことが起こります。
これはシステム負荷が高くなったときに発生するそうです。
ならそのように表示するべきだし、消えるのがわかっているのだから
消えないように「再読み込み」をしなければいいだけなんだけど。
いつ消えちゃうのかわからないのではどうにもこまります。
別のエディタなどで書いておいてそれをコピーして…とかのアドバイス
をユーザーサポートはしていていますが、あくまでも正常に処理できな
いことが問題なのであって、そのせいでユーザーに面倒を強いるというのは、
正気ではありません。(一例として提示しただけ…と言い張りますが)
Re:復旧って言うのかな? (スコア:0)
サーバー資源は無限じゃないんだから。
不可分散のために受け皿を増やすこういうメンテナンスは
そのうちどこでもやるようになるだろうな。
大手の沽券を賭けたのか何なのか知らないけど
こういう抜本的な対策をいち早く取ったNiftyは偉いもんだと思う。
後続は意地でも53時間以内にやることになるだろうし。
てかそろそろなんとかしてくれ >はてな
以下オフトピだけど、
読み込みのオーバーヘッドを当たり前のように強いるブログ。
加えてadsナントカだのアクセス解析だのと
いるんだかいらないんだか分からないものをゴテゴテつけられた日にゃ…。
ADSLにした時のインターネットの快適さはもう戻らないものなのか。
表示完了までの時間はISDNの頃と同じくらいかかってる気がするぞい。
Re:復旧って言うのかな? (スコア:1)
>こういう抜本的な対策をいち早く取ったNiftyは偉いもんだと思う。
社内のシステムに関係している人たちの一部から"対策の必要性がある"というアラートがあがってから、
実際の行動へのGoサインが出るまでの時間で早い遅いかは決まると思います。
ですから、この対策が早いか遅いかに関しては中の人にしかわからないと思いますよ。
#それよりNiftyのIPOとかぶせなくてもなぁ
2日以上連続で使えないのは困る (スコア:1)
でも、1日数時間ずつ動かしても、その時間帯に(更新の)アクセスが集中してうまくいかないのかも。
#はてなも似たような状況ですけどね
Re:2日以上連続で使えないのは困る (スコア:1)
そろえられるからまだマシなんですけどね。
Re:2日以上連続で使えないのは困る (スコア:0, オフトピック)
計画停止があるのかと思ったじゃないか、どうしてくれる。
残務処理 (スコア:1, 興味深い)
『バズワードを元に適当にそれっぽいプロジェクトを立ち上げて、対外的に成功を華々しくアピールし、自分の評価を高める。そして安定運用やクレーム処理などの面倒事が発生する前に抜け出す』そんな人は出世するんだろうなぁ。
残されたいい加減で適当なシステムを押しつけられた管理者に涙。
#ググったら、はてなのna○ya氏らしいのだが、確信が持てない@@@
Re:残務処理 (スコア:1, 参考になる)
Re:残務処理 (スコア:0)
えー、はてな関連は信者(とアンチ)が多いのでコメントは差し控えておきます。
#スルー力って流行んないね
#やっぱり >>2 のセンスは重要
Re:残務処理 (スコア:0)
それ、なんて小泉?
↓「Googleと空目した」 (スコア:0, オフトピック)
同じく (スコア:0)
空目 (スコア:0)
#ユーザだから?
Re:空目 (スコア:2, すばらしい洞察)
一から作り直すんじゃねーの orz...
@規模によってはそっちの方が早い場合も‥
Re:空目 (スコア:1)
1.サービス停止直後のバックアップ
2.予め用意したシステムのアップグレード
3.予め用意したデータ構造の変更ルーチンを通す。
4.再定義したデータのアップロード
5.エラーがでないか実際にテスト
2,5以外はどれも時間のかかりそうな作業です。
1.の事前に過去の記事のバックアップを取って差分を比較して差し替える方針より、
最初から一律に止めた後にバックアップした方が効率がよいのかも。
予めこのようなことが簡単になるような構造として構築していなかったので
「痛みのある構造改革」が必要なんじゃないですか?
Youthの半分はバファリンでできています。
図星 (スコア:1, おもしろおかしい)
関係者にとっては53時間耐久は事実かと。
ブラックのコーヒーと栄養ドリンクが友達だ。 orz
お知らせココログにコメントが付けられない件 (スコア:0)
動きがあるだけまし? (スコア:0)
日々スタッフが働いており、改良が重ねられていると言うのが分かって羨ましいです。
某ブログサービスではスタッフが1ヵ月近く活動しない(スタッフブログを更新しない)なんてことはざらです。
仕様変更があった場合は、それが小規模なら、ユーザーに告知しませんし。
先日起きた不具合では、対応について「随時本記事追記にてご報告致します。」といって、追記しなかったり、
その後「近日対応を随時スタートする」ことになりましたが、別の不具合が起きてしまいうやむやに…。
現在は、某ブログサービスの利用規約を、某ブログサービス自体が違反している
とユーザーから指摘があったのに、現在進行形で無視しています。
スタッフに動きがある(対応してくれる)だけましでは…?
Re:動きがあるだけまし? (スコア:0)
>とユーザーから指摘があったのに、現在進行形で無視しています。
どこよ?
隠す理由が分かんねぇ。
Re:動きがあるだけまし? (スコア:0)
#違うのかな?
スラド48時間停止のお知らせ? (スコア:0)
Re:スラド48時間停止のお知らせ? (スコア:2, おもしろおかしい)
Re:スラド48時間停止のお知らせ? (スコア:0)
Re:スラド48時間停止のお知らせ? (スコア:2, すばらしい洞察)
# つまり皆会社からアクセスしてると
まぐろたべたい
Re:お決まりの空目 (スコア:0)
#書こうとしたら書かれていたのでAC
Re:お決まりの空目 (スコア:0)
Re:お決まりの空目 (スコア:0)
一纏めの「せーの」でメンテなんかしない。
はてなとか、アカウント分けて年がら年中メンテしてるでしょ?
普通は分散するもんなのよ。
分散できない構成なのだとしたら、それが無謀。
Re:お決まりの空目 (スコア:2, すばらしい洞察)
その無謀な構成を分散できるようにするのが53時間なんじゃないかな。
ココログ メンテナンス失敗 (スコア:2, 参考になる)
http://info.cocolog-nifty.com/info/2006/12/127125127_114b.html [cocolog-nifty.com]
Re:ココログ メンテナンス失敗 (スコア:1, 参考になる)
http://cocolog-response.cocolog-nifty.com/blog/2006/12/127125127_114b.html [cocolog-nifty.com]
Re:ココログ メンテナンス失敗 (スコア:1, 余計なもの)
http://furukawa.cocolog-nifty.com/blog/2006/11/post_7959.html [cocolog-nifty.com]
と、それに続く懐疑の声のトラックバック。
そして、今日の罵倒のトラックバック。
また神経逆撫で発言でもしてくれるんでしょうかね。
(まずは変なこと書かないように、PC取り上げたほうがいいかも)