起きる。メルルー落ちてる

朝起きてメルルーのレベル上げでもしようかと思ったらまた落ちてます。
2chによると、4:30くらいから落ちてる模様。
会社に電話すると、プログラマ以下スタッフがてんてこ舞い。

でもデータセンター側の問題らしく、こっちではどうにもならないので最適化するくらいしかやることがないのだとか
仕方ないのでデータセンターの責任者に直電を入れてたたき起こし、緊急に対応中です。

メルルーは僕の人生の中ではケータイ処女作の「釣りバカ気分」を上回る会員数の伸び率&アクセス数で、しかも時代は9.6Kbpsの時代から、384Kbpsの時代へと進化し、ゲーム内容的にもリアルタイム性が強くなったため、おそらくドワンゴとしてもこれまで経験のないくらい大量のアクセスを捌くことになっています。

ケータイの場合、通常のPCのゲームのように複数のゲームサーバが用意されて世界が別れていることは想定されていないため、データベースへのアクセスが凄いことになっています。このデータベースのチューニングを昨日の早朝行い、7倍の高速化をしたのですが、今度はあまりのアクセスの多さに、ケータイと通信するHTTPサーバが落ちてしまったようです。

これを完全にカバーするためには、ソフトウェアのチューニングだけでは無理で、ハードウェアの調達と冗長化が必要です。

昨日の記録では、最高700人が同時にゲームをしていたらしく、これはなんとか捌いていたのですが、今回はApacheがなにかの拍子にパンクしてしまったようです。

会員数の伸び率が、たぶんドワンゴのコンテンツ史上空前のもので、無料サイトということを加味しても、まあちょっと予想不能でした。あまり具体的な数字は掛けませんが、「ドラクエか!」というくらい来ています。無料って凄いですね。

・・・と、ここまで書いたら復旧したらしいです。

うーん、しかしまさかこれほどとは・・・