～ ミネルヴァの梟は黄昏とともに飛び始める ～

　弊社の無料で利用できるWeb会議システム「SOBA CITY」ですが、4月2日にWindows Vista ガジェット / Yahoo!ウィジェット / iGoogle ガジェット / Google デスクトップガジェットを一斉にリリースしました。

　このガジェットにより、そこそこの新規会員を獲得できたのですが、日増しに「会議室（セッション）の一覧を取得するウェブAPI」のトラフィックが増え、本体のウェブサイトにも影響が出るようになってしまいました。

　昨日のメンテナンスでコア部分を高速化したものに置き換えたのですが、どうやら一部のページが正しく表示されていないといようだという事が分かり、朝から調査していたのですが、一部のjspファイルがwarファイルから正しく展開されず0byteになっている事が判明しました。

　とりあえず、全体が怪しいからもう一度デプロイをし直してみるものの展開作業が始まらない。。。今度は、全体が0byteという緊急事態になったので、JBossのデプロイヤーが停止していると判断し、不要ファイルを削除してJBossサービスのリブートをS君に指示。

　ブートログを流していると、Exceptionが発生！
続きを読む »

　最近、弊社の製品もマルチキャスト対応をしました。

　マルチキャストとは、複数個所へのデータ配信量を劇的に削減する技術の事で、例えば「ニューヨークとシリコンバレー」に同じデータを送信したい場合、宛先情報を２つ貼り付けたデータを１つアメリカ方面に投げます。同じ経路で送れる間は、そのまま送信し分岐が必要な場所（おそらく、西海岸付近のルータ）でデータを複製し、一方に「ニューヨークの宛先」もう一方に「シリンコンバレーの宛先」を付け、データを分岐させます。こうする事で、太平洋上を流れるデータ量がほぼ半分になります。

　この技術により、ADSLのような上り（送信）速度の遅い回線でも快適にウェブ会議をする事が可能になりました。

　ところが、中継システムに不具合があるようで、半日も使うとCPUが100%に張り付く症状が発生し、プロファイラにかけてみると一部のスレッドが暴走していることが判明しました。暴走の理由はソケットからのReadが永遠にトライアゲインエラーを吐き続けるというものでした。

　暫定対処はしたので、とりあえず安定して動作しているのですが、根本的な対策をする必要があり、負荷プログラムの作成が急務だったのですが、中継システムは改良に次ぐ改良で、正確なプロトコルドキュメントが存在していません。しかもどのドキュメントも使い物になりません。さすがに、30万行のソースコード（実行ラインで15万行）を読む元気もない訳で。。。

　しかも、エンドツーエンドで暗号化しているので、途中でパケットを拾ってもさっぱり分からないというのは結構困りました。結局、中継サーバからバイナリデータを抜き出し、バイナリエディタと関数電卓とを交互ににらめっこしました。プロトコルを解析しなんとか負荷プログラムを作成できました。準備に３日、解析に１日かかった訳ですが。。。

　みなさんちゃんとドキュメントは書きましょう　orz

　以前から放置していた、社内ブログ（wordpress）のDB（MySQL）を移行したのですがめちゃくちゃハマりました。

　もともとそのサーバには、他にもサービスが同居していた事もあり、MySQLにメモリを多めに割り当てていたのですが、そのサービス達も別のサーバに移行したため、ブログのためだけに大量のメモリを確保するDBが存在する事になってしまいました。

　データセンターに太い回線を引き込んでいる共用のDBサーバがあるので、ブログのDBもそちらに移行する事に決定。

　まぁ、DBの移行だからすぐに終わるだろうと思い、DBのダンプをとり、共用DBにリストア。さらにアクセス用のアカウントを作成。コンソールからネットワークを超えてアクセスしようとすると、反応が返ってこない。 続きを読む »