モンスターカレンダー

« 2007年4月 »
123456789101112131415161718192021222324252627282930

2007年4月アーカイブ

 今年のGWはまるまる休める感じだったのだが・・・。一応記録。

 4/30。3時くらいにホテル入りをして、シャワーを浴びてうとうと。5時半にロビー集合でタクシーで現場入り。ひたすらトリガーとなる現象待ち。ほかにやることは基本的には無いのでうとうとしながら待機。

 11時過ぎにトリガーの現象発生。システムが無事に動いていることを確認。客先報告等をすませあとはひたすら待機。システム全体の確認をしつつも大体終わるとやることもなく。

 16時ごろに客先説明のためにこのシステムのプライムメーカの部長さんが現場着。ご迷惑をかけたことを謝罪。

 18時ごろには現場を離れる。ただし1時間以内の対応圏内体制は維持。

 今年のGWはまるまる休める感じだったのだが・・・。一応記録。

 4/29。朝は現場行きのバスを間違えてしまい遅刻。福岡の路線バスは平気で都市内高速に入ってしまう。しかし本数が多いのでそんなに困ることは無い。さすが西鉄。

 昨夜のモジュール入れ替えは無事に終了したようだが、相変わらずトリガとなる現象は発生せず、その影響により発生した今回の障害の改修が有効になっているのかの確認が本番環境でできない。ひたすら待機。

 昼食後、現場に戻る途中ボスから電話があり、別のシステムで障害が起こっている可能性があるから確認してほしいという。この別のシステムというのは僕が1年以上手がけて半年前にリリースしたシステムだったのだが、あせってリモートで確認するとどうもおかしい。このシステムはとある会社がプライムメーカーとして受注し、その下でうちの会社がほぼ全面的に構築したのだが、まだその会社からの指示は無いので、待機。とりあえず現地に行くことになることを予感したので飛行機の予約だけ済ます。

 しかし、年に何度かはシステムの障害は起こるのだが、どうも集中したり時期が悪かったりしますね。誰かが障害のリモコンボタンを押したかのように、このGWは障害が集中しました。ソフトのバグもありましたが、ハードウェアの故障も重なるなど確率的に低いことが集中しましたね。

 16時の飛行機で羽田に移動。それから移動して20時には現場着。そのころには原因も判明していて、客先説明などの準備に取り掛かりました。原因は設定漏れだったのですが。リリース管理の問題だったので一番凹みますね。

 社内での確認等を終えて22時に切り替え。その後待機なども含め2時に現場を離れてホテル泊となりました。ただし1時間以内で現場入りできる体制を維持し、6時には現場に再び入れとの客先指示。

 この関東移動がなければ、福岡が片付いた後にそのあと九州を一周しようと思っていたのに。

 今年のGWはまるまる休める感じだったのだが・・・。一応記録。

 4/25ハードウェアの故障で大宮近辺に日帰り対応した後、GWに予定が何も無くて途方にくれながら連休前の仕事をしていたところ、4/26福岡で障害発生。4/27になっても原因つかめず4/28派遣されることに。直接は関係していないPJだったが、同じチーム内の問題なのでいつでも誰でも飛ばされます。

 この業界は24/7いつ電話があるかわからないので、ノイローゼになる人も多いとか。僕の場合そんなに多いわけではないので大丈夫ですが、とりあえず何かどこかで発生したときに最初に飛ばす人リスト(うちのボスの頭の中にある)のかなり上位に載っているっぽいので、すぐにすっ飛ばされます。とりあえず火消しの能力はあると見られているみたい。

 4/28。前日飛行機予約していたが、決済するのを忘れてやむなく新幹線で福岡へ。GW初日で、行楽地やふるさとへ行く人でにぎわう新幹線ホームをスーツでかき分けるむなしさであります。ABC・MBS・YTV・NHKのカメラもいましたね。KTVは見なかったけど。福山まで座れず泣きそうになりました。

 午後一で現着。前日のログ解析で大体当たりはつけていたけれど、現象が収まってしまい確認できず待機が続く。その後、問題の部分を製造・改修していた協力会社がちょうど福岡なので改修内容のコードレビューで出向いたりしてました。

 試験環境での確認まで付き合って、深夜のモジュール入れ替えまでの待機となりましたが、問題がはっきりしていることと、あくまで助っ人だったので日付が変わる前にホテル入りして休みました。

 結局NWが不安定になったときに起こりうるエラーのハンドルがまずかったのでした。

MovableType(MT)テンプレート 無料(フリー)
Powered by Movable Type 4.261