Getting Things Done!

大きな夢は目の前にある1つ1つの小さなことをこなしてこそ達成される

スポンサーサイト

上記の広告は1ヶ月以上更新のないブログに表示されています。
新しい記事を書く事で広告が消せます。

スポンサー広告 |

2日目の徹夜

くぅ~!!
今日は今日朝までに仕上げたサイトのリリース日。
日本時間22時(アメリカ時間6時)にサイトオープンなので切り替えまで別の仕事をして待機をしていたら、2時間半前に仕様の相違があってプログラムを変更。データ取得内容がかなり変更するために大変かと思ったけれど、さすが自分(笑)、今回の変更には対応できるように作ってありました。

それでもステージングサーバーでテストを行ったりで30分前までかかって、本番配置の準備完了が5分前でした。
迫りくるタイムリミット、まさにドラマの世界です!

無事にリリースが完了して、30分ほど本番で様子をみて問題なし。
別の仕事を終わらせて帰ろうとしとき、時間は23:30。
なぜかサーバーが重い。どのサーバーを見てもアップアップの状態。

げ、今回のサイトが原因かと思って色々と調べている中で次々とサービスが落ち始める。
ログをみるとクラスタリングされたTomcatが死んだり生き返ったりを繰り返している。
それにDBのコネクションも切れまくり。
なんですか、これ?な・ん・で・す・かぁぁ!!

時間は0:00を超えたけれど技術陣全員に連絡して調査開始。

原因はなんとDOS攻撃でした。
特定のIPからDB負荷のかかるリクエストが鬼のように来ていました。
早速このIPをブロックしてサービスを再起動。
平穏無事ないつもの状態へ戻りました。

マジで焦りました。
こんなときこそ冷静に対応しないとはいけないとわかっているのですが、いつものパターンに合致しないとき、打つ手がなくなるときというのは焦りますね。

それにしても頭きますねぇ、こういう輩。
まぁこのおかげで僕もシステムも1つ強くなりました(笑)

気づいてみたらとうに最終電車終了。
本日もオフィスへ泊りです(涙)
関連記事
スポンサーサイト

仕事 | コメント:2 | トラックバック:0 |
<<鼠先輩 おいた | HOME | ポンプ式シャワー>>

この記事のコメント

サイトのオープンの日にDOS攻撃とか来るんですねぇ。そっちの世界の敵はバグだけじゃないんですね…。

どうもお疲れ様でした。
2008-09-04 Thu 10:39 | URL | hashiken #dKEDg9H.[ 編集]
組み込みとは違いますね。
開発コスト、インフラコストを抑えるために最小限でシステムを構築をして限界を超える前に対策をしながら、少ないリソースで強固にする、ということを日々積み重ねていってますね。
年に1,2回大打撃を受けますがそのたびにシステムが革命的に進化するんですよ(笑)
2008-09-05 Fri 02:03 | URL | Azumin #-[ 編集]

コメントの投稿















コメント非公開の場合はチェック

この記事のトラックバック

| HOME |
上記広告は1ヶ月以上更新のないブログに表示されています。新しい記事を書くことで広告を消せます。