同日稼働の天国と地獄

ども。
ただ今、若干のオリンピックロス。担当ちゅんです。

2年間の月日を費やして準備してきた「自治体情報システムの標準化」。ついに昨日から、ガバクラ上での運用が無事にスタートしました。朝から構築ベンダーさんが複数名立ち合う厳戒態勢でしたが、大きなトラブルもなくスムーズな滑り出し。これまで丁寧に業務を進めてくれたベンダーさんには、本当に感謝しかありません。
一方、そんな一大イベントの裏で我々は何をしていたか。実は偶然(といっても、日程を決めたのは私ですが)「Boxの本格稼働」が同じ日に重なってしまったのです。標準システムの稼働日と、ファイルサーバの移行日を同じ日に設定してしまった自治体・・・。おそらく全国でも、うちだけではないでしょうか。

しかし、この移行が一筋縄ではいきませんでした。移行日の1週間くらい前から徐々にアクセスが増加し始め、先週末はついに「朝からBoxが遅い」「ファイルが開かない」といった苦情が殺到。人脈をフル活用して冷や汗をかきながら原因を探りましたが、無情にも「定時」のお知らせ。原因不明のままでは週明けの完全稼働は不可能。泣く泣く「完全移行は先送り、でも基本はBoxを使ってね」という、何とも歯切れの悪い苦渋の決断を下しました。

嵐のような一日が終わり、徐々に静かになっていく職場でしばし放心。「何のトラブルもなく稼働した標準システムとの差よ」と恨めしくBoxにログイン。すると、特に何もしていないのに、昨日までのような軽快な速度で動いていることに気がつきました。「まさか・・・」と思って動作検証していると、ネットワークベンダーさんから連絡があり「原因が分かりました。『人』です!」と。勤務時間が終了し、退庁された方が増えるにつれて、動作速度が目に見えて上がったのです。そう、原因はNATセッションでした。

詳細に調べていくと今回のセッション問題、庁内のルータなど機器が原因ではなく、我々がBoxへの通信を逃がしていたローカルブレイクアウト回線(プロバイダ側)に上限があったと。「契約中のプランで利用するIPoEで接続可能なセッション数を超過した」とのことで、そんな落とし穴もあるのかと。
「機器のスペック不足」でも「設定ミス」でもなく、ただただ「みんなで使いすぎた(セッションを張りすぎた)」というオチ。
これ以上はマニアックになるので割愛しますが、とにかく原因がわかればこっちのものです。急ぎ対策を講じた結果、週明けには無事に軽快な速度でBox運用を開始できました、というご報告です。新システムの稼働時のトラブル。何度経験しても、これだけは慣れないものですね。

Boxなお、本格稼働までの準備期間で800GBも増えた模様。

(投稿者:ちゅん)

カテゴリー: つぶやき パーマリンク

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です