au系の通信障害（２）

11:00 頃から、KDDI 社長の記者会見があった。

発生事象の系列はまだ完全には
把握できていないとのことだが、
全国に18台もある VoLTE 交換機のうちの、
多摩にある１台の定期メンテナンス作業で、
ルーターを交換中に、トラフィックのルート変更をしたところ、
音声接続ができなくなるトラブルが発生し、
ルートを切り戻したが、再接続のアクセスが集中し、
どうにもならなくなったらしい。

そこで、流量制限をしつつ負荷低減を続けたが、
今度は、加入者 DB へのアクセスが増えて溢れ、
こちらも負荷低減をして、
溢れたことによるデータの不一致の修正をして・・・

と、玉突き状態で事態が悪化した模様だ。

7/3 11:00 現在、西日本は復旧作業終了
東日本は 17:30 を想定している、
とのことだが、作業が終了しても、
そのあと、徐々に検証しながら、
流量規制なども解いてゆき、サービス再開
ということなので、正常に戻る時間は
一律には言えないらしい。

１台の交換機での作業の影響が
ここまで全国に広がり、長時間続く、
というのはにわかには信じられない事態だが、
シミュレーション上は、ここまで酷いことには
ならないはずなのに、何らかの想定外の原因で
事態が悪化したのかもしれない、と言っていた。

その原因はまだつかめていないらしい。

たらればの推測だが、最初のトラブルの時点で
すぐに流量制限などをかければよかったのかもしれないが、
その決断ができなかったために被害が広がった
のかもしれない。

追記：17:45 頃、やっと音声通話できた。