au by KDDI、LTE障害の原因判明　ソフトのバグと機器が同時故障。4月の教訓いかせず

ＫＤＤＩ、ＬＴＥ障害の原因判明　ソフトと機器が同時故障
2013/5/31 16:17

　ＫＤＤＩ（ａｕ）の高速通信サービスである「ａｕ　４Ｇ　ＬＴＥ」の回線が５月29日と30日に相次いでつながりにくくなる通信障害が起きたのは、
ネットワークの改修作業中に通信機器の故障とソフトウエアの不具合（バグ）が同時に起きたことが原因であることが分かった。
同社では４月にも大規模な通信障害が発生しており、その教訓を生かし切れなかった格好だ。

■ハードの故障とソフトのバグが相次ぎ発生
決算会見で通信障害に関して説明するＫＤＤＩの田中孝司社長(４月30日、都内で)
　今回の障害では、東京・神奈川・山梨の１都２県で、
29日は最大56万回線が18時間弱、30日は最大64万回線が11時間弱にわたってＬＴＥ回線に接続しづらくなっていた。
低速の３Ｇ回線には障害が起こっていないものの、ＬＴＥ回線の障害に伴い利用が集中し、３Ｇ回線もつながりにくい状況となっていた。

　ＫＤＤＩによると、２件の障害はいずれも東京都多摩市の同社ネットワークセンターに設置してある「基地局制御装置」の不具合が原因。
基地局制御装置は、各地の基地局に割り当てる電波のチャンネルなどを集中管理する装置である。
　同社では、４月27日にも１都２県で約６時間にわたりＬＴＥがつながりにくくなる障害があり、原因が基地局制御装置のソフトウエアのバグであることが判明している。
このため５月29日未明、不具合を取り除くためのソフトウエア更新作業を行っていた。
更新作業は、障害発生に備えて２重化してある基地局制御装置のうち一方を実運用から切り離して行っていた。

(続く)
http://www.nikkei.com/article/DGXNASFK3101Y_R30C13A5000000/?dg=1
http://www.nikkei.com/content/pic/20130531/96958A9C93819499E1E3E2E38B8DE1E3E2E7E0E2E3E1E2E2E2E2E2E2-DSXBZO5568552031052013000001-PB1-10.jpg

ソフトバンクかとオモタ

>>1の続き

ところがこの際、１系統だけで本番運用していた方の基地局制御装置でネットワークカードの故障が発生。
これを受けてソフトウエア更新作業を中止し、もう１系統を本番運用に戻したところ、今度はこの系統で、修正しようとしていたソフトウエアのバグが発生した。
その結果、２系統とも運用できなくなり、半日以上ＬＴＥ回線がつながりにくい状態となってしまった。
　29日の障害は同日深夜に復旧したものの、翌30日の午後に障害が再発。
この原因は特定できていないものの、「原因となったのは29日の障害と同じ基地局制御装置」（ＫＤＤＩ）としており、同社で関連を調べている。

■４月のメール障害と原因・経過が類似

　同社では４月16日、アップルのスマートフォン（スマホ）「ｉＰｈｏｎｅ（アイフォーン）」で電子メールのリアルタイム受信ができなくなる障害が発生。復旧が19日までずれこみ、最大288万人に影響を及ぼす事態を引き起こしていた。
この際も、メールシステムの更新に向け２重化していたシステムの一方を切り離した際、もう一方のシステムに障害が発生したことが一因だった。
前回の電子メールシステムと今回の基地局制御装置では機器が異なるものの、障害の原因や経過には類似性がある。
　ＫＤＤＩはその後、システムを更新する際に作業手順書の確認や模擬システムでの予行演習などを徹底するとしていたが、こうした手順の見直しだけでは防ぎきれなかった。
電子メールシステムについては、２系統で同時に障害が起きても迅速に復旧できるよう、手順の見直しによる復旧時間の短縮やシステムを増強するとしていたが、
今回の基地局制御装置は対象となっておらず、結果として前回の大規模障害の教訓を生かし切れなかった。

(終わり)
http://www.nikkei.com/article/DGXNASFK3101Y_R30C13A5000000/?dg=1

NICが蟹だったんだろうなｗｗｗ