東京119番障害、原因は職員がうっかりネットワークをループさせたため

このエントリーをはてなブックマークに追加
1 あるるくん(catv?)
 東京消防庁は7日、災害救急情報センターのシステムが故障し、都内の119番が4時間半に
わたってつながりにくくなった問題で、「職員がLANケーブルの接続方法を誤る人為的ミスが
トラブルの原因」と発表した。同じ原因で予備システムも作動しなかった。松浦和夫警防参事は
「都民に大変ご迷惑をおかけし、不安を与えたことを深くおわびします」と謝罪した。

 東京消防庁によると、故障したのは119番の受信後に出動可能部隊を自動的に探す
コンピューターシステム。しかし、システム内の分岐装置(ルーター)を調べたところ、
LANケーブルの両端が誤って同じルーターに接続されていたことが判明した。
誤接続後、循環して増幅したデータが大量になり、処理しきれなくなったとみられる。

 さらにバックアップ装置も影響を受け、切り替えられなかった。ケーブルを誤接続した
職員や時期は調査では判明していないが、09年までは、ケーブルの先端はパソコンに
つながっていた。その後、このパソコンを利用しなくなったため、未接続の状態になっていたとみられる。

 東京消防庁は再発防止策として、使用しないケーブルの接続口にキャップを付けて
誤接続を防ぐことに加え、接続を間違ってもシステムの主要部分に影響を与えないよう
にする方法も検討するとしている。【小泉大士】

http://mainichi.jp/select/jiken/news/20110108k0000m040073000c.html
2 ぼっさん(埼玉県):2011/01/07(金) 22:27:58.80 ID:dU/AQPVE0
3 ぶんぶん(佐賀県):2011/01/07(金) 22:29:57.53 ID:uyNM9iFx0
>東京消防庁は再発防止策として、使用しないケーブルの接続口にキャップを付けて
>誤接続を防ぐ

あまりのお手軽防止策にフイタ
4 きのこ組(catv?):2011/01/07(金) 22:30:24.59 ID:r2QqH1o3P
あるある。
再起動させても、だめだろうね。
5 おたすけケン太(チベット自治区):2011/01/07(金) 22:30:44.93 ID:azgsCYT+0
うっかりすぎる
6 タヌキ(福岡県):2011/01/07(金) 22:31:17.60 ID:0xfy8DBr0
抜けてるLANケーブルを見かけるとつい・・・ね
7 御堂筋ちゃん(鳥取県):2011/01/07(金) 22:31:28.76 ID:Nb/weSWG0
今ってループしても変なパケットは破棄する機能が付いてるんじゃないの?
8 エチカちゃん(三重県):2011/01/07(金) 22:31:35.58 ID:G2la4Rsm0
スパニングツリーとかないのか
9 サンコちゃん(愛知県):2011/01/07(金) 22:35:01.69 ID:xUCUORT+0
うちの会社も最近ネットワークループで、システム障害が発生した

研究室時代も管理者がネットワークループをうっかり発生させたら、大学のネットワークから強制遮断された
10 きのこ組(catv?):2011/01/07(金) 22:40:12.42 ID:r2QqH1o3P
保守やつらは、行ったら怒鳴られたんだろうな。
可哀想に。
11 サンコちゃん(愛知県):2011/01/07(金) 22:45:12.55 ID:xUCUORT+0
うっかりにしても、クリティカルなシステムで一般職員が無闇に触る物ではないな

12 ホックン(チベット自治区):2011/01/07(金) 22:45:49.14 ID:3K+PyMdQ0
無限ループってこわくね
13 きのこ組(チベット自治区):2011/01/07(金) 22:48:42.75 ID:mN/waCisP
ループをカットするためにスパツリとその派生プロトコルがあるわけだが
スパツリ自体がL2トラブルの主要原因になってたりするからタチが悪い
14 みやこさん(神奈川県):2011/01/07(金) 22:49:49.44 ID:1tD9j1cX0
抜けてるケーブル見つけて「やばい、とりあえずここに刺しとくか」ってなったのか。
15 ちかまる(愛知県):2011/01/08(土) 00:14:49.75 ID:ziEUfEKh0
>>14
のようだな

 このケーブルは、端末を増設する時に備え、片方は中継装置に接続し、もう一方は使用されない状態になっているはずだった。
ところが、両端とも中継装置に差し込まれていたため、システム内で無限に情報が循環し、処理能力を超えたらしい。緊急時に
作動するはずの予備のシステムも機能しなかったという。

 再発防止策として、使用していない接続口にキャップをつけるという。同庁は「未接続のケーブルを見つけた職員が勘違いして
差し込んだ可能性がある。ご迷惑をおかけし、深くおわびする」と陳謝した。

http://www.asahi.com/national/update/0107/TKY201101070468.html
16 陸上選手(チベット自治区):2011/01/08(土) 00:22:04.19 ID:RKZG/2/50
金かけてないネットワークだと、ループ発生で涙目になるな。

同じスイッチにケーブルの両端刺さってるぐらいならまだいいが、部屋をまたがってたりすると、
1個ずつスイッチの電源切ってしらべたりすることになる。
経験した最悪のループは、VLANまたがってた。
17 陸上選手(チベット自治区):2011/01/08(土) 00:23:20.21 ID:RKZG/2/50
> 東京消防庁は再発防止策として、使用しないケーブルの接続口にキャップを付けて
>誤接続を防ぐことに加え、接続を間違ってもシステムの主要部分に影響を与えないよう
>にする方法も検討するとしている。

前半の対策は、なんの意味もないだろ
18 ビバンダム(catv?):2011/01/08(土) 00:43:33.38 ID:sN0UGRJk0
ルーター自身で検知しないのかよ
19 ハミュー(東京都):2011/01/08(土) 00:46:06.07 ID:HlaLSx2xP
何の為にスパニングツリープロトコルが有ると思ってるんだよ
ろくなネットワークエンジニアがいねえのか消防には
20 せんたくやくん(東京都):2011/01/08(土) 01:29:46.37 ID:NO/SsudX0
使用しないLANポートにキャップつけるんだろw
記者がお馬鹿な気がするが
21 ハミュー(東京都):2011/01/08(土) 01:39:19.94 ID:HlaLSx2xP
>>20
いやポートセキュリティ使えよ・・・
22 株価【0】 akunecity チップちゃん(鹿児島県):2011/01/08(土) 01:40:33.21 ID:F+wx1Bb/0
うっかりならしょうがないな
23 ポコちゃん(神奈川県):2011/01/08(土) 01:43:10.12 ID:cOFsVNDj0
スパニングツリーくらい設定しとけよ・・・
24 きのこ組(西日本):2011/01/08(土) 01:43:11.38 ID:JlnkOtzM0
素人が触る事があるんだったら、ケーブルにマーキング入れろよ。常識だろ
25 UFO仮面ヤキソバン(広島県):2011/01/08(土) 01:44:29.23 ID:1COzqABq0
掃除のおばちゃんが汚れが気になるとLANケーブルを全部抜いてくれて
そのあとバラバラに接続してくれるとかよくある
26 じゅうじゅう(神奈川県):2011/01/08(土) 01:44:45.48 ID:qi4ePC130
社内ネットワークって星型か丸くなってんじゃないの?
27 コン太くん(東京都):2011/01/08(土) 01:46:29.25 ID:KJL+rVIn0
穴があったら入れたくなっちゃうwwww
28 ハミュー(東京都):2011/01/08(土) 01:47:48.98 ID:HlaLSx2xP
なんかこんな感じじゃ冗長化もろくにされてなさそうだな
CCNA持ってるレベルなら誰でもできる程度のこともやれてないみたいだし
29 雪ちゃん(長屋):2011/01/08(土) 01:48:52.15 ID:cHBdiUv7P
俺の頭の中もループしています
30 セフ美(神奈川県):2011/01/08(土) 01:50:32.04 ID:hB4A+cni0
失敗する方法があれば誰かがそれを必ずやる
31 ハミュー(空):2011/01/08(土) 01:52:06.72 ID:6IynM6grP
うちの安もんの牛のルーターでもループ防止機能付いとるぞ
32 カッパ(三重県):2011/01/08(土) 01:52:46.78 ID:38FKc1BB0
どんなHUB使っていたんだよ。
ルーター機能で普通解決できるだろ。

公務員はバカなだな。
33 だっちくん(千葉県):2011/01/08(土) 01:53:48.61 ID:cox1O5lb0
中の誰かが始末書書いたんだろうな。
と、明日休日出社して始末書を書く予定の俺が言ってみる。
34 ミルーノ(愛媛県):2011/01/08(土) 01:54:32.83 ID:8YFUlRX20
ループってネットワーク構成によっては
原因追及がものすごく難しいんだぞ 安易にやっちゃだめ
35 ハミュー(東京都):2011/01/08(土) 01:57:33.65 ID:HlaLSx2xP
ブロードキャストストームとかスプリットホライズンとかループ周りの用語は中2っぽい技の名前みたいでワクワクするよな
36 ぶんぶん(神奈川県):2011/01/08(土) 02:16:39.20 ID:PvEqGyoP0
>>32
CISCO使わないで家庭用の安物製品で回してたんじゃないの
37 雪ちゃん(埼玉県):2011/01/08(土) 04:22:30.18 ID:d2VlqhjWP
俺も4日前にそれして部長にボコボコにされたわ
38 ワラビー(チベット自治区):2011/01/08(土) 08:59:12.56 ID:Jx9eS+iN0
コアネットワークは当然スパツリとかループにならない冗長構成で組むけど
末端のノードがつながる部分はノーガード戦法なことも多いよ。
リンクアップ時にスパツリでポートがブロックされるのいやだから。
39 なるこちゃん(catv?):2011/01/08(土) 09:33:40.20 ID:E3UNqglp0
東京ってインフラぜいじゃく
40 緑山タイガ(dion軍):2011/01/08(土) 09:38:38.22 ID:TQvxddvT0
こないだうちでもあったわ。
同じように、よくわかってない人が「何か抜けてるし挿しちゃえ」でループ。
他所でもあってほっとした。
41 ココロンちゃん(長屋):2011/01/08(土) 13:28:10.82 ID:5xSenKOli
キャップ付けるとかそんな問題じゃないだろ。
この状態で予備に切り替わらなかったのを何とかしろよ。
例外が発生したら不具合起きる箇所幾つもあるんじゃねーの?
42 りぼんちゃん(チベット自治区):2011/01/08(土) 17:23:10.19 ID:anELu2lj0
池沼か
43 ニッパー(catv?)
使ってないポートは不活性化しておけよ、素人じゃあるまいし。