立川市役所の庁内LAN障害、原因は「Edgeブラウザーへの移行」

2022年6月27日、東京・立川市役所で大規模な通信障害が発生した。出先機関を含めた1000台以上のパソコンで終日、窓口作業ができなくなった。庁内LANの心臓部となるコアスイッチの障害が原因だった。コアスイッチに向けて大量の通信が発生し、メモリー不足に陥った。原因特定に時間がかかり、完全復旧に1週間を要した。 グループウエアの挙動がどうもおかしい――。東京都立川市役所の本庁舎内がざわつき始めたのは2022年6月27日、始業時刻である午前8時半ごろのことだ。ほどなく市役所のITインフラストラクチャー運営を担う総合政策部情報推進課のもとに、「窓口業務用の情報システムにアクセスしづらい」「内線電話が通じなくなった」といった職員らの困惑した声が続々と寄せられるようになった。 情報推進課はただちに障害箇所の特定に乗り出した。庁内ネットワークのメンテナンスを委託している保守事業者と連絡を取り合い、担当

[kubecorn]

無料部分だけ読んで全体知らんけど〜って言いながらコメントする意味がわからない。

[jun_cham]

これはEdgeがトリガではあっただろう。しかし、原因は設計の想定不足としておかないと適切な対策につながらないよね。「Edge禁止」みたいな意味不明ルールが作られてしまっては本末転倒。立川市には期待してる。

[hanajibuu]

ネットワーク設計が悪い。分割してないだろ。フロアスイッチの設定も全くしてないだろ。Edgeのせいにするな。

[me-tro]

原因は…ってあるけど、きっかけの間違いじゃないの？

[triggerhappysundaymorning]

有料部分読めないから理由がさっぱりだけど、マルチキャストパケットでパンクするスイッチ構成とか、冗長化してたけど二重化してないのでは疑惑とかそもそもネットワーク設計が駄目なのでは感…Edge関係あんのこれ？

[namisk]

市議会を職員自席で聞けるように、見積の上でマルチキャストを透過する設定していた。コアスイッチはメモリ不足で副系切り替えに失敗した。数十台で先行導入してNW負荷に問題なしと判断→全面導入。確認漏れかな？

[smbd]

"マルチキャストのパケットが大量発生" 無料部分だけではEdgeとの関連がわからん

[takanq]

「庁内の複数の端末からコアスイッチに対して特定の通信が大量に流入した」IGMPスヌーピング設定してなかったの?設定ミスならEdgeに全責任を擦り付けるこの声明はいかがなものかと...

[goingzero]

edge、デフォルト設定だとmsn.comのクソニュース（画像と広告アフィリエイト激盛り）が大量に表示されることがChromeユーザには知られてない要素

[TakamoriTarou]

「マルチキャストの発生源である可能性が高いのは(略)SSDP（Simple Service Discovery Protocol）というプロトコル」だそう。EdgeがChromeCast等をSSDPで探すからそうだが…。正直ネットワーク構成がまずいんでは。VLANしない理由が不明

[botchplus]

https://www.komei.or.jp/km/tachikawa-se-nobuhiro/files/2022/09/d5169638b8e9b2b587015ac46dd676b01.pdf

[mugicha1000]

庁内系が全断しただけなら番号系は動くはず・・・論理分割もしてないってことはないと思うんだけど🤔

[Sediment]

はい、読めませんでした。

[mebius_ring]

そうだ Mac にしよう

[minomusi310]

マルチキャストパケットの処理能力は、ユニキャストやブロードキャストと同じでは考えられないはず。そもそもそんなに発生しない想定だろうし。

[kei_ex]

動かないコンピュータという特集があるんだ

[tsutsuji360]

日本人のマイクロソフト嫌いは異常

[everybodyelse]

Edge開いただけでネットワークが死ぬなら、世の中のネットワークはみんな死にそう感ある。

[korin]

pay per viewで安値で記事を見る仕組み作って欲しい感じと公共案件を団体側が公開するなら公費でオープンなプラットフォームできないかなという気持ち。ネットワーク機器単品の設定で回避は難しかったかも。

[zgmf-x20a]

シン・ゴジラではなかったのね。

[matsui]

購読料ケチって10月からやめてたのが悔やまれる笑

[ysync]

重み付けて、死ぬべきとこはさっくり死んで全体には波及しないようにしとくもんやろ。

[hinaloe]

GPOとかで制限すれば回避できるとかなんかな、そんなの原因わかるまで知らんがなって話だけど……

[ot2sy39]

「コアスイッチは7台構成で冗長化してあった」とあって、へぇどんな構成だろうと興味を持ったが、図を見るかぎりスタック構成のコアスイッチ1組（2台）と、フロアスイッチ5台じゃん。

[kura-2]

外資系の会社は自宅からリモートじゃないの。知らんけど

[fn7]

ただのブラウザがなぜそんな通信を

[securecat]

マルチキャストなんか使いたいやつが使いたい時にだけ発動すりゃいいのに自動で送信するEdgeとかどういうユースケース想定してんの？ってのはあるな

[instores]

マイクロソフトやアップルの社員は高度に管理されたネットワークの中にいるから一般企業レベルでの問題に気が付かないのかもね。

[rasp_40]

内線とごちゃ混ぜなネットワーク

[king-zessan]

「そういうわけで当市では今後もIEを使用します」「いや、その……」

[wumf0701]

無料部分だけでもちょうどいいボリュームなので続きが気になるな…。ちょびっとしか読ませずに有料リンク貼られるより上手いやり方だ。

[fashi]

昔Skype使ってるだけでルータに過負荷掛かるって怒られたことあったな

[te2u]

ネットワーク構成が悪いというのは１つあるし、Edgeがきっかけなら、それを引き起こしたEdgeが悪いというのも１つある。構成が悪くても今まで問題が起きていなかったわけだし。

[ys0000]

原因じゃなくてトリガーだよね、という感じ。

[yn3n]

これ見たIE使ってる他の役所は切り替えをためらうようになりそう

[strawberryhunter]

「7台構成で冗長化してあったがバックアップは機能せず、スイッチ全体が停止」冗長化あるある。mDNSかしら。

[sd-craft]

ブロードキャストで死ぬってなんかチョイチョイ起こるよなあ

[kitamati]

立川市役所のページには何も記載がないな。このあと事故調の感じで報告書が載るのかな？

[kaiton]

ブラウザのEdgeでマルチキャストが発生するのか〜なぜ？/ネットワークコンピュータを探しにいっているのか？昔にエクスプローラとIEが統合みたいに近いことがあった記憶が、

[takeishi]

原因はいちおうEdgeとしても、始業時にPCとブラウザを所内で立ち上げただけでネットが過負荷で落ちる設計ってどうなの