東証、障害の原因を特定 設定値に不備、切り替え失敗

日本取引所グループは同日、調査結果を踏まえ、再発防止策などを検討する調査委員会を設置した。委員長の久保利英明弁護士をはじめ、4人の社外取締役で構成する。 関連記事 東証、10月2日は通常通りの売買へ システム障害を起こし全銘柄の売買を停止していた東京証券取引所は、明日、10月2日は通常通り売買を行うと発表した。 東証のシステム障害、解消は「明日以降」 「バックアップへの切り替え」で異常 東京証券取引所が、システム障害について「明日以降、正常な売買ができるよう対応している」と発表した。 東証にシステム障害 終日、全銘柄売買停止に【更新】 東京証券取引所は10月1日、相場情報に障害が発生したため、朝から全銘柄の売買を停止している。1日は終日売買停止となる。復旧については未定。 “東証を変えた男”が語る、金融業界の伝説「arrowhead」誕生の舞台裏――“決して落としてはならないシステム”がで

[degucho]

メモリ故障によるフェイルオーバーの実機テスト経験のあるものだけが石を投げなさい

[kaiton]

メモリ故障が一番テストしにくいだろうな、物理的に発生させられないからな〜

[rgfx]

そらまあ何でも言うてしまえば「設定値」だろうけども。お疲れ様です。

[ysksy]

そりゃ突き詰めれば設定不備なんだろうけど。人の手に余る

[yife]

もう特定できたの?! 早いなあ

[Arohn_A]

冗長性を確保するための「故障をどう定義するか」は永遠に解決しないテーマ。備えることができるのは既知の故障状態だけなんじゃよ

[j-u]

個人的に最近はAWSとかばっかりなので忘れていたが、つくづく自前でHAクラスタ構築なんてやりたくない気持ちです。

[Crone]

一般向けの説明だから、自分たち本職が知りたい情報は日経コンピュータあたりの記事待ちかな。/設定不備ってそれだけ聞くとしょっぱいミスのように見えるけど、そう単純な話じゃないんだよね。

[wonodas]

Disk1には書いてるけどDisk2にまだ反映されていない分を反映するには１号機のメモリ領域を使う必要があったってことかな。ディスク1とディスク2の内容が違うから切り替えせずにストップしたのでは

[odakaho]

メモリ故障を検知してのDBフェイルオーバーなんて普通しないし対策できるようなことなのか

[adsty]

メモリ故障が発生したが自動切り替えができなかった。

[aceraceae]

「設定値」っていわれるとスレッショルドレベル的なことを想像するけど細かいところが気になる。

[Windfola]

『そんなものテストしてれば当然発見できたはず』みたいなスーパーハカたちの書き込みがまず目に入って、びっくりしてブコメ見て安堵した。だよね。

[gui1]

こういうチューニングって他社事例をみながらやるもんだけど。あろーずは他社がないからな(´・ω・｀)

[kkobayashi]

設定値だけではよく分からんね

[dkfj]

東証さんの障害。物理なのか論理的なのか解らないけど、メモリの障害なのか。これテストしようがないよなぁ。宇宙線でソフトのエラーが起こる可能性もあるし、世の中事前にテストできないことも一杯あるのよね。

[yas-mal]

さっぱり、わからん。東証の資料も見に行ったが、ほぼこれだけだった。

[iasna]

もう特定してるのすごいはやい（こなみ

[hiby]

やっぱり書き込みキャッシュか。不整合状態だと切り替え不可能になるんだよな。

[BRITAN]

障害は発生させない、ではなく、発生する前提でシステムを組まないとな…、といっても、コストやノウハウも必要だしなぁ

[kastro-iyan]

システムというより運用方法に問題があったのかな

[kuippa]

原因判明までがはやいねー

[mohno]

「バックアップ（2号機）へと自動的に切り替わるはずだったが、設定値に不備があり、機能しなかった」←メモリの故障は想定されていたのに、その対応にミスがあったということか。

[causeless]

"@ktgohan 東証、障害の原因を特定　設定値に不備、切り替え失敗 あー、やっとわかった。これメモリ故障等で1号系でスローダウンか何かくらったときの監視閾値が絶妙にあか…" via https://twitter.com/ktgohan/status/1313151586378502144

[ysync]

むしろ障害出た機器の電源を手動で落とせば切り替わって耐えたって事かね？

[corming]

原因究明ができたからあとは同じミスを犯さないだけ。

[naqtn]

https://www.jpx.co.jp/corporate/news/news-releases/0060/20201005-01.html それ以上の詳しいことは書いてなかった。

[Amigomr]

ふうむ... これだけじゃよく分からないけど、とりあえず原因がわかって事象を再現できたということかな？

[ROYGB]

最終的な実行環境でのテストが出来ていなかったのかな。

[hiroomi]

“自動的に切り替わるはずだったが、設定値に不備があり、機能しなかった”設定値に対して、静的解析かけてもよさそうね。

[Dragoonriders]

故障してるメモリがあったから原因特定は逆説的にはやりやすくなったのだろう。ハード故障絡みはテストで検証は難しい。近寄りたくない。

[manmo999]

多分デフォ値なんだろうけどそれを設定値の不備と言われるとしんどいなぁ

[namisk]

特定が速い！しかし設定値って表現だと概念が広すぎて分からん。詳報待ち。

[robo_pitcher]

死活検知の間隔を当初想定より短くしないと今回の異常を拾えなかったパターンかな。

[Lumin]

一時期ミッションクリティカルなシステムのこういうのやってたけど今でも思い出しておしっこちびりそうになる。二度とやりたくない

[sny22015]

日本一黒い（物理）弁護士の久保利先生が調査委員長。ちょっと畑違いな気がしないでもないが、社外取締役なんだな。

[estragon]

ディスク装置の筐体フェイルオーバーだよね。 まず、ディスク装置内で制御装置は二重化されてなかったのか、されてなかったからディスク装置の筐体フェイルオーバーするしかなかったとして、設定値ってどんなだろ

[Gim]

外部ストレージ障害ですね。netappを例にすると、コントローラ１にメモリ障害が発生した際にコントローラ２への切り替えがうまくいかなかった模様。

[frkw2004]

クラウドでサーバーを提供しているところは調査してくれるのか、気になる。サーバー設定はクライアントの責任だ、としてハードの調査をしぶりそうだけど。

[havanap]

テスト用に中性子源をぶちあててメモリエラーを発生させる商売が流行るな