ANAシステム障害の原因判明、DB並列参照時にパッチ未適用の既知バグでフリーズ

全日本空輸（ANA）の国内線旅客系基幹システム「able-D」で2023年4月3日午後に発生したシステム障害の原因が判明した。周辺システムからable-Dのデータベース（DB）を参照する際、データベース管理システム（DBMS）のバグをきっかけにDBがフリーズしていた。バグは既知のものでパッチもリリースされていたが、同社はシステム構成上パッチ未適用でも問題ないとみて適用を見送っていた。 同社が2023年4月7日に開いた記者会見によると、詳しい経緯はこうだ。able-Dの周辺システムの1つにマーケティング部門が使用する「予約管理支援システム」があり、同システムはable-Dから予約データを30分ごとに抽出している。

[tetsutalow]

2016年の時はルータの未知のバグだったけど今回はDBの既知のバグ。パッチ当ててもこの規模だとテストが大変で運用上大丈夫と判断。まぁ分かるけど「動いているものは触るな原則」が強すぎるのは考えもの。

[m50747]

全部読んで無いけど、この規模のシステムだとパッチ当てるのはかなり手続やテストが大変なはず。その労力をケチったのが大惨事に繋がったと。関係者は胃が口から出るな…。一番の不運は待機系が動かないことか。

[uokada]

すっごく雑に読むと、塩漬け運用してたDBが原因ってことかな？

[Cald]

トップコメ、2016年の件はCatalyst 4948Eなのでスイッチでルータとは呼ばないです。

[tsz]

冗長構成で回避できるリスクではなかったということですね。

[prograti]

この時はOracle 11gだったけど構成はこのままなのかな？ https://xtech.nikkei.com/it/atcl/watcher/14/334361/041100532/

[gui1]

どんまい(´・ω・｀)

[OrionB312]

原因なんだろうと思ってたらパッチかぁ…これはつらい…

[mkusunok]

基幹系DBでパッチを当ててないケースは多そうだな

[hdkINO33]

“バグは既知のものでパッチもリリースされていたが、同社はシステム構成上パッチ未適用でも問題ないとみて適用を見送っていた。”

[birds9328]

まぁ、DBのパッチ適用おっかないのは分かる…

[cl-gaku]

あー…

[fn7]

“このDBMSでは、同時に複数のクエリーを投げるとまれにエラーが発生するバグが発見されており” webで使ってるDBMSは基本的に並列でクエリ処理してるはずなんだけど、なんていうDBMSなんだろ。オラクル？

[t_f_m]

"このDBMSでは、同時に複数のクエリーを投げるとまれにエラーが発生するバグが発見されており、2018年にはパッチもリリース済みであった"

[asakura-t]

パッチあてて問題起こることもあるしねぇ。

[nilab]

( ﾟ∀ﾟ)「DBについて「DB1」「DB2」という2系統でクラスタリング構成を組んでいた。このことから、エラーが発生してもどちらかのサーバーに片寄せすることで継続稼働できるとにらみ、パッチの適用を見送っていた」

[itotto]

この件は違うけど、データベースサーバーがSPOFになっているので外から見えにくい場所に置く代わりにパッチはあまり充てないという運用はよく聞くのでわりと他人事ではないところが多いのでは？と思う

[kumoha683]

Oracle？

[jt_noSke]

パッチ適用すればバッチリだったのか

[hiroomi]

“エラーが発生してもどちらかのサーバーに片寄せすることで継続稼働できるとにらみ、パッチの適用を見送っていた。”