「みずほe-口座」のデータ更新45万件が重なりメモリー不足、みずほ銀行システム障害

みずほ銀行で2021年2月28日に発生したシステム障害を巡り、同行は3月4日、通帳を発行しない「みずほe-口座」関連のデータ更新処理が発端になったと明らかにした。定期預金関連で定例のデータ更新のほか、1年以上記帳がない口座を自動的にみずほe-口座に変更する約45万件の不定期処理が重なり、定期預金コンポーネントでメモリー容量不足が発生した。 みずほ銀行は2021年1月18日から、みずほe-口座の取り扱いを始めていた。それに関連し、2月下旬から3月上旬にかけて、1月末時点で1年以上記帳がない口座をみずほe-口座に段階的に変更する予定だった。2月28日はこうしたみずほe-口座への変更処理の約45万件に、定期預金の積み立てなど定例の処理も含めた合計で約70万件のデータ更新を予定していた。 この約70万件の処理でメモリー容量不足が発生。その結果、定期預金関連の取引ができなくなり、さらにピーク時で7割

[flirt774]

これ人災の気もしてくる。コスト削減のために急ぎ目でデータ移行の要請があって、工数確保も甘いまま本番実行した結果という推測

[augsUK]

月末の銀行休みの日という、考えられる限り最悪の日程で移行スケジュールを組まなくても

[amatou310]

なんつーか、しょぼい…

[prozorec]

銀行業界のバッチ好きは異常。何でもかんでもバッチで一括処理しようとするから、こんなことが起きる

[TakamoriTarou]

まさか天下のみずほ銀行がピラミッド並に金をかけたシステムでも、俺が作ったクソ解析ソルバーと同じようなとらぶるになるなんて。ゆうきづけられました（づけられるな

[estragon]

試験しなかったのかな / 「2月28日はこうしたみずほe-口座への変更処理の約45万件に、定期預金の積み立てなど定例の処理も含めた合計で約70万件のデータ更新を予定していた。この約70万件の処理でメモリー容量不足が発生

[morimarii]

全体最適考えずに計画建てるとこうなるという典型的な例ですな。。。クソスケジュールをゴリ押ししようとしてくる輩への反論を次々とつくってくれるみずほ様感謝やで

[mohno]

「メモリー容量不足が発生」←なんつーか、運用の問題とはねぇ。メモリーくらい十分すぎるくらい入れておけよ（もう入れたらしいが）そもそも更改後初めての操作だったらしい。「想定の甘さに起因する」

[oktnzm]

本番用データ＆同一ハードでテストしないと再現しないだろうからなぁ。原因はみずほだからで納得してくれるのでは？

[nippondanji]

メモリはしっかり余裕を持たせておいてほしいと思う今日この頃。容量カツカツで使うと禄なことがない。

[Wafer]

ほかの記事でオーバーフローとだけ記述してあってなんじゃそらって思ってたらメモリ不足、オーバーフローも正しいならスタックオーバーフローでも起こしたのかな

[koji28]

詫び宝くじまだぁ？(´・ω・`)

[kmkmtszk]

メモリー不足って、、、

[Harnoncourt]

経済の基幹を担っている自覚がなさすぎ／RDBはホストと違ってバッチ処理苦手なんだからもうちょっと考えてよ。「たかが45万件」とは思うが、閾値を超えると一気に重くなるから怖いよ。

[hatest]

どんなシステムも完ぺきではなく障害は起こる。夜間にバッチやるのは、障害があった場合に朝のATM開始時間までにリカバリするためだと思うんだけど、リカバリできなかった原因は運用だったのかシステム側だったのか

[X-key]

私も"1年以上記帳がない口座"をみずほに持っています。ごめんなさい･･･

[Guro]

最初の会見でこの「みずほe-口座」の件が出てこなかったところがよくない。因果関係が不明であっても出るべきで、その作業がトップまで共有されていなかったのでは。「e-口座」移行が軽視の疑いがある。

[swdrsker]

本番ルームのピリピリ感と怒号を考えると動悸がする ベンダーどこだろ

[ayumun]

“1年以上記帳がない口座を自動的にみずほe-口座に変更する約45万件の不定期処理が重なり” なんで新施策の初回の変更処理を月末処理にすんだよ…

[skl0123]

間違って100万円くらい振り込まれてないか、一応確認してしまった

[kumazo1006]

誰も指摘していないけど、大安の日曜日でもあったのです。 コロナ禍で、結婚式が少なかったのは、不幸中の幸いかもと思いました。 金融機関のおっさんSEはみんな緊張してましたが、みずほってベテランSEいないのかな

[hdkINO33]

“みずほ銀行の藤原弘治頭取は3月1日の記者会見でメモリー不足について「想定の甘さに起因する」と語ったが、事前の見積もりが甘くなった詳細な理由は現時点で明らかになっていない。”

[lont_in]

10年前のシステム障害もバッチ処理の問題だったので、設計に根本的な問題を抱えていそう

[takeishi]

何やってんのという感想しか／俺は指示された仕様を実装した。メモリの管理は俺の業務範囲じゃない、みたいな風土なんだろうか…。

[nil0303]

（他に何も処理が動いてない検証環境で）試験したときは大丈夫だったんです！

[lady_joker]

いくらなんでも技術的にお粗末すぎない？　試験とかすればいくらでも防げるでしょこんなミス。技術的な問題なのかリソースの問題なのかどちらかわからないけど、とにかくひどい

[clairvy]

何かがミスによって止まるのは仕方がない。障害時に何をするか決めれると良い。

[TownBeginner]

臨時処理やるんだったら処理当日に何かあった時の要員調整してそうだけどなあ。障害発生はともかく、ATM数時間放置の被害拡大はやっぱり人災によるミスだと思う。

[n_231]

ATMがカード飲む仕様なら、週末以外にやって欲しいけど、通常業務中はそれはそれで罠があるのだろう。

[call_me_nots]

“この約70万件の処理でメモリー容量不足が発生。事前の見積もりが甘くなった詳細な理由は現時点で明らかになっていない。”

[Mash]

“1年以上記帳がない口座を自動的にみずほe-口座に変更する約45万件の不定期処理が重なり”

[kamei_rio]

45万件を重ねて合計70万件のデータ更新を一定期間内に終わらせようとしたらメモリが不足したと

[kastro-iyan]

「想定の甘さに起因する」／ガキの使いやあらへんで？

[eos2323]

意地悪試験もせずに本番投入してるのは明らかなのでさもありなん。バッチ実行のタイミングが重なる可能性は予期できたでしょ。耳が痛いけど…