全銀ネット障害、メモリー不足が要因 事前テスト甘く - 日本経済新聞

三菱UFJ銀行など10金融機関で約250万件の送金が滞った全国銀行データ通信システム（全銀システム）の障害は、各金融機関と同システムをつなぐ機器の容量（メモリー）不足が要因だったことがわかった。機器の更新で処理量が増え、想定の容量を超えてパンクした。事前のテストが不十分だった可能性もあり、検証が求められる。 全銀システムを構築するNTTデータなどは16日までに中継コンピューターのメモリー不足が

[kohakuirono]

何で日本でも最高レベルで間違いがあってはいけないシステム運用がこんなギリギリのハード体制で運用してるの。。。まんま現場猫やん。

[ko2inte8cu]

「こんなの絶対ヤバいっすよ！」「メモリが足りないようです」「メモリに一抹の懸念が」「メモリ以外は順調です」「順調です」「DXでフィンテックです」「君、時代はメタバースだよ」「セカンドライフ懐かしいなぁ」

[zakkie]

大改造やないか＞“今回の更新では一度に処理できる情報量（ビット）を32ビットから64ビットに増やした。”

[Windymelt]

「メモリ不足の場合のフローを整備しろ」ったって、メモリ不足状態で出来ることなんかほぼ無いような気がする(落とすしかない)。メインフレームならなんとかなるのかね？

[ockeghem]

テスト不足というのはその通りだろうけど、設計時のサイジングの想定を超えていたのか気になるところ。テストの結果メモリ不足が判明したら増設する予定だったの?

[teketeka]

Javaの場合OutOfMemoryErrorが発生するとプログラムが停止されるから、try～catchで囲んでも効果ないしリトライもできないよ。リトライみたいなことを言ってるブッコメにスターが付いているので一応言っておく

[paradisemaker]

うわー、開発環境と本番環境のハードウェア構成が違ってて、本番環境のスペックが古すぎて誰も正確に知らないパターンか？！ 俺も踏んだことあるわ...。（こういう可能性がある場合は必ず切り戻しができるようにする

[sgo2]

JavaでOutOfMemoryErrorはcatch出来ます https://aresei-note.com/14899 (勿論リトライの為の機能ではない)。あと物理メモリが足りてても出るケースが有る。例えば共有メモリを多重mapしてプロセス内アドレスだけ消費してしまうとか。

[kako-jun]

OutOfMemoryError例外は、起きる行の候補が多すぎて広くtryで囲んでリトライするしかないし、フツーそんなことしないし、VRAMで起きてもPyTorchはそんなことしてくれないし、容量で殴るしかない ／ Pyの話だしJavaでもcatchできる

[n_vermillion]

メモリ不足…。64bitにしたらデータ量爆発したか。大改造やん。しかしそれを想定できないのも変だ。／メモリ不足時のフローっつってもアラートを出すぐらいしか思いつかんが…勝手に縮退運転したらアカンやろしなぁ。

[ene0kcal]

にわかには信じられないし、何の最中で、何が多すぎて（または何が想定外で等）メモリー不足に陥ったのかという詳細がわからないのでコメントはペンディング。

[honma200]

全然分かんないんだけど全銀のシステムってPCの考え方でいいんだっけ？メインフレームってCPUとか(仮想)メモリ、ファイルの考え方がLinuxとかと全然違ったはず

[wdnsdy]

似たようなことがまた別の所で起こりそうだな

[atgm]

ポインタのサイズが倍になるの気付かなかったのかな

[augsUK]

全体と各銀行を繋ぐ中継コンピュータのメモリ不足らしく、まさにボトルネックという場所ではある。

[taguch1]

本番想定のデータでテストできないだろうし、机上で使用量を計算しても漏れある。流量を制御できるようなアーキテクチャが欲しいけど既存を引き継いで時間に追われて修正しただけだろうし。…ドンマイ

[sakidatsumono]

今まで32ビットか

[beerbeerkun]

障害翌日のテストで再現してたって言ってたからテストは甘かったのは確度高そうではある。テストデータと本番データは違うし環境を再現させるのも難しいケースはあるから何とも言えないが。

[shikiarai]

1人でやってるとミスらないんだけどマルチベンダだと途端にハマるやつだ

[emt0]

これ上がビットすら知らんレベルのアホだったんじゃね？倍にするだけなのに何が大変？って感じの。あとドラクエ未経験（少し違うけど）

[You-me]

テスト予算をだいぶ値切られたという話でいいのかしらねん？

[kkobayashi]

あらまあ

[collectedseptember]

治るの遅かったけど物理要因だったのね

[dekaino]

64bitアドレスを32bitの箱に格納しようとして箱近傍を破壊した不具合を「メモリー不足」と呼んでいる気がしてならない。初日ダウン時は原因不明だったけど、もしOSが吐く「メモリ不足」ならログ読めば速攻わかるはずだし

[transceiver101]

みんながテストって言ってるのは性能検証ね。NTTデータなら要件段階で項目必須のはずだけど、基本案件しか要件定義してないとか

[Iridium]

瞬間的に保持するだけだから、そんなにメモリ必要とは思えない。ずっと持ち続けるの？ガベージコレクションが必要なレベルでプロセス作りまくるって話？

[sawarabi0130]

”各金融機関と同システムをつなぐ機器の容量（メモリー）不足” だからアプリやサーバでなくインフラ機器？／中継コンピューターらしいhttps://xtech.nikkei.com/atcl/nxt/news/18/16109/

[lejay4405]

ホエー

[youchin]

詳しくは識者の意見聞きたいけど、ブコメの一部が書いてるような簡単な話じゃないと思う。見出しにあるように事前テストが甘かったのはそのとおりだよね。

[Flume]

Javaがどうこう言ってる人達がいるけど、そもそも本番同等のステージング環境を金掛けて用意してテストしないのが主要因なような気が...

[blueboy]

　弁解　＞　４GBセレロンで設計したので、設計するパソコンがメモリ不足だったんです。しょうがないでしょ。文句を言うなら、社長に言ってください

[Shinwiki]

リソース消費の変化なんて絶対見るので、検証環境には金かけてないか、本番同様のデータ量用意できないんで簡易的にやったか。どこも同じだねw/あと関係ないけどひーぷとか学んだ方が。

[mouki0911]

メモリ管理は思ってる以上に厄介なんだよね。

[tmdtky]

俺は開発ベンダーに同情してしまう。メモリリークは厄介だよ。

[yuasayo1013]

忘てはいけないmemoryですね…

[zakusun]

成る程。よくある話だった。特に新システムへの切り替え時には同時に処理件数が平時よりも増えるケースがあるのでよく引っかかる。

[oriak]

そんなことあるんだ

[gurugurugang]

あらま

[versatile]

こいつらのセフティネットはアホほど長くてめんどくさいテスト工程なのに、そのテストで障害テストできてなかったんだとしたらそもそもウォーターフォールが水漏れしまくっとるんじゃぁ

[urtz]

ディスク容量不足にメモリ不足。うちの国はその手のトラブル多いのだろうか