みずほ銀行システム障害に学ぶ

みずほ銀行システム障害の調査報告書が公開されたのがニュースになって、Twitterなどで色々な人がコメントをしているのを見た。140文字しか書けない空間で他人の失敗談の揚げ足取りをするのは簡単だが、そこからは一時の爽快感以外に何も得るものがないので、僕はそういうのはカッコ悪いと思っている。 そこで、ちゃんと読んでみたら全く他人事でない部分も沢山あるし、非常に面白く勉強になったので、ブログにまとめてみる。 技術的な話 銀行のシステムがどのようになっているのか、全然イメージが湧いていなかったので、それがまず勉強になった(p.29)。 トラフィックのソースに応じて用意された色々なシステムから基幹システム「MINORI」の取引メインバスにトラフィックが流れ、そこから各種システムへとリクエストが送られていく。この辺はService Oriented Architectureらしい。開発当時としては（

[stakme]

避難訓練は大事という基本を感じる

[hobbiel55]

「こういうのはわりとモダンな考え方だ。」←今、我々がモダンだと思っている技術は、だいたいメインフレームでは数十年前から実現されてたものなんだよ。

[dekaino]

多くのケースで、障害の影響範囲が深刻だと報告するのをためらわせるプレッシャーが常日頃からかかってるんだよね。深刻な障害だと偉い人に即時報告するルールになってて大ごとになるから、みんな嫌がる。

[Panthera_uncia]

下手に合併しない

[saikyo_tongaricorn]

皆みずほから他に移ってさしあげたほうがいい

[pikopikopan]

わかりやすかった。店舗の対応が素晴らしいと思うので、ほんと表彰されたしと思う。

[tkmkg8m]

外部サービス禁止とか言いながらこの記事に噛みついてる人何なのだろう。GoogleDocs使えなんて言ってないよね。効果的に情報伝達したりする手段はあったのかしか言ってない。ないなら自社開発くらいしろって話でしょ。

[tarotheripper]

US企業でエグゼクティブとして働いていただけあって、全体的に問題は認識しつつも前向きに進んでいこうという気持ちを感じるよい文章。

[NOV1975]

あとでやっぱりなんか書かんといかん気がしてるが、少なくともこのエントリは真っ当だと思う。政府が無能の極みだからといって、末端なの官僚が全員無能なわけでは当然ない（むしろ有能が多いから保ってる）のと同じ

[hirorinya]

Mizuhoはteamsがあるはずだからwikiで共有はできるはず

[akymrk]

“Opsは障害の原因究明と復旧に全力を注いでいた""ビジネス側が必要なのはこの障害の影響範囲がどのくらいであるかという”"リテールバンキングの部門","店舗に職員の出勤をとりあえず指示"、"対応策を伝えたのは5:30pm",

[u4k]

「学ぶべきことはない」っていう後ろ向きなコメントが上位なのは寂しい。“共同編集できて最新情報を上書きできるツールが良い”っていう意見に「Googledocsは銀行では無理、現場を知れ」ってトンチンカンすぎるでしょ

[hnishi2509]

“に大変だった”

[natroun]

みずほ銀行のシステム障害について。巨大システムでの障害でどんなことが起きるかという観点では学びがありそう。それはそれとしてまた起きるんだろうなという感覚はぼんやりとある。

[Tomosugi]

ある程度の社会人経験、組織で働いた経験ある人はみな身につまされる話

[koonya]

5桁のアラートはアラートの意味を為してないので、精査して絞り込む努力をすべきではないだろうか。。増やすのは簡単だけど、減らすのは相当大変なのはわかるが。。

[nharuki]

読んでて胸が締め付けられるような話

[operator]

Google Docsというのは手段の話だろう。　単に大きいホワイトボード 4枚を対策室に持ってくるだけでOKだよ。情報を得たい部署はそれをみる。緊急時対応の基本だろう。

[rgfx]

店舗側の対応から、逆に上層部の「戦線から遠退くと楽観主義が現実に取って代る」が透けて見えて、もう…。

[n_y_a_n_t_a]

あるべき論はそうなんだろうけど後知恵感半端ないっす

[mura-_-mi]

「育児的ソフトウェア開発」という言葉は初耳だけどすごいよい。産んで産みっぱなしのソフトウェアではない。銀行の風土はどうかと思うけど、細かく振り返るといろんな学びに溢れてる

[ducky19999]

“Google Docをリアルタイムに編集していく、またはWikiのページを使ってリアルタイムに情報を更新していく” なるほどなあ

[knok]

自分も社長が頭下げるレベルの問題への対応に駆り出されたことあったけど、インシデントは深刻だったが規模はこんなに大きくなかったからなあ…連携だけでも大変であることは推察できる

[stilo]

"非常時の失敗というのは結局平時の備えの不足である。"

[d12892]

「Google Docをリアルタイムに編集していく」、「密に連携して働く人達の間ではチャットが良い」

[yu_dach1]

本文中のどこにも「GoogleDocs使え」とは書いてないのにスター集めてるのでウケるなどした

[bootJP]

本当にこれ “他人の失敗談の揚げ足取りをするのは簡単だが、そこからは一時の爽快感以外に何も得るものがない”

[morita_non]

まあでも当日中になんとかしてるし、すごいと言わざるを得ない。

[degage122]

“ビジネス側が必要なのはこの障害の影響範囲がどのくらいであるか…”障害規模が分からないと…判断が出来ない。Opsは顧客への影響を示す指標を集めるのが遅れた。これは身につまされた”顧客からみえるWikiを現場？

[minoton]

解説に感謝。あとで本文も読んでみよう

[ninosan]

「頭取が最初に障害発生を知るのは1:30pmにニュースで」←結局これがすべてじゃん。

[tonocchokun]

システムをメンテしていくうちにかつてはほっとけばいいだけの警告だったのがいつの間にか大惨事を引き起こしかねないフラグになってたという話かもしれない。

[taku-o]

もし現場にいたならば、上の方から行動方針が早い段階で飛んで欲しかったね。開発メンバーの維持は無理かな。作れるレベルの人には、どんどん作ってもらわないと会社が回らないだろう。

[takahashim]

この記事の本質は、みずほの中の人はともかくみずほ自体にはほぼ全く興味関心を持たず、ただ事例から自分に有益な知見を学ぶ、という姿勢にありそう

[natu3kan]

リアルタイム編集できる障害内容を書く掲示板があって、そこをステークスホルダーが見に行く形式ってのが、障害対応する側にも説明する側にも楽ってのはあるかもしれない。

[ASbuppa]

明日読みます

[digitalmatic]

メガバン関わったことない自分にとっては、これほど関連情報に触れられるのは良い時代。大規模障害が出たことのない他行はどうなってるのか知りたい

[sharp_m]

口座維持手数料とっても収益性は焼け石に水なのかな

[footnote]

たぶん日本の銀行は（みずほだけとは限らない）自分たちの食い扶持の源泉がシステムだということを理解していないのが最大の問題なのかな。