【保存版】東京リージョンの AWS 障害発生時にクラスメソッドのテクニカルサポートチームがやっていること | DevelopersIO

どのような事前準備をしているか 有事の際は想定外のことが発生しやすく、事前準備をしていないと冷静な対応が難しくなります。 いきなりしっかりした事前準備をすることは難しいので、徐々に成熟度を上げていきます。 本章では以下の観点で、事前準備についてご紹介します。 手順書 自動化 訓練 手順書 フローやチェックリストを含む手順書を準備しています。 手順書の内容は後述します。 分かりやすい手順書を準備することも重要ですが、その手順書への導線づくりも大切にしています。 運用周りのドキュメントは数が多く、目的のドキュメントが埋もれてしまい他のメンバーが見つけられない場合があるからです。 周知に加えて、ドキュメントの階層を見直したり、特定チャンネルに手順書の URL をピン留めしておくなど、手順書に辿り着きやすくする工夫をしています。 分かりやすい手順書の書き方については、以下のブログが参考になります。

[marumo1981]

障害が起きたときのサポートチームの迅速な対応を「すげーなー」と思っていつも見てる

[JULY]

こういった運用側の人材が軽視され、監視コンソールに表示された警告を読み上げるだけのチームになりがち。で、二言目には手順書というけど、手順書を作っただけは解決しない。と分かっているのが羨ましい。

[hiroomi]

“一次対応支援ツールは、Google Apps Script と Slack API で実現しています。 AWS 障害を想定しているので、AWS を使っていないのがポイントです。”

[maemuki]

大変ですね 自分は某mixiの全盛期に障害対応のユーザーサポートのメール対応をたった1人でやってましたよ…

[indication]

スゴい

[Shalie]

"一次対応支援ツールは、Google Apps Script と Slack API で実現しています。 AWS 障害を想定しているので、AWS を使っていないのがポイントです"

[aquadrop]

“発生事象と他の項目を確認 ”

[B-108]

「3ヵ国でやってんだ。時差を利用できるのはまさにグローバル企業。」って思う人と「”3ヵ国の拠点に分かれて”ってことは、海外から東京のAWSいじれるってことじゃないか！LINEと一緒じゃないか！」って思う人。

[georgew]

お手本にしたい。

[iwanofsky]

“当該障害発生の約2週間前（2021年2月2日）に訓練を実施していました。” これができるとこ、すげーな

[toda-chan]

]

[yasu-log]

【B!】【保存版】東京リージョンの AWS 障害発生時にクラスメソッドのテクニカルサポートチームがやっていること

[kak888881]

ブログ書きました！テクサポチームで培ってきたナレッジを大公開！