Redis の障害を想定した避難訓練を行いました - Pepabo Tech Portal

こんにちは、EC 事業部のフロントエンド・エンジニアのおいちゃん（@inouetakuya）です。先日、社内で Redis の障害を想定した避難訓練を行ったので紹介します。 背景 カラーミーショップ では、以前は Redis を利用していていましたが、ここ一年の間に用途が変わってきました。つまり、以前はコンテンツのキャッシュやセッションの保存先だったものが、いまでは非同期処理のためのキューとして使われるようになり、かつその処理には決済に関わるものも含まれています。 つまり Redis にダウンタイムが発生すれば、それがそのままビジネス面でのダメージに直結します。そこで Redis の自動フェイルオーバーを実現するため、インフラチームとともに Redis Sentinel の導入を進めてきました。 解決したい課題 Redis Sentinel を扱うのははじめてだったので、当初は「本当に自動

[kakku22]

"避難訓練" というネーミングが秀逸！フェイルオーバーを確認したいのではなくて，目指すべき運用を確認したいという本質的なアプローチがされていて素晴らしい

[at_yasu]

良い話

[tmatsuu]

観点良い。昔在籍してた通信会社も災害訓練あった。社内連携体制とか確認してたよ。

[gdgd-shinoyu]

うちも避難訓練やりたい！良いワードですね

[mergyi]

なんか楽しそうなのがよい

[fuktommy]

ウチは最初は避難訓練と呼んでたけど、いつの間にか防災訓練に変わった記憶。 Redis の障害を想定した避難訓練を行いました - ペパボテックブログ

[shimpeiws]

とりあえず冗長化にはしたけど、結局うまくフェイルオーバーしない... ってありがちなので素晴らしいですね！

[inouetakuya]

“組織としてこれまで障害を防ぐためのプロセスや制御に力を入れてきましたが「それでも障害は起こる」いう前提のもと、「障害から速やかに復旧できるようにすることにもリソースを割いていく」きっかけになれば”

[mori_morix]

避難訓練いいね！Netflixみたいに定期的に障害発生させると完全に安心できる

[Wafer]

くそRedisふざけんな！（非難訓練）/Redisさんにはいつもお世話になっております。（卑屈に低姿勢）

[honeybe]

障害想定避難訓練いいな

[june29]

避難訓練めちゃよさそうだった！