SpotifyがミスによりKubernetesの本番クラスタを二度も削除。しかし顧客へのサービスにほとんど影響しなかったのはなぜか？

この記事は新野淳一氏のブログ「Publickey」に掲載された「SpotifyがミスによりKubernetesの本番クラスタを二度も削除。しかし顧客へのサービスにほとんど影響しなかったのはなぜか？」（2019年7月8日掲載）を、ITmedia NEWS編集部で一部編集し、転載したものです。 2019年5月20日から3日間にわたりスペイン バルセロナで開催されたKubeCon＋CloudNativeCon Europe 2019の基調講演では、SpotifyがミスによってKubernetesのクラスタを消去してしまった経験を振り返るという非常に興味深いセッション「Keynote: How Spotify Accidentally Deleted All its Kube Clusters with No User Impact - David Xia」（基調講演：SpotifyはいかにしてK

[cocoonP]

はー、うちもこういうシステム構築したいな。アプリサイドにそんな冪等性を期待できないのでまあ無理だろうけど。

[ahijo0523]

興味深い。失敗の影響が出ないことは、運用エンジニアの負担を減らことに繋がる。

[t-tanaka]

「失敗したときに人を責めるのではなく、そこから学ぶという文化を創ること。私がクラスタを削除したときでさえ、Spotifyのチームは私をサポートしてくれた。」

[lesamoureuses]

こっからの流れが良かった。すごいな。 “クラスタ作成をコード化することでこうした問題が再び起こることを防ごうと、Terraformを導入した”

[katzchang]

素晴らしいな