Microsoft Azure、DNSの設定変更に失敗して全世界的にサービス障害。日本は十連休中だったのが不幸中の幸いか

Microsoft Azure、DNSの設定変更に失敗して全世界的にサービス障害。日本は十連休中だったのが不幸中の幸いか Microsoft Azureは、2019年5月2日午後7時43分から午後10時35分まで（日本時間 2019年5月3日午前4時43分から午前7時35分まで）の約3時間、DNSの名前解決に問題が発生。 ほぼ全世界的に、Microsoft AzureをはじめOffice 365/Microsoft 365やMicrosoft Dynamicsなど同社サービスに対する接続ができなくなるという大規模な障害を起こしました。 この大規模障害の原因は、同社サービス用のDNSのメンテナンス作業のミスが原因だったと発表されました（中間報告の段階では既存のDNSからAzure DNSへのマイグレーション作業に失敗したと報告されていました。現在の報告では計画メンテナンス作業での失敗だとされ

[gurinekosan]

「エンジニアはすぐに値を元に戻して解決をはかったものの、キャッシュされた情報により問題が長引いた」地味にキツい。

[awkad]

「ネームサーバ更新時のチェック体制の追加」MS様でも「手順書レビューを強化します！」「ダブルチェックを行います！」「手順書にチェックボックスを付けます！」とか言ってるのかな

[youhey]

バリバリ受託やってた頃、DNSの設定ミスって胃をキリキリさせながらキャッシュの寿命を待ったことを思い出す

[oooooo4150]

Azureってサービス全断レベルの障害が他と比べて多い気がするんだけど気のせいかな

[ebibibi]

DNSは全てに影響ありますからね…

[tohima]

こんなことがあったことすら知らなかった

[mohno]

「Microsoft Azure…約3時間、DNSの名前解決に問題が発生」←こりゃまたSLA的に微妙なダウンタイム。

[wiz7]

ダメージも世界に浸透（あ、浸透言ったらインフラ警察が来た）

[leiqunni]

昔、DNSのttlは86400だったり、セカンダリのExpireは604800だったり、でもある時から300とか使い始めた。このエンジニアはキャッシュのせいにしてるけど、実は3時間気付かなかったに、2000点。

[rotom]

知らなかった

[ultrabox]

十連休さいきょ

[rxjun]

連休中にそんなことがあったのか

[whoge]

浸透が伝播するのに時間がかかるからなぁ。

[rryu]

まさかのゾーンデータ入れ忘れとは。

[ykore52]

日本企業でこういうことやらかすと、まず経営陣に対してDNSの仕組みから説明することになりそう

[Dragoonriders]

事前になんかできないのだろうか。

[at_yasu]

「エンジニアはすぐに値を元に戻して解決をはかったものの、キャッシュされた情報により問題が長引いた」あー、お疲れ様です…

[tana_bata]

5/2でよかった

[yogasa]

azure、なんか多いよねこういうの……

[mugicha1000]

やらかした時は血の気が引く音が聞こえただろうな

[asakiri4177]

前も似たような障害無かったっけか。同業他社より障害多い印象。

[petitbang]

Azureの規模を考えるとお粗末な話だな。やらかした担当者のことを考えるだけで胃が痛くなる。

[everybodyelse]

ぽんぽんぺいん案件