一部のお客様へ影響しているアトラシアンサービスの停止について | Atlassian Japan 公式ブログ | アトラシアン株式会社

本ブログは、こちらに掲載されている英文ブログの意訳です。万が一内容に相違がある場合は、原文が優先されます。 2022年4月18日 23:57 UTC時点で、サービス停止の影響を受けたお客様サイトの復旧を完了しました。 2022年4月4日(月) PTに、アトラシアンクラウドをご利用の約400社のお客様が、アトラシアン製品全体を通してサービスの停止を経験されました。2022年4月18日現在、影響のあったお客様サイトの復旧を完了し、各サイトの窓口ご担当者宛てにご連絡申し上げました。 当社のサポートチームは現在、個々のお客様に合わせたサイト特有のニーズに対応しています。支援を必要とする事象のあるお客様は、当該サポートチケットへその旨ご返信ください。至急エンジニアリングチームより対応させていただきます。 今回のインシデントはサイバー攻撃や、システムの拡張に問題があったものではありません。また、一部の

[diabah_blue]

「サービス停止の影響を受けたユーザーの45％程度にまで機能の復旧が完了しています。すべてのお客様に対するサービス復旧は、今後2週間以内を見込んでおります。」大惨事じゃん…。

[fai_fx]

バックアップが残ってるので復旧するだけ…とも読めるけど、その場合恒久的削除が機能していなかったとも思えたり。30日後に完全に消えるのかな。

[sasasin_net]

アトラシアンの。プロダクト横断に吹っ飛んでる理由と、全顧客ではない理由と、リカバリに難航している理由が、正直に記述されてそうに読めた。

[kei_0000]

恐ろしい。システム運用における情報伝達は、99回はOKでも、残りの１回がNGかつ運が悪ければ、この顧客データ削除のようなトラブルが起こりうる。特に緊急対応の時は結構危険。明日は我が身としたい。

[ya--mada]

削除作業が一番恐ろしいを地でいってますね。削除対象の選定から実作業まで一貫した慎重なプロセスが必須。

[catryoshka]

こういうレポートを読むと背筋凍りますね…

[greenbow]

なるほど… “無効化の対象となっているアプリのIDを提供する代わりに、アプリの停止を実行するクラウドサイト全体のIDを提供してしまいました。”

[kfly8]

きっつい・・・ 超ハイテク技術のエッジケースとかでなく、身近でありえそうな間違いが重なってるだけに、余計にそう感じる。

[rgfx]

ロシアでSlackのログが消えた（経済制裁により無料アカウントに戻った）（=職場のコミュニケーション文脈を支えるログが消えた）のをながめてたら、それ以上にエグいのが消えていたでござる

[augsUK]

恒久的削除を間違ったIDに適用したと。恒久的削除をしたのにバックアップを残しておくシステムでよかったね。

[blueskies]

怖すぎる…中の人、お疲れさまです…

[sharaku3eyes]

あらま

[toaruR]

さーーと脚が冷えていくやつ＼(^o^)／

[lethli]

発表自体は障害初期段階からされていて、細かくアップデートされている https://confluence.status.atlassian.com/

[momonga_dash]

顧客サイト単位で完全削除したけど、DBインスタンス単位でもスナップショット取ってるので、そこから削除した顧客サイトのデータだけをちまちま抽出中なのかな？抽出は完全自動化されてないんだね。

[ultimatebreak]

本番環境でやらかしちゃった人 Advent Calendar 2022大賞候補

[ayakohiroe]

結局人的ミスはなくならない

[te2u]

今回のような現象の復旧は想定できないよなあ。

[yu_fuk]

このような事象に備えて、データのバックアップをベンダ側だけでなくユーザ側でもできるようになればいいと思う。サービスから退避先へのアクセス・認証・頻度、バックアップ対象絞り込み等課題はありそうだけど。

[o108minmin]

担当者の方々は健やかに過ごしてほしい

[proverb]

メルカリやBASEもそうだけど、障害発生時に要因と対処について正確かつ分かりやすくレポートを出してくれると技術者組織として信頼できるなと感じる。

[yetch]

トラブルの分かりやすい状況説明をオープンに行うのってすごい。

[shields-pikes]

ゾッとするわ。バックアップがあって良かったな、と。恒久的削除の時に、同時にバックアップも削除する仕組みは危険だな。フェイルセーフとして最低でも数日間は残しておくべきだし、規約や契約にもそう書くべき。

[hatest]

スナップショット取得時点に復旧するということは、完全に復旧できるということではないよね？

[equinox79]

あーこれは辛い。

[gengo_k]

Asana使おうぜ。

[rxh]

怖いわ…

[ojun2020]

申し開き方がステキ

[sekiryo]

会社名も知らないぐらいの専門外なのでほーんと読んでいたが約400社のお客様のサイトが不適切に削除されてしまいましたとか見てヒェッとなった。復旧まで2週間とか酷いことになってるな。

[shoh8]

こええ、本番触りたくねえ

[homarara]

ファーストサーバを思い出すな。クラウドはある日突然すべてが吹っ飛ぶことがあるから、「消えても対応できる」体制は必須なんだよああ。うちの顧客でそんな体制できてる所無いけど。

[yujiorama]

停止した理由や、復旧の状況も記載されてる

[l83DK]

アトラシアン製品はオンプレ版の販売をやめるのやめてください

[yamaimo_san]

復旧対応にJira使ってるのかな

[dekasasaki]

うちは平気だった。

[solidstatesociety]

Jiraされた

[amatou310]

すげー…

[shikiarai]

発表までに8日もかかるのか……内容がえぐいのはわかるけど報告担当用意しないと

[wwolf]

oh…