【1月23日追記】12月23日、24日に発生しました障害に関するご報告

いつもSkebをご利用いただき、誠にありがとうございます。 12月23日12時よりskeb.jpにアクセスできない大規模な障害が発生しておりましたが、12月24日07時に復旧いたしました。 12月23日、および12月24日が納品期限のリクエストは納品期限を12月25日23時59分までに延長させていただきます。 みなさまには多大なご迷惑をお掛けしましたことをお詫び申し上げます。 本障害につきまして詳細をご報告させていただきます。 概要日時: 12月23日12時22分〜12月24日7時00分 (JST) ダウンタイム: 18時間38分 内容: skeb.jpにアクセスできない不具合 原因: SkebはすべてのサーバとシステムをHerokuに設置していたが、障害発生時刻より同サービスのアカウントが理由の通知なく利用できなくなった。 解決: Herokuの一切の利用を中止し、すべてのサーバとシステ

[chanmina]

一時間で見切ってその二時間でぜんぶ移管できるのすごい

[bayashi_net]

"Twitter上で「Skeb」という単語をツイートや検索した方に対して、障害情報のツイートが表示されるようにプロモツイートを設定"

[ockeghem]

ちょっと理解しがたい事態なのでメディアの方はHerokuかセールスフォース・ジャパンに取材して欲しい

[shiopon01]

日本のHerokuの利用者大幅に減りそうな記事だ

[tagomoris]

ぎょえー “セールスフォース・ジャパンより、同社もHerokuに連絡したが応答がない旨の連絡を受ける”

[kfujieda]

Herokuがエンタープライズ契約してる顧客を垢BANとか想定するの無理だよね。それでも19時間弱で復旧したのすごい。

[sirobu]

Skebの障害報告。突如Herokuのアカウントが停止され、代理店であるセールスフォース・ジャパンからの連絡にも応答しないとのこと。Herokuはクリスマス休暇でも取ってんのか？

[mohri]

プロモツイートにこういう使い方できるのか！ 便利“Twitter上で「Skeb」という単語をツイートや検索した方に対して、障害情報のツイートが表示されるようにプロモツイートを設定”

[Falky]

HerokuはEnterpriseでも垢banされるし顧客どころか代理店からのコンタクトにも応答しないまじか

[saken649]

Skebの障害復旧、1日でサーバー丸ごと移管、てコンテナ化してたから出来たのか。素晴らしい。データベースとか画像ストレージはどうしたんだろ。それも丸ごとコンテナに突っ込んでた？いずれにしてもお疲れ様でした…

[ya--mada]

セールスフォースとは手打ちした、って事以外は外野にはワカラン。

[yosida95]

前段で取引額に言及していることから金銭的解決だろうか > "ご担当者の方々との協議を経て、完全に解決" / Heroku の障害ではないということはポリシー・ abuse だろうけれど問い合わせに応答がないのはおっかないな

[HiddenList]

しれっとここで追記するのか

[sawat]

障害発生確認から24時間で新環境への移設してサービス再開とか凄い。技術的な部分もさることながら判断の早さも。

[asakura-t]

12/28「ご担当者の方々が当社を訪問し、Herokuの障害ではないことを確認し、同社が把握している状況の詳しい説明を受ける」／1/23「セールスフォース・ジャパンとの協議を経て、本件が完全に解決。」

[T-miura]

hoeoku・・・て気持ち。エロ業界特有のリスクかもしれんけど

[swingwings]

“エンジニア4名に対し1人あたり3万円のAmazonギフト券を夜間直ちに支給しました。また、家族がいる社員も多い中、社員の大半がクリスマスという重要なイベント期間中に復旧作業にあたったことから、スケブ社では12月31

[secseek]

親会社からの問い合わせすらブッチって仕事なめてるんですかね

[pmakino]

「12月23日18時28分: セールスフォース・ジャパンより、同社もHerokuに連絡したが応答がない旨の連絡を受ける」半日かけてホットラインで連絡することすらままならないのか

[diveintounlimit]

“今回の障害をきっかけに、2023年1月より、夜間に障害が発生し作業にあたった従業員に対し、深夜残業および休日出勤による法定割増賃金に加え、3万円の現金を支給する「障害対応手当」という制度を新設しました”

[ytRino]

すごいなー Herokuェ…/ポルノBAN説なるほど

[peppers_white]

なるがみ氏決断力高いなあ、18禁系コンテンツは海外サーバーに頼れないから物理で殴る方向に行きそう、そして日本にはそれが実行できる経済力もある・・・/現金配ってもいいけど来年になるよという話なのよね

[nittsui]

Skebが異世界無双小説的な「Herokuが障害でサポートも応答無しなので1日で他クラウドに移行して復旧させました」という対応を実行https://harumi.land/nittsui/2022/12/25/skeb_heroku_1day_replace_othercloud/

[smbd]

“Twitter上で「Skeb」という単語をツイートや検索した方に対して、障害情報のツイートが表示されるようにプロモツイートを設定。”そんなこと出来るんだ

[nn0]

Herokuはどうしてそんなことになったんだ？短時間で復旧させたskebのエンジニア、本当にすごい…。

[yfukuda827]

運用チームの決断や実行力すごいな！

[Nan_Homewood]

スゴい。コンテナ技術を真面目に勉強すべきだなと思いました。

[matsui]

“事前準備なく1日未満でHerokuから新しいクラウドサービスに問題なく移管することができました”

[manaten]

skebというとDBもだけどユーザーのアップロードコンテンツのほうが移行大変そうだけど、それらはHerokuに置いてなかったとかなのかな？料金的にもストレージ専門のサービスのほうが安く付きそうだしな

[yuki_2021]

んー、Herokuは自分も使ってるけどどうしようかな？

[yskn-beer]

普通にSkebエンジニアすごすぎんか？

[tu_no_tu]

給与規定にある時間外労働手当などを現金支給するのは当然として、追加で突然の長時間対応に対して追加報酬を出したいが現在の給与規定にないから、福利厚生としてアマギフ支給したんでしよう。なんら不思議ではない

[scipio1031]

こんな説も→“HerokuBAN案件、単純に違法ポルノのブラックマーケットだと判断されてのBANであればHeroku視点妥当ではあるが” / アマギフ、単純に社長賞ポケットマネーから出しましたって言っとけば面倒臭くならなかった？

[kaneko_hk]

"協定が無い状態で給与（手当）を現金以外の支払うのは労基法違反" → 協定あるから出してるんじゃないの？ 知らんけど。

[W53SA]

「しかしながら、12月24日現在もHerokuから応答はなく、詳細な原因は判明しておりません。厚いサポートを謳うエンタープライズ契約を締結しているにも関わらず、このような対応は大変遺憾です。」これは厳しい

[chocomintice660]

凄いなぁ

[yo_waka]

ひえー "SkebはすべてのサーバとシステムをHerokuに設置していたが、障害発生時刻より同サービスのアカウントが理由の通知なく利用できなくなった"

[dakahiiiii]

これは本当にお疲れ様案件。障害対応手当みたいなの弊社にも導入したいて思ってたから有名な会社で実績作ってくれるの助かるー

[Trikabuto]

Heroku側の言い分待ちかな。協定が無い状態で給与（手当）を現金以外の支払うのは労基法違反なんでSkebがコンプラ軽視の会社ってことは分かった。id:dazz_2001 処理が面倒は法令違反の理由にならないと思いますよ。

[anus3710223]

判断めちゃはや！こういったリスクを予め想定していたのかな？その辺気になるし、今後のSaaSにおけるトラブル事例の参考にもなるからぜひどこか取材して欲しい