Google Cloudが、顧客のアカウントを誤って削除し、大規模障害の引き金になる──こんな出来事が海外で起きた。オーストラリアで年金基金を運営するUniSuperは5月8日（現地時間）、自社サービスで起きていた障害について、プライベートクラウドのアカウントが誤って削除されたことが原因だったと発表した。 UniSuperはGoogle Cloudを活用していたが、米Google自身が誤ってアカウントを削除。UniSuperは冗長性を確保するため、別のリージョンにもデータを置いていたが、そちらも無効にされていたという。 アカウントが削除された経緯については「（Google Cloudが）UniSuperのプライベート・クラウド・サービスをプロビジョニングする際の不用意な構成ミスにより生じた」（UniSuper）と説明している。しかし、UniSuperは他社のサービスでもバックアップを確保し
「プッチンプリン」をはじめとする江崎グリコのチルド食品が店頭から姿を消した。2024年4月3日に実施した基幹システムの切り替えでトラブルが発生。同社が物流・販売を請け負っていた他社製品を含め、一部商品を出荷できなくなった。同月18日に出荷を一部再開したものの、トラブルは終息せずに再び出荷を停止。システム障害の影響で、当初業績予想より売上高を200億円程度押し下げるとみる。 「スーパーにもコンビニにも『プッチンプリン』が見当たらない」「『カフェオーレ』を長年愛して飲んでいるが、どこの店舗も販売休止中だ」――。2024年4月中旬、X（旧Twitter）で、このような投稿が相次いだ。 江崎グリコの看板商品が店頭から姿を消した理由は、システムトラブルによるものである。同社は2024年4月3日、基幹システムの切り替えを実施した。旧システムを独SAPのERP（統合基幹業務システム）パッケージ「SAP
「改札内で宿泊したくない」モバイルSuicaシステム障害 JR東「サイバー攻撃と断定」（テレビ朝日系（ANN）） - Yahoo!ニュース
10日、モバイルSuicaなどが使えなくなるシステム障害が発生しました。JR東日本は「サイバー攻撃だった」と断定しました。 ■チャージできなくて改札に入れない人も JR東日本によりますと、モバイルSuicaへのログインやアプリでのチャージなどのサービスがつながりにくくなるシステム障害が発生しました。 バスに乗ろうとしてチャージできなかった人 「なんでチャージできないんだろうなって、ずっとぐるぐる回ってるんですよ。現金で支払って。2駅くらい乗った後にチャージが完了しましたって」 別の男性はこう話します。 チャージできなくて改札に入れない人 「そもそも駅内に入れない」 「（Q.残高は？）残高15円なので、帰れないですね」 渋谷駅からおよそ1時間半かけて、東京・あきる野市の武蔵五日市駅まで帰ろうとしたところ、チャージができない状態になったといいます。再びチャージを試みますが…。 チャージできなく
江崎グリコの公式サイトより ほぼすべてのチルド食品（冷蔵食品）が、社内のシステム更新作業に伴う障害により出荷停止となっている江崎グリコ。4月初めに障害が発生し、出荷再開時期がいまだに未定という異例の事態を受け、同社は今月8日、システム障害によって2024年12月期の営業利益が60億円、売上高が200億円下押しされる見通しだと発表した。業績に多大な悪影響が生じるため、グリコがシステム更新プロジェクトの主幹ベンダであるデロイト トーマツ コンサルティングに損害賠償を求めて法的手段を取る可能性も取り沙汰されている。今後の展開について業界関係者や専門家の見解を交えて追ってみたい。 グリコは業務システムについて、独SAPのクラウド型ERP「SAP S／4HANA」を使って構築した新システムへ切り替えるプロジェクトを推進してきた。旧システムからの切替を行っていた4月3日、障害が発生し、一部業務が停止。
江崎グリコの公式サイトより ほぼすべてのチルド食品（冷蔵食品）が、社内のシステム更新作業に伴う障害により出荷停止となっている江崎グリコ。5月中旬に出荷を再開すると発表していたが、同月1日に出荷停止期間を延長するを決め、6月中の出荷再開を目指すとしながらも、その時期は未定だと発表した。約340億円もの費用をかけてSAPのクラウド型ERPソフトウェアを導入して基幹システムを刷新するという作業だが、なぜシステム障害で商品出荷が2カ月以上も停止する事態となっているのか。また、4月24日付「ダイヤモンド・オンライン」記事によれば、刷新プロジェクトを任された主幹ベンダは外資系コンサルティング会社のデロイト トーマツ コンサルティングとのことだが、外資系コンサルにシステム開発・更新を委託するリスクはあるのか。専門家の見解を交えて追ってみたい。 江崎グリコは売上高3325億円、営業利益186億円、当期利益
江崎グリコは5月1日、システム障害によって出荷業務を停止しているチルド食品について、停止期間が延びると発表した。これまで5月中旬の再開を目指していたが、1日時点で再開時期は「未確定」という。 「プッチンプリン」などの自社チルド食品と、キリンビバレッジから販売を受託している「無添加野菜シリーズ」など紙パック商品が対象。システム障害の問題は特定できたものの、その解消に向けた作業に時間がかかっているという。 江崎グリコは「商品の安定供給に向け万全を期すため、出荷停止期間の延長を決定した」と説明。「出荷再開のメドが立ち次第、改めて案内する」としている。 システム障害のきっかけは、生産から物流、ファイナンスなどの情報を統合する基幹システムを新たに構築し、4月3日に全面移行したこと。システム切り替えの際に障害が発生し、全国の物流センターで出荷業務が遅延。一部取引先にも遅延や欠配が発生した。 4月14日
2024年4月5日、江崎グリコは基幹システムの切り替え後にシステム障害が発生し、同社や販売委託を受けている一部の冷蔵食品の出荷に影響が生じていると公表しました。ここでは関連する情報をまとめます。 障害後緊急対応するも在庫数合わず業務停止 今回システム障害が起きたのは江崎グリコの基幹システムで2024年4月3日の新システムへの移行に伴い発生した。物流、販売、会計などを一元管理するERPパッケージ SAP社製「SAP S/4HANA」で構築されており、「顧客への継続的価値創出を可能にするバリューチェーン構築と経営の迅速な意思決定を目的とした、調達・生産・物流・ファイナンスなどの情報を統合する基幹システム」と同社では説明している。障害原因の詳細は同社から開示されてはいないが、システム障害の問題個所の特定は済んでいる。なおサイバー攻撃によるものではないと取材に答えている。*1 システム障害の影響に
コンサル大解剖 「勝ち組」としてバブルを謳歌するコンサルティング業界。市場の急膨張を背景に、業界の序列を巡って多種多様なプレイヤーがバトルを繰り広げている。アクセンチュアやBIG4、戦略系ファーム、国内コンサル、ITベンダーから総合商社に広告代理店……。各社の成長戦略や人材戦略に加え、コンサルを活用する事業会社側の思惑まで、大乱戦期を迎えたコンサルビジネスの最前線を追う。 バックナンバー一覧 食品大手、江崎グリコで起きた大規模システム障害で、原因となったシステム刷新のプロジェクトを手掛けた主幹ベンダーがデロイト トーマツ コンサルティングであることが分かった。復旧には時間がかかる見通しで、主力商品の「プッチンプリン」などが出荷できず、小売店の棚から消えている。長期連載『コンサル大解剖』内で配信している特集『デロイト内部崩壊』の第10回では、プロジェクトの詳細や大幅遅延など混乱の様子に加え、
「江崎グリコ」は、基幹システムの障害で「プッチンプリン」などのすべての冷蔵商品が全国で出荷できない状態になっていることを明らかにしました。会社は、5月中旬の出荷再開を目指しているということです。 江崎グリコによりますと、全国の物流センターで出荷を停止しているのは ▽「カフェオーレ」や「プッチンプリン」など冷蔵商品のすべてに当たる82品目と ▽冷凍や常温の一部商品です。 4月3日に商品の流通などを管理する基幹システムを新しいものに切り替えた際にシステム障害が発生し、会社が復旧作業を進めていました。 18日、いったん出荷を再開しましたが ▽データの不具合が見つかったことや ▽受注分の処理が間に合わなかったことから 再び出荷を停止したということです。 会社は、5月中旬の冷蔵商品の出荷再開を目指して復旧作業に当たっています。 江崎グリコは「多大なご迷惑とご心配をおかけしており、おわび申し上げます。
2024年04月19日 江崎グリコ株式会社 当社基幹システム障害に伴う 「チルド食品」（冷蔵品）の一時出荷再停止に関するお詫び 2024年4月3日(水)、基幹システムを切り替えた際に発生したシステム障害により、乳製品・洋生菓子・果汁・清涼飲料などの「チルド食品」（冷蔵品）につきまして、現在、一部の受発注及び出荷業務に影響が出ております。 基幹システムの障害発生以降、当社の「チルド食品」（冷蔵品）を取り扱う全国の物流センターにおける業務を一時停止したうえで、全面的な復旧を目指しておりました。 しかしながら、18日(木)より一部再開したものの、物流センターでの出荷に関するデータ不整合等が発生したほか、想定していた受注に対して処理が間に合わず、出荷の停止を判断しました。お客様およびお取引先様にご迷惑をお掛けしております。 「チルド食品」（冷蔵品）の出荷業務を再度停止させていただき、5月中旬の再開
大田区は4月17日、2023年10月に発生したシステム障害の検証結果を公開し、システムの運用・保守を担っていたNECに対し損害賠償金486万8437円を請求すると発表した。障害の原因はNECによる情報共有の不足と結論付けている。同社も結果や損害賠償に同意しているという。 障害が発生したのは、23年10月9日から10日未明にかけて。システムを構成していたSSD3台がほぼ同時に故障し、データが全損して使用できない状態になった。これにより、大田区の住民記録システムや国保年金システム、税務システムなどが影響を受け、18日の完全復旧まで、区の業務に支障をきたした。 大田区は障害の原因について、SSD3台の同時故障を想定していないシステム構成にあったと説明。「システム基盤は19年に構築し、構築当時からSSDの故障について2本までは耐えうる構成をとっていたが、今回はその想定を大幅に上回る障害が発生したた
富士通Japanは4月16日、住民票のコンビニ交付システムで証明書が誤交付されたと発表した。香川県高松市で申請者とは異なる住民の住民票が発行されたという。同社のコンビニ交付システムでは、2023年にも複数回の誤交付が発生していた。 高松市では1月4日から、富士通Japanのコンビニ交付システム「Fujitsu MICJET コンビニ交付」を導入していた。しかし、コンビニ交付サービスの項目でシステムの設定ミスがあり、4月4日に別人の住民票が誤交付される事象が発生した。 富士通Japanは誤交付の原因について「複数サーバでシステムを構成している高松市向けに、本来はその構成に応じたプログラムを適用すべきところを、誤って単一サーバ構成向けのプログラムを適用していたことによるもの」と説明。16日時点では既に正しいプログラムを適用し、正常に動作することを確認したという。また、同システムを利用する全ての
2024年の2月29日、新潟県警察・神奈川県警察・岡山県警察・愛媛県警察が運営する運転免許センターでシステム障害が発生し、運転免許証の更新や新規取得の手続きを中止した。うるう年による障害だ。 4県警への取材で、障害によって当日運転免許センターで免許証を受け取れなかったとみられる人は合計で約800人に上ることが分かった。しかし、影響はさらに大きい。神奈川県警では運転免許センターの最寄りである相模鉄道の二俣川駅に、免許証を当日交付できないと掲示した。同県警は掲示によって約100人が運転免許センターを訪れなかったと見積もっている。一連の障害はテレビニュースで大きく取り上げられ、X（旧Twitter）などのSNSでも周知が進んだため、影響は1000人規模になるだろう。 4県警は、運転免許センターの障害原因について、「免許証を作成する機器の不具合」だと回答した。さらに取材を進めていくと、いずれの運転
2024年4月4日、HOYAは同社グループにおいて3月30日にシステム障害が発生しており、その原因について不正アクセスに起因する可能性が高いと公表しました。HOYAは国内トップのレンズメーカーで、障害により取引先である眼鏡チェーン各社にも一部販売見合わせなどの影響が出ています。ここでは関連する情報をまとめます。 複数事業所でシステム障害 海外の事業所で不審な挙動がシステムで確認され調査した結果、HOYAグループ国内外の事業所においてシステム障害が発生していることが判明。直ちに障害発生が確認されたサーバーの隔離などの対応を実施。 外部専門家を交えた調査の結果、何者かによる同社サーバーに対する不正アクセスに起因し生じた可能性が高いと同社は判断。機密情報、個人情報などの流出の可能性について調査を進めており、結果が判明するまでには相当の日数を要する見込みとしている。外部からはランサムウエア被害の可
大手光学ガラスメーカーの「HOYA」は、本社と複数の事業所でシステム障害が発生し、眼鏡用レンズの受注や発送が停止しているということです。会社は、第三者による不正アクセスの可能性が高いとして復旧を急いでいます。 HOYAによりますと先月30日、本社と複数の事業所でシステム障害が起きていることを確認したということです。 この影響で複数の製品の生産や受注のシステムが停止し、眼鏡用レンズの受注や発送も止まっているということです。 HOYAの眼鏡用レンズは国内のシェアがトップで、販売店にも影響が出ています。 このうち、眼鏡販売大手の「ジンズ」では先月31日からオンラインショップを含むすべての店舗で、一部のレンズの取り扱いを一時的に停止しています。 HOYAによりますと、これまでの調査の結果、第三者が会社のサーバーに不正アクセスを行った可能性が高いとみられるということです。 会社はシステムの復旧作業を
DB呼び出し回数を減らしてコア機能を高速化した話。そして起こった悲劇と教訓 - Money Forward Developers Blog
初めに こんにちは、マネーフォワードクラウド連結会計（以降、クラウド連結会計）のバックエンド開発に従事しているTaskと申します。 今回は、クラウド連結会計のコア機能を高速化した話と、それが原因で起こった金額の不整合障害から得られた教訓を紹介しようと思います。 本記事内では、前提として簿記2級相当の知識や用語が頻出します。 連結会計とは まず、クラウド連結会計が扱っている連結会計について説明させてください。 連結会計とは、親会社・子会社など、支配もしくは従属関係にある複数の会社を1つのグループと捉えて、そのグループの決算を行うための会計手続きを指します1。 下の図の「連結グループA」の決算を行うイメージです。 この業務を「連結決算業務」と呼びます。 連結決算を行うことによって、会社の利害関係者（債権者や株主など）は各社単体だけではなく、グループとしての財政状態・経営成績・キャッシュフローの
加藤公一（はむかず） @hamukazu Kimikazu Kato, ソフトバンク株式会社。博士（情報理工学）。修士は数学（代数幾何学）。にゃーんと鳴く狂犬と呼ばれている。DMは全員に開放中。 著書「機械学習のエッセンス」：bit.ly/mlessence 、監修「機械学習図鑑」bit.ly/mlzukan linkedin.com/in/kimikazukato
システム障害は15日午前0時頃（現地時間）に発生し、世界中のマクドナルド店舗に影響が出た。モバイルオーダーアプリなど利用できない状態が続いた他、日本を含む一部の国では一時休業を余儀なくされた店舗もあった。 McDonald'sは声明で「世界規模のシステム障害が発生したが、すぐに特定され是正された。多くの国ですでにシステムが復旧しており、残りの国でも復旧作業が進行中だ」と説明。続けて「この問題はサイバーセキュリティの問題によって直接引き起こされたものではなく、設定変更中のサードパーティプロバイダーによって引き起こされた」と明かした。 同社の最高情報責任者（Chief Informarion Officer）を務めるブライアン・ライス氏は、「技術の信頼性と安定性は最優先事項だ。今回の障害は例外的なものだが、至急解決するよう努力している」とコメントした。
大手ハンバーガーチェーンの日本マクドナルドでは15日午後システム障害が発生し、全国の多くの店舗で営業を取りやめるなどの影響が出ました。復旧作業を進めた結果、15日夜、一部の店舗で営業を再開したということで、会社は準備が整った店舗から順次、営業を再開させることにしています。 日本マクドナルドによりますと、15日午後、システム障害が発生したため全国の多くの店舗でレジの端末が使えなくなりました。 このため、一部の店舗では、レジの端末を使わずに口頭で注文を受け付けたほか、営業を取りやめる店舗も相次ぎました。 その後、会社が復旧作業を進めた結果、15日夜、一部の店舗で営業を再開したということです。 会社は準備が整った店舗から順次、営業を再開させることにしています。 会社は今回のシステム障害の原因はほぼ特定できたとしていて、サイバー攻撃によるものではないとしています。 東京 渋谷区にあるJR原宿駅近く
原因調査 エラーの発生箇所の特定 このエラーIncorrect datetime valueはデータベースのdatetime columnに対して不正な値を書き込もうとしたことが原因で発生しています。通常のINSERT statementを使って、過去の時刻を書き込むことはほとんどありませんが、MySQLなどに用意されているINSERT … ON DUPLICATE KEY UPDATE statementを使って複数の行を更新するときには、過去の時間を使ったクエリが生成されます。 例えば、複数の消耗品を所持しており、1つのクエリで複数の所持数を変更するときは、下記のようになります。 // PK(user_id, item_id) SELECT * FROM items WHERE user_id = 123; user_id | item_id | quantity | created_
![[Ruby]うるう日の午前0時から9時までに起動したプロセスでのみ再現するサーバー障害](https://cdn-ak-scissors.b.st-hatena.com/image/square/d0bd8110685867c995a35fa0d43a6c9559e4a3cf/height=288;version=1;width=512/https%3A%2F%2Fdeveloper.aiming-inc.com%2Fwp-content%2Fuploads%2F2024%2F03%2F7f32aafa65cc72bf6e5f250261a2d965-e1709625678740-890x500.png)
スギ薬局は、2月29日の「うるう日」に発生したシステム障害について謝罪した。2月29日の午後1時ごろに復旧し、3月1日も通常通り営業している。 影響があったのは、グループ計1703店舗のうち、処方箋を扱っていた約1300店舗。29日の開店時にレセプト（診療報酬明細書）コンピュータと呼ばれる調剤管理システムが「完全に止まった」。 レセプトコンピュータは、処方箋の内容を入力すると、健康保険組合などに対して請求する診療料報酬などを算出する。このため店頭で利用者の会計処理が行えなくなった。 原因は、うるう日に対応していなかったこと。「システムは3年ほど前に導入したもの。初めて迎えるうるう日だった」という。「処方箋を見れば調剤はできるため、緊急性の高いケースなどは後日会計する形で薬を出していた」。その後、各店舗に改修プログラムを配布し、午後1時頃までに完全復旧した。 スギ薬局は今後、継続して原因究明
2024年2月29日、スギ薬局でシステム障害が発生し、約1300店舗で処方箋の登録や処方薬の会計ができなくなった。うるう日が原因だった。この他にも、新潟県警察・神奈川県警察・岡山県警察・愛媛県警察においてトラブルが起き、運転免許証の発行に遅れが生じた。 スギ薬局では29日朝からレセプト（診療報酬明細書）コンピューターのシステム障害が発生した。レセプトコンピューターは、処方薬の情報を打ち込むと保険の負担割合などから会計を自動算出するシステムだ。システム障害により、処方箋の登録や処方薬の会計ができない状態になった。同社が運営する約1700店舗中、調剤室を設けている約1300店舗が影響を受けた。午後1時に復旧した。 原因はうるう日だった。各店舗に改修プログラムを送付して復旧した。スギ薬局の広報は「3年ほど前に入れたシステムで初めてのうるう年だった」と明かす。 障害中は、処方箋に基づいて患者に薬を
愛知県に本社があるスギ薬局グループの全国の店舗で、「うるう日」が原因とみられるシステム障害が発生し、一時、処方箋の登録や会計ができなくなりました。会社によりますと、システムは午後1時ごろまでに復旧したということです。 スギ薬局グループによりますと、29日朝、全国の店舗から「処方箋のシステムが使えない」という問い合わせを受け、システム障害の発生が確認されました。 愛知県のほか関東や関西など、全国におよそ1300ある調剤ができる店舗で、処方箋を登録したり会計をしたりするパソコンのシステムが一時、使えない状態になり、各店舗の薬剤師が緊急性があるものについては、薬を出したうえで後日、会計してもらうよう対応したということです。 会社によりますと、原因調査を行ったうえ、システムの改修プログラムを各店舗に送り、システムは午後1時ごろまでに復旧したということです。 今回、障害が起きたシステムは3年ほど前に
「うるう年」影響か 運転免許センターでシステム障害 4県で運転免許証発行できず（テレビ朝日系（ANN）） - Yahoo!ニュース
神奈川、新潟、岡山、愛媛の4県で運転免許を作成する時に使うシステムに障害が発生し、免許が作成できない状況になっています。 【動画】高齢者の“踏み間違い”事故 運転席から見たその瞬間 運転免許証を作成する「運転者管理システム」に障害が発生しているのは、神奈川、新潟、岡山、愛媛の運転免許センターです。 警察庁によりますと、午前8時過ぎから各地でシステム障害が発生し、運転免許証を作成できない状況が続いています。免許の更新など作成以外の業務はできているということで、きょう手続きを行った人には後日、郵送などで対応するということです。 今のところ、復旧の目途は立っておらず、「うるう年」によって起きた障害の可能性もあるとみて、システム管理業者が原因を調査するとともに、復旧作業を急いでいます。
1.経過 昨日（2月20日）午後8時30分頃から、横須賀市のホームページが閲覧できなくなる障害が発生しました。 本日（2月21日）午前2時00分頃、復旧しています。 2.原因・影響 外部から「DDoS（ディードス）攻撃」というサイバー攻撃があったことによるものです。 「DDoS攻撃」とは企業や団体のウェブサイトやサーバーなどに大量のデータを一斉に送り続けることで大きな負荷をかけ、機能停止に追い込むサイバー攻撃の1つです。 なお、本件による個人情報等の情報漏えいや、ページの改ざんはありません。 3.今後の対応 対応策をホームページ保守事業者と早急に協議します。
3万2768時間が経過して発生した石巻市戸籍情報システムの障害についてまとめてみた - piyolog
2024年2月14日、宮城県石巻市は2023年9月に発生したシステム障害について原因がSSDの重大なファームウエア不具合であったと公表しました。ここでは関連する情報をまとめます。 重大な不具合情報が共有されずシステム障害発生 2023年9月当時にシステム障害が発生したのは石巻市本庁内で稼働する戸籍情報システム。システムが稼働するサーバー上で使用していたSSDの不具合によりバックアップサーバーを含めてシステム停止が起こり、市役所やコンビニなどで戸籍証明書の発行が行えない事態となった。2日後には最新の戸籍証明書の写しは発行できるようになった*1ものの、完全復旧（除籍や改製原戸籍の証明書発行）には約1か月（2023年9月20日～2023年10月18日）を要することとなった。 障害影響が長期化した理由として、市は当該システム上で取り扱うデータが戸籍にかかわるもので、復旧方法および突合などに万全を期
2024年1月、約5万人が使う神奈川県のネット出願システムでトラブルが起きた。受験生がアカウント登録にGmailのアドレスを使うと、メールが届かなくなった。ネット出願システムの設定の不備で、Gmail側がスパムと判断した可能性が高い。県教委は設定を見直してトラブルが解消したとみられたが、翌週にも再発した。対応は難航し、復旧まで実に1カ月の期間を要した。 「志願者や保護者、中学校関係者らにご迷惑をおかけしたことを深くおわび申し上げる」――。神奈川県教育委員会の担当者は、県内の公立高校入試の出願に使う「神奈川県公立高等学校入学者選抜統合型インターネット出願システム（以下、ネット出願システム）」で2024年1月9日から継続して発生したトラブルについてこう謝罪する。 神奈川県は2024年度から公立高校入試の出願方法を、従来の紙からインターネットに切り替えた。ネット出願は各地で取り組みが広まっており
Gmailで問題が生じる神奈川県立高校ネット出願システムの被疑箇所を調査、改善策を検討してみた | DevelopersIO
神奈川県高校入試のネット出願システムの不具合影響を受けた利用者として、Gmailを扱えないメール環境について外部から調査しました。 出願システムで独自実装されたメールシステムの不完全な実装と、メール関連のDNSの設定不備が原因であった可能性が高いと推測します。 2024年の神奈川県立高校入試出願システムの不具合の影響を受け、@gmail.comのメールアドレス を利用出来なかった一利用者として、 インターネットから参照可能な範囲で、出願システムのメール環境について調査。 被疑箇所の推定と、状況を改善する対策について検討する機会がありましたので、紹介させて頂きます。 神奈川県公立高等学校入学者選抜インターネット出願システムの稼動状況について MX設定 「mail.shutsugankanagawa.jp」のMXレコードを確認しました。 1/18(21時) $ dig mx mail.shut
私個人の障害対応の経験と 一昨日参加したIncident Response Meetup vol.1での学びから 障害対応において大切だと感じていることをまとめる。 障害とは リリース後のシステムにおいてシステムの不具合やユーザーの操作ミスによってユーザー業務に影響が出ているもしくは出る恐れがあるもの。 障害対応の目的 システムを直すことではなく、ユーザー影響の回避・低減・早期回復をすること。 障害対応に対する心構え システムの信頼性の要である 障害への対応の仕方でユーザー影響が大きく変わる いつ発生するかわからないため特定の人が常に障害対応をするということは不可能である 素早く適切に行動するための備えが重要である 役割分担 障害対応では復旧対応、原因調査、ユーザーへの説明、社内調整などたくさんのことをやる必要がある。 またそれぞれの作業の難易度が高いことも多い。 一人の人間にできることは
","naka5":"<!-- BFF501 PC記事下（中⑤企画）パーツ＝1541 --><!--株価検索 中⑤企画-->","naka6":"<!-- BFF486 PC記事下（中⑥デジ編）パーツ＝8826 --><!-- /news/esi/ichikiji/c6/default.htm -->","naka6Sp":"<!-- BFF3053 SP記事下（中⑥デジ編）パーツ＝8826 -->","adcreative72":"<!-- BFF920 広告枠）ADCREATIVE-72 こんな特集も -->\n<!-- Ad BGN -->\n<!-- dfptag ＰＣ誘導枠５行 ★ここから -->\n<div class=\"p_infeed_list_wrapper\" id=\"p_infeed_list1\">\n <div class=\"p_infeed_list\">
高校入試の出願システム、Gmailにメール届かず……神奈川県、受験生に「@gmail.com以外のアドレス使って」
神奈川県教育委員会が2024年1月4日にリリースした、公立高校入試のインターネット出願システムで、「@gmail.com」ドメインのアドレスにシステムからのメールが届かず、受験生が出願用アカウントを作成できない問題が起きている。 15日夜時点でも解消しておらず、県教委は受験生に対して、「@gmail.com以外のメールアドレスで登録してほしい」と呼び掛けている。 このシステムは、公立高校の2月入試に出願する受験生などが利用する。中学校で受け取った書類に書かれたURLから出願サイトにアクセスし、メールアドレスなどを登録して「志願者アカウント」を作成すると、出願サイトへのログインに必要な「登録番号」がメールで届く、という流れだ。 だが、登録したメールアドレスが「@gmail.com」の場合、登録番号入りのメールが届かない不具合が起きているという。 新システムによる出願は1月4日に受付スタート。
","naka5":"<!-- BFF501 PC記事下（中⑤企画）パーツ＝1541 -->","naka6":"<!-- BFF486 PC記事下（中⑥デジ編）パーツ＝8826 --><!-- /news/esi/ichikiji/c6/default.htm -->","naka6Sp":"<!-- BFF3053 SP記事下（中⑥デジ編）パーツ＝8826 -->","adcreative72":"<!-- BFF920 広告枠）ADCREATIVE-72 こんな特集も -->\n<!-- Ad BGN -->\n<!-- dfptag ＰＣ誘導枠５行 ★ここから -->\n<div class=\"p_infeed_list_wrapper\" id=\"p_infeed_list1\">\n <div class=\"p_infeed_list\">\n <div class=\"
浜松市中央区役所で一時システム障害、戸籍証明書など発行できず 現在もコンビニでは復旧せず（4日午前11時現在） | TBS NEWS DIG
1月4日午前、浜松市の中央区役所ではシステムトラブルが起きていて、一時、戸籍証明書などが発行できない状態になりました。システム障害が起きたのは、浜松市の中央区役所区民生活課です。市によりますと、1月4日…
はじめに 本番環境などでやらかしちゃった人 Advent Calendar 2023 という Advent Calendar 2023 があることを知りまして、自戒を込めて投稿したいと思います。 この記事は、本番環境などでやらかしちゃった人 Advent Calendar 2023 の10日目です。 使用・登場するものたち iMac（使用PC） WordPress React X サーバー（ホスティング先） Cyberduck（FTPサーバー） やらかし、その概要 2つあるのですが、やらかしとしては同じ内容（サイトを停止させてしまった）なのでまとめて書いていきます。どちらもホスティング先は Xサーバー を使用しています。 1：WordPressサイト運用において、FTP サーバー（Cyberduck）での操作ミスでサイトを停止させた話 2：React制のサイトでサブドメインへのホスティング
＜復旧済＞JPIXインターネット接続障害について
１．発生日時 2023/12/11 7:18 ２．復旧日時 2023/12/11 10:11３．対象地域 西日本４．対象のお客様・IPv6インターネット接続サービスのみをご利用のお客様・v6プラス（ホームゲートウェイ）をご利用のお客様・v6プラス（ブロードバンドルータ）をご利用のお客様・v6プラス 固定IPサービスをご利用のお客様５．影響上記の対象地域において、IPv6インターネット接続及びIPv4インターネット接続がご利用できない、またはご利用しづらい状況が発生しておりました。６．原因 通信設備障害７．復旧見込時間 復旧済み 復旧日時以降もお客様のインターネット接続が復旧しない場合は、ホームゲートウェイやブロードバンドルータの再起動をお願いします。 大変ご迷惑をおかけいたしましたこと、深くお詫び申し上げます。
前段 PHP Conference Japan 2023が 10/08 に大田区産業プラザPiOで行われたわけですが、開会直後に提供している無線LANがいきなり不安定になってしまい、そのまま一部の部屋以外で提供できない状態になってしまった。 この記事では、なぜそのようなことが発生してしまったか？という点に関して解説しようと思う。 結論 会場側設備として入っているNAPT-BOXが YAMAHA RTX1200 という 15年前*1に発売されたルータで、来場者を捌けるだけのNAPTセッションテーブル*2が備わっておらず、NAPTテーブル溢れ*3を起こしてしまった。 事前知識 NAPT Network Address Port Translation 1つのグローバルIPアドレスを複数のホストで共有するための仕組み。この機能により1つのグローバルIPアドレスを複数のクライアント(コンピュータや
2022年の春にポーランドで相次いだNewag社製の列車が故障する問題について、原因の究明にあたったハッカーグループ「Dragon Sector」のメンバーであるセルジウシュ・バザンスキー氏が、この問題について振り返っています。 q3k :blobcatcoffee:: "I can finally reveal some rese…" - Warsaw Hackerspace Social Club https://social.hackerspace.pl/@q3k/111528162462505087 O trzech takich, co zhakowali prawdziwy pociąg – a nawet 30 pociągów | Zaufana Trzecia Strona https://zaufanatrzeciastrona.pl/post/o-trzech-tak
はじめに この記事は、本番環境などでやらかしちゃった人 Advent Calendar 2023 の6日目です。 この記事で取り上げるやらかしは数年前の出来事です。 当時新卒2年目のエンジニアだった私が、ロードバランサ配下のサーバを全部切り離してサービス停止させてしまった話について、ここに供養させていただきます。 自分の失敗談なんて書きとぉないんじゃ、、というのが本音ですが、毎年やらかし系のアドベントカレンダーに勇気と希望をもらっていたので、今年は私もその一助となれたらという思いです。 やらかして死にたくなっているあなたへ。 背景 新卒で入社した会社で社内システム向けインフラの保守運用に携わっていました。 2年目となって仕事にも慣れてきた頃（フラグ）、事を起こしてしまいました。 環境 やらかしの対象となった環境はこちら。 AWS環境上で、ロードバランサとしてELBがあり、その配下にサーバ（
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google Cloud、豪年金基金のアカウントを誤削除 予備も誤削除 他社でのバックアップでなんとか復旧
「S/4HANA」への切り替えでトラブルの江崎グリコ、1カ月経過も商品の出荷停止続く
グリコ、障害で売上200億円の損失…ベンダのデロイトに損賠賠償請求の可能性
グリコ・システム障害、なぜ出荷再開「未定」の異常事態が発生？デロイトの責任
グリコ、チルド食品の出荷停止を延長 5月中旬→「未確定」に
江崎グリコの基幹システム移行トラブルについてまとめてみた - piyolog
【独自】プッチンプリン出荷停止の「主犯」はデロイト！グリコのシステム刷新で1年遅延の末に障害発生“ボロボロ案件”の実態
ゆな先生 on X: "【江崎グリコプッチンプリン生産停止の背景にあるもの】 江崎グリコは340億円かけてSAPを始めとするITインフラを整えようとしていた。IRにも書いてあった。 やけど、それが見事に失敗し、冷蔵品の生産停止まで追い込まれた。"
江崎グリコ 基幹システム障害で全冷蔵商品が出荷できず | NHK
当社基幹システム障害に伴う 「チルド食品」（冷蔵品）の一時出荷再停止に関するお詫び | 【公式】江崎グリコ(Glico)
大田区、NECに賠償金480万円を請求 10月のシステム障害巡り SSD3台の同時故障想定できず
富士通Japan、“コンビニ交付”でまたまた誤交付 同社は謝罪 「全力を挙げて再発防止」
運転免許センターで同時発生した「うるう年」の不具合、和暦設定が引き金に
HOYAのシステム障害についてまとめてみた - piyolog
HOYAシステム障害 眼鏡用レンズの受注発送停止 不正アクセスか | NHK
みずほ銀行『誰だって、新しい一歩の前ではふるえてるんだ』→そうだよね、例えば基幹システム入れ替えとか
マクドナルドの世界的なシステム障害、原因は「サードパーティープロバイダーによる設定変更」
米マクドナルド、世界規模のシステム障害に「心よりお詫びします」「サイバー攻撃ではない」
マクドナルド システム障害で営業取りやめの一部店舗で再開 | NHK
[Ruby]うるう日の午前0時から9時までに起動したプロセスでのみ再現するサーバー障害
「初めて迎える『うるう日』だった」 スギ薬局、システム障害を謝罪
「初めてのうるう年」でスギ薬局がシステム障害、各地の県警でも免許証発行に遅れ
スギ薬局グループ システム障害が復旧 「うるう日」が原因か | NHK
横須賀市ホームページの閲覧障害について
神奈川県公立高入試のネット出願にGmailが使えず、原因特定の難航で復旧に1カ月
障害対応で大切だと感じていることのまとめ - Qiita
富士通幹部が謝罪、補償関与に「道義的義務」 英郵便局冤罪事件：朝日新聞デジタル
「英史上最大の冤罪事件」に再び集まる注目 富士通の責任を問う声も：朝日新聞デジタル
サイトを停止させた話 ～慢心は敵！バックアップはゼッタイ！～ - Qiita
カンファレンスイベントで会場回線を過信してはいけない - notokenの覚書
走行不能になった鉄道車両のシステムをハックして復旧させたハッカーの記録
ロードバランサ配下のサーバを全部切り離してサービス停止させてしまった話 - Qiita