稼働中の商用ネットワークでVRRPの切替検証を実施しちゃった話 - Qiita

ご挨拶 初めまして @moriya-snj です。 この記事は「本番環境でやらかしちゃった人 Advent Calendar 2019 - Qiita」の15日目の記事です。 みなさん盛大にやらかしている様で安心しております。 今回は私が社会人3ヶ月目でやらかした重大事故の記録を包み隠さず暴露するとともに当時フォローしてくださった先輩や上司お陰でなんとかこの業界で生き抜くこと出来ていることの感謝をお伝えすべく、キーボードに手を伸ばしております。 何をしでかしたか 顧客AがIP電話を導入するため、新たにVoIP用ネットワークを構築することとなった。 機器の設置等は別部署が行うため、設置依頼を出し、完了の報告をもらったため、ネットワーク機器のコンフィグなどを流し込み疎通確認などを行うこととなった。 疎通確認が完了し、お次はVRRPの切替確認を行おうとしたが、ここで誤って稼働中の顧客Bのネットワ

[ilyaletre]

収容効率高めたサービスのオペレーションほど怖いあるあるだ。コピペで済む手順書は僕もよくカンペと呼称して作ってる。

[stealthinu]

これ、やらかしの話より、やってしまった件の事後対応したときの上司、先輩の対応がすごく参考になる。めちゃよい会社・チームじゃん。

[shoh8]

検証環境が潤沢に用意できない案件がざらにあるので、あまり他人事とは言えない。新人研修で、本番環境を手打ちコマンドでぶっ壊して、対策考えるという題目で体験させたい。ホスト確認は基本のキと刷り込む

[kfujieda]

“頭を下げるのは俺たち上の人間の仕事だから気にしなくていい。” - 一度言ってみたい。

[rochefort]

いい会社

[send]

上司と先輩がいい

[katti]

すごくいい

[wata_d]

いい環境

[hirata_yasuyuki]

先輩と上司の対応が完璧すぎる。

[kazkun]

いい話だー。いつでもこういう事後対応ができる上司でありたい。が。咄嗟に怒鳴っちゃう事も。反省。

[masaru_b_cl]

あるあるですが、本当に「想定する挙動をしなかった場合は直ちに作業を中断し周囲にヘルプを求めること！」は大事。

[ytRino]

"作業者として""先輩・上司として"

[longroof]

"稼働中の商用ネットワークでVRRPの切替実証"ここまででお腹いっぱい( ；´Д｀)…

[l__LINE__l]

読んでるだけで寒気がする

[dogusare]

「何度も」いいねナチュラルテロ。関係ノード数かユーザ数がフェイクでも有ると共感度が増す。周囲が人間でよかった。当方、針の筵サンドバッグ…。疎通確認は対象vipに加えて、e2eな末端を見ておくと良いかも。

[UME]

電話が動いてる本番環境で試しに違うことさせてみるみたいなのはわりとよくあることなのかと思ってたよ

[mugicha1000]

商用がそんな残念な環境で動いてることにビックリだよ…怖っ