いつものように本番作業してたはずなのに - Qiita

この記事は「本番環境でやらかしちゃった人 Advent Calendar 2019」の1日目です。 https://qiita.com/advent-calendar/2019/yarakashi-production なかなか濃いラインナップが期待されますが、まずはさらっといきたいと思います。 具体性が乏しい部分もあると思いますが、そこはお察しください。。。 やらかし 背景（前提条件） いっていに昔の話です ETL（データ加工）サーバ 数十を超えるシステムからデータを集める BIツールなどで活用できるように各種加工処理を行い、DBなどにロードする 繁忙の違いはあれど、24/365で常時一定量の処理は稼働している 複数のチームが共存しているサーバ アプリ面では比較的疎 ETL処理のリリース前に本番サーバ上で試験をする取り決めになっていた 性能や本番相当データのテストが安全に行えるような環境

[Fushihara]

動くな！（ログアウト禁止）はちょっとかっこいい

[z1h4784]

作業手順書を作らされてその手順書に載っているコマンド以外実行禁止になるやつだ

[rin51]

シェルは生きてるから絶対PATHを指定すればいいのでは

[wordi]

初日、先ずは軽いジャブといった感じ(白目)/@Vorspiel >を一つ忘れると・・・

[hirata_yasuyuki]

ログインできるなら、そのシェル上でPATHを変更したりフルパスで起動すれば良さそうだけど。

[Jinmen]

$ /usr/bin/vim ~/.profile じゃだめなのか

[Vorspiel]

まだヌルいな(ぇ) / シェルのビルトインコマンドとリダイレクトだけでもいろいろできるから、やりようはあるよね。echo 'export PATH=ほげ' >> .profile とか

[yayugu]

かわいいレベルの障害だ。初日にふさわしい

[als_uz]

“ETL処理のリリース前に本番サーバ上で試験をする取り決めになっていた” もうこの時点で怖い。コマンド効かない時はだいたいPATHとかprofile系だよねー コマンド直指定でも普通に起動できたかも。

[electrolite]

本番で開発してんじゃねーよ。稚拙過ぎる。これやられたら本気で怒るかも。外注でも内製でもお引き取り願うパターン。

[rochefort]

なかなかやなぁ

[mas-higa]

本番環境でテストとかするもんなん?

[spiral]

ジョブの実行ユーザーの問題．なんで作業者が .profile を書き換えられるようなユーザでジョブが実行されているのか．そっちのほうが問題な気がするが．

[ytRino]

本番こわい

[moccos_info]

”部屋全員に「動くな！」と叫ぶ（logout禁止)” また死ぬまでに一度やってみたいシチュが増えてしまった / 原因判明後の読者視点から「結果論で意味ない」っていうやつは現場で使えんぞ。幅広く安全な手段

[koji28]

rm -rf / じゃなかった(´・ω・`)

[takc923]

フルパス指定すればいいじゃん、じゃなくてPATHの元の値を復元するとかそう言う意味で「動くな！」だったのでは

[richard_raw]

“部屋全員に「動くな！」と叫ぶ（logout禁止)” かっこいい（ぇ

[findup]

上から目線で「レベルの低い環境、失敗内容」とか笑うコメあるけど、どんなレベルの失敗なら書いても馬鹿にされないのか聞いてみたい。

[wataken44]

PATH通ってなくてもlsは/bin/lsとかにあった記憶

[hylom]

面白い。バッチはなるべくPATHに依存しないようにすべきだけどそうも行かない場合もあるよね……

[amemiyashiro]

読むだけで胃がきゅっとなる企画が始まってしまった。。。

[longroof]

“部屋全員に「動くな！」と叫ぶ（logout禁止)”ヽ(=´▽`=)ﾉ…

[xlc]

なぜlogout禁止なの？この人自身がよく分かっていないお方で笑える。/ コメを見るとさらに分かってないお歴々が…「インフラエンジニア」のレベルが分かる。

[kathew]

このアドベントカレンダーは読んでて辛い

[nabe1121sir]

本番環境でテストするなは正論だしそうすべきなんだけど、本番環境しかないシステムとか結構あるでなもし。

[ichi2410]

“ターミナルを大事に”

[FutureIsWhatWeAre]

こういうのでいいんだよ（よくない）

[marmot1123]

良い感じに始まりましたね。これからも楽しみ。

[masaru_b_cl]

最初から肝が冷えるなこれは……

[sharaku3eyes]

なるほどまずbuilt-inコマンドとの切り分けが正解ということか…

[gorokumi]

いっていに ってなに

[hara_boon]

“個人的に、新人などには影響ないところでPATHエラーを踏ませたりして、身をもって学ぶようにさせた” これは大事だな。やってみないとわかんないし。／にしても期待通り面白い。面白いっていいのがわかんないが、、

[dogusare]

ぞぞぞぉ

[KAN3]

1日目から早速面白い。今後も楽しみだ。

[RabbitBit]

環境の問題「テスト環境がなく、本番環境で未使用の時間帯にてテストを行う」で障害が発生しやすくなり、運用の問題「標準外の作業を他の人に相談せずに行う」で実際の障害が発生した形だ。

[onesplat]

本番環境で試験してるのも恐ろしいし、本番サーバのファイルを直接vimで編集するなど神をも恐れぬ所業。このアドベントカレンダーはWebエンジニアにとっての稲川淳二

[misarine3]

“部屋全員に「動くな！」と叫ぶ（logout禁止)”カッコいい。ギバちゃんぽい。

[hayashin10]

共通ユーザーではなくシステム全体とかで使えるとかにしておいたほうがよかったのでは？

[pianocello7]

風俗嬢の話と思ってクリックした人の星の数↓