PHPのパッチバージョンを上げたらひどい目にあった話 - TORANA TECH BLOG

バックエンドエンジニアのクラシマです。 2021/08/25(水)に、本番サーバのPHPを7.4.21 -> 7.4.22にバージョンアップしました。 renovateでプルリクエストが作られるので、追っかけるだけです。 tech.torana.co.jp AMIは前日に作ってあり、当日はLaunchTemplateの向き先を変更するためにterraform applyして、AutoScalingGroupからインスタンスの更新をするだけ。 や～便利になったなぁ、なんて作業してたらSlackが大騒ぎに・・・ 大惨事の一コマ 切り戻し！ 急いで切り戻し！と判断したのは良いものの、まさかPHPのバージョンアップ起因だとはその時は思いもよらず。 当日deployしたアプリケーションや、Aurora MySQLの設定変更などを順次戻していきますが、一向に回復せず。 stg環境でも動作が同じだったの

[juve534]

ひゃー、これは大変。本体にissue出しているのはさすが。

[kirifue]

「サーバーを管理する簡単なお仕事」とか言うけれど、サービス稼働まで保証するとなると、途端にハードルが上がるよね。バージョンアップはいつだって地雷。 #開発 #プログラミング

[n314]

普通は起きないことだよねえ…結局何だったんだろう。Swooleが元々バグっていたけど偶然動いていた？

[uzulla]

こんなピンポイント（インフラ設計運用上の都合と回避不能不具合の悪魔合体）のツラさなかなかない。凄い。

[shikiarai]

だからサービス稼働中は何もしたくないんだよな。どれだけ危険と言われてもな……

[shag]

OSS に直接 issue 投げられるレベルじゃないとこう言う運用体制にしてはいけないと言う話かな。

[d6rkaiz]

これはきつい。。。お疲れ様でした。

[buhoho]

めもりーさんって人がすごそう

[rryu]

修正差分を見たけど結局PHPの何に引っかかっていたのかが分からない…

[t_motooka]

これは大変そう。対応に時間かかるやつ。

[keint]

マイナーバージョンで標準ライブラリの引数や仕様を変えてくる言語というイメージが強いので大変だなと

[strawberryhunter]

Swooleが初耳だったので調べてみたら、めもり～氏が出てきた。Swooleを採用したばかりに本来やらなくていい仕事が大量発生している気がしないでもない。 https://fortee.jp/phperkaigi-2021/proposal/126429c8-7ac0-4b56-8494-802e07466386

[Shinwiki]

そらそうやろ

[uunfo]

原因は不明のまま？

[h3poteto]

docker on EC2でも駄目だったのはなぜなんだろう．たとえFargateでsysctlがいじれたとしても，素のdockerで動かないならやっぱり同じな気がする．

[rgfx]

PHPつーかSwooleの話かぁ…それは辛い…。／しかしまあSwooleを実運用で使っている時点でつよつよ感しかない。。。

[Helfard]

こわい。

[yamadar]

特定のマイナーバージョン狙い撃ちはきつそう

[kazema_tsu]

この方はなぜバージョンをあげようと思ったのだろう。自動更新？なぜ自動更新？コードがあーだこーだではなく、バージョンアップアクションの意思決定、そこが重要では。