GitHub、1200台以上のMySQL 5.7を8.0へアップグレード。サービス無停止のまま成功させる

GitHub、1200台以上のMySQL 5.7を8.0へアップグレード。サービス無停止のまま成功させる GitHubが提供するGitHub.comは、世界最大のソースコード管理システムを始めとするソフトウェア開発者向け支援サービスを提供しています。 そのGitHub.comはRuby on Railsで構築されており、同社はつねにRubyとRuby on Railsをアップデートし続けていることを今年（2023年）4月に明らかにしています。 参考：GitHubは200万行規模のRailsアプリケーションであり、毎週RailsとRubyを最新版にアップデートし続けている そして同社はこのGitHub.comを支える1200台以上のMySQL 5.7を、GitHub.comのサービスレベルを維持したまま1年以上かけてMySQL 8.0にアップグレードしたことをブログで明らかにしました。 Up

[KoshianX]

こりゃすごい。両対応のコードにしてからクラスタごとにアップグレードかあ。これだけのコストが掛けられるのもすごい

[mole-studio]

もはや社会インフラレベルだからね。感謝しかないよ

[tamtam3]

　準備に１年半掛けてるのは流石としか。癖でマスタ／スレーブと言いたくなるがプライマリ／レプリカ呼びなのね。先にレプリカ側を8にし、２４時間稼働し確認をとり問題ないとみるやプライマリに切り替える手法かぁ

[peketamin]

“サービスレベルを維持したまま1年以上かけてMySQL 8.0にアップグレードした”

[kazuppo01]

ロールバック用に5.7のレプリカを用意しておく。有効だけど自分がやるときに思いつかなそうだった

[forest1040]

スゴイ。俺なら1週間ぐらい止めちゃうね。github止まったら仕事になんねー。

[manFromTomorrow]

しびれるな。準備にしっかりコスト掛けてるのも好印象。

[urtz]

この作業は未来永劫必要になるので、更に効率化していくんだろな

[daishi_n]

王道のレプリカ方式だけど、これを完遂するには相応の準備とスキルが必要。規模で言えば開始と終了が決まってる山手線の線路工事みたいなもんだよ。今頃5.7から8.0へ急いでる連中とは違うの

[TakamoriTarou]

これを年末年始1週間止めます方式でやるとどれぐらいコスト削減できるのかなとか思う。巨大サービスや鉄道とかも休んで良い雰囲気にするの大事だと思うんですがぬ

[YassLab]

“Railsで構築されており、同社はつねにRubyとRuby on Railsをアップデートし続けていることを2023年4月に明らかに / 1200台以上のMySQL 5.7を、GitHub.comのサービスレベルを維持したまま1年以上かけてMySQL 8.0にアップグレードした”

[teckl]

5.7 -> 8.0 -> 5.7 -> 8.0/5.7レプリカの数珠繋ぎか。この発想はすばらしい…

[tmatsuu]

「5.7 → 8.0 → 5.7 → リードレプリカ群」なるほど8.0の直下にロールバックを想定したマスター。8.0にリードレプリカ群を並べてその中から1つを使ってロールバックと安直に考えてしまうわ。参考になった

[prjpn]

運用者のレベルが段違い。気合いドリブンな会社と決定的に違うとこ。

[yosuke_furukawa]

っかーすごい。 “すべての障害をあらかじめ完全に防ぐことはできないため、アップグレードの途中で何かあったときにはサービスを止めることなくMySQL 5.7にロールバックできるようにする必要がありました。”

[adsty]

サービスレベルを維持したまま一年以上掛けて成功させた。

[crexist]

マジで凄い。。。

[beerbeerkun]

トポロジー図が遷移図になってないからよう分からんな。元々多段になってて間に8.0のレプリカを挟んだの？？

[sonots]

1年…大変…

[ken39arg]

すげえ。レベルが違う

[keijak]

今後もバージョンアップし続けていくことを考えると、一回きりのコストをどれだけ払っても安全な更新プロセスを確立しておくメリットが勝ちそう

[mouki0911]

すごE

[lli]

偉業

[nerikara4chimi]

すごすぎない？

[aobon700]

>このクラスタ群には300TB以上のデータが保存され、1秒当たり550万回のクエリが発行されています。

[asyst]

すげえ

[yoshi-na]

はえ〜スッゴ

[PrivateIntMain]

がっつり両対応して裏は小出しに切り替えかぁ。弊案件のオンプレ1DB(≠MySQL)もだいぶ古くなったがどうするつもりなのだろう。

[oktnzm]

”ロールバック用に5.7のレプリカを用意”　一気にサーバー入れ替えてしまったどこかの銀行システムとは好対照だ。

[junjun777]

まあそれしかないよね、という方法だけど、良い。とても良い。終わった時のアドレナリンすごそう。

[ginga0118]

日本もこのレベルで運用出来ればいいんだがと思うが、無理だろうね。問題が起きないことがすごいではなく、問題を消すことがすごいって文化だもん。

[nemoba]

これで止めてしまう場合は、ビッグバンリリース化してリスク高くなるから逆に怖いと思うよ。むしろ、クラスタ毎にレプリカ毎に様子見しながらやってるのがミソ

[Shinwiki]

やること決めるまでのことと、えらい人の理解がある点は大したもんだ

[gimonfu_usr]

／ruby

[Finding]

スゴい…全銀ネットもGitHubのエンジニア呼んでくればあるいは…？

[amazedkoumei]

すげえな

[wata88]

手順は王道感あるけど、規模感がエグい

[ferrari458tukapai]

めちゃくちゃ勉強になる

[mztns]

社内でスタンディングオベーション起こってそう