CPU律速なRuby/Pythonコードはデフォルト設定のdocker上で遅くなる - まめめも

English version 要約 dockerはデフォルトでセキュリティ機構（Spectre脆弱性の対策）を有効にします。この影響で、RubyやPythonのようなインタプリタは速度が劣化します。特にCPU律速なプログラムで顕著に遅くなります（実行時間が倍くらいになることがあります）。 現象 Rubyで1億回ループするコードを、直接ホスト上で実行する場合と、docker上で実行する場合で実行時間を比較してみます。 直接ホスト上で実行した場合： $ ruby -ve 't = Time.now; i=0;while i<100_000_000;i+=1;end; puts "#{ Time.now - t } sec"' ruby 2.7.1p83 (2020-03-31 revision a0c7c23c9c) [x86_64-linux] 1.321703922 sec docker

[mkusunok]

Dockerで動かす＝マルチテナントって想定は間違ってない気がするし、これは仕方ないんじゃないかな。Spectre脆弱性が見つかったときには世界が終わらんとするような騒がれ方だったけど、実際ジワジワと蝕んでいるのね

[wazly]

id:fa11enprince 化学反応で目的の生成物を得るために多段階の反応プロセスを経る場合にどの反応が一番遅くて足を引っ張っているかという文脈で使われるのが由来。「CPUがボトルネックになっている〜」→「CPU律速な」

[ledsun]

Twitterやslackで、まったく意味不明の現象がすごいスピードで原因特定されていくのを、ポカーンと見ていました。

[chintaro3]

CPU律速なケースって言うほど多くは無い。メモリ、ストレージ、ネットワークの速度の問題である場合がほとんど。

[el-condor]

Pythonだとdockerで動いてるCPU律速なコードはボチボチありそうだよね。

[a2ikm]

“Ruby on Railsを使ったWebアプリは多くの場合IOやGCが律速になっているので、Spectre対策を止めても観測できるほどの速度向上はしないでしょう（たぶん）”

[kazuhooku]

hyperthreading有効なcpuだけの話なんやろか

[gowithyou]

Ryzenだとどうなんだろうね？

[Dragoonriders]

ボトルネックって書け／どのようなシステムか、どのような計算が必要かわからんので一概に言えないけど、コンテナ上でインタプリタで1億回のループが必要な設計ってのが、まず、それどうなのよ、とか思った。

[takashi_kun]

この辺りの話が出てきたおかげで、低レイヤの勉強をするきっかけになったので個人的に感謝してる

[sonots]

kubernetes だと seccomp はまだ alpha でデフォルトは unconfined のようだ https://kubernetes.io/docs/concepts/policy/pod-security-policy/

[Haaaa_N]

IOはともかくGCも相当遅くなりそうな気がする

[joker1007]

こんなに影響あるのか。めっちゃCPUで律速してるJavaアプリケーションがコンテナで動いてるんだが、どうしたもんかな。

[skomma]

メモメモ

[pascal256]

DockerはディスクIOは遅くなるけどCPU劣化はほぼ無いと思ってたから認識直さないとなー

[inoueyuworks]

spectre 脆弱性対策が on になっている linux では、 CPU が遅くなる。 docker はデフォルトでそれが on になっている。

[punychan]

うーん、高校化学で律速ならうよね。

[daishi_n]

問題解決がBIOSのマイクロコードだけでなく、ソフトウェアが個別に対応、かつ高速化機能の無効化。仮想化系のソフトは大影響。IntelはP6からCometまで増築温泉旅館状態なので新アーキで整理しないと無理だろう

[ys0000]

“seccomp”なるほど。確認する必要があるな、これは。

[p1ass]

知らなかった

[naka-06_18]

Ruby界隈の人のはずなのにわざわざPythonも。複雑だ。

[knok]

いかんせん攻撃を検知できないので実際にどれくらい使われてるかの実態を把握するのが困難そうなのがやっかい

[mongrelP]

Zen系でもある程度影響はあるはずだがどのくらいなんだろうか。IOはだいぶ差があるようだが。

[igni3]

むしろセキュリティ無視していい使い方ならdockerでもCPU律速ではなくなることに驚いた。（IO律速の懸念は残るけど

[taku-o]

押すな押すな、みたいだな。

[ryuichi1208]

Spectre脆弱性の対策はDocker関係なく性能劣化には繋がって顕著に出るのがDockerって訳ではないのかな？

[t-cyrill]

なるほどだが回避方法はなさそう

[natu3kan]

Spectre脆弱性の対策の都合でCPUが律速(ボトルネック)になると。

[h3poteto]

これは納得，だがどうすることもできないな

[ryunosinfx]

Spectreの脆弱性発生がCPU種類依存だから、CPU変えたら速度も変わるってことでいいの？こうIntelの第八世代では激遅だけど第十世代では殆ど差がないとかRyzenだったら何ですかそれは？だとか。クラウドのCPU種別が意味を持つ

[nilab]

「dockerはデフォルトでセキュリティ機構（Spectre脆弱性の対策）を有効にします。この影響で、RubyやPythonのようなインタプリタは速度が劣化します」

[fhvbwx]

CPU律速がクリティカルになるプログラムをRuby/Pythonで書くのが間違ってると思うのですが。

[sho]

rubyでCPU律速な用途は少なめかな。pythonはけっこうありそう。

[MonMonMon]

よく辿りつくなぁ感心だわな

[fa11enprince]

最近まれに律速って表現見るようになったけど一般的なのかな？CPUバウンドはそこそこ見るんだけども。誰か教えてー

[Yuzu]

「CPU律速」の意味がわからなかったけど、律速＝ボトルネックのことか。勉強になった