MongoDBをNUMAなマシンで使うときの注意 - 酒日記 はてな支店

デュアルCPUで計12コア24スレッド、メモリ48GBというマシンで MongoDB-2.0.8 をしばらく稼働させたところ、突然 CPU の system time が1コア分暴走したようになる、という現象が起きました。 最初は原因がよく分からず、とりあえず mongod のプロセスを kill して起動し直したら復旧したのですが、またしばらくすると同じ現象に。 mongoのメモリ使用量と Load Average をプロットしてみると、どうもある程度 (約24GB?) のメモリを使ったところで暴走が起きているような……とログを見直してみると、起動時に WARNING がでていました。 Sun Jan 20 00:10:01 [initandlisten] MongoDB starting : pid=12669 port=27017 dbpath=/var/lib/mongo 64-b

[sfujiwara]

書きました

[soh3914]

numactl --interleave=all mongodで起動すること。

[inokara]

NUMA Machine

[tendo3201]

mongodb:numaで運用する際の注意点

[T-miura]

NUMA、ミドルに影響あるんだ、、、透過的に処理されるとか思ってた。

[akuwano]

NUMAがね、、、NUMA、、、オフっています(・∀・)

[xxxxxeeeee]

NUMA構成だと他のノード上のメモリに参照した時にCPUのインターコネクトの接続のせいで遅くなったりするということか・・・と思ったらinterleaveか。メモリ48GBと思って動いてるけど実際は24G超えたらswapするとか？

[tmatsuu]

正直いうと今までNUMAの有無を意識したことがない。NUMAなマシンってうちの会社にもあるんかな。来週調べてみる

[takachino]

反対語はUMAっていうのか、初めて知った。。 → MongoDBをNUMAなマシンで使うときの注意 - 酒日記 はてな支店

[ya--mada]

NUMAというはまりポイント。と。

[dowhile]

HT使ってるんだな

[at_yasu]

わぁ、見事な谷山直線…

[paulownia]

zone_reclaim_mode = 0にすべしってのは、ページキャッシュを大量に使うもの全般に当てはまりそうな気がする

[sh2]

これと同じかなあ http://blog.jcole.us/2010/09/28/mysql-swap-insanity-and-the-numa-architecture/

[kenjiskywalker]

きた〜。モンゴ〜