間接参照を巨大仮想メモリで飲み込む - Software Transactional Memo

この記事はデータベース・システム系 Advent Calendar 2023の3日目の記事である。昨日の記事も僕でした。 間接参照を巨大仮想メモリで飲み込む メインメモリはハードディスクやSSDより容量が小さく、この問題は当面は解決の目処が立たない。 そもそも今のDRAMより速くて安くて大きいストレージが仮に発明されてもそれがDRAMに取って代わるメインメモリの立ち位置になるだけであってその下のレイヤーには依然としてそのメインメモリより安くて大きなストレージが置かれる事になる。大局的な観点ではストレージの階層構造とは経済活動の鏡像でもある。 バッファプール さて、耳にタコができるほど繰り返しているが現代のデータベースはディスクなどの永続ストレージにデータの本尊が保存され、メインメモリはそれに対する読み書きを高速化するためのデータ一時置き場としての役割を担当している。 代表的なRDBMSは3

[atsushieno]

この分野は素人だけど、むかしインメモリDBで圧倒的な速度改善!とかやってたシステムが多重化未対応でveritasクラスタもへったくれもなく落ちて障害になったのを見て大変だなあって思ったのをmmapのとこ見て思い出した。

[xsde]

この辺の技術枯れているのかと思ったらまだまだ改善されているというのが興味深い。それともOracleなどの商用DBでは実装されていたりするのかな。

[forest1040]

oracleのraw deviceとかどうなったんだろう

[agricola]

「速くてデカいメモリ」では足りず「速くてデカくてほっといても消えないメモリ」ができれば世界が変わるんだがな。リフレッシュ要らない、ストレージアクセスが消える、サスペンドが爆速、などなど。

[so-apps]

Huge Page とかはあきらめる感じだろうか。