Cでプログラムを書いていて大量のメモリを確保したくなったとき、大抵は mallocを使うと思いますが、その際には戻り値がNULLかどうかを判断してエラー処理に飛ばすと思います。しかし、Linux のメモリ管理サブシステムには「メモリ・オーバーコミット」という機構があり、実装されているメモリ以上の領域を確保できてしまいます。 #include <stdio.h> #include <stdlib.h> int main() { int i; char *p; for(i=0;i<65536;i++){ p = (char *)malloc(65536); if(0 == (long)p){ break; } } printf("SIZE=%dMB\n",i*65536/1024/1024); return(0); } swapoff したメモリ 1G のマシンでこれを実行するとこんな感じにな

詳解ファイルシステム Linuxのファイルシステムを詳解します トップページページ一覧メンバー編集 OOMkiller 最終更新： linuxfs 2006年12月04日(月) 20:57:19履歴 Tweet FrontPage OOM Killerとは Linux カーネルが行う OOM killer に関して oom-killerの止め方 oom-killer disable gitlog(2005-04-17) コメントgitlog(2006-09-30) OOM Killerのログの例 OOM Killerとは Linux kernelがメモリ不足(swapも含め)に陥ったとき、~ このOOM Killerが発動し、縦横無尽にプロセスを駆逐し~ ていきます。その際、無差別ともとれる残虐な行為から~ 悪名高いメモリ不足解決器 (OOM killer) と揶揄されて~ 今日に至ります

Linux のオーバーコミットについて調べてみた Linux のオーバーコミットのはなし（これを書いたのは Linux 2.6.38 のとき） Linux カーネルは実メモリ以上にメモリをプロセスに割り当てることができる この仕組みをオーバーコミット (over-commit) と呼ぶ オーバーコミットでは，とりあえずメモリを malloc させて仮のアドレスを返しておき， 実際に使われる段になってはじめて実メモリを確保する． 実験ただ malloc し続けるだけのプログラムを作って実験してみる． このプログラムをメモリ 1 GB + スワップ 1 GB のホストで実行してみると， $ free -t total used free shared buffers cached Mem: 1022404 82992 939412 0 4172 12280 -/+ buffers/cache:

業界を取り巻く状況は大きく変化しています。業界のリーダーが進めるデジタル変革と従来の枠を超えて共創するビジネスについてご覧ください。

LTSV って何? Labeled Tab-Separated Values という、テキストのフォーマットの仕様です。CSV や TSV や JSON そのほかと同じ、テキストデータのフォーマット名。主にログ、特に httpd のアクセスログなどに適用すると便利です。 仕様は http://ltsv.org にまとまっています。随時更新中です。 LTSV は単なるログのフォーマットであって、それ以上でもそれ以下でもありません。 LTSV ってタブ区切りで値に名前を付けただけのもの? はい、そうです。 これが 127.0.0.1 - frank [10/Oct/2000:13:55:36 -0700] "GET /apache_pb.gif HTTP/1.0" 200 2326 "http://www.example.com/start.html" "Mozilla/4.08 [en] (

Description Labeled Tab-separated Values (LTSV) format is a variant of Tab-separated Values (TSV). Each record in a LTSV file is represented as a single line. Each field is separated by TAB and has a label and a value. The label and the value have been separated by ':'. With the LTSV format, you can parse each line by spliting with TAB (like original TSV format) easily, and extend any fields with

◆ [日記][Unix][情報] tcpserver(てかもしかしてucspi-tcp全般か？)においては「ローカルホスト」≠「localhost」である 何の話かというと、tcpserverが設定する環境変数TCPLOCALIPとTCPLOCALHOSTの話だ。ぶっちゃけると、DNSがおかしい状況では、引数に-l servernameがいるんじゃね？　という話だ。 何があったか、順を追って説明していこう。 今日、某所からヘルプが来た。以下、サーバ関係が特定される情報が含まれるので、IPアドレスとして、192.168.1.1と192.168.1.2、ドメイン名としてhost1.example.com(便宜上host1と書くこともある)とhost2.example.com(便宜上host2と書くこともある)を使って話を進める。 読み進める上での理解のしやすさからちょこッと書いておくと、管理者

ESXi 仮想マシンのバックアップ方法まとめ (vCenter Converter, RCLI, SSH, データストア ブラウザ) CPU の制約でやむを得ず VMware ESXi 3 と ESXi 4 の混在環境を作りました。問題は仮想マシンのバックアップ / リストア時の「クセ」が、バージョンによって異なるのが厄介です。まずは手段にどんなものがあるかと、Read-only アクセスの罠について。 ESXi バージョンごとに、できる / できない操作 まずは総まとめから。ESXi 3つのバージョンを用意して、バックアップ方法をさんざん取っ替え引っ替え試してみました。

VMware ESXi の Read-only 仕様以外に、厄介なのは容量固定ディスクと可変ディスクの仕様です。仮想化環境につきものの容量可変ディスクって何、というジャブ程度から、まず。 仮想ファイル … 使った分だけ確保か、パーティション全体を確保か 仮想ディスクでは、中身にどれだけファイルが入っていたとしても、親になるホスト OS やハイパーバイザーから見ると 1～数本の巨大なファイルとして格納しています。Hyper-V / Virtual Server では .vhd、VMware では .vmdk という拡張子になっています。 例えば、仮想ディスクを全体で 127GB 確保して OS をインストールし、最初は 4.57GB しか使っていないとします。ちなみにこれは Virtual Server 2005 R2 上で作成した Windows Server 2003 の仮想ディスクの中

DBサーバでとある日を境にswapが発生していることに気がつきました。 サーバはメモリ32GB搭載していて、そのうちの24GBをinnodb_buffer_pool_sizeに割り当てています。 他のthread毎のメモリ設定値を見てもおかしそうな点はなかったのでググってみました。 MySQL と NUMA アーキテクチャと Swap Insanity MySQL　InnoDBストレージエンジンのチューニング（後編） なるほど…。 それぞれのCPUがローカルでメモリを管理しているので、 2CPU積んでいるサーバだと、AというCPUで実行されているスレッドが、BというCPUが確保しているメモリ領域にアクセスするには、AのCPUを経由しないといけないわけですね。 このメモリアクセスが不均一になる方式をNUMAアーキテクチャというみたいです。 NUMAアーキテクチャのメモリ管理が、ノードという単

MongoDB使いましょって時に、やれ、レプリカセットだの、シャーディングだの、いちいち手順とか教えていくのがめんどくさくなったので、これを見たらコマンド的な手順はひと通りいけますよ。だから後は自分で調べてね、っていう資料をつくってみたのだ。 というわけで、「MongoDBのはじめての運用テキスト」SlideShareにあげました。 MongoDBのはじめての運用テキスト from Akihiro Kuwano 内容 PDFには、以下の様な内容を盛り込んでいます。 インストール レプリカセット構築 シャーディング設定 基本的なオペレーション Stat系ツールの見方。 ただし、徐々に古い情報にはなってくると思うので、詳しい情報や、最新の情報を見たい方には公式のWikiなり、ソースなり見ていただくのを推奨いたしますｗ 意図 以前MongoDBの薄い本などもあって、あれはすごくわかりやすい入門テ

has been sold or is not listed for sale. Our experts can help you acquire this domain. Looking for a domain name that's not listed for sale in our marketplace? Don't worry, all is not lost. You can hire an experienced PerfectDomain broker to negotiate an acquisition on your behalf. HIRE A BROKER

仮想マシンが登録されているデータストアをデータストアブラウザで開きます。 データスト上で右クリックし、仮想マシンのコピー先のフォルダを作成します。 コピー先のフォルダが作成されました。 コピー元の仮想マシンのフォルダを開きます。 ログファイル（.log ファイル）以外を選択します。 右クリックし、[コピー]をクリックします。 コピー先のフォルダを開きます。 右クリックし、[貼り付け]をクリックします。 コピー中です。 コピーが終了しました。 コピーした仮想マシンを、ESXi サーバーに登録します。構成ファイル（.vmx ファイル）を右クリックし、[インベントリへの追加]をクリックします。 [名前:]に仮想マシン名を入力します。デフォルト値が表示されていますが、今回は vm101 に変更しました。仮想マシン名の入力後、[次へ]をクリックします。 仮想マシンを登録する ESXi サーバーを選択