Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて - ゆううきブログ
社内で論文輪読会みたいなことやってて、そこで紹介した論文の内容についてです。 最近、Graphite に保存しているデータのバックアップ（データ同期）に rsync 使ってて、かなり遅いので困ってた。 LISA っていう 大規模システム、sysadmin 系のカンファレンスがあって、ここから論文探してたら、ちょうど巨大データの高速バックアップの実装の話があったので読んでみた。 論文概要 dsync: Efficient Block-wise Synchronization of Multi-Gigabyte Binary Data - https://www.usenix.org/conference/lisa13/technical-sessions/presentation/knauth - Thomas Knauth and Christof Fetzer, Technische U
第11章 設定とチューニング
This translation may be out of date. To help with the translations please access the FreeBSD translations instance.
XFS: the filesystem of the future? [LWN.net]
This article brought to you by LWN subscribersSubscribers to LWN.net made this article — and everything that surrounds it — possible. If you appreciate our content, please buy a subscription and make the next set of articles possible. Linux has a lot of filesystems, but two of them (ext4 and btrfs) tend to get most of the attention. In his 2012 linux.conf.au talk, XFS developer Dave Chinner served
naoyaのはてなダイアリー - tmpfs は本当に容量が動的なのか
Linux には tmpfs という便利なファイルシステムがあります。 $ mount -t tmpfs -o size=64m tmpfs /dev/shm $ mount -t tmpfs -o size=64m /dev/shm /var/tmpとすると、/var/tmp がディスク上ではなくメモリ上に作られたファイルシステムとして mount されます。なので、/var/tmp は I/O 時にディスクI/Oが一切発生しない高速なディスクとして使えると。いわゆる RAM ディスク。(もちろんサーバーの電源を落とすと保存したファイルは消えます。) この tmpfs はなかなかに便利で、キャッシュとかそういうものでディスクにおいてたものここ置くと、ディスク I/O がカットできて超高速になります。はてなでは MySQL のスレーブの MyISAM のファイルを tmpfs において、オ
)
擬似ファイルシステムを作ってみる(1) - Linuxの備忘録とか・・・(目次へ）
仮想ファイルシステムサンプル ネタ元のファイルシステムに読み込み、書き込みの処理を追加しました。 #include <linux/module.h> #include <linux/init.h> #include <linux/fs.h> #include <linux/dcache.h> #include <linux/string.h> #include <linux/pagemap.h> #include <asm/uaccess.h> /* for copy_to_user */ // ファイル名 static char *dir_entries[] = { "a", "b", "c", "d", "e", }; // ファイルの中身 static char dir_msg[5][20]; static struct inode *my_vfs_get_inode(struct
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
ramfsを読んでみる。 - φ(・・*)ゞ ｳｰﾝ カーネルとか弄ったりのメモ
ソースはlxrの2.6.31。 まずは、初期化から。 295static int __init init_ramfs_fs(void) 296{ 297 return register_filesystem(&ramfs_fs_type); 298} init_ramfs_fs()は特別なことは一切しなくて、register_filesystem()をコールして、自分自身を登録する。 ramfs_fs_typeは3フィールドだけ設定している。 sbはきっとSuper Blockの略。 284static struct file_system_type ramfs_fs_type = { 285 .name = "ramfs", 286 .get_sb = ramfs_get_sb, 287 .kill_sb = ramfs_kill_sb, 288}; file_system_type構造
tarfs について (2) - yamanetoshi's diary
最近なんちゃらシリーズが途中で頓挫する事が多いな。とりあえず、頑張りましょうという事で。 register_filesystem Linux Kernel Hack Japan の register_filesystem によれば、この関数の引数は struct file_system_type 型との事。 struct file_system_type 型は include/linux/fs.h にて定義。register_filesystem に渡されているソレを遡ってみる必要があるかな。 とりあえずターゲットを drivers/usb/core/inode.c にしてみる事に。根拠はナシ。ドライバ初期化なソレは以下な模様。 int __init usbfs_init(void) { int retval; retval = register_filesystem(&usb_fs_ty
FrontPage - 詳解ファイルシステム - livedoor Wiki（ウィキ）
詳解ファイルシステム Linuxのファイルシステムを詳解します トップページページ一覧メンバー編集 FrontPage 最終更新： linuxfs 2009年01月19日(月) 16:03:10履歴 Tweet 詳解ファイルシステム ファイルシステム諸元 subcontentsファイルシステム諸元性能比較パーティション用語集OOMkillerkernelSELinuxgitskillcheckKDBJapanese Linux hackerext3/4最新情報Hans Reiser情報Committerfeature-removal-scheduleTODO中の人OSC2007 Tokyo/FallOSC2008 Tokyo/FallOSC2009 Tokyo/Fall ファイルシステム詳解 filesystem contents注目度の高いファイルシステムvfsext3ext4reise
マイクロソフト、NTFSの後継となるReFSについて説明。Windows Server 8に搭載予定
Windows 8の開発状況を伝えるブログBuilding Windows 8に、現在のWindows 7やWindows Serverでファイルシステムとして使われているNTFSの後継に当たる新しいファイルシステム「ReFS」（Resilient File System）の詳しい説明が、記事「Building the next generation file system for Windows: ReFS」として公開されています。 Building the next generation file system for Windows: ReFS - Building Windows 8 - Site Home - MSDN Blogs ReFSのゴールとして挙げられたポイントを要約すると次のようになります。 NTFSとの高い互換性を維持する データのベリファイと自動訂正 大規模ストレ
さらに分かっておきたいトランジスタの種類 − ＠IT MONOist
米国ラスベガスで開催された「CES 2024」では、スペースが大幅な増床となったスマートホーム関連の展示が注目を集めた。本稿では、国内スマートホーム関連スタートアップの雄であるアクセルラボ CTOの青木継孝氏による、スマートホーム関連の展示を中心としたCES 2024のレポートをお送りする。
vvfat、もしくはおっさんの死語的知識
qemu-img とか実行すると、最近無闇にオプションが増えてtftpやらhttpやらあるのはともかく、vvfat ってあるのが割と謎に見えるとおもうのですがあまり触れてる人をみたことがないので読んでみた。 qemu-img を実行したら最後の行にサポートするフォーマット一覧がこんな感じででてくる: Supported formats: cow qcow vdi vmdk cloop dmg bochs vpc vvfat qcow2 parallels nbd host_cdrom host_floppy host_device raw tftp ftps ftp https http まあここで他のはファイルフォーマットだったり通信プロトコルだったりするのですぐわかるわけですが、vvfatってなにかよくわからない。 よくわからない時の行動として反射的にapt-get source qe
『Ubuntu10.04(lucid)でnilfsをルートパーティションにする』
方針としては、 システムにlvmとnilfsをインストール データをバックアップ live CDで起動して、lvm, nilfsでパーティションフォーマット データリカバリー 起動できるように設定 元システムでの作業 initrdにnilfs moduleを入れておく Grubの設定 /boot/grub/grub.cfgを見て、menuentryを探して40_customへコピー・編集。 root=UUID=xxxxxxx となっているのをLogicalVolume指定にする。 set root, searchは触らなくてよい。 (ちなみに、この2行は同じことをしているので、どちらがなくても動く) $ cat /etc/grub.d/40_custom #!/bin/sh exec tail -n +3 $0 # This file provides an easy way to add
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
1 04 rao
Attilio Rao - The VFS/vnode interface in the FreeBSD kernel
https://www.mimuw.edu.pl/~vincent/lecture12/12-fs.pdf
Google Code Archive - Long-term storage for Google Code Project Hosting.
http://web.archive.org/web/20091027131914/http://geocities.com/ravikiran_uvs/articles/rkfs.c
102366’s gists
レッドハット マガジン 64ビットコンピューティング: 32ビット環境での共存