AWS、LinuxからAmazon S3をファイルシステムとしてマウントし利用できる「Mountpoint for Amazon S3」正式公開
Amazon Web Services（AWS）は、オブジェクトストレージサービスとして提供しているAmazon S3のバケットをLinuxからマウントし、ローカルのファイルシステムと同様にさまざまな操作を可能にする「Mountpoint for Amazon S3」を正式に公開しました。 基本的にAmazon S3の操作はS3専用のAPIを呼び出すことによって行いますが、今回公開されたMountpoint for Amazon S3はそうした操作を不要にし、いくつかの制限はあるものの、Amazon S3のバケットをまるでローカルのファイルシステムのように扱えるようになります。 これにより、例えばAmazon EC2のインスタンスからAmazon S3のバケットへの大規模なデータの保存や参照などが容易に可能になります。 下記はAWSが公開した動画から、実際にMountpoint for A
Windowsを始め、多くのOSにはファイルの「リンク」機能がある Windowsに限らず、多くのOSが持つファイルシステムには「リンク」と呼ばれる機能がある。ファイルは、パスにより一意に特定可能だが、人間がファイルを管理するとき、どうしても同じファイルを別の場所（パス）にも配置したくなることがある。これを実現するのがリンクだ。リンクには、大きく「ハードリンク」と「ソフトリンク」（あるいはシンボリックリンクともいう）の2種類がある。 ファイルシステムには、ファイル名を管理するディレクトリ領域とファイルの中身を記録する領域がある。ハードリンクはこの仕組みを利用して、同じファイルの中を指し示すファイル名を異なるパスに作る。 特徴として、後から作ったハードリンクもオリジナルのファイル名も区別がなく、どちらも同じファイルとして扱える。通常は、ファイルシステム側に「参照カウント」と呼ばれる情報があり
伊集院光さんを文春野球にお迎えすることになった。ご存知、筋金入りの日ハムファンだ。かつて不人気だった東京ファイターズを伊集院さんが応援してくれてると知って、どんなに心強かったことか。いつも、どんなときも「伊集院さんがこんな見方をしている」というのが僕のモノサシになった。僕も伊集院さんもただのファンではなくて、（昔流に言えばサブカルチャー寄りの）メディア側の人間だ。たとえばラジオで、たとえば新聞や雑誌のコラムで、ファイターズをどう扱うか、ファイターズとどのようなスタンスを取るかをひとに見られている。 球団の北海道移転が報じられたとき、僕は消極的ながら賛成にまわった。翌年、球界再編騒動が巻き起こる。移転反対の署名活動を始めたファンもいたけれど、それには与しなかった。内情を聞いて、このままじゃ将来、ファイターズが潰れるんじゃないかと思ったからだ。僕はそれを率直に書いた。単に賛成するのじゃない。僕
FizzBuzz.txt(8エクサバイト)
FizzBuzzFS FizzBuzz問題といえば定期的にSNSで話題になっては変な解法が発明されることでおなじみですが(?)、ファイルシステムを使った事例が見当たらなかったのでやってみました。 まあ見ての通りというか…… /mnt/FizzBuzz に FizzBuzz.txt(8エクサバイト)があって、FizzBuzzが書いてあります。 どこまでも…… 容量の続く限り…… 以上！！！！！！！ 技術解説 FUSE FUSE(Filesystem in USEr space)というソフトウェアを使うことで、簡単に新しいファイルシステムを実装することが可能です。 Rustにおいては、fuse crateの更新が停止した結果フォークが複数存在するようですが、利用者数と更新頻度的にfuser crateを使うのがよさそうです。 FileSystem traitが実装された値をmount2関数に渡
この記事ははてなエンジニア Advent Calendar 2023の 12月36日 2024年1月5日の記事です。 developer.hatenastaff.com Mackerel をファイルシステムにしてみましょう。 Mackerel でファイルシステムを監視するのではありません。 Mackerel をファイルシステムにするのです。 じゃん mackerelfs と言います。よろしくおねがいします。 github.com /home/rmatsuoka/mackerel ディレクトリに mackerelfs をマウントしましょう（マウントの方法は後半説明します。）最初は ctl ファイルだけがあります。 $ ls -l total 0 --w--w--w- 1 rmatsuoka rmatsuoka 0 Jul 14 2042 ctl さて Mackerel を操作するときは AP
AWS製のS3マウントツール「Mountpoint for Amazon S3」を試してみた | DevelopersIO
Mountpoint for Amazon S3 は高スループットが求められるワークロード向けのS3マウントツールです。 札幌オフィスの中川です。 少し前にS3バケットをローカルファイルシステムとしてマウントするためのファイルクライアントツールとして、Mountpoint for Amazon S3 が登場していました。 ファイルシステム上の操作をGetやListのようなS3オブジェクトAPIに変換し、アプリケーションがopenやreadといったファイル操作を通じてS3にアクセスできるようにします。 ツールはRustで書かれており、ペタバイトクラスのデータ処理を必要とするような読み取り負荷の高いワークロード向けに最適化されています。 また、先日のアップデートで書き込みも一部サポートされました。 ※2023年7月時点では新規ファイルの作成のみサポートされており、既存のファイルへの更新や削除は
【日本ハム】「艦これ」コラボ 始球式で藤田咲が大暴投 野水伊織とタニベユミはスタメン発表 - プロ野球 : 日刊スポーツ
育成シミュレーションゲーム「艦隊これくしょん（艦これ）」とのコラボイベント「C2機関北海道遠征KANMUSU Meets 北海道スペシャルイベント2023」を開催した。艦これのゲーム内で声優を務める野水伊織とタニベユミ、藤田咲が試合前のトークショーなどに登場した。 3人は試合前に球場内で開かれたトークショーに登場したほか、野水とタニベユミはスタメン発表を務めた。 始球式では藤田が始球式に登場。投球は左に大きくそれ、ころころと転がった。藤田は大暴投にひざから崩れ落ち、照れ笑いを見せていた。 5回裏終了後のYMCAダンスでは、野水とタニベユミが参加する。 【関連記事】日本ハムニュース一覧
Linux Daily Topics 2024年最初のカーネル「Linux 6.7」がリリース、新ファイルシステムBcachefsをサポート Linus Torvaldsは1月7日（米国時間）、事前の告知通りに「Linux 6.7」の正式リリースをアナウンスした。開発期間中に年末年始が含まれていたため、通常よりも1本多い8本のリリース候補版（RC）を経ての公開となる。サイズ的には過去のリリースの中でも最大の部類に入るものの、リリースに際しては大きなサイズのカーネルにありがちな大きな混乱や問題もなく、Linusが望んだように穏やかな年始めとなったようだ。 Linux 6.7 -Linus Torvalds Linux 6.7における最大のハイライトは、長年に渡って実装が期待されていたコピーオンライト（CoW）の新ファイルシステム「Bcachefs」のサポートで、現時点でも実験的な立ち
GitHub - xetdata/nfsserve: A Rust NFS Server implementation
This is an incomplete but very functional implementation of an NFSv3 server in Rust. Why? You may ask. I wanted to implement a user-mode file-system mount that is truly cross-platform. What is a protocol that pretty much every OS supports? NFS. Why not FUSE you may ask: FUSE is annoying to users on Mac and Windows (drivers necessary). It takes a lot of care to build a FUSE driver for remote filesy
17 Feb 2024 | Categories: hacks Often when I’m prototyping a project, I hesitate to use a sqlite database despite their many adavantages. It seems much easier to just dump a bunch of files in a directory and to rely on the universal support for the filesystem API to read/delete/update records. Part of this is avoiding the overhead of figuring out a relational schema, but an equal amount of frictio
This is part 5 of a series. “1974 ” on the traditional Unix Filesystem. “1984 ” on the BSD Fast File System. “1994 ” on SGI XFS. “Vnodes ” on how to have multiple filesystems in Unix. Progress is sometimes hard to see, especially when you have been part of it or otherwise lived through it. Often, it is easier to see by comparing modern educational material and the problems discussed with older mat
AppleがmacOS 14 Sonoma Beta 3で再びexFATとmsdosの実装を変更すると発表しています。詳細は以下から。 Appleは現地時間2023年07月05日、今年の秋にもリリースを予定している次期「macOS 14 Sonoma」や「iOS/iPadOS 17」のBeta 3を開発者向けに公開しましたが、 今朝の時点では公開されていなかった、macOS 14 Sonoma beta 3のリリースノートが先程公開され、AppleはmacOS 14 Sonoma beta 3で再びexFATとMS-DOS(FAT)ファイルシステムの実装を変更すると発表しています。 File System New Features The implementations of the exfat and msdos file systems on macOS have changed; t
Do computation when we want to, i.e.: Image building should be fast Image mounting/reading should be fast Optional "canonicalization" step in the middle No full-tree walk required mtree style walks of filesystems are not necessary with clever use of overlay casync style generate-a-tar-then-diff is more for general purpose use where you don't want to have a special filesystem setup Be simple enough
Linux 6.3.5 Released With XFS Metadata Corruption Fix - Phoronix
Show Your Support: Did you know that the hundreds of articles written on Phoronix each month are mostly authored by one individual? Phoronix.com doesn't have a whole news room with unlimited resources and relies upon people reading our content without blocking ads and alternatively by people subscribing to Phoronix Premium for our ad-free service with other extra features. Linux 6.3.5 Released Wit
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Windowsにおけるファイルリンクについてあらためて説明する (1/2)
「新庄さんに助言できる地味なじじいがいるといい」伊集院光的ファイターズ論 | 文春オンライン
Mackerel をファイルシステムにした - Unengineered Weblog
2024年最初のカーネル「Linux 6.7」がリリース、新ファイルシステムBcachefsをサポート | gihyo.jp
wddbfs – Mount a sqlite database as a filesystem
50 years in filesystems: towards 2004 – LFS
macOS 14 Sonoma Beta 3では再びexFATとmsdosファイルシステムの実装が変更。
GitHub - project-machine/puzzlefs
ǝunsʇo ıɯnɟɐsɐɯ / メタバース炎上対策専門家さんはTwitterを使っています: 「スマホ育ちの子の特徴として「ファイル管理」の概念が曖昧な子が多い。 全部クラウドに突っ込んで検索とかサムネイルプレビューで探すやり方だけだと、仕事で使う時に数万点を超える画像を扱いだした時に時間が掛かりすぎて破綻する。」 / Twitter