_Details)
Linux Multi-Queue Block IO Queueing Mechanism (blk-mq) Details - Thomas-Krenn-Wiki-en
Blk-mq integrates seamlessly into the Linux storage stack. It provides basic functions to device drivers for mapping I/O enquiries to multiple queues. The tasks are distributed across multiple threads and therefore to multiple CPU cores (per-core software queues). Blk-mq compatible drivers inform blk-mq how many parallel hardware queues a device supports (number of submission queues as part of the
Linux Advent Calendar 2014 14日目: sched-design-CFS.txtの和訳 - hiraku_wfsの日記
Linux Advent Calendar 2014 こんにちは、hiraku_wfsです。 今年はLinux KernelのDocumentation/scheduler/sched-design-CFS.txtを和訳してみました。 過去には2009年頃にsyuu1228さんが機械翻訳ベースの和訳を試みています（sched-design-CFS.txtの和訳 - syuu1228's blog）が、今回v3.18-rc7のものを訳してみます。 ところどころ（ちょっとやりすぎかもしれない）意訳を入れています。 �場所によっては原文を見た方が分かりやすい箇所がいくつかあるので、原文と併記しています。 （やっぱり翻訳の専門家ではないので日本語でどう表現したものか悩んだりと結構大変でした...） 原著作者: Ingo Molnar ============= CFS Scheduler CFSス
CFQ スケジューラのアルゴリズム概要 | 技術文書 | 技術情報 | VA Linux Systems Japan株式会社
cfqスケジューラ Linuxカーネルは、ブロックI/Oの処理効率を向上させるさせるための仕組みとして、I/Oスケジューラと呼ばれる機能を提供しています。I/OスケジューラはI/O要求の順序を入れ替えることにより、スループットを向上させたり、特定のI/O要求を優先して実行させたりします。実際のブロックデバイスのセクタに対するアクセス（つまり読み書き）を、要求された順序ではなく、I/Oを最も効率よく行うためにその順序を並び替えるというアイデアは、初期のUNIXの実装から採用されていました。それは、セクタ番号順序に並び替えてI/Oを実行するという単純なものです。ディスク面上を移動するヘッドの動きがエレベータに似ているため、このアルゴリズムはエレベータアルゴリズムなどと呼ばれていました。 現在のLinuxカーネルでは、そのころのアルゴリズムより洗練されたスケジューリング方式を採用しており、目的に
MySQL 101: Monitor Disk I/O with pt-diskstats
Here on the Percona Support team we often ask customers to retrieve disk stats to monitor disk IO and to measure block devices iops and latency. There are a number of tools available to monitor IO on Linux. iostat is one of the popular tools and Percona Toolkit, which is free, contains the pt-diskstats tool for this purpose. The pt-diskstats tool is similar to iostat but it’s more interactive and
Linux Kernel Tuning - GlusterDocumentation
Linux kernel tuning for GlusterFS Every now and then, questions come up here internally and with many enthusiasts on what Gluster has to say about kernel tuning, if anything. The rarity of kernel tuning is on account of the Linux kernel doing a pretty good job on most workloads. But there is a flip side to this design. The Linux kernel historically has eagerly eaten up a lot of RAM, provided ther
SSDにしたのでI/Oスケジューラを noop に変更してみた - ablog
PC の HDD を SSD に変更したので、I/Oスケジューラを noop に変更してみた。 SSD は HDD のようにシーク（目的のレコードが記憶されたシリンダにヘッドを移動）したり、サーチ（目的のセクタの先頭がヘッドの位置に来るのを待つ）したり、物理的な動きはない。なので、OSのI/OスケジューラでソートなんかせずにI/Oリクエストを渡してくれたほうが速いとという話だと思う。 簡単に noop が速いことを検証した上で、noop に変更した。 cfq I/Oスケジューラを cfq に設定する [root@yazekats-linux queue]# echo cfq > /sys/block/sda/queue/scheduler [root@yazekats-linux queue]# cat /sys/block/sda/queue/scheduler noop deadlin
Strategy: Use Linux Taskset to Pin Processes or Let the OS Schedule It? - High Scalability -
« Stuff The Internet Says On Scalability For October 25th, 2013 | Main | Google's Sanjay Ghemawat on What Made Google Google and Great Big Data Career Advice » This question comes from Ulysses on an interesting thread from the Mechanical Sympathy news group, especially given how multiple processors are now the norm: Ulysses: On an 8xCPU Linux instance, is it at all advantageous to use the Linux t
Chronos: A Replacement for Cron
Chronos is our replacement for cron. It is a distributed and fault-tolerant scheduler which runs on top of Mesos. It’s a framework and supports custom mesos executors as well as the default command executor. Thus by default, Chronos executes SH (on most systems BASH) scripts. Chronos can be used to interact with systems such as Hadoop (incl. EMR), even if the mesos slaves on which execution happen
スレッドとプロセス
スレッドとプロセス 本題: スケジューリング 田浦健次朗 スレッドとは? 制御の流れ(thread of control): CPUを抽象 化したもの • OSに「スレッドを作りたい」と要求 • OSはスレッドにCPUを割り当て，実行 • スレッドは「たくさんあってよい」 • OSが交互に実行 • CPUが複数あれば各CPU上で プロセスとは? プログラムの起動 プロセス の生成 論理アドレス空間の生成 +mainスレッドの生成 プロセス=アドレス空間+(1つ 以上の)スレッド 実践的知識 システム内のプロセス・スレッドの観察 • Windows : タスクマネージャ, perfmon • Linux : ps, top スレッド・プロセス関係API 共通な主要概念 • 生成，終了 • 同期，実行の制御 代表的スレッドAPI名 • Unix: POSIX
Adminpanel
JavaScript is disabled on your browser. Please enable JavaScript to use correctly mesosadmin frontend Please login Login Password Forgot your personal password ? We can remind you
/proc and /sys tricks
Really the sysfs and /proc filesystems are worlds of magic and fantasy. Each day I discover a new trick using this filesystems. So, I decided to post a short summary of my favorites ones. Enjoy and feel free to add your tricks in comments, maybe we can a /proc and /sys knownledge database in a post 🙂 1. Scanning for LUNs in attached FC (or any other SCSI compliance host). echo "- - -" > /sys/clas
Red Hat Storage (RHS) Performance
Red Hat Storage (RHS) Performance Ben England Performance Engineer, Red Hat 06.29.12 9:45 AM Scope of presentation – part 1) What is Gluster? RHS? part 2) Value added by Red Hat part 3) What the consumer needs to know Resources ● Visit the Red Hat Customer Portal for content ● See slides from prior talks listed below ● Wed 10:40 - A Deep Dive into Red Hat Storage ● Wed 2:30 – Distributed File Sys
Adminpanel
JavaScript is disabled on your browser. Please enable JavaScript to use correctly mesosadmin frontend Please login Login Password Forgot your personal password ? We can remind you
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
404 - Network Nuts
Support - Question: Performance tuning on the LSI MegaRAID LSI SAS 2108 and LSI SAS 2208 based RAID controllers.
スケジューラからみたOSの話
GitHub - azkaban/azkaban: Azkaban workflow manager.
20061021 2 6_io_sched
Linux Kernel Tuning for GlusterFS
Scheduler queue size and resilience to heavy IO