Elastic Network Adapter – Amazon EC2 向けの高性能パフォーマンスネットワークインターフェイス | Amazon Web Services
Amazon Web Services ブログ Elastic Network Adapter – Amazon EC2 向けの高性能パフォーマンスネットワークインターフェイス AWS をご利用されているお客様の多くは、複数の EC2 インスタンスに渡り密結合のシステムを作成し、利用可能なすべてのネットワーク帯域幅を有効に活用されています。本日、AWS はこの非常に一般的なユースケースを対象に、今まで以上に優れたサポートを提供する Elastic Network Adapter (ENA) をリリース致しました。新しい X1 インスタンスタイプを対象とする ENA には追加費用もなく、プレイスメントグループ内で使用した場合、低レイテンシーで安定したパフォーマンスを最大 20 Gbps でご提供します。ENA のメリット ENA は X1 インスタンスで見られる最新のプロセッサと合わせて運用
100万ppsを受信するプログラムを書くのはどのくらい難しいのか？【翻訳】CloudFlare ブログ | FAworksブログ
100万ppsを受信するプログラムを書くのはどのくらい難しいのか？【翻訳】CloudFlare ブログ 無料枠が充実していることでも人気なコンテンツデリバリネットワーク (CDN) を提供するCloudFlareは、最近1億1000万ドルの資金調達が発表され、ますます注目を集めている。そんなCloudFlareのブログから、ネットワークチューニングの知見を紹介したい。 原文：https://blog.cloudflare.com/how-to-receive-a-million-packets/ (2015-11-20) ※元記事の筆者には直接翻訳の許可を頂いて、翻訳・公開しております。 CC BY-SA 2.0 image by Bob McCaffrey 先週、何気ない会話の中で同僚がこう話すのをふと耳にした。「Linuxのネットワーク・スタックが遅いんだよ！1コアあたり5万pps以上
Linuxネットワークドライバの開発 - Handwriting
この記事はLinux Advent Calendar 2016 9日目の記事です。 遅刻してしまい申し訳ございません。。。 とある事情があって1ヶ月半ほど独自NICのLinux向けのネットワークドライバを開発していた。 今回はARM用のデバイスドライバを開発した。NICはXilinx社のFPGAであるZYBOを用いて開発した。 まだ十分に実用段階というわけではないが、ひとまず独自NIC経由でのpingやiperfが通ったので、後学のために知見を残しておきたい（誰得だ、という感じだが）。 ソースコードはまだ公開されていないが、そう遠くないうちに公開する予定（たぶん）。 はじめに Linuxのデバイスには キャラクタデバイス - バイト単位のデータ通信 (e.g. シリアルポート) ブロックデバイス - ブロック単位のデータ通信 (e.g. ディスク) ネットワークデバイス の3種類がある。ネ
Debian で NIC offload を無効にする方法 - mura日記 (halfrack)
rc.local に書くみたいな雑な手法ではない王道はなにか？ 結論から言うと interfaces に offload-lro off とか書ける。 # grep -A3 eth2 /etc/network/interfaces auto eth2 iface eth2 inet manual offload-lro off bond-master bond0 #Debian のお作法として、 rc まわりの情報は /usr/share/doc/${該当機能を操作するコマンド名}/README.Debian に置いておくものらしい。 例えば /usr/share/doc/ifenslave/README.Debian.gz には、 bonding をやりたいとき interfaces にどう書けば良いかドキュメンテーションされている。 検証環境は Debian 8 Jessie です。他
Lagopus SDN/OpenFlow switch: yet another SDN/OF switch agent and high-performance software switch
0 Copyright©2014 NTT corp. All Rights Reserved. 汎用x86サーバを用いた 高速なソフトウエアパケット処理技術 中島佳宏 This research is a part of the project for “Research and Development of Network Virtualization Technology” supported by the Ministry of Internal Affairs and Communications. 1 Copyright©2014 NTT corp. All Rights Reserved. 発表の概要 パケット処理の流れ 汎用x86サーバにおける高速化の難しさ 高速化技術 Lagopus 2 Copyright©2014 NTT corp. All Rights
How to achieve low latency with 10Gbps Ethernet
Good morning! In a recent blog post we explained how to tweak a simple UDP application to maximize throughput. This time we are going to optimize our UDP application for latency. Fighting with latency is a great excuse to discuss modern features of multiqueue NICs. Some of the techniques covered here are also discussed in the scaling.txt kernel document. CC BY-SA 2.0 image by Xiaojun Deng Our expe
Receive-Side Scalingについての調査メモ - syuu1228's blog
Kernel/VM Advent Calendar ４日目: Linuxのネットワークスタックのスケーラビリティについて - かーねる・う゛いえむにっきで書いたReceive-Side Scalingの記述が未だ理解が足りず不正確だと思ったので、調べ直してみてる所。 Multi-queueなNICってなに RPS提案のメールにこんな事が書いてある： This effectively emulates in software what a multi-queue NIC can provide, but is generic requiring no device support. 要約すると「multi-queue NICが提供している機能をソフトウェアエミュレートするのがRPS」 →じゃあmulti-queueなNICってどれで、どんな機能を提供してるんだろう？ それらしいNICを探して
8.4. 一般的なキュー/フレーム損失問題の解決 Red Hat Enterprise Linux 6 | Red Hat Customer Portal
パフォーマンスチューニングガイド 1. 概要 Expand section "1. 概要" Collapse section "1. 概要" 1.1. 本書を読むにあたって Expand section "1.1. 本書を読むにあたって" Collapse section "1.1. 本書を読むにあたって" 1.1.1. 対象読者 1.2. リリースの概要 Expand section "1.2. リリースの概要" Collapse section "1.2. リリースの概要" 1.2.1. Red Hat Enterprise Linux 6 における新機能 1.2.2. 水平方向のスケーラビリティ 1.2.3. 分散システム 2. Red Hat Enterprise Linux 6 のパフォーマンス機能 Expand section "2. Red Hat Enterprise Li
Linux packet-forwarding
続・PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜 #2
サーバの最大NIC搭載数を10個に増強しました
本日より、これまで4個までとなっていた1サーバあたりの搭載NIC数を大幅に増強し、10個までの搭載が可能となりました。 これにより、ゲートウェイや監視用サーバなどをこれまで以上に多数のスイッチに接続することが可能になり、より柔軟なネットワーク構成が実現できます。 ● NICの追加方法 追加作業は、これまでと同様にサーバ詳細画面の「NIC」タブ画面で行います。 ※あらかじめ追加先のサーバはシャットダウンする必要があります。 従来の上限となる4個のNICを搭載していたサーバでも、右下の「追加」ボタンをクリックすることで5個目以降の追加が可能です。詳しくは公式マニュアル内「NICを追加・削除する」を参照ください。 追加NICはこれまで通り無料でご利用いただけますので、この機会にぜひご活用ください。
仮想化時代のネットワークとは？－IDF 2009から読み解く
米国のサンフランシスコで開催された米Intelの開発者セミナー「IDF（Intel Developer Forum） 2009」では、仮想化に対応したネットワークに関するいくつかのセッションが行われた。ネットワークは、仮想化において単なるLAN回線だけでなく、iSCSIやFCoEなどストレージネットワークとしても重視されている。今回は、IDFのセッションから、Intelが仮想化におけるネットワークをどう進化させていくのかを読み解いていく。 ■Computeの仮想化は一定のレベルに達した 今回のIDF 2009、そして9月始めに開催されたVMwareのカンファレンス「VMworld 2009」を見ると、CPUやメモリなどサーバーリソースに関する仮想化は一定レベルの性能に達したように思われる。つまり、ハイパーバイザーはある程度のレベルに達したと考えられているようだ。 もちろん、さらなるCPUコ
2012年、いよいよ来るか？SRIOV (Single Root I/O Virtualization) | シリコンバレーで働く現役プロダクトマネージャー、曽根原春樹のBlog
シリコンバレーで働く現役プロダクトマネージャー、曽根原春樹のBlog Who says "impossible"? Let's see how we can do it! 検索 メインメニュー 最近SRIOV (Single Root IO Virtualization)を触る機会があったので今日はその話。 最初に結論を言うとかなりちゃんとパフォーマンスがでるので仮想化環境でいけそうな気配だ。 今日は最初にそもそもSRIOVって何？て人もいると思うのでこの辺りから話を始めよう。 一言で言えばVirtual Machineのスループットと遅延を大幅改善するテクノロジー。 下の動画をまずは見ていただきたい。 要点を抽出すると、 - SRIOVのSingle Rootとは「1台のサーバーで 」という意味。 （Multi-Rootとなれば「複数台のサーバーで」となる。 ） - 通常の仮想化
サーバの仮想NICに準仮想化ドライバ(virtio-net)が使用できるようになりました
さくらのクラウドでは、幅広いOSで利用可能なIntel PRO/1000を標準仮想NICとして提供していましたが、本日より準仮想化ドライバ(virtio-net)への変更が可能となりました。これにより、virtio-netに対応したOSにおいては安定性や性能の向上、低CPU負荷といった効果が期待できます。 本機能は、サーバに「@virtio-net-pci」タグを付与することで有効化されます。詳しい設定方法は「特殊タグ一覧」のページを参照ください。 ※パブリックアーカイブのWindows2008、Windows2012で作成したサーバはvirtio-netに非対応のため、タグを付与しないでください(virtio-net対応アーカイブは近日の公開を予定しています)。 参考: ベンチマーク結果 参考として、弊社にてベンチマークテストを行った結果を示します。e1000(Intel PRO/100
PCI-SIG SR-IOV Primer
321211-002 Revision 2.5 January 2011 PCI-SIG SR-IOV Primer An Introduction to SR-IOV Technology Intel® LAN Access Division PCI-SIG SR-IOV Primer 321211-002 2 Revision 2.5 January 2011 Legal NFORMATION IN THIS DOCUMENT IS PROVIDED IN CONNECTION WITH INTEL® PRODUCTS. NO LICENSE, EXPRESS OR IMPLIED, BY ESTOPPEL OR OTHERWISE, TO ANY INTELLECTUAL PROPERTY RIGHTS IS GRANTED BY THIS DOCUMENT. EXCEPT AS P
How to achieve Gigabit speeds with Linux
1 Gbit/s network cards have been available for some time now and 10Gbit/s cards have recently become available. However achieving rates of the order of Gigabits per second is not straightforward. It requires careful tuning of several components in the end systems. This document aims to provide information of how to configure end systems to achieve Gbit/s data transfers. Before you begin with the c
Home - DPDK
DPDK 23.11 now available for download Take a detailed look at what this release brings to the table, the contributors behind it, and what lies ahead for the DPDK community in our >> latest blog The most popular kit to accelerate packet processing on a wide variety of CPU architectures Designed to run on x86, POWER and ARM processors, DPDK is a set of libraries running mostly in Linux userland, wit
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Improving Network Performance in Multi-Core Systems
Ethernetの受信処理
High Performance Network Virtualization with SRIOV
https://dl.acm.org/citation.cfm?id=2247134&CFID=275506982&CFTOKEN=85491245