AF_XDPの動作モード間の処理の違い
この記事は Linux Advent Calendar 2021 の20日目の記事として書かれました。 はじめに AF_XDPは高速なパケット処理を行なうために作られたアドレスファミリー(AF_INETやAF_PACKETの一種)です。AF_XDPのソケットを用いて準備したユーザ・カーネル間で共有するメモリ領域とXDPを活用してデバイスドライバと直接やり取りすることで効率的なパケット処理を実現します。 AF_XDPには、XDP_SKBモードとXDP_DRVモードの2つの動作モードが用意され、XDP_DRVモードにはさらにゼロコピーモードとコピーモードが存在します。この記事ではそれらの動作モードが実際にどのように動作するのかをコードを見ながら解説します。 参照したLinuxのバージョンは5.15です。また具体例として参照するデバイスドライバはixgbeです。 AF_XDP概説 AF_XDPは
1日のドコモ障害は「IPv6シングルスタック方式」導入の影響 サーバ負荷上昇で制限
ドコモは2月7日、spモードなどのモバイルサービスで1日に発生した通信障害について、「IPv6シングルスタック方式」の導入時にサーバの負荷が上昇したことが原因だったと明らかにした。 通信障害は1日の午前7時30分から午後0時13分まで約4時間40分にわたり発生。全国の約1万8000人が影響を受けた。 電気通信事業法などによれば、3万人以上に影響する通信障害が1時間以上続いた場合は重大事故として総務大臣への報告が必要になる場合がある。今回の場合、3万人の基準を下回ることから、報告義務は発生しないとみられる。 ドコモは同日に、IPv4アドレスの枯渇問題を受けてユーザーの端末にIPv6アドレスのみを割り当てるIPv6シングルスタック方式を導入。サーバの負荷が上昇したことで通信を制限する信号がユーザーの端末に送信されたとしている。 関連記事 ドコモで通信障害 「IPv6シングルスタック方式」導入初
A toy DNS resolver
Hello! I wrote a comic last week called “life of a DNS query” that explains how DNS resolvers work. In this post, I want to explain how DNS resolvers work in a different way – with a short Go program that does the same thing described in the comic. The main function (resolve) is actually just 20 lines, including comments. I usually find it easier to understand things work when they come in the for
ネットが使えなくなる？ データの拠点がやばいことに | NHK | ビジネス特集
データセンターと聞いてどのようなイメージをお持ちでしょうか。 デスクトップPCのきょう体が巨大化したものがずらりと並んでいる、ちょっと縁遠い感じでしょうか。 しかし、実は私たちがLINEで友人とやり取りできるのも、YouTubeやNetflixでおもしろ動画やドラマに感動できるのも、ネット通販でつい「オトナ買い」ができてしまうのも、すべてデータセンターがあるおかげなのです。 それだけではありません。 あらゆる社会でデジタル化が進む中で、データ量は日々、飛躍的に増え続けています。 コロナ禍でネット通販の利用が急増しただけでなく、企業が自社サーバーからクラウドにデータを移行していること、さらにビッグデータの収集とAIによる解析によって膨大なデータの行き来が起きているほか、5Gによる通信の高度化もあります。 近い将来、自動運転や遠隔医療、工場のIoT化によってデータ処理はさらに増えることが見込ま
報道発表資料 : 「IPv6シングルスタック方式」の提供を開始 | お知らせ | NTTドコモ
お客様の設定により、お客様情報が「非表示」となっております。お客様情報を表示するにはdアカウントでログインしてください。 お客様情報表示についてへ お客様情報表示についてへ Tweet 「IPv6シングルスタック方式」の提供を開始 -IPv4アドレス枯渇問題へ通信事業者として対応- ＜2022年1月31日＞ 株式会社NTTドコモ（以下、ドコモ）は、ドコモの端末にIPv6アドレスのみを割り当てる「IPv6シングルスタック方式」（以下、本方式）の提供を2022年2月1日（火曜）から開始します。従来規格のIPv4アドレスを用いて運用をしている国内の通信事業者に先駆けて、ドコモはIPv4アドレス枯渇問題へ対応します。 提供開始当初はドコモスマートフォンやデータ通信端末など31機種が本方式に対応します。対応端末は順次拡大予定で、2022年4月以降に発売するドコモ端末はすべて本方式への対応を予定してい
2月新刊情報『ネットワーク自動化とプログラマビリティ』
『ネットワーク自動化とプログラマビリティ ―次世代ネットワークエンジニアのためのスキルセット』 Jason Edelman, Scott S. Lowe, Matt Oswalt 著、土屋 太二 監訳、牧野 聡 訳 2022年2月24日発売予定 616ページ（予定） ISBN978-4-87311-981-6 定価4,290円（税込） 本書はネットワーク自動化とプログラマビリティにフォーカスした解説書で、ネットワークエンジニアの業務を「より効率良く」「より生産的に」進化させるためのエッセンスが詰まったノウハウ集です。ネットワーク運用業務（ネットワーク装置のコンフィグレーションやトポロジー管理、サービス死活監視など）をどのように効率化・自動化させるかという観点から、次世代ネットワークエンジニアが知るべきすべての側面を網羅的に解説します。Pythonを用いたプログラミングの基本から、Linux
How Docker Desktop Networking Works Under the Hood | Docker
Modern applications make extensive use of networks. At build time it’s common to apt-get/dnf/yum/apk install a package from a Linux distribution’s package repository. At runtime an application may wish to connect() to an internal postgres or mysql database to persist some state, while also calling listen() and accept() to expose APIs and UIs over TCP and UDP ports. Meanwhile developers need to be
全銀ネットっていう機関にみんな繋いで「あんたのとこのこの名義のこの番..
全銀ネットっていう機関にみんな繋いで「あんたのとこのこの名義のこの番号の口座に何円送るからよろしく！」っていうメッセージが飛び交ってる。それを元にとりあえず振り込む。 そして一日の終わり(15時すぎ)に全部まとめて全銀ネット側から、日銀ネットという実際にお金を預かってる機関に最低限の動きになるように消し込んだ上(ネッティングっていう)で、A銀行からB銀行に何円振り替えよろしく！って指示が飛ぶ。 ちなみに高額だとリスクが大きいので、1億円以上の決済は直接銀行から日銀ネットに飛ぶ。
Amazon EKS launches IPv6 support | Amazon Web Services
Containers Amazon EKS launches IPv6 support The ongoing growth of the internet, particularly in the fields of mobile applications, IoT, and application modernization, has led to an industry-wide move to IPv6. With 128 bits of address space, IPv6 can provide 340 undecillion IP addresses, compared to 4.3 billion IPv4 addresses. Over the last several years, Amazon Web Services (AWS) has added IPv6 su
分散アプリケーションの依存発見に向いたTCP/UDPソケットに基づく低負荷トレーシング - ゆううきブログ
この記事は、分散アプリケーションを構成するネットワークサービス間の依存関係マップを構築するための基礎技術の改善提案をまとめたものである。第8回WebSystemArchitecture研究会での発表と同等の内容であり、そのときのスライドを以下に掲載しておく。 また、本手法のプロトタイプと評価実験のためのコードを次のGitHubリポジトリに公開している。 1. はじめに クラウドの普及により、サービス事業者は機能追加やアクセス増加への対応が容易となっている。その一方で、クラウド上に展開される分散アプリケーション内の構成要素の個数と種類が増加しているため、構成要素の依存関係が複雑化している。そのため、システム管理者が、システムを変更するときに、変更の影響範囲を特定できず、想定よりも大きな障害につながりうる。よって、システム管理者の手によらず、ネットワークサービス（ネットワーク通信するOSプロセ
ブラウザでTCPを直接送受信できるDirect Sockets APIについて - ASnoKaze blog
ブラウザから直接TCP・UDPで送受信する「Direct Sockets API」という仕組みが議論されています。 実験段階ですが、Chromeでは起動時にオプションを付けることでこの機能を有効にできます。今回はTCPの方で簡単に動作を見てみます。 Direct Sockets API Direct Sockets APIは、TCP・UDPで直接送受信可能にするAPIです。既存のアプリケーションプロトコル(SSHやIRC)、P2Pのような機能を実現可能になります。 もちろんセキュリティ上の問題もあるので、Chromeでは現状デフォルトでは有効になっていない機能です。 セキュリティ面についてはだいぶGithubリポジトリで議論されておりますので目を通すと良いでしょう。ローカルネットワークへの通信やSame-Origin-Policy(CORS)回避の話が上がっていますが、今回は細かくは紹介し
通信業界の仮想化とKubernetes
本記事は通信業界アドベントカレンダー Advent Calendar 2021の20日目の記事です。 はじめに 通信業界ではNFVをはじめとして、ネットワーク仮想化の検討が行われています。最近では要素技術にコンテナも加わり、DockerやKubernetesを使う機会も出てきました。ネットワーク仮想化を進めてきた背景からすると、業界内では当然の流れだと思いますが、通信業界以外の方に「Kubernetesを触っています」と話すと驚かれるので、自分の勉強もかねて通信業界の仮想化とKubernetes の活用までの流れを簡単にまとめてみました。 ネットワーク仮想化の歴史 VLAN 1990年代に登場したネットワーク仮想化の先駆けの技術 物理スイッチを複数の論理的なスイッチに分割して利用 設定変更のしにくさや障害発生時の切り替えに時間がかかるなどの課題 SDN: Software Defined
面倒な準備なしで簡単にDNSの実験が行える「mess with dns」
プログラマーのジュリア・エバンスさんが、DNSを使った実験が行えるサイト「mess with dns」を公開しています。 mess with dns https://messwithdns.net/ New tool: Mess with DNS! https://jvns.ca/blog/2021/12/15/mess-with-dns/ DNSを用いた実験には「DNSレコードを作成することに抵抗がある、あるいはドメインを持っていない」「DNSクエリが見えないため何が起こっているのかを理解するのが難しい」「どういった実験を行うべきかわからない」といった問題があります。こういった問題を解消し、実際にどのような実験を行えばいいかを例示しながらDNSの動作を学ぶことができるというのが、「mess with dns」です。mess with dnsでは用意するのが面倒なドメインがあらかじめ用意さ
大規模LBaaSプロジェクトの成長期に体験した2つの問題
こんにちは、LINEのプライベートクラウドサービスであるVerdaのLoad Balancer as a Service (LBaaS) のチームでTech Leadをしている早川です。このエントリでは私が2019年4月にLINEに入社してからの約2年半で体験した大規模LBaaSならではの興味深い問題をピックアップしてご紹介します。 Verda LBaaSについて VerdaのLBaaSは2016年ごろに稼働を開始したVerdaの中でも比較的歴史が長いサービスです。当時のLINEではハードウェアのアプライアンス製品を用いて提供されていたロードバランサのサービスを置き換える目的で開発されました。特徴としては実際にユーザのトラフィックを受けるいわゆるデータプレーンと呼ばれるコンポーネントも含めて全てがソフトウェアで実装されているということが挙げられます。 中でも個人的に気に入っているのは、L4
ゲームでよくある「NATタイプ」はどう判定しているの？
はじめに 家庭用ゲーム機などのネットワーク設定で「NATタイプ」というのを見たことがある人は多いと思います。 これはオンラインマルチプレイなど通信を行うゲームをする際、ゲーム機器同士で通信可能かどうかを見極める目安として使われます。 本記事では、このNATタイプをどのように判定するのか、 RFC 5780 ベースで簡単に説明します。 この記事はDeNA Advent Calendar 2021の8日目の記事です。 なぜNATタイプの判定を行うのか 一般的なクライアント/サーバモデルの通信であれば、そもそもNATタイプが何であるか気にすることはないと思います。 では、家庭用ゲーム機などがなぜNATタイプを判定するのかというと、「P2Pが成立するかどうか」を見極めるためです。 P2Pで通信を行う際は、NAT(NAPT)が存在する場合、いわゆる「NAT越え」が必要になります。 NATがあると、イ
パケットからデータベースを作成、社内のSaaS利用状況を可視化する
ネットワークを流れるパケットをキャプチャーして収集し、Pythonとリレーショナルデータベースを用いて精度よく解析するための実践的なテクニックを紹介する本特集。前回までの内容で、キャプチャーしたパケットから通信先サーバー名を格納したテーブルと、各パケットの5タプル（送信元IPアドレス、宛先IPアドレス、プロトコル番号、送信元ポート、宛先ポート）を格納したテーブルを作成しました。第6回はこれらを利用し、クラウドサービスの利用状況などを可視化する手法を解説します。 第4回 Pythonによるパケット解析で国内にないサーバーを検出、そのやり方は 第5回 ネットワークの遅延に切り込む第一歩、HTTPSの通信先を取得する手法 企業の情報システムにおいて、SaaS（ソフトウエア・アズ・ア・サービス）の利用が進んでいます。これら外部サービスの存在感は大きくなっており、サービスを便利に使うことで業務のスピ
「アナログ戻し」トラブル急増、国民生活センターが注意喚起
「光回線をアナログ回線に戻せば料金が安くなる」などと勧誘し、手続き代行やオプションサービスの料金として高額な請求をする、いわゆる「アナログ戻し」のトラブルが増えている。国民生活センターが12月9日に注意喚起した。 相談件数は2018年度に316件だったが、19年度に565件、20年度は873件と年々増えている。21年は11月30日までで1398件となった。 「電話で勧誘され、了承したところ高額な契約になっていた」「NTTの勧誘だと思っていたのに別の事業者だった」といった事例が報告されている。中には通信事業者を装って家を訪問し、勧誘を断ったにも関わらず、書面を置いていくケースもあった。書面には関係のない事業者と月額約5000円の生活サポートの契約をしたことになっていたという。 国民生活センターは、1）勧誘を受けた事業者名と契約内容をしっかり確認する、2）必要のない契約はきっぱり断る、3）光回
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
窓やドアなどわずかな隙間を使って配線可能な10GbE LANケーブル
ソニーCSLとJAXA、成層圏や低軌道でもTCP/IP通信を可能にする技術
ヤマハがネットワーク製品の最新ロードマップを公開 10GbE対応VPNルータ、マルチギガ対応スマートPoEスイッチなど
