Kind と Containerlab で Cilium の BGP Control Plane を試す
お久しぶりです。 3 月のライオンの 17 巻が発売されたので早速読みました。 非常に良かったですね。 今回は Cilium の新しい機能である BGP Control Plane を動かすついでに Containerlab にも入門しました。 # とりあえず動かしたい方へ 前提知識は既に取得しているのでとりあえず動かしたり，どういう感じで動かしたのかを知りたい方はスクリプトへのリンクを貼っておきくのでそちらを参照してください． cilium-bgp-cp (opens new window) 実験環境のトポロジーは試してみるの章をちらっと見てください． 環境を作成すると clab-cilium-bgp-cp-client0 からロードバランサーのアドレスにアクセスできるはずです． # モチベーション 最近の興味として Kubernetes やそのネットワーク機能、 BGP などの勉強をし
【翻訳】Bilibiliは如何にしてApache IcebergでData Lakehouseを構築したか？ - 流沙河鎮
この記事は著者であるRui Li氏の許可を得て翻訳したものです。 Original article: How Bilibili Builds OLAP Data Lakehouse with Apache Iceberg | by Rui Li | Medium. 文中の注釈は、訳者(@_Bassari)が読者の理解を助けるために付け加えました。 はじめに Bilibiliは中国最大級の動画共有サイトです。私たちはBilibiliのbig data infrastructureチームとして、2021年にApache Iceberg1を使用したlake-warehouseプラットフォームを構築するためのプロジェクトを開始しました。このプラットフォームは、主にOLAP分析シナリオに焦点を当てています。 このプロジェクトの前は、当社のdata warehouseはApache Hive2をベース
コンテナオーケストレーションとGoogle Kubernetes Engine（GKE）の特徴とその活用 | gihyo.jp
本連載は、Google Cloudのアプリ開発とDBプロダクトにおけるスペシャリスト達が、Google Cloudプロダクトを利用した、クラウドネイティブな開発を実践する方法を解説しています。 第2回では、Google Cloudが提供するフルマネージドなKubernetesプラットフォームであるGoogle Kubernetes Engineのアーキテクチャや特徴を紹介します。この記事を読むことでGoogle Kubernetes Engineのユースケースや利点について理解できます。 対象となる読者として、クラウドを利用したアプリケーションプラットフォームを開発/運用するエンジニア、またそのプラットフォーム上でアプリケーションを開発するエンジニアを想定しています。 Kubernetesとは KubernetesはOSSのコンテナオーケストレーションシステムです。 Google内部で利用
VictoriaMetrics, a Prometheus Remote Storage solution
Photo by Mikail McVerry on UnsplashStarting pointBack in 2020, our homegrown centralized timeseries storage solution, BigGraphite, started to show the usual signs of aging. Could a more modern alternative be able to centralize our metrics for a fraction of the infrastructure cost and operational burden while being more reliable, performant and feature full ? At that time, our scale involved 1500+
デザインパターン - Refactoring.Guru
デザインパターンは、 ソフトウェアの設計でよく 起きる問題に対する典型的な解決方法です。 パターンの一つ一つは、 自分のコードの設計 の一つ一つは、 自分のコードの設計上の問題に 合わせて調整可能な設計図のようなものです。
Apache Hive-4.x with Iceberg Branches & Tags
Apache Iceberg Branch & Tags With Apache Hive 4.xIntroduction:For sophisticated snapshot lifecycle management, Iceberg supports branches and tags which are named references to snapshots with their own independent lifecycles. This lifecycle is controlled by branch and tag level retention policies. Branches are independent lineages of snapshots and point to the head of the lineage. Prerequisites:Wor
Apache Spark Shuffle Service — there are more than one options!!
The purpose of this blog is to provide a list of Shuffle Service Implementations in Apache Spark and motivation for their design choices. This blog will also cover the high level understanding of Spark Shuffle service. Credit Note: All Credit goes to actual blogs and you tube videos published already for each Shuffle service implementation and the relevant links have been added in each section of
Spark Architecture
Edit from 2015/12/17: Memory model described in this article is deprecated starting Apache Spark 1.6+, the new memory model is based on UnifiedMemoryManager and described in this article Over the recent time I’ve answered a series of questions related to ApacheSpark architecture on StackOverflow. All of them seem to be caused by the absence of a good general description of the Spark architecture i
Spark Architecture: Shuffle
This is my second article about Apache Spark architecture and today I will be more specific and tell you about the shuffle, one of the most interesting topics in the overall Spark design. The previous part was mostly about general Spark architecture and its memory management. It can be accessed here. The next one is about Spark memory management and it is available here. What is the shuffle in gen
最初から強いやつの特徴 - Qiita
はじめに どんな仕事でも強い人は存在する。 でも最初から強い人は珍しい。 これは、web 業界に身を置いてみて、信じられないくらいムキムキになっていった人たちを見てきた私が送る こうしたら強くなれるかもしれない？指南書である。もしエンジニア職に興味があるのであれば、一考になるかもしれない。 最初から強いやつの特徴 平日の稼働時間以外も勉強 or 開発する 土日も勉強 or 開発する 公式ドキュメントをちゃんと読む 以上のような当たり前のことは、最初から強い人じゃなくてもやるので特徴に入れません。 1. 読解能力が異常に高い 国語の力です。 これは、ちゃんとドキュメントに書いてあることが理解できると同義です。 そしてこれが本当に大事です。 強い人に質問すると必ず「ん？ Docs 読んだ？」って聞いてきます。私は (...読んだわ！) って内心思ってますが、それは読んだだけです。内容をちゃんと
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Notion – The all-in-one workspace for your notes, tasks, wikis, and databases.
Notion – The all-in-one workspace for your notes, tasks, wikis, and databases.
Notion – The all-in-one workspace for your notes, tasks, wikis, and databases.
Internet Speed Test - Measure Network Performance | Cloudflare
Speed Trino Queries with These Performance-Tuning Tips
GitHub - rancher/charts: Github based Helm Chart Index Repository providing charts crafted for Rancher Manager
Apache Hive — Iceberg Quick Start in 5 Minutes
Guides – Tabular
Tutorial – Tabular
Exploring Longhorn: A Game-Changer for Kubernetes Storage