【インフラ】 Envoy の導入と xDS API で Consul 連携やってみた話 - Mirrativ Tech Blog
こんにちは ハタ です 今回はインフラ/基盤開発で導入している Envoy について紹介したいなと思っています 現在ミラティブでは Go移行 を進めているところで、 既存のWebアプリケーション(Perl で実装されてます)と、新たに Go で実装された Web アプリケーションをシームレスに導入/切り替えするために Envoy の導入を行いました Envoy xDSとConsul によるインスタンス管理 NGINX や HAProxy または Apache HTTP Server など使い慣れた && ノウハウもあるミドルウェアではなくなぜ Envoy を選定したかというと、 なんといっても魅力的なのが xDS と呼ばれる Discovery Service 群があることで柔軟に既存コンポーネントと連携を取りやすいことやAPI操作によるコントロールの柔軟性が高いことが決め手となっています
サーバ/プロセスのメトリクスを使ったNagios/Mackerel/Consulのチェックコマンドを作るときに便利な metr を作った - Copy/Cut/Paste/Hatena
Consulでちょっとしたヘルスチェックを追加したいと思ったのですが、例えば iowaitが高いかつuserは低いとき という条件を書こうとしたときに、「うっ。。！どう書けばいいんだ。。」となってしまったので、作りました。 github.com これはなに metr は次のような利用を想定したコマンドです シェルスクリプトにホストやプロセスのメトリクスの値を使った条件を組み込む Nagios pluginとして利用する Mackerel check pluginにチェックコマンドとして利用する 使い方 インストールはHomebrew以外にdeb/rpmパッケージを用意しています。基本的にサーバにコマンドとしてインストールするのが良いでしょう $ dpkg -i metr_0.5.1-1_amd64.deb metr list 取得できるメトリクスは metr list で確認できます。また
「HashiCorp Cloud Platform」発表。マルチクラウドでHashiCorpのサービスを提供予定。まずはAWSでConsulの提供から
HashiCorpは、6月22日から開催中のオンラインイベント「HashiConf Digital 2020」で、新サービス「HashiCorp Cloud Platform」（HCP）を発表しました。 Today at #HashiConf digital we unveiled HashiCorp Cloud Platform, a fully managed cloud offering to automate deployment of HashiCorp products on any cloud provider. Watch the announcement replay here: https://t.co/Sd0OoiGCkI — HashiCorp (@HashiCorp) June 22, 2020 HashiCorp Cloud Platformは、次のようなものだ
2019年10月19日、LINE Fukuoka株式会社にて転職を考えるエンジニア向けに「LINE Financialエンジニア採用説明会 」を開催しました。「LINEほけん」「LINEスマート投資」「LINE家計簿」「LINE証券」など、さまざまな金融系サービスを展開する同社のエンジニアたちが、業務内容や働き方について紹介します。「LINE Financialの仕事の進め方 サーバーエンジニア編 」に登壇したのは、LINE株式会社 フィナンシャル開発センター 開発1室 サーバーサイドエンジニアの国兼周平氏。LINE証券開発チームの働き方や、現在取り組んでいるオンプレミスでのDockerコンテナクラスタの構築について語りました。 LINE Financialのサーバーサイドエンジニアの働き方 国兼周平氏：サーバーサイドエンジニアの国兼です。「LINE証券」の開発をしています。 去年の10月
microservices-infrastructure-with-envoy-consul-nomad
Envoy Meetup Tokyo #1 の発表スライドです。 発表後から誤字の修正のほか次の修正が入っています。 P32. スライドが一枚抜けていたので追加 P26. 設定ミスとなる正しい理由をご指摘いただいたので正しい対処方法を記載
我らの時代のコンテナデプロイ – Nomad, Consul, Vault | IIJ Engineers Blog
我らの時代のコンテナデプロイ – Nomad, Consul, Vault 2020年12月11日 金曜日 【IIJ 2020 TECHアドベントカレンダー 12/12（土）の記事です】 システムクラウド本部の坂口です。 私たちは現在、新サービスを開発しています。 今やサービス開発ではコンテナ技術を無視できません。 我々のサービスでも開発したアプリケーション群は自動でコンテナイメージ化され、様々な開発者が簡単に手元で動作確認できるようになっています。 マイクロサービスアーキテクチャを採用し柔軟かつ高速な開発体制を敷けた一方で、それらをデプロイするコンテナ管理基盤をどうするかが問題になります。 今回はコンテナオーケストレーションシステムとしてnomad、並びにhashicorpのプロダクトを利用した感想をご紹介します。 デプロイを巡る冒険 Kubernetes コンテナオーケストレーションシ
HashiCorp Cloud Platformが日本リージョンの一般提供を開始。HCP VaultとCP Consulをマネージドサービスで提供
HashiCorp Cloud Platformが日本リージョンの一般提供を開始。HCP VaultとCP Consulをマネージドサービスで提供 HashiCorpは、同社の製品群をマネージドサービスで提供する「HashiCorp Cloud Platform日本リージョン」を10月末から11月頭の時期に提供を開始すると発表しました。AWS上に構築され、AWS東京リージョンとAWS大阪の両方で提供予定です。 HashiCorp Cloud Platformは2020年6月に米国で発表され、現在ではHCP Vault、HCP Consul、HCP Packer、Terraform Cloud、HCP Boundary（β版）などのマネージドサービスを提供しています。 参考：「HashiCorp Cloud Platform」発表。マルチクラウドでHashiCorpのサービスを提供予定。まず
こんにちは、遊佐です。 今回は僕が普段愛用しているOliver Goldsmith （ オリバーゴールドスミス ）の「CONSUL-50」をご紹介。 購入して5年ほどが経ちますが、今も愛着がわくアイウェアです。 このメガネをかけていると「それどこのブランド？」と普段よく聞かれ、答えても「あんまりよく知らない」「聞いたことがない」とよく言われます。 肌感ですが、確かに他のアイウェアブランドと比べると認知度が少し低いかもしれません。英国ブランドにはそういうところがあったりするんですよね・・・イメージが地味というか。 ですが「知らない」と言い放つには惜し過ぎるほど、歴史のあるブランドです。 芸能人にも愛用者が多いので、おしゃれメガネを探している方は、一度比較検討してみる価値があると思います。 この記事はこんな人にオススメ お洒落なメガネを探している CONSULに関して知りたい オリバーゴールド
HashiCorp Consul supports Microsoft’s new Service Mesh Interface
Today at KubeCon EU in Barcelona, Microsoft introduced a new specification, the Service Mesh Interface (SMI), for implementing service mesh providers into Kubernetes environments. The Service Mesh Interface (SMI) is a specification for service meshes that run on Kubernetes. It defines a common standard that can be implemented by a variety of providers. This allows for both standardization for end-
HashiCorp Consul 1.6: Dynamic Traffic Management and Gateways
A year ago, Consul 1.2 introduced our service mesh solution, Consul Connect. Our initial release focused on solving security challenges at Layer 4 and leveraging Consul’s service discovery feature to provide service-to-service identity and trust. Since that point, Connect has added support for additional proxies (Envoy), L7 observability, a simpler way to enable Consul ACLs and TLS, and platform i
DMM動画の可用性を支えるConsul
Symfony Messenger et ses messages: à la queleuleu…. Et s’il était temps de grouper ?
Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning
terraform Advent Calendar 2021の22日目！ 今日はTerraformとConsulを組み合わせる仕組みによって自動化ができるんだよという話。 Terraformでネットワーク機器の設定！ TerraformをAWSやGCPなどクラウドプロバイダーの設定に利用している人は多いと思うが、それだけでなくネットワーク機器の設定にも利用可能だ。 たとえばCiscoはさまざまなProviderを提供しているし、F5 BIG-IPやFortinet、VMwareのNSX ALB(AVI)などもVerified Providerがある。 コンピューティングリソースだけでなくネットワークの設定もTerraformで統一できるのは結構便利だと思う。 オンプレ環境でも積極的に活用していきたい。 ちなみに自分は自宅にVMware環境があるので、vSphereもNSX ALBもTerr
Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning
EKSにHashiCorp Vault with ConsulをHA構成でデプロイしてSecret管理させてみる - Qiita
はじめに みなさん、KubernetesのSecretはどのように管理されていますか？ よく聞くOSSツールといえば、Kubesec、Sealed Secrets、External Secretsなどがあります。 それらとAWSのSecrets Manager等のクラウドマネージドサービスを連携して使う方法もありますね。 今回は、データストレージにHashiCorp Consulを使用するHashiCorp VaultクラスタをEKS上に作成して、hashicorp/vault-k8sを用いたサイドカー構成でSecret管理をさせてみたいと思います。 また、VaultはOSS版であってもWeb UIが提供されているのでそちらも合わせて構築したいと思います。 やりたいこと UIで秘匿情報を管理できる アプリケーションのデプロイ時にその秘匿情報を自動で埋め込んで欲しい 秘匿情報はひとつのVau
Announcing Tech Preview of Consul Service Mesh for Amazon ECS
Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning
Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
Announcing the Beta Release of Consul Service Mesh for Amazon ECS
Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning
HashiCorp、Consulサービスメッシュで実行されているアプリケーションにトラフィックをルーティングする「Consul API Gateway」を発表
米HashiCorpは、HashiCorp Consulサービスメッシュで実行されているアプリケーションに、トラフィックをインテリジェントにルーティングするための専用の入力ソリューション「Consul API Gateway」を、同社が開催しているイベント「HashiConf Global 2021」にて、10月20日（現地時間）に発表した。 Consul API Gatewayは、外部クライアントからサービスメッシュへのインバウンドリクエストを処理するための、単一のコントロールプレーンを提供する。 同社は、メッシュベースのアプリケーションへのインバウンドリクエストを検出して、それらのクライアントに信頼できる機関からの検証可能な証明書を提示し、リクエストを満たすために必要となる安全な接続を促進する機能の提供を目的としている。 現時点では、Consul API GatewayはKuberne
Configuring Third-Party Load Balancers with Consul: NGINX, HAProxy, F5
In a monolithic environment manually configuring load balancers is fairly straightforward, but as you transition to dynamic infrastructure or microservices, it becomes more painful. Suddenly instead of having as many static IP addresses as you have application instances, you are faced with tens, hundreds, or thousands of IP addresses per service, which change on the order of days, or even hours. T
When things go wrong on a large website, it can be fun to read the dramatic stories of high pressure incidents where nothing goes as planned. It makes for good reading. Every once in a while though, we get a success story. Every once in a while, things go exactly as planned. GitLab.com is a large, high availability instance of GitLab. It is maintained by the Infrastructure group, which currently c
CONSUL DEMOCRACY
CONSUL DEMOCRACY is the most complete citizen participation tool for an open, transparent and democratic government.
Consul Connect + Envoy
This guide walks though getting started running Envoy as a Connect Proxy. This tutorial is a working example of consul connect using envoy to load balance traffic to a redis cluster. I feel it's a more real life scenario then Hashicorp's example and this one's working on Docker for Mac. Building docker image with needed binariesAs we need to run envoy through consul the docker image should have bo
At Hashiconf EU 2019, we announced native Consul Connect integration in Nomad available in a technology preview release. A beta release candidate for Nomad 0.10 that includes Consul Connect integration is now available. This blog post presents an overview of service segmentation, and how to use features in Nomad to enable end-to-end mTLS between services through Consul Connect. »Background The tra
We are pleased to announce the new HashiCorp Consul Service (HCS) on Azure, which is now in private beta. HCS on Azure enables Microsoft Azure customers to natively provision HashiCorp-managed Consul clusters in any Azure region directly through the Azure Marketplace. As a fully managed service, HCS on Azure lowers the barrier to entry for an organization to leverage Consul for service discovery o
Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning
東京エレクトロン デバイスは9月14日、米HashiCorp, Inc.と販売代理店契約を締結し、マルチクラウドインフラを自動化するエンタープライズ版ソフトウェア「Terraform」「Vault」「Consul」「Nomad」の販売を開始した。 HashiCorpの製品群は、インフラ構築を自動化し、作業ミスや工数の削減を図る「Terraform」、ゼロトラスト環境でシークレット情報を安心・安全に管理する「Vault」などで構成されている。 「Terraform」 クラウドやオンプレミスにあるネットワークやサーバー、ストレージといったインフラの構成をコードで定義し、プロビジョニングを自動化するアプローチInfrastructure-as-Code）を実現する製品。オペレーション自動化の促進、作業にかかわる人的ミスや工数の削減、容易なインフラの変更管理、インフラ構成の再利用性を向上。 「Va
GitHub - thangchung/go-coffeeshop: ☕ A practical event-driven microservices demo built with Golang. Nomad, Consul Connect, Vault, and Terraform for deployment
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
Datadog processes trillions of datapoints per day to provide its SaaS-based IT monitoring services. They're currently in the middle of a migration from VMs to Kubernetes, and HashiCorp's toolset has served them well in this regard by supporting both types of workloads. In this segment of the HashiConf EU 2019 Opening Keynote, Datadog engineer Laurent Bernaille will show how his company is using Co
オンプレでやる Nomad + Consul + Traefik が本当に顧客が求めていたコンテナオーケストレーションでした - るいすのブログ
前回こんな記事を書いた後に、コンテナオーケストレーションを導入した。 blog.luispc.com 今までの構成はイケてなかった オンプレに k8s の環境はしんどかった マネージド k8s k8s に拘るのをやめた Nomad + Consul の構築は簡単だった Nomad + Consul 構築する Consul Nomad ジョブを作る どうやって分散するの？ Traefik 結果 今までの構成はイケてなかった Proxmox cluster 上に VM のように LXC コンテナを建ていた小さいサービスだからスケール云々はどうでもいいけど、VM のように使ってるコンテナに何かモヤモヤしたものがあった。ステートレスなものなんだからコンテナオーケストレーションを使いたい欲が芽生えた。 オンプレに k8s の環境はしんどかった さっきあげた問題を解決するため＆k8s も使ってみたいと
API Gateways are a popular solution for managing access to cloud backends, but are typically restricted in the environments they support. Modern solutions for ingress and API Gateway tend to rely on Kubernetes or a specific cloud provider to work properly. This article dives into Gloo, a modern API Gateway based on Envoy which can use Consul in place of Kubernetes for service discovery, configurat
Envoy Proxy Configuration | Service Mesh | Consul | HashiCorp Developer
On Consul 1.5.0 and older, Envoy proxies can only proxy TCP traffic at L4. You can configure some L7 features in configuration entries. You can add custom Envoy configurations to the proxy service definition, which enables you to leverage Envoy features that are not exposed through configuration entries. You can also use the Consul Envoy extensions to implement Envoy features. Note: When using Env
RedisConf17 - Smartwaiver - Using Redis for Kiosk Registration Command and Co...
consul connect, L7 traffic manager, nomad consul connect を試す(1) - kencharosの日記
consul には connect という consul 管理下のサービス間のmTLSによる接続を管理する connect という機能がある。 サービス間接続には 組み込み Proxy や envoy を使い、いわゆるサービスメッシュのようなことができる。 www.hashicorp.com consul connect は L4レベルのプロキシであり、また nomad には対応してなかった。 そのため、connect を使うことを断念し envoy を自前でどうにかするようなことをしていたのだけど、 ちょっと前に consul, nomad それぞれのバージョンアップで consul 1.6 には L7レベルのルールを設定可能な L7 traffic manager が追加され、 nomad 0.10 には CNI (container network interface) を使用した
Consul is used at Criteo at scale for more than 4 years and is one of the most important parts of our infrastructure: any downtime on it can damage the business significantly. With 12 datacenters (9 in production, 3 in preproduction) and more than 42000 agents, configuring Consul to work properly at such scale requires some expertise, analysis of incidents, and lots of patience. In this article, w
HashiCorp、Terraform Enterpriseのネットワークインフラを自動化する「Consul-Terraform-Sync 0.3」をリリース
米HashiCorpは、Terraform CloudのセルフホストディストリビューションであるTerraform Enterpriseにおいて、コンプライアンス主導によるネットワークインフラストラクチャの自動化を実現する「Consul-Terraform-Sync 0.3」の一般提供を、9月1日（現地時間）に開始した。 「Consul-Terraform-Sync 0.3」では、自動化エンジンとしてTerraform Enterpriseを使用して、幅広いネットワークプロバイダにわたるインフラストラクチャのガバナンスとセキュリティ監視を提供しつつ、Day 2のアプリケーションネットワーキング配信ライフサイクルを、より動的に管理できるようになっている。 Terraform EnterpriseとConsul-Terraform-Syncとの統合によって、チケットシステムへの依存を減らし、開
posted articles:ChatGPT:81%ニート:56%ヌードル亭麺吉:44%GAS:31%個人開発:31%
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
LINEの金融系サービスを支えるサーバーエンジニアの仕事 Consul・Nomad・Envoyを利用したコンテナオーケストレーションシステム開発
【定番人気】Oliver Goldsmith / オリバーゴールドスミス 「CONSUL-50」の評判は？ - ゆさん歩
Introducing the Consul API Gateway
Consul契機でTerraform動かしてネットワーク機器の設定を自動化する - Cloud Penguins
HashiCorpがConsulを拡張、トポロジマップを追加、Kubernetes統合を改善
Announcing HCP Consul Public Beta
HashiCorp Consul: 1.8 リリースと新しいKubernetesチュートリアル
Hashicorp VaultのバックエンドにConsulを利用していて、メモリが過剰に利用されていた | ten-snapon.com
The Consul outage that never happened
Consul Connect Integration in HashiCorp Nomad
Announcing HashiCorp Consul Service on Azure
Announcing Consul-Terraform-Sync Tech Preview
東京エレクトロン デバイス、米HashiCorp社製エンタープライズ版ソフトウェア「Terraform」「Vault」「Consul」「Nomad」販売開始
Consul-Terraform-Syncでネットワーク共通タスクの自動化が可能に
Service Discovery at Datadog With HashiCorp Consul
Using Consul to configure API Gateway with Envoy
Consul by Mitchell - HashiCorp Meetup
Configure Consul for performance at scale
@Consul2Neetのマイページ - Qiita