非同期で大量データをさばく - 発明のための再発明

はじめに 最近、マイクロサービスの拡大と共にキューやストリームを使用した非同期処理が増えたと思います。 この記事では、Netflix・Pinterest・Airbnbが公開した、各社の非同期処理の具体例を紹介します。 (各事例は簡単な概要の紹介しか書かないので、より詳細な内容は元記事を覗いてみてください。) Netflix: 別サービスへのデータ更新の伝播 元記事: Delta: A Data Synchronization and Enrichment Platform 最初はNetflixが社内で使用しているデータ同期ツールDeltaの紹介です。 Webサービスでは、RDBにデータ(Source of truth)を置きつつ、検索やキャッシュ用に別ツールにも同じデータをコピーするという構成を取るということが有りますが、Netflixもこれをやっています。 Netflixでは、どのように