タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

kafkaに関するtgkのブックマーク (4)

  • Apache Kafka が生まれた理由

    今データを使って何かした方がいいと考えているお客様は多いのではないかと思います。Red Hat の金融セミナーでもこの手のお話があり、マネーソーの登壇者が以下の話をしていました。 義務化されるものがある一方で、オープンバンキングを実装するための様々なアプローチがあるのですが、一貫したテーマが一つあることに気付きました。〜略〜 今や誰もが同じデータへアクセスすることが可能で勘定系システムの中にある貴重なデータに基づいて活動できるのは私だけではありません。ではどうしたら差別化できるでしょうか。〜略〜 その答えとは次のようなものです。 データを使っていますぐ何かした方がよい。〜略〜 データに基づく活動が次の未開拓領域です。 ETL を使っていたときの LinkedIn の課題前提 : アクテビティデータActivity data is one of the newer ingredients i

    Apache Kafka が生まれた理由
    tgk
    tgk 2021/01/03
    「データを必要としているサービスにリアルタイムにデータを送る、これが Kafka の真骨頂になります」DWHはKafkaの1コンシューマという位置付け
  • TechCrunch

    Byju’s CFO Ajay Goel, who joined the edtech giant in April this year, has already resigned, the two said Tuesday, in the latest setback for the startup that is grappling with scores of challenge Roblox China was once full of promise. Since its localized platform, which is a joint effort with Tencent, abruptly halted operation nearly two years ago, the company has been quiet about its standing

    TechCrunch
    tgk
    tgk 2019/04/15
  • Apache Kafkaの概要とアーキテクチャ - Qiita

    初版: 2018/9/28 著者: 伊藤 雅博, 株式会社日立製作所 はじめに この投稿ではオープンソースカンファレンス2017.Enterpriseで発表した「めざせ!Kafkaマスター ~Apache Kafkaで最高の性能を出すには~」の検証時に調査した内容を紹介します(全8回の予定)。投稿の内容は2017年6月にリリースされたKafka 0.11.0 時点のものです。 第1回目となる今回は、Apache Kafkaの概要とアーキテクチャについて紹介します。 投稿一覧: 1. Apache Kafkaの概要とアーキテクチャ (投稿) 2. Apache KafkaのProducer/Broker/Consumerのしくみと設定一覧 3. Apache Kafkaの推奨構成と性能の見積もり方法 4. Apache Kafkaの性能検証(1): 検証環境とパラメータチューニングの内容

    Apache Kafkaの概要とアーキテクチャ - Qiita
    tgk
    tgk 2019/04/15
    Kafkaの使いどころ2つ 1)M個のソース・N個のシンクのつなぎ込み機構をM*N種類作る代わりに、Kafkaを間に置いてM+N種類に抑える 2)データ量が激変するソースを直接宛先に送らず、Kafkaをキューにする
  • Apache Kafkaに入門した

    Apache kafka 最近仕事でApache Kafkaの導入を進めている.Kafkaとは何か? どこで使われているのか? どのような理由で作られたのか? どのように動作するのか(特にメッセージの読み出しについて)? を簡単にまとめておく(メッセージングはまだまだ勉強中なのでおかしなところがあればツッコミをいただければ幸いです). バージョンは 0.8.2 を対象に書いている. Apache Kafkaとは? 2011年にLinkedInから公開されたオープンソースの分散メッセージングシステムである.Kafkaはウェブサービスなどから発せられる大容量のデータ(e.g., ログやイベント)を高スループット/低レイテンシに収集/配信することを目的に開発されている.公式のトップページに掲載されているセールスポイントは以下の4つ. Fast とにかく大量のメッセージを扱うことができる Scal

    tgk
    tgk 2015/09/04
  • 1