タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

flinkとkafkaに関するkimutanskのブックマーク (2)

  • Flink vs Kafka Streams: A Complete Comparison

    This blog post is written jointly by Stephan Ewen, CTO of data Artisans, and Neha Narkhede, CTO of Confluent. Stephan Ewen is PMC member of Apache Flink and co-founder and CTO of data Artisans. Before founding data Artisans, Stephan was leading the development that led to the creation of Apache Flink. Stephan holds a PhD. in Computer Science from TU Berlin. You can also find this post on the data

    Flink vs Kafka Streams: A Complete Comparison
    kimutansk
    kimutansk 2016/09/04
    FlinkとKafkaStreamsの違い。Flinkはクラスタを管理するETL or BIチームが責任を持つ、KafkaStreamsは個別プロダクトチームでいい、という切り分けは面白い。実際KafkaStreamsはそれで使える・・
  • Apache Flink + Kafka + Zeppelin 連携でアドホックなストリーミング分析

    前回、Apache FlinkとはでFlinkの概要に触れたのですが、今回は実践的にkafkaと連携させ、Apache Zeppelinでアドホックに分析してみます。 Zeppelinを使うのは、単純に、jar作って実行するのが面倒だからです(^_-)-☆ 概要 fluentdでデータを収集し、Kafkaにデータを送ります。 Zeppelin上のnotebookからflinkの集計ジョブを実行します。 flinkジョブはKafkaに集約されたストリーミング・データを集計します。 というわけでfluentd, Kafkaをインストールしていきます。 ※ この記事ではCentOS 6.7 Finalを使います。またサーバ上ではrootで作業しています。 ※ また、jdkはopenJDKの1.8を使用しています。 fluentd, Kafkaインストール この記事ではfluentdとKafkaを

    kimutansk
    kimutansk 2016/06/27
    FlinkもZeppelinから操作できましたか。
  • 1