タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

AsakusaとHadoopに関するkimutanskのブックマーク (2)

  • Asakusa on Spark - 急がば回れ、選ぶなら近道

    Asakusa on Spark AsakusaがSpark上で動くようになりました。 Asakusa on Spark (Developer Preview) — Asakusa Framework Developer Preview 0.2.2 documentation すでに実際に番に利用しています。 ノーチラス・テクノロジーズがさくらインターネットにAsakusa Frameworkで開発した大規模データの高速処理基盤を導入し、顧客単位での精度の高い原価計算を実現高速処理基盤はApache Spark™で構築 | NAUTILUS OSSとしての公開を行いましたので、内容や位置づけをまとめておきます。例によってノーチラスは社内でいろんな意見は当然出ていますが、今回は概ね一致している感じです。 パフォーマンス 概ね「業務バッチ処理という観点で見れば、すべからくHadoopMapR

    Asakusa on Spark - 急がば回れ、選ぶなら近道
    kimutansk
    kimutansk 2015/07/08
    すべての処理を無理矢理Map・Reduceの形にしなければならない/Map・Reduceのタスク処理が実態としてはそれぞれが独立したjvmアプリケーションになっている がコストが大きいと。
  • Asakusa Framework 勉強会 2014秋の感想 - ひしだまの変更履歴

    ひしだまHPの更新履歴。 主にTRPGリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲーム音楽です。 2014/10/17『Asakusa Framework 勉強会 2014秋』に行ってきました。 今回の会場はサイトロックさん。 サイトロックさんはシステム運用をやっている会社で、噂には聞いていましたが、行ったのは初めてでした。堂とかおしゃれな感じですね(笑) 最初は恒例の土佐さんの『Asakusa fwはじめの一歩 0.7.0』。 拙作DMDL EditorXですが、いくつか使用できない箇所があったようで>< 属性追加ウィザードの障害(issue42)は、自分の環境では再現しないんですよねぇ。 たぶんXtext内部の情報に不整合があるのだと思います。プロジェクトのクリーンをしたりdmdlファイルを保存し直したりすると直るかも? フローのテストクラスの作成の障害(iss

    Asakusa Framework 勉強会 2014秋の感想 - ひしだまの変更履歴
    kimutansk
    kimutansk 2014/10/21
    他のエコシステムの中でこういう風に来ますか。後はParquetのフィールド型の対応状況は今度見てみましょう。
  • 1