楽天版MapReduce・HadoopはRubyを活用 － ＠IT

2008/12/01 楽天は11月29日、東京・品川の本社で開催した技術系イベント「楽天テクノロジーカンファレンス2008」において、近い将来に同社のEコマースサービス「楽天市場」を支える計画があるRubyベースの大規模分散処理技術「ROMA」（ローマ）と「fairy」（フェアリー）について、その概要を明らかにした。 レコメンデーションの処理自体はシンプル 楽天市場では現在、2600万点の商品を取り扱い、4200万人の会員に対してサービスを提供している。この規模の会員数・商品点数でレコメンデーション（商品の推薦）を行うのは容易ではない。 ※記事初出時に楽天市場の会員数を4800万人としてありましたが、これは楽天グループのサービス利用者全体の数字でした。楽天市場の会員数は正しくは4200万人とのことです。お詫びして訂正いたします。 レコメンデーションの仕組みとして同社は、一般的でシンプルなア

[tettsyun]

MapReduce Hadoop fairy

[msh514]

MapReduce Hadoop google

[uzuki-first]

楽天あついなぁぁ。これ、オープンソース？

[rin1024]

インターンで西澤さんのことを知らずにお話してきた…！

[mainyaa]

オープンソース化まだかな。

[pitworks]

memcached、Coherence、Dynamoに相当する「ROMA」 MapReduce、Hadoopの楽天版「fairy」

[OpenBSD]

いつつかえるようになるんですか＞、＜

[interu]

ROMAではP2Pの環状モデルを採用しており、特定ノードが保持するデータは隣接する2つのノードにもコピーするという3重の冗長度を持つ設計。ただし同一データは3個所にあるがPUT/GETは必ずプライマリノードが担当

[starpos]

なんでインフラソフトウェアに，GCを使うような言語を使うんだ！Rubyはwrapperでいいだろが．

[nobyuki]

"ROMA、fairyとも2009年にはオープンソース化も視野に入れており"

[faw]

データフロー

[m-kawato]

楽天テクノロジーカンファレンスでのROMA/fairy紹介