分散並列環境における機械学習 - Preferred Networks Research & Development
もうすぐ春ですね。花粉さえ飛ばなければ最高なのに。岡野原です。 先日、Hadoop Conference Japan 2011で、”MapReduceによる大規模データを利用した機械学習”というタイトルで発表しました。 発表内容は三部構成になっています。 最初に、機械学習の基本と、それがMapReduceとどのような関係にあるかを紹介しました。その中でHadoop上で動く機械学習ライブラリMahoutの簡単な紹介をしました。 次に、機械学習の最前線ではどのような問題が解かれているかを紹介し、グラフィカルモデルの例、一般の最適化（教師付き学習におけるパラメータ学習）の分散並列化についての話題をしました。 最後に、MapReduceの補完として使えるようなシステムの例としてdremelを紹介しました。このシステムはMapReduceがバッチ型処理で、全データが処理対象の場合が得意なのに対し、一
[O] Hadoop Conference Japan 2011 に参加してきました #hcj2011
overlasting.net 2019 Copyright. All Rights Reserved. The Sponsored Listings displayed above are served automatically by a third party. Neither the service provider nor the domain owner maintain any relationship with the advertisers. In case of trademark issues please contact the domain owner directly (contact information can be found in whois). Privacy Policy
GraphLab: A New Parallel Framework for Machine Learning
GraphLab: A Parallel Framework for Machine LearningDesigning and implementing efficient and provably correct parallel machine learning (ML) algorithms can be very challenging. Existing high-level parallel abstractions like MapReduce are often insufficiently expressive while low-level tools like MPI and Pthreads leave ML experts repeatedly solving the same design challenges. By targeting common pat
basho / riak / wiki / Home — bitbucket.org
basho / riak (http://riak.basho.com/) Riak is a decentralized datastore from Basho Technologies. A Decentralized Completely-Available Datastore Riak combines a decentralized key-value store, a flexible map/reduce engine, and a friendly HTTP/JSON query interface to provide a database ideally suited for Web applications. The source code can be found here at bitbucket, but the canonical home for doc
MapReduce - Perl version of Google's distributed data processing - metacpan.org
NAME MapReduce.pm - Perl version of Google's distributed data processing ABSTRACT Simple, generalized distributed data processing. SYNOPSIS On the commandline: # mr example.mr inputcorpus outputcorpus File example.mr: ------------------ package ExamplePackage; use MapReduce; @ISA = qw( MapReduce ); ExamplePackage->run; sub Reader { ... } sub Map { ... } sub Reduce { ... } ------------------ DESCRI
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.cs.wisc.edu/condor/
http://code.google.com/edu/content/submissions/mapreduce/listing.html
MapReduce-0.01 - Perl version of Google's distributed data processing - metacpan.org