NTTデータのHadoop報告書がすごかった - 科学と非科学の迷宮
業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成２１年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。 そのうちの一つに、NTTデータに委託されたHadoopに関する実証実験の報告書がありましたので、今更ながら読んでみることにしました。 Hadoop界隈の人はもうみんなとっくに読んでるのかもしれませんけど。 http://www.meti.go.jp/policy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist_software.pdf 「高信頼クラウド実現用ソフトウェア開発（分散制御処理技術等に係るデータセンター高信頼化に向けた実証事業）」という
WordCountやっと動いた - kj-ki’s blog
Hadoop Tutorialでよく見かけるWordCountを試してみました． なかなか動かず，あれこれ修正してようやく何とかなりました． Hadoopのバージョンによって，継承すべきクラスとか引数の型が異なるみたい． MapperとReducer 今回は，バージョン0.20.2+737で動作させました． $ hadoop version Hadoop 0.20.2+737 Subversion -r 98c55c28258aa6f42250569bd7fa431ac657bdbd Compiled by root on Mon Oct 11 13:14:05 EDT 2010 From source with checksum d13991fbc138e18f3b7eb8f60ee708dd ソースはこんな感じ． package org.myorg; import java.io.IO
自作したHadoopのジョブを動かす - 研究メモ
2010-01-17 Hadoopのアプリケーションの種類に関して 卒業研究用性能評価の設定 2010-01-16 FrontPage 2010-01-12 gnuplotメモ 2009-12-23 Job Scheduling for Multi-User MapReduce Clusters pukiwiki設定 2009-12-22 Gfarm_hadoop 2009-12-02 Sector/Sphere 2009-11-26 Hadoop Conferenceまとめ Winning a 60 second Dash with Yellow Elephant 2009-11-22 Hadoop のパラメータについて 2009-10-28 自作したHadoopのジョブを動かす 2009-10-20 Hadoop/antでビルドする HadoopのHDFSをマウント 2009-10-0
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
