#hcj13w Hadoop Conference Japan 2013 Winter 午前中 Keynote のメモ - #garagekidztweetz
ツイート 全体のまとめは ➤ こちら※ はてなダイアリーの一日の文字数制限にひっかかってエントリそのものを消されてしまったみたいなので、一日前の日付になってしまってますが再度書き直しました。 1/21 は Hadoop Conference Japan 2013 Winter Tickets, Tokyo - Eventbrite だったので東京ビッグサイトに行って来ました。 セッションの数が多かったため、午前の Keynote 、午後の各セッションで分けてメモをシェアしていっています。 Keynote （7F 国際会議場） 10:00 ご挨拶・Hadoopを取り巻く環境 日本Hadoopユーザー会, 濱野 賢一朗 （NTTデータ） / - - Hadoop生みの親, Doug Cutting （予定、ビデオ参加） / リクルートテクノロジーズ, 米谷 修 ➤イベントの説明 #hcj13w
そろそろHadoopについてひとこと言っておくか - nokunoの日記
もうこの手の話題は出尽くした感がありますが、最近Hadoopについて考えることが多いので、エントリにしてみます。なお、ここではベーシックなMapReduce+HDFSのことをHadoopと呼ぶことにします。 HadoopとはHadoopとは言わずと知れたGoogleのMapReduce/GFSのオープンソースのクローンです。MapReduceではプログラマはMapとReduceという2つの関数を書くだけで、並列分散処理をすることができます。これは(1) データを実際に持つマシンにプログラムを配布する (2) MapとReduceをつなぐShuffleフェーズでキーをグループ化してソートする、(3) 障害時のフェールオーバーやレプリケーション、といった処理をフレームワーク側が受け持つことによって、プログラマ側の負担を減らすものです。GFSに対応するHDFSにはファイルをクラスタに分散して保存
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
