Yahoo! JapanのHadoopクラスタは6000ノードで120PB。指数関数的に増大するデータ需要を技術で解決していく。Hadoop Spark Conference Japan 2016

Yahoo! JapanのHadoopクラスタは6000ノードで120PB。指数関数的に増大するデータ需要を技術で解決していく。Hadoop Spark Conference Japan 2016 日本を代表する規模のビッグデータ処理基盤を持つ企業の1つがYahoo! Japan（以下Yahoo!）です。 同社は2月8日に開催された「Hadooop Spark Conference Japan 2016」において、現在運用中のビッグデータ処理基盤の規模、そして同社が抱えている課題と、それをどう解決していくのかを基調講演の中で示しました。 同社が示した解決方法は、Hadoopなどのビッグデータ処理基盤を使い倒す側から、作る側へ向かうという大胆なものです。同社の貢献はオープンソースとなり、今後さらに多くの課題解決に役立つことになりそうです。 同社データインフラ本部 遠藤禎士（えんどうただし）氏

[mrkn]

象かわいい

[otomarukanta]

「Yahoo! Japan データインフラ本部 遠藤禎士（えんどうただし）氏（写真左）。 」写真右だとは思わない。

[bayashi_net]

「現在Yahoo! Japan（以下Yahoo!）は100以上のサービスを提供し、月間649億ページビュー、1秒間に5万アクセスの規模」

[sonots]

でかい

[doublehorn93]

Yahoo! JapanのHadoopクラスタは6000ノードで120PB。指数関数的に増大するデータ需要を技術で解決していく。Hadooop Spark Conference Japan 2016

[nakag0711]

1年で4倍は果たして指数関数か。

[Chocolat520]

Hadoopゾウさんは立体にした方がかわいい希少例

[ebo-c]

Hadoop(写真右)

[jtw]

毎年データセンタ建て続けてると思ったら、こんな感じで使われてるのか

[EastHop]

うらやましい……

[nabetama]

桁違いだわ。。。

[yamaz]

「Yahoo! Japan データインフラ本部 遠藤禎士（えんどうただし）氏（写真左）。」

[sionsou]

120PBとか桁が違いすぎて想像できない…

[YarmUI]

こわい

[t2y-1979]

すごいなぁ

[chezou]

“DWHにはTeradetaを利用し、43ノードで1.7ペタバイト、1日平均30万クエリを処理。”

[minonet]

Yahoo! JapanのHadoopクラスタは6000ノードで120PB。指数関数的に増大するデータ需要を技術で解決していく。Hadooop Spark Conference Japan 2016 日本を代表する規模のビッグ…