AWSのチュートリアル 〜Analyze Big Data with Hadoop編〜 - Qiita
AWSのチュートリアルの日本語メモ はじめに 最近業務でAWS上に構築したHiveを利用するのですが、より理解を深めたいと思い、今回はAWSのチュートリアルを利用して、Hadoop + Hive環境を1から構築してみました。 チュートリアルの内容 Step1: Set Up Prerequisites for Your Sample Cluster Sign Up for AWS 以前登録していたため、今回はスキップ Create an Amazon S3 Bucket S3とは、データを保存するサービス、詳しい内容はここ 以前に利用したことがあったのでここもスキップ Create an Amazon EC2 Key Pair EC2とは、Amazonが提供してくれているWEBサーバ、詳しくはここ sshでログインするために、key pairを発行する必要がある。 今回はここのサイトを参考
リクルートテクノロジーズ における EMR の活用とコスト圧縮方法
1. (C) Recruit Technologies Co.,Ltd. All rights reserved. リクルートテクノロジーズにおける EMR の活用とコスト圧縮方法 2017/7/5 株式会社リクルートテクノロジーズ ビッグデータ部 渡部徹太郎 AWS Solution Days 2017 2. (C) Recruit Technologies Co.,Ltd. All rights reserved. BIG DATA Department自己紹介 ID: fetaro 名前: 渡部 徹太郎 所属: リクルートテクノロジーズ ビッグデータ部 略歴: 学生: 東京工業大学でデータ工学の研究 SIer 前半: 大手証券会社のオンライントレードシステム基盤 SIer 後半: オープンソース技術部隊 NoSQL, MongoDB 現職: 全社横
AWSチーム社内勉強会「EMRおじさんに聞いてみよう」レポート | DevelopersIO
弊社AWSチームでは最近「◯◯おじさんに聞いてみよう」というタイトルで各分野について詳しそうなメンバーを講師としてQA形式の社内勉強会を開催しています。今回はその中でもAmazon Elastic MapReduce（Amazon EMR）に関する勉強会のレポートになります。QA形式の勉強会ですので、どんな質問が出て、どんな回答があったかをお楽しみ頂ければと思います。なお、EMRということもあり、社内でも利用経験がないメンバーもいたため、まずはHadoopの概要から説明しつつ、オンプレHadoopとEMRの違いなどについて駆け足で説明する勉強会となりました。 Q. そもそもEMR（Hadoop）が分からない かなり古いのですが、前述のスライドを元に以下の点について説明しました。 Hadoopは並列分散処理基盤。スケールアウトする。 バッチ処理用に開発された。とはいえ、最近は対話処理用に利用
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
AWS Black Belt Online Seminar 2016 Amazon EMR
[AWSマイスターシリーズ] Amazon Elastic MapReduce (EMR)![[AWSマイスターシリーズ] Amazon Elastic MapReduce (EMR)](https://cdn-ak-scissors.b.st-hatena.com/image/square/5e37ea20134c298b161bece95a38cc60784bcf78/height=288;version=1;width=512/https%3A%2F%2Fcdn.slidesharecdn.com%2Fss_thumbnails%2F20130925aws-meister-regenerate-emrpublic-130926030316-phpapp01-thumbnail.jpg%3Fwidth%3D640%26height%3D640%26fit%3Dbounds)
