Amazon SageMakerを使用した自動チューニングと、Airflowによる機械学習基盤構築

テクノロジーカテゴリーの変更を依頼記事元:

medium.com/@arxivtimes

2 usersがブックマークコメント

記事へのコメント1件

注目コメント
新着コメント

hatyone "つらくないAirflow" という文字列に、心がじわじわしている

2019/06/25 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

リンクを埋め込む

以下のコードをコピーしてサイトに埋め込むことができます

<iframe marginwidth="0" marginheight="0" src="https://b.hatena.ne.jp/entry.parts?url=https%3A%2F%2Fmedium.com%2F%40arxivtimes%2Famazon-sagemaker%25E3%2582%2592%25E4%25BD%25BF%25E7%2594%25A8%25E3%2581%2597%25E3%2581%259F%25E8%2587%25AA%25E5%258B%2595%25E3%2583%2581%25E3%2583%25A5%25E3%2583%25BC%25E3%2583%258B%25E3%2583%25B3%25E3%2582%25B0%25E3%2581%25A8-airflow%25E3%2581%25AB%25E3%2582%2588%25E3%2582%258B%25E6%25A9%259F%25E6%25A2%25B0%25E5%25AD%25A6%25E7%25BF%2592%25E5%259F%25BA%25E7%259B%25A4%25E6%25A7%258B%25E7%25AF%2589-36c785eb64f9" scrolling="no" frameborder="0" height="230" width="500"><div class="hatena-bookmark-detail-info"><a href="https://medium.com/@arxivtimes/amazon-sagemaker%E3%82%92%E4%BD%BF%E7%94%A8%E3%81%97%E3%81%9F%E8%87%AA%E5%8B%95%E3%83%81%E3%83%A5%E3%83%BC%E3%83%8B%E3%83%B3%E3%82%B0%E3%81%A8-airflow%E3%81%AB%E3%82%88%E3%82%8B%E6%A9%9F%E6%A2%B0%E5%AD%A6%E7%BF%92%E5%9F%BA%E7%9B%A4%E6%A7%8B%E7%AF%89-36c785eb64f9">Amazon SageMakerを使用した自動チューニングと、Airflowによる機械学習基盤構築</a><a href="https://b.hatena.ne.jp/entry/s/medium.com/@arxivtimes/amazon-sagemaker%E3%82%92%E4%BD%BF%E7%94%A8%E3%81%97%E3%81%9F%E8%87%AA%E5%8B%95%E3%83%81%E3%83%A5%E3%83%BC%E3%83%8B%E3%83%B3%E3%82%B0%E3%81%A8-airflow%E3%81%AB%E3%82%88%E3%82%8B%E6%A9%9F%E6%A2%B0%E5%AD%A6%E7%BF%92%E5%9F%BA%E7%9B%A4%E6%A7%8B%E7%AF%89-36c785eb64f9">はてなブックマーク - Amazon SageMakerを使用した自動チューニングと、Airflowによる機械学習基盤構築</a></div></iframe>

プレビュー

規約違反を報告

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

Amazon SageMakerを使用した自動チューニングと、Airflowによる機械学習基盤構築

私のチームでは、最近自然言語の研究ではAllenNLPをメインに使っています。AllenNLPで作成したモデルの... 私のチームでは、最近自然言語の研究ではAllenNLPをメインに使っています。AllenNLPで作成したモデルのハイパーパラメーターチューニングを、Amazon SageMakerで自動化したためそのノウハウについて共有しました。なお、SageMakerのインスタンスは結構高いので実際やると結構持ってかれます。学習専用のインスタンスを提供してくれればな〜と感じる今日この頃です。 Airflowによる機械学習基盤構築こちらは、Airflowを用いた機械学習モデルの学習・デプロイ基盤の構築に関する資料です。Airflow自体はすでに使われていて、その実行基盤をインスタンスベースからKubernetes/コンテナベースに置き換えています(置き換え前はAnsibleでインスタンス構築)。Minikube登場により、ローカルでもテストしやすくなったので今後はますますコンテナベースへの以降が進むかな