タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

dwhとtroccoに関するsh19910711のブックマーク (1)

  • troccoで簡易MLOpsをまわしてみる2(Snowflake ver)

    はじめに この記事は前回のこちらからのちょっとした派生です 良かったら先に目を通していただければ嬉しいです😁 今回の利用するサービス Snowflake(DWH) 少し前にpreviewになったPythonのワークシートをメインに使います trocco 前回と同じくデータを取得する部分とワークフローで呼び出す部分を担当します 前回の記事からのUpdateとしてはFreeプランが登場しており、今回はFreeで使える範囲で対応できます 対応内容 こちら前回と同じでtitanic問題での利用を想定してみます!(変わり映えがなくてすみません、、) さっそく実際に動かしてみた kaggle APIを使ったデータ転送 こちらも前回とほぼ同じです troccoを使って、kaggle apiを叩き、snowflakeにデータを転送します trainとtestのデータをそれぞれ同じdatabase>sch

    troccoで簡易MLOpsをまわしてみる2(Snowflake ver)
    sh19910711
    sh19910711 2023/07/21
    "Pythonのワークシート (Snowflake): 少し前にpreview + Anacondaベースのライブラリ構成 / trocco: Freeプランが登場しており、今回はFreeで使える範囲で対応 / troccoでの転送やジョブ & ワークフロー管理は安心安定という感じ"
  • 1