AWS Step Functionsの単体テスト実施手順 | takemikami's note
AWS Step Functionsの単体テストをローカル環境で実施したい場合、 AWSのドキュメントに「AWS Step Functions Local」を使った方法が記載されており、 AWS Step Functionsから呼び出す処理(Lamda,SQSなど)をモックする方法もあります。 ステートマシンのローカルテスト | docs.aws.amazon.com https://docs.aws.amazon.com/ja_jp/step-functions/latest/dg/sfn-local.html モックサービス統合の使用 | ステートマシンのローカルテスト | docs.aws.amazon.com https://docs.aws.amazon.com/ja_jp/step-functions/latest/dg/sfn-local-test-sm-exec.html
pysparkでSparkSQLの文法チェックをする | takemikami's note
ETL処理などをSpark SQLで行う場合に、 SQLを設定ファイルに持たせておくケースは、よくあると思います。 このような設定ファイルに書いてあるSQLが文法的に正しいかどうかを、 単体テストレベルでざっとチェックできると、 実サーバでの動作確認から手戻りが減らせると思い、方法を調べてみました。 # 本来はダミーデータなどを作成して、 # ローカルの環境で、実際にクエリを実行・テストすべきではありますが。 やりたいこと前提として、次のようなyamlファイルにSQLが書いてあるとします。 queries.yaml --- queries: - id: ok query: select * from hoge - id: ng query: selects * from hoge やりたいことは、 このファイルのSQLが文法的に正しいかどうかを、単体テストで確認することです。 単体テストの
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
HiveのUDFを作る手順のメモ | takemikami's note
