転職会議から冪等でないバッチ処理を根絶した話 - LIVESENSE ENGINEER BLOG

こんにちは、かたいなかです。 最近転職会議のバッチ処理をすべて冪等にし、処理失敗時に気軽に再実行できるようにすることで運用性を向上させました。 今回の記事ではその取り組みを紹介します。 再実行すると重複送信につながるメール送信バッチ もともと、転職会議では一部のバッチ処理を除いてほとんどのバッチ処理が冪等に作られていました。しかし、残りの冪等ではないバッチ処理では、失敗するたびに毎回アドホックな対応をする必要があり運用性に課題を抱えていました 残っていたもので一番大きな問題を抱えていたのがメール送信バッチです。これは、以下の図のようなアーキテクチャで動いており、ワーカーにメールを送信するように指示するメッセージをSQSにキューイングする処理を行うものです。 このメール送信バッチのキューイング処理が途中で失敗した際に、雑に再実行してしまうと同一のユーザに重複してメールが送信されてしまう事にな

[efcl]

"SETにNXオプションを付与することで、Redisに同じキーの値が登録されていないときのみSETの処理が成功するようになります。"

[chi-bd]

>KubernetesのCronJobはドキュメントに記載されているように同じ時刻に2度実行されてしまうことがあります。

[iekusup]

ほー。

[petronius7]

“転職会議”ってサイト名かよ、会議でバッチ処理根絶って、人事部長とかの転職者の可否の一括決済に反対して、一人一人説明する話かと思ったら、単なるプログラミングの話でした。

[iwtn]

あわせて https://q.livesense.co.jp/2021/02/25/326.html