JOB管理をJenkinsからKuroko2へ移行しました - LCL Engineers' Blog
弊社では最近、JOB管理をJenkinsからKuroko2へ移行しました。 Kuroko2についての概要や導入方法は、以下の記事などが詳しいため割愛させて頂き、弊社での具体的な導入内容について紹介したいと思います。 https://github.com/cookpad/kuroko2 http://dev.classmethod.jp/server-side/kuroko2/ https://blog.mwed.info/posts/kuroko2-mwed-2016-10.html 導入の背景 元々、数百ほどあるバッチ処理をJenkinsで運用していました。Jenkinsから、各JOBサーバにsshして、JOBを起動するという単純な構成で運用していたため、下記の課題がありました。 一つのホスト上で同時に起動されるJOB数を厳密に制御できず、CPU/メモリのリソースを逼迫してしまう 夜間だ
Ruby on Rails 製ジョブスケジューラー Kuroko2 のインストール方法と紹介 | tracpath:Works
Ruby on Rails 製ジョブスケジューラー Kuroko2 のインストール方法と紹介 By tracpath • 2017-10-02 • Development, DevOps Kuroko2の紹介 Kuroko2はウェブベースのジョブスケジューラーでありワークフローエンジンです。Ruby on Railsで開発されています。オープンソースで提供されており、ライセンスはMITです。クックパッド社が開発を行っています。 Kuroko2の主な機能と特徴 主要な機能を列挙します。 ジョブ編集と操作 ジョブスケジューラー（cron形式利用可) ジョブ実行履歴の管理 ジョブ実行状況タイムライン Google認証機能 ワークフロー制御機能 カスタムタスク 通知機能 Kuroko2はRubyでカスタムタスクを記述できます。また、ジョブが失敗した場合に次のジョブの実行をしない等のフェイルセーフな
OSSのジョブ管理システム Kuroko2を使ってみた | DevelopersIO
私の所属するプロジェクトで、OSSのジョブ管理ツールKuroko2を導入しました。 簡単にKuroko2の特徴、設定手順をご紹介します。 導入の経緯 プロジェクトが始まった時、一定間隔で起動する小さなジョブが一つか二つあるだけなのでcronで動かしていました。 ですが、リリースから時間が経ちサービスが成長するにつれ次第にジョブも増えていきました。 「こっちのDBから1日1回データを同期して画面に反映して欲しいです！」 「FTP接続してこっちのファイル取得してほしいんだけど...」 「対象のデータがあったらS3にJSON書き出してくれない？」 その場しのぎで次々にcron起動のジョブを増やしていったところ、ある日 崩壊した... (青：使用可能メモリ、緑：使用済みメモリ) ジョブ管理システム Kuroko2の導入 自前でジョブ管理システムを構築することも検討しましたが、時間がないことやすでに
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Cookpad TechKitchen #8: Breaking BatchJobs Beautifully
