巨大な .circleci/config.yml を分割した話 - スタディサプリ Product Team Blog
こんにちは。 SRE の @suzuki-shunsuke です。 6000 行を超える巨大な .circleci/config.yml を分割してメンテナンス性を改善した話を紹介します。 背景 我々 SRE は日々 Developer Productivity の改善に取り組んでいます。 その取り組みの一環で Developer の方から直接フィードバックをもらう機会がありました。 その中で Monorepo の .circleci/config.yml が大きすぎて修正するのが大変という意見をもらいました。 弊社では様々なサービスを一つのリポジトリで管理する Monorepo というアーキテクチャを採用しており、 CircleCI で全てのサービスのテストやビルド・デプロイなどを行っています。 それ故に .circleci/config.yml は 6000 行を超えるものになっており
ECSのScheduled Taskを管理するツールを作った | おそらくはそれさえも平凡な日々
その名もecschedule。だいぶ前から作っていたのだが、この度実戦投入した。 https://github.com/Songmu/ecschedule Nature社では、ECS上でGoのサービスを動かしており、バッチ系の定期実行タスクもECS Scheduled Taskを利用している。 最近バッチの本数が増えてきて管理したくなり、このツールを導入しました。 便利だとは思うが、かなり社内事情にべったりであるため、フィードバック歓迎です。具体的には以下の制約を前提としています。 Rule名がユニークであること RuleにはTargetが1つだけ紐付いており、TaskのContainer Overridesでタスクを実行している ecspressoにかなり影響を受けており、ECS Scheduled Task用のecspressoのような作りになっています。 インストール % brew
秀丸かサクラか、あなたはどっち？ 仕事で使うテキストエディタの一番人気は【ビジネスツール調査：テキストエディタ編】 | fabcross for エンジニア
秀丸かサクラか、あなたはどっち？ 仕事で使うテキストエディタの一番人気は【ビジネスツール調査：テキストエディタ編】 menu ポイント テキストエディタは「秀丸」と「サクラ」の二強。認知率トップは「秀丸」（25.2％） 仕事に使うのは「秀丸」（7.0％）より「サクラ」（10.8％） Windows95時代からずっと「秀丸」、高機能でありながらフリーな「サクラ」 「秀丸」「サクラ」よりも満足度が最も高かったのは「Atom」 調査概要 エンジニアのためのキャリア応援マガジン「fabcross for エンジニア」は、25～59歳の会社員400人（一般200人、製造・IT系エンジニア200人）を対象に、「ビジネスツール」に関するアンケート調査を行いました。 URL:http://engineer.fabcross.jp/ 普段の業務で使っているSNSやオンラインストレージなどのツールについて、認
チケット駆動開発で作業管理はしないほうがいい - arclamp
先日、2013/3/23（土）に弊社でチケット駆動と開発環境に関するイベントを開催しました。リンク先には資料も上がっていますので参照ください（※アトラシアン製品関連のイベントです）。 基調講演にはチケット駆動開発を推進されている関西XPUGのあきぴーさんをお招きして「チケット駆動開発をパターン言語で読み解く」という話をしていただき、最終枠ではパネルディスカッションをしました。 チケット駆動開発とウォーターフォール パネルディスカッションでは、僕が「チケット駆動開発を作業計画に使うのは難しく、WBSとの併用が現実的」と話し、あきぴーさんが「作業計画をチケット駆動開発で回していくには」というノウハウを紹介されていました。 この違いは僕がウォーターフォール的な新規案件を、あきぴーさんがアジャイル的な開発/保守運用案件を前提にしているためです。 僕自身はBTS（Bug Tracking Syste
ログからは見えてこない高負荷サイトのボトルネック : DSAS開発者の部屋
ちょうど１年前に「高負荷サイトのボトルネックを見つけるには」という記事を掲載していますが、この手のトラブルシューティングって結構大変で悩ましいですよね。はじめまして、新入りの@pandax381です。 ログからは見えてこないもの 「サイトの応答が遅い」という問題が発生した場合、その原因はどこにあるでしょうか。 Webアプリケーションの処理に時間が掛かっている DBサーバに投げたクエリーの応答が遅い サーバの処理能力を超えている などなど、いくつもの可能性があります。通常、上に挙げているような問題は、アプリケーションやサーバのログを調査することで、原因を突き止めることができます。 一方で、こういったログの調査だけでは、その原因にたどり着くことができなかったり、相当な苦労が伴うケースもあります。 あるサイトのある日の出来事 つい先日のことですが、KLabの運営している某ソーシャルゲームにて、サ
log4j-properties Converter-Oboe吹きプログラマの黙示録
Google guice Google guice Homepage mybatis(iBATIS3) Google code Project crazybob guiceを作った．．． Wicketチュートリアル Wicketチュートリアル Old JDK Old version JDK Java祝日計算 祝日法に沿って作ってみた。 My Element jsuite log4.properties を log4j.xml に変換するツールを見つけた。 http://code.google.com/p/log4j-properties-converter/ zip をダウンロードして展開すると、Windows用 bat ファイルと UNIX 用に シェルファイルが存在する。 使い方は、c:\work に log4j.properties が存在するなら
aguse.jp: ウェブ調査
あやしいサイトや知らないサイトを訪れる前に、URLを入力するだけでサイト背景情報を調査したり、迷惑メールの送付経路を表示したりすることが出来ます。
時代はGNU screenからtmuxへ - このブログはURLが変更になりました
GNU screenはもう古いので皆さんtmuxへ移行しましょう、という話。Gentooならemerge tmux。 スクリーンショット 手元のtmuxを撮ってみた。縦分割モード。ウィンドウマネージャはawesome。左のircクライアントはweechat。 本家にもいくつかスクリーンショットがある。 tmuxへ移行する理由（メリット） 標準設定のままでもそれなりに使えるステータスバー 各ショートカットがコマンドベース（コマンドで操作ができる） 標準で縦分割機能搭載 GNU screenがたまに固まる問題（が発生するのは私だけ？）が発生しないかも ビュー専用のスクロールモード 柔軟なペイン制御 コピー＆ペースト用のバッファを複数保持できる terminfo的にscreen互換 メモリ消費量が少ない(GNU screenの約1/5) 一部機能でマウスが使用できる(mode-mouse, mo
軽量データクラスタリングツールbayon - mixi engineer blog
逆転検事を先日クリアして、久しぶりに逆転裁判1〜3をやり直そうか迷い中のfujisawaです。シンプルなデータクラスタリングツールを作成しましたので、そのご紹介をさせていただきます。 クラスタリングとは クラスタリングとは、対象のデータ集合中で似ているもの同士をまとめて、いくつかのグループにデータ集合を分割することです。データマイニングや統計分析などでよく利用され、データ集合の傾向を調べたいときなどに役に立ちます。 例えば下図の例ですと、当初はデータがゴチャゴチャと混ざっていてよく分からなかったのですが、クラスタリングすることで、実際は3つのグループのデータのみから構成されていることが分かります。 様々なクラスタリング手法がこれまでに提案されていますが、有名なところではK-means法などが挙げられます。ここでは詳細については触れませんが、クラスタリングについてより詳しく知りたい方は以下の
今ココなう！(β)
「今ココなう！」は専用クライアントを実行したPCやスマートフォンから送信されるGPSデータをサーバで集約し、各ユーザーの位置をGoogleMap上に表示するシステムです。 2011/10/22 サーバでのログの保存を停止いたします CPU負荷の上昇、データストアの肥大化がすすんでおり、運用コストの増大が個人的な負担を超えかけておりますので、 申し訳ございませんがサーバでの位置情報の保存を停止させていただきます。 寄付について 時々「寄付したい」とお問い合わせを頂きます。誠にありがとうございます。 寄付については、Amazonギフト券でお送りいただくとありがたいです。右下のメールアドレスまでお送りください。 頂いた寄付はサーバ運用費・開発ソフトウェア購入費等に充てさせていただきます。 Twitterの認証について TwitterがBASIC認証のサポートを終了したので、以下のクライアントでT
Linuxアプリケーションの隠れた逸品10選
文：Jack Wallen（Special to TechRepublic） 翻訳校正：村上雅章・野崎裕子 2009-02-17 08:00 Linux向けのツールは巷に数多く出回っているため、素晴らしいものが埋もれてしまっているというケースもある。そこで、そういった素晴らしいアプリケーションのうち、管理者が知っておくべきものをいくつか紹介する。 freshmeatでLinuxアプリケーションを検索してみると1万1828件もヒットする（2008年1月12日現在）。これらすべてのアプリケーションのうち、使ってみる価値があるのはどれだろうか？いくら何でもすべてということはないだろう。しかし、こういった大量のアプリケーションに埋もれ、巷で話題になっていないものの、使ってみる価値のある、隠れた宝石があるはずだ。本記事では、マルチメディア関係のツールから、認証局を生成するツールにいたるまで、ありとあ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「もうパパを擁護しなくていい」 元自転車王者の告白 - 日本経済新聞
Blog - Mikula Beutl - SEO Consulting
RSense - Rubyのための最も優れた開発援助ツール
twitter検索
Googleイメージ検索でベストな壁紙を見つける方法 | ライフハッカー・ジャパン
【児島商店.com】・カメラケースやストラップ
Loading...
IDEA * IDEA
いい感じの図表をサクサク作れるツール「Lovely Charts」 | ライフハッカー・ジャパン