Mackerel 導入から導入後にやったこととこれからのことを整理する - 継続は力なり
タダです. この記事は Mackerelアドベントカレンダー2020の7日目の記事です.皆さんにとって2020年はどんな1年でしたか？いろんなことが変化した1年だったんじゃないかなと思いますが,自分も働き方や9月に会社が変わった1年でした.転職して始めた取り組みとして監視周りがあり,組織内の課題から Mackerel の導入と組織内の方針を決めたりしていきました.そんな Mackerel 導入してやったことと今後やっていきたいことを書いていきたいと思います. Mackerel の導入前の監視 Mackerel の導入後にやったこと 1. Mackerel で監視する箇所の特定とドキュメント化 2. アラート発生時に開発者が担当するシステムごとに対応内容と対応者の明記 3. 障害対応テンプレートの策定 これからやっていきたいこと 1. 障害対応訓練 2. オンコール対応フローの構築 3. M
"壊れにくい"データ基盤を構築するためにMackerelチームで実践していること - Hatena Developer Blog
こんにちは。MackerelチームにおいてCRE（Customer Reliability Engineer）をしているid:syou6162です。主にカスタマーサクセスを支えるデータ基盤の構築や、データ分析を担当しています。 今回は、壊れにくいデータ基盤を構築するため、Mackerelチームで実践していることを紹介します。 なぜ壊れにくいデータ基盤を構築するのか データ基盤が“壊れている”とはどういうことか 壊れてないだけでなく、壊れたら気付ける 前提とするシステム構成 壊れたことに気付けるよう監視する 1. バッチジョブが失敗したことに気付く 2. 投入されたデータの性質を監視する 3. ビューが壊れてないかを監視する 4. 利用状況を監視する そもそも壊れてない状態を保つ 1. データリネージを元に修正できるようにする 2. 使われていないテーブルやビューは定期的に掃除 おわりに 参
リポジトリに含まれるコード量/比率をMackerelに記録する with GitHub Actions & action-mackerel-api - がんばってなんか書く
リポジトリを管理していると、何かの拍子にリポジトリのコードベースの変遷を可視化したくなる場合があります。 例えば、以下の場面です。 ある時からのリポジトリの成長 実装言語を置き換える際のコードベースの遷移 iOSだと、Objective-CからSwiftへの移行 Androidだと、JavaからKotlinへの移行 etc. やり方はいろいろありますが、今回は GitHub Actions と GitHub API v3 、そして Mackerel API を使って、Mackerelのサービスメトリックに記録してみます。 実行サンプル Posting language lists to Mackerel with GitHub Ac… ※GitHub APIの仕様上、特定ファイルの除外ができないことは、ここでは考慮していません。 JavaScriptは得意じゃないので、37行目からのscr
証明書の有効期限の監視で中間証明書もチェックするように対応しました - Mackerel お知らせ #mackerelio
こんにちは。Mackerelチーム CREの西山（id:tukaelu）です。今回のアップデート内容をお知らせします。 MackerelのURL外形監視ではSSL証明書の有効期限の監視をしていただけますが、今回のアップデートでご要望の多かった中間証明書の有効期限についてもあわせてチェックするように対応いたしました。 mackerel.io こちらの対応によりチェーンされている中間証明書の期限切れについても事前に検知していただけるようになりましたので、外形監視のアラートが上がった際は、中間証明書も含め期限をご確認ください。 証明書の確認は、例えば以下のようなコマンドを実行していただくことで可能となります。これは、Mackerelの外形監視システム同様の動作を期待するコマンドです。 下記コマンドの mackerel.ioの部分を適宜確認対象に置き換えて実行してください。 openssl s_c
BOXILの運用を支えている3つの監視ツールについてインターン生が紹介します！ - SMARTCAMP Engineer Blog
皆さんこんにちは！ 21卒の内定者として現在BOXIL開発チームでインターンをしている関口です！ 私は今年の4月からスマートキャンプでインターンをしていますが、このインターンを始めるまで、業務としてプロダクトを開発したことはありませんでした。 業務としてプロダクトを開発するようになってから、自分が今まで使ってこなかった開発手法、技術、サービスがたくさんあるということを知りました。 今回のブログでは特に最近勉強になったBOXILの運用を支える監視ツールについて紹介していきたいと思います。 監視をおこなう理由 BOXILで利用している監視ツールについて Mackerelとは Bugsnagとは New Relicとは 最後に 監視をおこなう理由 そもそもなぜ監視をおこなう必要があるのでしょうか？ 監視をおこなう理由を一言で表すなら 「システムを安定して稼働させ、稼働効率を上げるため」です。 ア
リモートワークでサーバー監視にあたる上で便利なMackerelの機能・三選 - Mackerel お知らせ #mackerelio
MackerelチームCREの吉田(id:syou6162)です。今日はリモートワークで便利なMackerelの機能を紹介しようと思います。 今見ているグラフをSlackに投稿 & チームメンバーに共有する 物理的に同じ部屋で開発 / 運用をしている場合、大きな画面にMackerelのダッシュボードを映しているという方も多いのではないでしょうか(WILLER様の事例)。同じ画面を見ながらグラフを見ると議論が捗る一方、リモートワークでGoogle MeetやZoomを使うなどやり方を変える必要がありますし、メンバーの自宅の回線状況によっては、画面そのものを共有をするのも帯域的に難しい場合もあるかと思います。 そういったときに是非利用して欲しいのがグラフの共有機能です。一番お手軽なのは「グラフを通知チャンネルに投稿する」機能です。グラフの画面にあるカメラのボタンをポチっと押すだけで、グラフを簡
サーバ管理・監視サービス「Mackerel」においての「監視」と「通知」の違いと設定項目についてまとめてみた - stefafafan の fa は3つです
業務で監視にMackerelを使っているのですがここ最近も機能が増えたり、実際使っていく中で閾値の設定などでどうするんだっけと迷ったりしたことがあったので、自分の理解のためにもまとめてみようと思います。 ここでは主に以下のことについて書きます。 監視と通知の違い 監視の閾値設定 通知のミュート mackerel.io 「監視」と「通知」は別 「監視」 基本のWarningとCriticalの閾値設定 「平均値監視」と「アラート発生までの最大試行回数」 ダウンタイム 「通知」 通知チャンネル アラートメール通知受信設定 通知グループ アラートの再送間隔 監視設定のミュート オーガニゼーションに関わる全ての通知のミュート まとめ 監視や通知の微調整がしたいときにやれること 監視や通知を一時的に無効にしたいときにやれること 「監視」と「通知」は別 まず、監視と通知は似ていますが別の概念です Ma
はてなのMackerelが明かす、機械学習プロジェクトに潜む2つの「不確実性の山」を乗り越えるコツ
機械学習（ML）や人工知能（AI）には何となくかっこいいイメージがある。ただ「その開発はとても泥臭いもの。そして、新しい分野だけに、従来のソフトウェア開発のアプローチとは別の考え方をする方がうまくいくのではないか」――2019年8月29～31日に開催された「builderscon tokyo 2019」のセッション「われわれはいかにして機械学習プロジェクトのマネージメントをすべきか」で、はてなの粕谷大輔氏（@daiksy）が登壇。主に、サーバ管理／監視サービス「Mackerel（マカレル）」のディレクターとしてML技術の開発に携わった経験を踏まえながらML技術の開発における「不確実性」のマネジメント術を説明した。 「ソフトウェア開発のマネジメントとは、不確実性の制御である」と、粕谷氏が指摘するように、ソフトウェア開発はさまざまな不確実性をはらんでおり、予想通りに進捗（しんちょく）することは
ダウンタイム機能をリリースしました ほか - Mackerel お知らせ #mackerelio
こんにちは。CREの三浦（id:missasan）です。 長らく、たくさんの方から熱いご要望をいただいていた、時間を指定して監視を停止する ダウンタイム という機能をリリースしました！ これまでも Mackerel では、監視ないしは通知を停止するための機能をいくつか持っていましたが、スケジュールされたバッチやメンテナンスなどに対応するためには、LinuxOS なら cron などのような別のスケジューラーの機能と併用していただく必要があり、手間がかかっていました。 この機能のリリースによって、Mackerel上で柔軟なスケジュールを設定いただくことができるようになりました。もちろんAPIからも設定が可能です。 多くのユーザーのみなさんの運用の手間を省くことに直結するような機能が出せることはMackerelチームとしても嬉しいことです。 これ以外にも、実はワークアラウンドで対応している、と
2019年8月からロール内異常検知が有料になります - Mackerel お知らせ #mackerelio
いつもMackerelをご利用いただきありがとうございます。 先日、Mackerelではロール内異常検知ベータ版をリリースしました。 mackerel.io これまでいただいたご意見を踏まえ、継続的な改善の結果、機能のクオリティが一定のものを満たしたと判断しましたため、これを2019年8月より正式提供させていただきます。 正式化にあたりまして、ベータ提供期間中の無料キャンペーンを終了させていただきます。 正式化に際して、ユーザーによる特別な操作は必要ありません。ロール内異常検知を継続していただければ、自動で正式版に切り替わり、料金が発生します。 ロール内異常検知の料金設定と決済タイミング ロール内異常検知は、監視対象となるロールに登録されているスタンダードホスト5台ごとに、スタンダードホスト1台分の1,800円が請求されます。このときにカウントされるスタンダードホスト台数は、オートスケール
はてな、サーバー監視サービス「Mackerel」に新機能。仮想化技術「コンテナ」に対応した専用監視ツールの提供開始 - プレスリリース - 株式会社はてな
株式会社はてな（代表取締役社長：栗栖義臣／本社所在地：京都市中京区）のサーバー監視サービス「Mackerel」は、本日2019年6月18日に新機能「Mackerelコンテナエージェント」をリリースしたことをお知らせします。本機能は、仮想化技術の1つで活用ニーズの高まる「コンテナ」の監視に対応したものです。これにより、コンテナオーケストレーションサービスを使ったコンテナの監視において、特に難しい設定が必要なく簡単に監視を始めることができます。新世代のサーバー監視サービス「Mackerel」では、今後もサービス開発や運用のトレンドに対応した新機能の開発を続けてまいります。 ▽ サーバー監視サービス「Mackerel（マカレル）」 https://mackerel.io/ 当社が提供する「Mackerel」は、サーバーにおける各種ハードウェアやアプリケーションソフトウェアの性能をリアルタイムに監
Machine Learning Casual Talks #10でMackerelのロール内異常検知について発表しました - yasuhisa's blog
メルカリさんのオフィスで開かれたMachine Learning Casual Talks (MLCT) #10に「教師なし学習によるMackerelの異常検知機能について 〜設計/運用/評価の観点から〜」というタイトルで登壇してきました。 MLCTは機械学習をサービスで運用していく知見を共有する勉強会です。YouTube等で動画配信を積極的にしてくださっていて、はてなの京都オフィスでも鑑賞会と称してランチタイムに同僚と発表を見させてもらっていました。普段から勉強させてもあっていた勉強会に、登壇という形でちょっとはお返しできているとうれしいです。登壇させて頂き、ありがとうございました! 私の発表資料はこちらです。スライド46枚ありますが、発表は15分だったので本番はこれの短縮バージョンで発表させてもらいました。 教師なし学習によるMackerelの異常検知機能について 〜設計/運用/評価の
教師なし学習によるMackerelの異常検知機能について�〜設計/運用/評価の観点から〜
Machine Learning Casual Talks #10での登壇資料です https://mlct.connpass.com/event/125316/
コンテナエージェントのキャラクターが誕生しました ほか - Mackerel お知らせ #mackerelio
Mackerelチーム CRE の三浦（id:missasan）です。 コンテナエージェントのリリースを記念して、Mackerelに新しいキャラクターが誕生しました！これまでのエージェント氏同様、サービスサイト、ステッカーやTシャツなどのノベルティに登場していく予定です。みなさまのお手元に届くことを楽しみにお待ちください。 それでは、今週のアップデート情報です。 コンテナエージェントのキャラクターが誕生しました Mackerelにはエージェント氏というキャラクターがいることをご存知でしょうか。 エージェント氏とは、Mackerelでサーバーのメトリックを取得する際にインストールする mackerel-agent をキャラクター化したものです。 design.hatenastaff.com 2019年2月に、コンテナを監視するための専用の mackerel-container-agent を
mackerel-container-agent の写経が高じて独自エージェントを作ってしまった - えいのうにっき
先週くらいから、何の気なしに mackerel-container-agent のソースコードリーディングをしていたら、 github.com 「ここがこう書いてあるってことは、ここをああしたらああなる？」みたいな気持ちになり、写経をしはじめ、そして気がついたら、オリジナリティのある動作をする非公式エージェントを作ってしまっていたのでこのブログを書いています。名付けて、 mackerel-remora （マカレル-レモラ）。 github.com remora とは、ナガコバン属に属するコバンザメ......のようです？ ja.wikipedia.org この remora 、いつかどこかで使ってみたいと個人的に思っていた名前なので、ここで使えてよかった。 「コバンザメ」的な名前を冠したマカレル関連のソフトウェアをいつか書きたいという野望を持っている、あるのは名前と野望だけでアイデアはノー
Mackerelでロール内異常検知による監視を取り入れてみた | DevelopersIO
こんにちわ、札幌のヨシエです。 Mackerel Meetup#13の直前で発表されたロール内異常検知を試してみました。 パブリックベータ版のため、今後仕様変更が発生する可能性がございますので上記のリンクより最新情報をご確認いただけますと幸いです。 [レポート]Mackerel Meetup #13 Tokyo #mackerelio ロール内異常検知とは？ Mackerel自体に保存されている過去のメトリック値を機械学習へ取り込み、 メトリック状況を分析することで正常/異常の材料とします。 この材料を用いて、負荷傾向を監視することで通常のリソース消費状況と異なるメトリックが確認できると異常として検知され、アラート発報される機能となります。 この機能の特筆点として、ロール内異常とはMackerelの監視する単位であるロールの単位でこの機能が利用できることです。 ざっくりですが、以下のような
新機能・ロール内異常検知の使いかた - Mackerel お知らせ #mackerelio
こんにちは。Mackerelチームディレクターの id:daiksy です。 ミートアップなどのイベントで開発中である旨をお知らせしていました、機械学習を用いたMackerelの新機能「ロール内異常検知」β版の提供を開始しました。 mackerel.io 異常検知は、これまでの閾値を設定する監視とはすこし考え方が異なります。ここでは、異常検知とはどういうものなのか、どのように使えばいいのかを見ていこうと思います。 ロール内異常検知とは 「ロール内異常検知」とは、機械学習により、Mackerelで設定されたロール内にあるホストに対して、特別な監視項目を設定することなくサーバーの異常を検知する機能です。 これまでのサーバー監視では、監視ルールを的確に設定するために、深い経験やノウハウが必要でした。CPUが高負荷な時にアラートを出したい、と思ったとしても、そもそも高負荷とはCPUの使用率が何%の
はてな、サーバー監視サービス「Mackerel」に新機能。機械学習を用いて監視設定を効率化する「ロール内異常検知」をベータリリース - プレスリリース - 株式会社はてな
株式会社はてな（代表取締役社長：栗栖義臣／本社所在地：京都市中京区）のサーバー監視サービス「Mackerel（マカレル）」は、本日2019年3月1日に新機能「ロール内異常検知」をベータリリースしました。「ロール内異常検知」は、機械学習を活用した新機能です。これにより、複雑だった監視ルールの設定とメンテナンスを要さず、簡単な監視項目の設定だけでサーバーの異常検知が可能になります。「Mackerel」では今後も、高度なアルゴリズムを活用した機能開発でエンジニアの課題を解決します。 ▽ Mackerel https://mackerel.io/ 「Mackerel」は、サーバーにおける各種ハードウェアやアプリケーションソフトウェアの性能をリアルタイムに監視することができるSaaS型サーバー監視サービスです。当社が「はてなブックマーク」や「はてなブログ」などの大規模な個人ユーザー向けサービスの提供
導入事例 - 株式会社セガ - Mackerel（マカレル）: 新世代のサーバー管理・監視サービス
クラウド移行を契機にMackerelを導入 ゲーム開発者が監視項目を育てる Mackerel導入事例 株式会社セガ（旧：株式会社セガゲームス）様 株式会社セガ（旧：株式会社セガゲームス） https://www.sega.co.jp/ セガゲームス（取材当時）では、オンラインゲームのインフラとしてパブリッククラウドの利用を開始するにあたり、監視サービスとしてMackerelを導入しました。ゲーム会社として監視サービスに何を求めていたのか。実際に利用してみてどうだったのか。はてなMackerelチームが迫ります。 コードを書いてきた開発者がインフラを見るように まず皆さんの自己紹介をお願いします。はてな側から。 はてな松木 Mackerelのプロダクトマネージャーの松木（id:Songmu / @songmu）です。プロダクトの仕様策定や今後の方向性を決める仕事に関わっています。 はてな井上
Mackerelのグラフを端末で描画するコマンドmkrgを作りました - プログラムモグモグ
Mackerelのグラフを端末で見れたらいいなと思ったので作ってみました。 github.com 使い方 $ go get github.com/itchyny/mkrg/cmd/mkrg $ mkrg コマンドを叩くと、そのホストのメトリックを取ってきてグラフを表示します。 何も考えずにコマンドを叩けば、システムメトリックのグラフを表示してくれます。 私はiTerm2を使っているので、とりあえずiTerm2では画像を表示できるようにしています。それ以外の端末では点字を使って頑張って表示します。 Mackerel サーバ監視[実践]入門 作者:井上 大輔,粕谷 大輔,杉山 広通,田中 慎司,坪内 佑樹,松木 雅幸発売日: 2017/08/26メディア: 単行本（ソフトカバー） 似たような目的のコマンドとしては、同僚の作ったmkr-graphというコマンドがあります。 medium.com
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
