9/26(水)に発生した障害の詳細報告とその後の取り組みについて - Mackerel ブログ #mackerelio
9/26(水)に発生した障害の詳細報告とその後の取り組みについてお知らせいたします。 発生時間 当日のタイムライン(いずれも日本時間) 10:51 Redisのフェイルオーバーと障害発生 10:55 復旧作業と障害継続 11:00-14:50 障害対応 15:20 復旧確認 障害発生の原因について 仮説検証について 今後の対応 Redisフェイルオーバー挙動の見直し(実施済) アプリケーションの増強(実施済) Redisへ保存する監視データの効率化(実施済) 不適切なリクエストへの対応(実施済) アプリケーションモニタリングの増強(恒常対応) まとめ 発生時間 発生時間: 2018/09/26 10:51-15:20 (JST) 発生事象: Mackerelシステム全体の不調と死活監視の停止 当日のタイムライン(いずれも日本時間) 10:51 Redisのフェイルオーバーと障害発生 監視デ
メトリック監視の平均値算出方法の仕様調整に関するお知らせ - Mackerel お知らせ #mackerelio
Mackerelサブプロデューサーの id:Songmu です。表題の件についてお知らせいたします。 概要 メトリックの平均値監視における平均値の算出方法を一律「ポイント数」に対する平均値に変更します。 これは、ホストメトリック監視、及び、URL外形監視のレスポンスタイム監視に影響があります。これらのメトリックは、現在「N分」に対して平均値を算出しています。サービスメトリックに関しては従来通りであるため影響はありません。 影響を受ける可能性のあるユーザー 細かい調整であるため、基本的には大きな影響はありません。 ホストメトリック監視もしくは外形監視のレスポンスタイム監視を設定しており、その上で、2分以上の平均値監視を設定しているユーザーが影響を受ける可能性があります。 特に、1分以外の間隔で投稿されているメトリックの場合、その可能性は高くなります。これは例えば、一部のAWSインテグレーショ
はてな、サーバー監視サービス「Mackerel」の時系列データベースを強化。1分間隔の時系列データ保持期間を460日に変更 - プレスリリース - 株式会社はてな
株式会社はてな（代表取締役社長：栗栖義臣／本社所在地：京都市中京区）のサーバー監視サービス「Mackerel（マカレル）」は、時系列データシステムを強化し、本日2018年1月24日（水）より「Mackerel」に保存する1分間隔の時系列データの保持期間を「25時間」から「460日」に変更しました。これにより「Mackerel」の利用者は、最小1分間隔のサーバー情報を460日分確認でき（※1）、粒度の細かい情報をもとにした精度の高い分析が可能になります。また、これに伴い、Standardプランの「グラフ表示期間」も「400日」から「460日」に変更しました。 ▽ Mackerel https://mackerel.io/ 「Mackerel」は、サーバーにおける各種ハードウェアやアプリケーションソフトウェアの性能をリアルタイムに監視することができるSaaS型サーバー監視サービスです。当社が提
sardine - mackerel plugin のメトリクスを CloudWatch で集約する agent を書いた - 酒日記 はてな支店
OSS紹介 Advent Calendar 2017 - Qiita 22日目の記事です。 最近、監視を Zabbix から Mackerel に切り替えていっています。それと並行して、新規プロジェクトは Amazon ECS でコンテナで運用するようにもしていっています。そこで考えどころなのが、コンテナで動作するプロセスのモニタリングをどうするかです。 たとえば、コンテナで動作する nginx を mackerel-plugin-nginx で監視する場合、普通にやるとこんな感じになるのですが… nginx と mackerel-agent を同一タスク (ECS用語) に定義する mackerel-agent.conf で cloud_platform = "none" の設定をして、コンテナがホストの EC2 とは切り離された状態でホストとして認識されるようにする すべてのタスクを
Mackerelのはじめかたtips 2017年冬 - Qiita
こんにちは。Mackerel歴がブランクあり2年弱くらいの@karupaneruraです。 Mackerelのプラグインとエージェントのリポジトリのpull-reqとissueを眺めるのが趣味です。(他にも気になっているリポジトリはだいたいWatchして眺めています。) そういうわけで、MackerelのAgentまわりのコードはある程度は読んでいるので実装で使われているライブラリの紹介をしてみようかと思っていたのですが、どちらかというとMackerelの導入/運用に関する話のほうが喜ばれるかなと思ったのでそっちの話を書いてみます。 なお、この情報はあくまでも利用者の立場のひとによって書かれたものですので最新情報に追従していないものもあるかもしれません。基本的には公式情報を参照してください。 導入検証用インスタンスを立てる いきなり本番にぶっこむ人はまず居ないとおもいますが、かといってまっ
ホストステータスの変更などのイベントを通知チャンネルに通知できるようになりました ほか - Mackerel お知らせ #mackerelio
こんにちは。Mackerelチーム CRE の井上（id:a-know）です。 二十四節気でいうと、今は「立冬」にあたります。その暦にふさわしく、今日は各地で今季一番の冷え込みのようですね。今朝は、私も思わず、手袋を取り出してしまいました。 空気もとても乾燥しているようです。体調管理にはくれぐれもお気をつけくださいね。 それでは、今週のアップデート内容をお知らせします。 ホストステータスの変更などのイベントを通知チャンネルに通知できるようになりました 特定の通知チャンネルの設定項目として「通知するイベント」という欄が設けられ、今までのアラートの通知に加え、以下のようなイベントについてもそのチャンネルに対して通知をおこなうことができるようになりました。 ホストステータスの変更 ホストのオーガニゼーションへの登録 ホストの退役 これを活用することで、上記のようなイベントの発生の把握に役立つだけ
はてなにおける日々の仕事の中にあらわれるMackerelの活用 - Mackerel お知らせ #mackerelio
はてなのWebオペレーションエンジニアの @y_uuki1 です。 この記事は Mackerel Advent Calendar 2015 の19日目の記事です。 前回は @mackee_w さんによる 1000円以下で買えるWiFiモジュールESP-WROOM-02でMackerelにメトリクスを送る でした。 今回は、はてなのインフラチーム（システムプラットフォーム部）におけるMackerelを絡めた運用フローの一部を紹介します。 はてなでは、はてなのサービスの基盤となるサーバ・ネットワーク運用全般を専門のインフラチームが担当しています。 はてなブックマークやはてなブログ、Mackerelなどのはてなの各種サービスに対して、インフラチームの各メンバーが担当につきます。 一部例外はありますが、インフラ基盤は基本的に各サービスで共通のものを使っています。 はてなは運用サービスの数が多いかつ
horensoを使ってcronの実行時間を自動でmackerelに記録する - $shibayu36->blog;
最近cronの実行にはhorenso というツールを使って、実行エラーがあればSlackに通知するなどといったことをしている。今回はcronの実行時間をmackerelのサービスメトリックに自動で記録するということをやったのでメモ。 やりたいこと crontabに以下の形式でスクリプトを登録すれば、自動でサービスメトリックに記録される horenso --tag (tag名) --reporter=elapsed-time-to-mackerel-reporter.pl -- (実行したいコマンド) 記録は秒数で、小数3桁まで記録する horensoの動き horensoではreporterとして適当なスクリプトを指定することが出来て、そのスクリプトには標準入力に実行のログ等が渡ってくるようになってくる。例えば $ horenso --reporter=test-reporter.pl -
Mackerelへ至る道
Profile id: Songmu (ソンムー/松木) Masayuki Matsuki おそらくはそれさえも平凡な日々 http://www.songmu.jp/riji/ 趣味はCPANizeです 最近はGoばっか書いてる はてな東京オフィス チーフエンジニア Mackerelディレクター 経歴 2004 中国でIT起業に関わる 中国語/Java 2005 語学学校 営業兼・システム/Web担当 レッスン予約システム ASP/ColdFusion/Windows Server 2009 印刷系SIer 金融系のとあるシステム Webキャンペーン PHP/Legacy perl/Java/VB(.NET)?/組み込みBasic 2011 カヤック Perl/Ruby/Node.JS 2014 はてな Mackerel Go/Scala/Perl
AWSインテグレーションのタグによる絞り込み・式による監視ができるように（実験的機能） ほか - Mackerel お知らせ #mackerelio
今週はユーザグループ主催によるイベントで行われたLTが話題になっていましたね。 イベントの詳細についてはこのエントリの最後にお知らせしています。 今週のMackerelアップデートです。 AWSインテグレーションで取得対象をタグで絞り込めるようになりました AWSインテグレーションにて、メトリックの取得対象をタグによって絞り込めるようになりました。 これにより、開発環境で使用しているサービスは取得対象から除外するなど、効率的な管理ができるようになります。 AWSのタグで絞り込むには、各サービスのタグを取得するAPIに対する権限が必要になります。 ポリシーを確認し、以下のアクションを行えるかどうか確認してください。 elasticloadbalancing:DescribeTags rds:ListTagsForResource elasticache:ListTagsForResource
Mackerel UG Meeting Vol.1 を開催しました！ - Mackerel User Group
こんにちは、@buty4649 です！ 先日6/14に株式会社エウレカ様のオフィスをお借りして、Mackerel UG初のMeetingを開催させていただきました！！ ご来場いただいた皆様ありがとうございました！ 開催にあたり会場やドリンクの提供をしていただいた株式会社エウレカ様、ならびに、 懇親会用のフードをご提供していただいた株式会社はてな様には重ねてお礼を申し上げます。 当日は6名の方に、サーバの監視/管理"以外"に使うという初回にしてはハードルが高い(?!)テーマでLT形式の発表していただきました。 今回はその発表内容をご紹介させていただきます！ Mackerel User Groupの説明(@buty4649) まずはじめに、私からMackerel UGの簡単な説明をお話しさせていただきました。 speakerdeck.com マッカレル de おうちハック(@hoto17296
URL外形監視にてSSL証明書の有効期限を監視できるようになりました - Mackerel お知らせ #mackerelio
先日、京都で今年初の雪が降りました。 京都で雪が降ると、インターネット上に金閣寺の写真がたくさんアップされますね。 寒い日が続きますが、体調など崩さないよう気をつけたいものです。 今週のアップデート情報をお届けします。 SSL証明書の有効期限を監視できるようになりました URL外形監視にて、SSL証明書の有効期限を監視するための設定が新たに追加されました。 SSL証明書の有効期限までの日数が、Warning条件, Critical条件それぞれに設定された日数を下回った際にアラートが通知されます。 また、SSL証明書のアラート発報中にステータスコードやレスポンスタイムなどの異常を検知した際は、アラートの状態が変更されたとみなしてアラートは再通知されます。 詳しくはURL外形監視のヘルプをご覧ください。 mackerel.io これらの設定はAPIからも可能です。 mackerel.io 監視
Mackerelをうまく使いこなす話 - Masteries
社内のQiita:Teamに書いた記事の転載です. Mackerelを事業の中で使っていて気付いた事とかをまとめていますが, 後述の通り, 基本的にMackerelのヘルプに書いてある情報がほとんどです. その辺りはご了承下さい. mackerel-agentと設定ファイル Mackerelは, 監視対象とする各ホストに｢mackerel-agent｣を設置することで, 各ホストのメトリックの取得と監視を実現しています. このエージェントの設定は, Mackerelのエージェントに関するヘルプにある通り, デフォルトでは/etc/mackerel-agent/mackerel-agent.confを参照します. この辺りの設定のコツというか, Tipsをいくつか紹介します. といっても, ほとんどはヘルプを見れば書いてあることですが... サービス/ロールの初期設定 ホスト上でmacker
新機能 URL外形監視をリリース！ - Mackerel お知らせ #mackerelio
今週のMackerelアップデートです URL外形監視を実験的機能としてリリースしました URL外形監視をリリースしました。実験的機能としてご利用いただけます。 指定したURLに対して、1分おきにステータスコードの監視を行い、4xx, 5xxのステータスコードを検知した際にアラートが通知されます。 これにより、内部のagentから送られてくるメトリックだけでなく、一般ユーザがアクセスする外部からの状態もあわせて監視することができるようになります。 本機能はトライアルプランか有料プランでのみご利用いただけます。 詳しくはヘルプをご覧ください。 mackerel.io また、実験的機能の利用方法についてはこちらのヘルプをご覧ください。 mackerel.io Mackerel開発チームでは、本機能の正式化に向けて開発を進めております。 開発の参考とさせていただきますので、ご意見・ご要望などフィ
真・はてなのサーバ管理ツールの話 - YAPC::Asia Tokyo 2014
はてなの新サービス「Mackerel」を紹介します。 昨年のYAPC Asia 2013で、はてなのサーバ管理ツールの話をしました。 はてなのサーバ管理ツールの話 - YAPC::Asia Tokyo 2013 当時はあくまで社内ツールとしての紹介でしたが、あれから１年が経過し、Perl で書かれていたサーバ管理ツール Mackerel が Scala と Go でフルスクラッチされて、先日はてなのサービスとしてβリリースされました。Mackerelをベータ公開しました 本トークでは、Mackerel とはなにか、Mackerel を使って何ができるのかという話と Mackerel をどのようにして運用しているかという話を予定しています。 Mackerel とはなにか Mackerel Hacks mackerel-agent メトリクス/監視プラグイン アプリケーションデプロイ Flue
Mackerel Meetup #1 Tokyoを開催します！ - Mackerel お知らせ #mackerelio
id:stanaka / @stanakaです。Mackerelをいつもご利用いただきありがとうございます。 ベータユーザーの皆さまへの感謝を込めて、Mackerel初となるMeetupを開催します。場所ははてな東京オフィス（表参道）です。ピザとビール、そして検討中ですが、サバ料理やおみやげなども用意して皆さまをお待ちする予定です。 会場の都合上、小規模での開催となりますが、開発状況やMackerelの今後に興味をお持ちの方はぜひご参加ください。 （なお、より大規模のイベントも7月に実施できるよう企画中です。東京以外での開催も検討しています。楽しみにお待ちください！） 開催概要 開催日：2014年6月19日（木） 19:00受付開始、19:30スタート 場所：株式会社はてな 東京オフィス（東京メトロ表参道駅より徒歩6分） http://hatenacorp.jp/information/o
Mackerelをベータ公開しました - Mackerel お知らせ #mackerelio
本日、Mackerelをベータ公開しました。 Mackerelは、ウェブアプリケーションのパフォーマンスとインフラを管理するための新しいサービスです。 Mackerelとは Mackerelは、次のような問題を解決することを目指しています。 複数のサーバのリソース状況を効率的に可視化 各種ツールと連携することでサーバ情報の多重管理を解消 複数のクラウド環境を一元管理 リソース消費状況を可視化するだけではなく、APIによる各種ツールとの連携で、開発と運用の自動化をより促進させていきます。 詳細は、下記のリンクからどうぞ。 利用開始 https://mackerel.io/ja/ ヘルプページ https://mackerel.io/ja/docs/ 正式化に向けて ベータ期間中は、すべての機能を無料でご利用いただけます。正式版では無料でご利用いただける範囲に制限がつきます（料金などの詳細は正
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてなが歩んできた "Infrastructure as Code"の道のりとMackerelが果たす役割について