はてなブログのキャッシュ周りをきちんと改善したら、アプリケーションサーバの台数を半分にできた話 - Hatena Developer Blog
はてなブログでSREをやっているid:cohalzです。 2019年12月頃からid:utgwkkやid:onkとともに、はてなブログにおけるキャッシュ周りの改善を行いました。その結果、次のような成果が得られました。 ブログ記事のキャッシュヒット率が、1日平均で8％から58％に向上 アプリケーションサーバの台数を、以前の半数以下に削減 DBに届くリクエスト数が、以前の3分の2まで減少 レスポンスタイムの平均が、以前の8割まで減少 この記事では、実際にどういった改善を行ったのか、その際に気をつけたことや大変だったことを紹介します。 はてなブログがVarnishを導入した経緯と課題 開発合宿をきっかけに問題が明らかになる 進め方をまず考える ホストのメモリをできるだけたくさん利用する メモリを積んだホストでなぜかレイテンシが悪化 キャッシュが分散しないようVaryヘッダを使う デバイス情報を適
IEICEソサイエティ大会の「AIを活用したネットワーク運用技術」に登壇しました - ペパボ研究所ブログ
ペパボ研究所主席研究員の松本です。Twitter上ではまつもとりー(@matsumotory)と呼ばれています。2017年の9月13日に開催された、IEICEソサイエティ大会の「AIを活用したネットワーク運用技術」で「なめらかなシステムに向けた Webサービス基盤技術とAI技術の活用」というタイトルで登壇し、その後、大阪市立大学、NTT研究所、NEC研究所、KDDI総合研究所の方々とトークセッションをしてきました。 前半での「なめらかなシステムに向けた Webサービス基盤技術とAI技術の活用」という発表では、主にペパボ研究所のテーマである「なめらかなシステム」の概要と、それらをWebサービスに適用していく中で、AIを活用するアプローチとWebサービス基盤そのものを作り上げていくアプローチがあり、それぞれに関する研究の紹介を行いました。まだまだ、AIの活用というよりも、AIの中の機械学習やデ
オープンソースのシステム監視ツール「Zabbix 3.4」リリース。ウィジェット化されたダッシュボード、バルクメトリクス収集やアラートの並列処理なども追加
ZabbixはさまざまなOSやネットワーク機器などの監視に対応したテンプレートが用意されており、大規模なシステム監視にも対応。データセンターでのシステム監視などに使われています。 エージェントをインストールしてメトリクスを取得して監視する方法、あるいはSNMPやSSH、Telnet経由でエージェントを使わずにメトリクスを収集して監視する方法の両方に対応。Zabbixサーバに収集されたメトリクスは見やすい形でダッシュボードに表示され、あらかじめ設定された異常値などに達するとアラートが発せられます。 Zabbix 3.4のリリースノートによると、Zabbix 3.4ではダッシュボードが新たにデザインしなおされ、ウィジェットをドラッグ＆ドロップすることで自由にカスタマイズできるようになりました。また、新たなフィルタリングオプション、ダッシュボード用APIも実装。 障害発生の検知をトリガーとした通
いかに危険なコマンド実行間違いを防ぐか。そのためにExeCopを書いてみた - Copy/Cut/Paste/Hatena
追記: Bashにも対応しました 皆さんもpeco/percol/fzf/anyfinderなどのフィルタリングツールを便利に使っていると思います。 ちなみに私はpeco派です。 コマンド実行間違い ところで、*sh_historyを使ったコマンド補完をpecoにまかせていて ( こういうの )、「コマンド実行間違い」をしてしまうことありませんか？ 例えば、 bundle exec cap staging deploy のつもりが bundle exec cap production deploy を選択して本番環境へデプロイしまったり docker container start xxx のつもりが docker container stop $(docker container ls -aq) を選択して全てのコンテナをストップさせてしまったり pecoを経由した「フィルタリングして実
分散システムについて語らせてくれ。顛末と反省。 - Software Transactional Memo
8/10のNTT Tech Conference #2 にて発表の時間をもらってこのタイトルで喋ってきた ntt-developers.github.io 発表が決まるまで これはNTTグループ内のソフトウェア・ネットワーク系技術者が集まるコミュニティで、誰が発表者になれるかは投稿されたProposalに対するコミュニティ内での投票によって選考される。 何を話したいか自分の中でも固まりきっていなかった上に、主催者の話をロクに聞いていなかった自分は小さい部屋で僕のことを知る人しか集まらない不人気セッションを勝手に想像しており、abstractを書く欄に「実世界で使われている分散システムを構成する際に理解してほしい議論についてkumagiが一人で滔々と語る。」という漠然とした説明を書いた。初心者にこそ聴いて欲しいという身勝手な理由でレベル設定をBeginnerにし、自己紹介欄に至っては本当は経
Athena愛溢れる深堀さんがログ管理省力化について力説する
昨年末に発表された「Amazon Athena」は、S3バケット内のデータをSQLを使って分析できる便利なサービスだ。残念ながら東京リージョンではまだリリースされていないが、実際に使ってみたら安価で便利だったので啓蒙したいと意気込むのは、JAWS-UGさいたま宴会部長の深堀 卓男さん。「AWS Athenaかわいいよペロペロ」という、愛溢れるタイトルのセッションでAthenaの使い方や活用時のポイントを語った。 想定される活用パターンは2つ、中でもS3に溜め込んだログ分析に力を発揮 まずはAWS Athenaのおさらいから、深堀さんのセッションはスタートした。Athenaは分散SQLクエリエンジンPrestoのAWSマネージド版。S3に置いてあるファイルをテーブル化して、標準SQLで投げかけた検索を並列処理で実行してくれる。 「主な使い方は2つあると思います。ひとつは、ビッグデータ分析。J
目指せ！落ちない高可用性サーバ、ハードウェアの選び方 - Qiita
10年以上金融機関で働いているインフラエンジニアの落ちないサーバにするための考察です。 ハードウェアの専門家ではないので、正確ではないかもしれません。 今までの経験からの個人的考え方になります。 私たちオンプレ重視のインフラエンジニアは、 クラウドサービスではできない高可用性サーバを導入したり、 複数台構成で１台故障しても問題ない構成のサーバはコスト重視するなど、 システムに最適なサーバを導入しようとしています。 高可用性サーバを追求する目的 ■アプリに影響を与えないように Active/Standby構成にしていて、インフラ的にはダウンタイムが数秒だとしても、 アプリによっては復旧に時間がかかったり、問題ないことの確認にも時間がかかってしまいます。 また、正しくサーバが落ちればアプリが問題ないとしても、 サーバが中途半端な状態のままになってしまい、なんだかおかしいということもあります。
Googleが数千台もある10年前のLinuxディストリをライブアップグレードした話 - ゆううきブログ
Googleが、太古のディストリビューションであるRed Hat 7.1から、10年新しいDebianベースのディストリビューションへ、ライブアップグレードした話を紹介する。 そのあと、自分の身の回りの環境と比較し、参考にすべきポイントを考察する。 原文は USENIX LISA の投稿論文だ。しかし、中身は論文体というよりは、事例の紹介といった適切かもしれない。 MERLIN, M. Live Upgrading Thousands of Servers from an Ancient Red Hat Distribution to 10 Year Newer Debian Based One. In Proceedings of the 27th conference on Large Installation System Administration (LISA) (2013),
守りのIT から 攻めのITへ 第三者保守で実現するDX推進の第一歩 - ITmedia エンタープライズ
ハードウェアのサービスやサポートの終了（EOSL、EOL）に悩む企業は多いだろう。やっと安定稼働しはじめたシステムをまた多額の費用をかけて刷新するほかないのか――情報システム部門としては頭が痛い問題だ。しかし最近では、メーカーではない事業者にEOSL保守を依頼する「第三者保守」という新たな選択肢が注目を浴びている。その背景やメリットはどこにあるのか。ハードウェア運用管理の“新潮流”をお届けする。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
システムコンサルティング | ソリューション・サービス | 野村総合研究所(NRI)
RHELを定期的にアップデートする際の課題と対策
運用設計を起点としたインフラ統合基盤構築の薦め
はてなシステム構想 / The concept of Hatena System
ドコモのNOCに潜入、5G時代で何が変わる？
運用に自動化を求めるのは間違っているだろうか