MySQLを捨てClickHouseでレポートAPIのレスポンスを1000倍高速化した話 | GENIEE Blog
はじめにみなさん始めまして、R&D本部 基盤技術開発部の石田祥英です。 北大の情報科学研究科を卒業前に飛び出しジーニーに半年早く17卒入社し、現在は主にFlink, Kafka, Play Framework(scala)や、バッチ用途でgolang,pythonなどを使いプロダクト横断のシステムの開発・検証をやっています。 TL;DRClickHouseで分析系クエリが1000倍の速度に爆速化DBの容量もMySQLと比べ1/13に軽量化ClickHouse導入はMySQLには無い制限もあるけど、なんとかなるあんまり日本での導入事例が見当たら無いけど、クエリの高速化・DBの軽量化したい人はぜひ使うといいことがあるかもしれません社内勉強会用の資料 ClickHouse導入の背景一般的に広告プラットフォームでは「どの広告を、どの広告枠(サイト)に、いつ、どのように(RTB or Adnetwo
Clickhouseの採用経緯と運用フローについて - SO Technologies 開発者ブログ
こんにちは、ATOM事業本部のプロダクト開発グループの松尾です。 広告媒体からのデータ取得処理や集計前の加工処理などを中心にバックエンドエンジニアとして開発を行ってきました。 最近は新レポートや進捗管理機能の開発を行っています。 ATOMのリニューアル版では、新レポートや進捗管理機能の媒体データの実績値の集計をclickhouseというデータベースを採用しております。 長らく苦戦し続けていましたが運用が安定してきたので、採用経緯から苦戦してきた過程について、簡単にご紹介させていただければと思います。 採用経緯について mysqlから集計処理を切り出したいと思った際に、１つの候補として挙がるのではないしょうか？ 実際に調査をしてみると、select, insertが圧倒的に早い！！となるはずです。 そして、扱うデータ量が多くなればなるほどに、mysqlとの集計処理の性能差に驚くはずです。 同
【2020年版】ClickHouseのメリットデメリットまとめ
タグ aliasカオスマップtsungURLUser-Agent Client HintsUserAgentwebpwindowswordpressxcodeアイティルアドフラウドインターンシップコメントSEOさくらvpsデータベースバリデーションチェックバンディットアルゴリズムメモライティングワークスタイル備忘録小技広告監視SSLSeleniumAppleInstagramATTbashrcChromeclickhousecocoapodsconohafacebookGDPRhomebrewIDFAieiospythoniOS14ITILjavascriptLet's EncryptlinuxmacmysqlNoSQLopensslphpphp5php7職場 ClickHouseとは ClickHouseは、オープンソースの列指向のデータベース管理システム / DBMS（database
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
