pvpool〜メルカリの商品閲覧数カウントアップの裏側〜 | メルカリエンジニアリング

メルカリでは出品されている商品の閲覧数を「出品した商品」の一覧や「いいね！した商品」の一覧画面から見ることができます。以下は「いいね！した商品」の一覧画面です。（開発版アプリの画面になります） 赤い枠で囲まれている部分がそれぞれの商品の閲覧数になります。今回紹介する閲覧数のカウントアップのバックエンドはGoで開発されています。 データベース上の商品閲覧数のカウントアップ メルカリでは日々大量のリクエストを処理していますが、そういった中でもデータベースへのアクセスはINSERTやUPDATE等の書き込み処理よりもSELECTによる読み込み処理が圧倒的多数を占めます。（メルカリでは、データベースには主にMySQLを利用していますが、サービスやリージョンによってはGCPが提供しているCloud DatastoreやCloud Spannerを利用している箇所もあります） 商品が閲覧される時に実行

[honeybe]

redisとかじゃないのか…独自実装に踏み切った理由が知りたい気持ち。

[kazutomo]

Cloud Dataflow とか Kinesis Stream を使ってシュッとしてるという話を期待したら違った

[kawasin73]

インメモリーでプールするみたいなんだけど、プロセスが落ちた時とかの障害が起こった時はどうするんだろ？その分のデータは諦めて捨てるのかな？

[hakobe932]

こういうのたしかにGoでやりたくなりそう

[tmatsuu]

数秒以内にリアルタイム反映となるとアクセスログベースでは遅いか。POSTしてるのがitem_idsなのでまとめて閲覧数を定期的に投げてる感じか。

[kan_67]

ほほう…

[Dai_Kamijo]

“pvpool〜メルカリの商品閲覧数カウントアップの裏側〜 - Mercari Engineering Blog” — Masao Maeda (@brtriver) February 27, 2018 from Twitter https://twitter.com/Dai_Kamijo March 01, 2018 at 02:05PM via IFTTT

[takatoshiono]

よい

[himejimasandesu]

分散処理

[saxsir256]

なるほどー

[luccafort]

確かにPV数とかリアルタイムに上がっていくのが重要なサービスもあるけどメルカリでの使い方だと完全にリアルタイムである必要性がないというのはあるかもなー。閲覧数が急激に増えてる場合に効果高そう。

[kawai292929]

よきよき

[tofu-kun]

昔 Redis でやったな。規模が全然違うけど。

[suthio]

いい感じではない雰囲気なんだけどなんでだろう。既存の実装を無視して、こういった場合のベストってなにかきになる

[marisatokinoko]

興味深い

[ikeikeikeike]

Write気にするとたまにやる、Go言語使ってると躊躇なくこういうの作れるからいいと思ってる

[kazuph1986]

メルカリくらいになると、PVをカウントアップするだけで１つのプロジェクトになると。プールするから負荷軽減ではあるけど、どうしてもMySQLに突っ込まないといけないやんごとなき理由もあるのだろうか？

[kazeburo]

“様々な裏側の仕組みをGoで開発しており、そのためのソフトウェアエンジニアを募集しています。興味がある方は是非ご連絡下さい” 何卒 m(_ _)m