A/Bテストのベストプラクティスと落とし穴 ~KDD2019 レポート~ - Gunosyデータ分析ブログ

はじめに 研究開発チームの関です。古川未鈴さんの結婚、ニジマス大門果琳さんの卒業、uijinの解散とアイドル業界も激動の秋を迎えていますね。 2019年8月4日から5日間、アメリカはアラスカ州アンカレッジで開催されたデータマイニング領域のトップカンファレンスであるKDD2019にGunosyから北田と関が参加・発表してきました。 これまでに2つのレポートを公開しています。 data.gunosy.io data.gunosy.io 本レポートではTutorialとして開催された「Challenges, Best Practices and Pitfalls in Evaluating Results of Online Controlled Experiments」の内容をレポートします。 内容は現在のA/Bテストのガイドラインと言ってもいい内容で、非常に参考になるポイントが多かったです。

[Y_sekky]

めっちゃがんばってブログ書いたのでみてクレメンス

[d4-1977]

読んでいて思うのは、A/Bテスト難しい… 仮説をきちんとたてる事が難しい。仮説の前にプロダクトのゴールの把握なとがあって、今はどこらへんか？がわかっていないとダメだし、書くと当たり前に読めるけど難しい

[koji-kei13]

アイデアの価値を正しく判断するためA/Bテストを行う／データを正しく使う／きちんと仮説を評価指標を決める

[headless_pasta]

これは良き記事。

[hoxo_m]

めっちゃ良い・・

[Marukosu]

分析

[otihateten3510]

国内企業だとグノシーが一番やってそうだよねA/B

[ishitsukajun]

めちゃくちゃ有益な記事です

[shunk031]

A/Bテストのチュートリアル大繁盛だったので注目されてる感ありますね