マガジンのカバー画像

[シリーズ]A/Bテスト改善

3
メルカリAnalyticsチームがA/Bテストの量・質を改善していくために取り組んでいることをお伝えします。
運営しているクリエイター

#設定

[シリーズ]A/Bテスト改善 -SRMの確認と原因究明の優先順位づけ-

こんにちは。メルカリAnalyticsチームの@nakanipiです。私はメルカリでホーム画面周りやメタデータ機能の分析・改善、またA/Bテストの改善を担当しています。 今回は「メルカリにおけるA/Bテスト改善」シリーズの第二弾をお届けしたいと思います。第一弾ではメルカリにおけるA/Bテストの現存課題をお届けしました。打ち手である「テスト設計・分析方法の確立と普及」のテーマに対し、この記事ではSRM (Sample Ratio Mismatch : ユーザー数の群間の偏り)