如何划分实验组和对照组？

CDA持证人阿涛哥

2021-03-30 阅读量: 1222

如何划分实验组和对照组？

问题：

如何划分实验组和对照组？

H 公司的算法工程师们最近针对系统中的“美国用户”研发了一套
全新的视频推荐模型 A ，而目前正在使用的针对全体用户的推荐模型是
B 。在正式上线之前，工程师们希望通过 A/B 测试来验证新推荐模型的
效果。下面有三种实验组和对照组的划分方法，请指出哪种划分方法是
正确的？
( 1 ）根据 user_id ( user_id 完全随机生成）个位数的奇偶性将用
户划分为实验组和对照组，对实验组施以推荐模型 A ，对照组施以推荐
模型 B;
( 2 ）将 user_id 个位数为奇数且为美国用户的作为实验组，其余
用户为对照组；

( 3 ）将 user_ id个位数为奇数且为美国用户的作为实验组， user_id

个位数为偶数的用户作为对照组。

答案：

上述 3 种 A/B 测试的划分方法都不正确。

正确的做法是将所有美国用户根据 user_id 个位数划分为试验组和对照
组，分别施以模型 A 和B，才能够验证模型 A 的效果。