看过很多,博客和知乎答主的回答,很多都恍惚
唯独引用笔记有用,特别是第一条链接
Reference:
什么是 A/B 测试? - 宁静之雨的回答 - 知乎
https://www.jianshu.com/p/35b3b1d05132
但凡学过中学的简单控制变量法,都不难理解A/B测试的原理。无非就是对两个样本做对照,得出差异部分的正负影响。
这个问题的重点,是如何应用的实际工作中。
如果是线下产品,你的代价是要制造出两份商品来让客户消费,最后评估结果;
如果是在线发布的产品,你的代价是均匀剥离样本和分开跟踪,最后评估结果。
以后者来说:
1、你怎么保证剥离的样本,在量级、属性上相似,并且能代表全局特性;
2、你怎么保证满足1条件后能准确针对样本,来实施变量精准调控;
3、你怎么保证满足2条件后,能准确跟踪到两个样本的表现特征。
线上的用户不是中学课本上的实验对象,用户都是活人,而且不是你能直接看到摸到的,我们通常只能通过数据观测来分析和得出结论。
这就依赖至少以下能力:
1、线上产品能对每个