作者回复: 你好, 我来一个个回答: 1. 这个要看是要测试什么功能,如果可以事先确定实验对象的话那么可以事先选出,我们对测试的功能有自主权(比如给用户发送推送,一般发送前是会确定好用户的),有的功能没有办法事先确定实验对象,因为你不确定用户会不会用要测试的功能,用户对测试的功能有自主权,这时候只能从每天流量中随机选取;2.这个可以参考第5节课如何选取实验单位,结合测试的具体内容具体分析,有些实验需要一个用户只在一个组(比如为了保持用户体验),有的实验则不需要,那么这时候一个用户可以既在实验组又可以在对照组; 3. 这里的话应该是个样本量不足的问题,那么最简单的方法就是延长时间是样本量达标; 4. 这里如果要用A/B/n的话实验组可以分别为1万,2万和3万,共用的对照组需要3万,因为要同时满足3个实验; 5. 实验组不能减少,因为如果只用一个实验组同时测3个功能的话,即使指标有显著变化,我们并不能确定到底是哪一个指标的作用,无法具体归因,所以每一个变化都要一个新的实验组。
作者回复: 这些资料可以参考下: https://www.linkedin.com/pulse/causal-inference-propensity-score-matching-anh-dang/ https://github.com/ntstevens/A-B-Testing-and-Beyond/issues/1#issuecomment-327911659
作者回复: 这个关键是看三者的关系,因为如果三者是遵循某种关系的话,这里就不能只看递推法则。 举个例子:长方形的面积 = 长*宽, 当面积一定时,长和宽成反比; 当宽一定时,面积和长成正比, 当长一定时,面积和宽也成正比。 这里power和方差就相当于长和宽,样本量就相当于长方形的面积。
作者回复: 你好! 对的,当我们说一个变量(自变量)对另一个变量(因变量)的影响时,都是假定等式中的其他变量不变的(虽然这个是理想情况,因为现实中的话可能会存在其他变量会随着自变量变化,但是我这里讲的都是定性分析,并不是定量分析)
编辑回复: 已经私聊发给你了蛤