• 酥
    2018-05-31
    问:在进行测试后,针对实验组进行过的改动,如,给实验组增加了加好友功能,对照组没有加,而最终结论是加好友功能并没有带来日活的增加,针对实验组所增加的功能,在实验结束后,要砍掉吗?还是需要进行其他处理?

    作者回复: 如果你们的这个功能的目的是为了带来日活的增加,那么这就没有拿到你们的目的,也没必要要这个功能

    如果你们这个功能的目的是其他的目的,并且达到的其他的目的那么虽然没有带来日活的增加,只要没有减少,也是可以发布。这个还是取决于你们产品的目的。

    
     4
  • 老鹰
    2018-05-31
    为什么做不到你这么优秀∠(`ω´*)敬礼

    作者回复: 不敢当。多做就好啦!

    
     3
  • 苗小羊
    2019-04-09
    科学小范围试错真是最小的精细化创业
    
     1
  • Raymond吕
    2020-01-03
    请问老师,经常收到某些app的内测邀请,请问这个是属于AB测试的范围吗?如何确定对照组,一般的依据是什么?
    
    
  • 种菜的渔民
    2019-06-27
    同样的问题,A\B的测试用户如何确定,包括样本的数量和测试周期
    
    
  • 阿土
    2018-12-05
    我也想问,多次实验中,实验组用户与对照组用户如何选取?不同的选取策略对实验结果都有什么影响?
    
    
  • Lynn
    2018-07-03
    作为一个期望转产品的项目经理,有空就看看老师的讲解,很不错。
    
    
  • 随心
    2018-07-02
    想问下实验组和对照组对应的用户如何筛选呢?每次都采取随机方式嚒?还是说会进行一些维度的筛选呢?
    
    
  • huyang
    2018-06-01
    问:根据上面那个朋友的问题,想问一个延伸的相关的问题。同一个AB测试可以一次测多个指标吗?比如引入邀请好友功能,同时测试日活和新增用户数。最多可以同时测几个指标呢?还是一次只能测一个?😄

    作者回复: 可以 你可以测很多指标 但是你要知道在一个指标提高 一个下降的时候哪个重要

    
    
  • huyang
    2018-06-01
    能不能谈一下计算样本数量相对公式?多大的样本能得出statistically significant 的AB测试结果

    作者回复: 统计相关性有个公式的 你是可以根据样本数量计算的 confidence interval,t score, z score 你可以搜一下具体的公式 我没法回复那些分数线之类的字符嘿嘿

    
    
  • daisy
    2018-05-31
    现在团队是没有ab 机制,没办法判断版本功能对数据的实际影响,推动建立ab机制被老板说太浪费时间,每次版本迭代之后分析功能效果都异常艰难

    作者回复: 这个要看你们想继续做这个产品多久 想不想长期投资

    
    
  • 酥
    2018-05-31
    问:在选取样本时,应该注意哪些事项,影响实验目标的其他因素是否应降到最低,也就是实验组与对照组除了验证指标不同外,其他因素是否应尽可能相似

    作者回复: 我们有专门的系统能确保是随机样本。其实市面上有一些ab测试软件也可以帮助控制

    
    
  • 吴依恬InnerSoul
    2018-05-31
    受用

    作者回复: 多谢支持!

    
    
我们在线,来聊聊吧