A/B 测试从 0 到 1
从原理到实战,吃透 A/B 测试
张博伟  FLAG 资深数据科学家
专栏
已完结·共 20 讲
|
9795 人已学
|
收藏
在二项分布中,有一个从实践中总结出的经验公式:min(np,n(1-p)) >= 5。其中,n 为样本大小,p 为概率的平均值。
来自:01 | 统计基础(上):系统掌握指标的统计属性
5 人划过
与此相反的是,当我们在 A/B 测试中观测到“实验组和对照组指标不同”的概率(P 值)很大,比如 70%,那么在零假设成立时,我们观测到这个事件还是很有可能的。所以这个时候我们接受零假设,拒绝备择假设,即两组指标是相同的。
来自:02|统计基础(下):深入理解A/B测试中的假设检验
5 人划过
你看,从公式就能看出来,样本量越小,意味着实验所进行的时间越短。在实际业务场景中,时间往往是最宝贵的资源,毕竟,快速迭代贵在一个“快”字。
来自:06 | 选择实验样本量:样本量越多越好吗?
3 人划过
A/B 测试的难点就在于,如果你只有理论基础而没有实践经验,那么实践过程由于业务场景千变万化,可能就会有各种各样潜在的陷阱在等着你。
来自:开篇词|用好A/B测试,你得这么学
3 人划过
用 A/B 测试来检测连续的、永久的变化时(比如增加产品功能),可以选用长期效果的指标。
来自:03|确定目标和假设:好的目标和假设是什么?
3 人划过
*精彩内容为该课程各文章中划线次数最多的内容
免费试读
讲师

张博伟

FLAG 资深数据科学家

张博伟,目前在硅谷大厂 FLAG 任资深数据科学家,7 年 + 数据科学从业经验。 擅长 A/B 测试在增长方面的应用,与工程、营销和产品团队合作,通过 A/B 测试已累积为公司带来百万级用户增长;作为数据科学的接头人,和工程团队一起改进提升公司内部的 A/B 测试平台。目前在 FLAG 作为数据...查看更多
编辑推荐
包含这门课的学习路径

产品经理

13门课程 43.0w人学习
看过的人还看了
数据结构与算法之美
王争
前 Google 工程师

81讲 | 283844 人已学习

¥68¥199
MySQL 实战 45 讲
林晓斌
网名丁奇,前腾讯云数据库负责人

49讲 | 224987 人已学习

¥68¥199
左耳听风
陈皓
网名“左耳朵耗子”,资深技术专家

119讲 | 181049 人已学习

¥98¥399
设计模式之美
王争
前 Google 工程师,《数据结构与算法之美》专栏作者

113讲 | 123508 人已学习

¥98¥299
从 0 开始学架构
李运华
网名“华仔”,前阿里资深技术专家(P9)

66讲 | 152670 人已学习

¥68¥199
数据分析实战 45 讲
陈旸
清华大学计算机博士

49讲 | 123965 人已学习

¥59¥129