13｜融会贯通：A/B测试面试必知必会（上）

张博伟

你好，我是博伟。
在接下来的两节课呢，我们换换脑子，来聊一个相对轻松点的话题：与 A/B 测试相关的面试应用。
近几年随着 A/B 测试在互联网、电商、广告等各个行业的广泛应用，已经成为数据、产品、增长等相关职位面试的一个重要组成部分。所以我就根据自己多年做面试官的经验，帮你总结了常见的 A/B 测试相关面试考点，一方面我会通过典型真题来讲解面试思路，另一方面也会把我在面试中的一些沉淀与思考分享出来。
另外我还想强调的是，这两节课虽然是在讲面试题，但其实也是在以另一种方式考查你对所学知识的灵活运用。面试中考察的不仅是你对知识的掌握，更关注你在工作场景中要怎么运用。所以希望你能通过这两节面试课的学习，既能学会拆解题目，提高面试能力，同时也能把我们学过的知识融会贯通。
面试题目是无穷的，但考点是有限的。我把相关的考点总结成了一张图，方便你着重复习。接下来我们就开始正式的面试讲解吧。
面试应用一某共享出行公司改进了司机使用 App 的用户界面，希望能给司机更好的用户体验，在提高司机使用 App 频率的同时，也能提高司机的收入。那么问题就是：请你设计一个 A/B 测试，来验证新的司机 App 是否比旧的司机 App 体验要好。
考点：
A/B 测试的流程。
实验组 / 对照组的独立性。

公开

同步至部落

取消

完成

0/2000

荧光笔

直线

曲线

笔记

复制

AI

深入了解
翻译
英语
中文简体
中文繁体
法语
德语
日语
韩语
俄语
西班牙语
阿拉伯语
解释
总结

本文深入剖析了A/B测试在面试中的应用，通过讲解典型真题和面试思路，帮助读者总结常见的A/B测试相关面试考点。文章以设计一个A/B测试来验证新的司机App是否比旧的司机App体验更好为例，详细解析了A/B测试的流程、实验组/对照组的独立性以及解决方法。作者强调面试中考察的不仅是对知识的掌握，更关注在工作场景中的灵活运用。通过具体情境分析，读者能够了解A/B测试设计的复杂性，以及在实际工作中需要考虑的因素，如学习效应和实验组与对照组的独立性。整体而言，本文通过实例深入浅出地解析了A/B测试相关的面试应用，为读者提供了宝贵的面试经验和知识技能。文章内容涵盖了A/B测试中的常见面试考点，包括实施A/B测试中的变化要考虑的因素和学习效应对测试结果的影响。通过分析典型面试题和解题思路，读者能够全面理解A/B测试的复杂性和实际应用，为面试做好充分准备。

仅可试看部分内容，如需阅读全部内容，请付费购买文章所属专栏
《A/B 测试从 0 到 1》，新⼈⾸单¥59

立即购买

登录后留言

全部留言(3)

最新
精选

James.li
虽然不是从事相关岗位，但未来跟大数据的同学讨论和分析业务这下心里更有数了。:-D
作者回复: 加油！希望能帮到你！
2021-03-28

5
James
如果实验组、对照组的流量分配不均匀，怎样消除影响？想问下这题怎么解
作者回复: 这个在实际中一般有几种操作方法： 1. 如果样本量不是很大的话，那么分组不均很可能随机产生的，所以重新分组可能会减少或消除分组不均的情况； 2. 如果多次重新分组还是会出现分组不均的情况，那么有可能是数据或者分组算法的问题，可以用倾向评分匹配（PSM)的办法校正，或者改进分组算法。（如果是分组算法本身的问题也会做A/A测试来验证）
2021-05-27

1
奕奕
A/A实验和A/B实验有什么区别，什么时候进行A/A实验，什么时候进行A/B实验
作者回复: 你好，A/A测试是指实验组和对照组完全相同的实验，而A/B测试是指实验组和对照组不同的实验。 A/A测试一般用于表征数据特征（比如计算指标波动性），检测A/B测试分组算法的随机性等偏系统方面的任务，而A/B测试则是用于因果推断。
2021-08-25



收起评论