关键迭代:可信赖的线上对照实验

[美] 罗恩·科哈维(Ron Kohavi)

出版时间

2021-04-30

ISBN

9787111678809

评分

★★★★★

标签

算法

书籍介绍
这不是一本教你怎么跑A/B测试的操作手册,而是一套关于'如何对数据保持健康怀疑'的思维训练。作者的核心主张颇为反直觉:实验的真正价值不在验证猜想,而在揭露你以为成立、实则站不住脚的结论——辛普森悖论、细分群差异、外部有效性被忽视,这些陷阱让无数'显著'的结果悄然失效。书中反复强调的'Twyman-Rowley定律'直指要害:任何看似清晰的指标,拆开细分往往自相矛盾。它适合那些在工作中被'数据说没问题,但上线就翻车'所困扰的人,也适合希望把实验从技术部门推广为组织级决策能力的高管。诚实地说,它不适合寻求'照着做'的实操指南,翻译也确有硬伤;但如果你追求的是理解实验背后的因果逻辑与可信赖度,它提供的判断力,远比一套标准流程更持久。
作者简介
罗恩·科哈维(Ron Kohavi)是爱彼迎的副总裁和技术院士,曾任微软的技术研究员和公司副总裁。在加入微软之前,他是亚马逊的数据挖掘和个性化推荐总监。他拥有斯坦福大学计算机科学博士学位,论文被引用超过40 000次,其中有3篇位列计算机科学领域引用最多的1 000篇论文榜。 黛安·唐(Diane Tang)是谷歌院士,大规模数据分析和基础设施、线上对照实验及广告系统方面的专家。她拥有哈佛大学的文学学士学位和斯坦福大学的硕士及博士学位,在移动网络、信息可视化、实验方法、数据基础设施、数据挖掘和大数据方面拥有专利和出版物。 许亚(Ya Xu)是领英数据科学与实验平台负责人,曾撰写了多篇关于实验的论文,并经常在顶级会议和大学演讲。她曾在微软工作,拥有斯坦福大学的统计学博士学位。
精彩摘录
  • "1. The randomization unit is a user. 2. We will target all users and analyze those who visit the checkout page. 3. To have 80% power to detect at least a 1% change in revenue-per-user, we will conduct a power analysis to determine size. Designing the Experiment 334. This translates into running the "
目录
本书赞誉
译者序
前言——如何阅读本书
致谢
第一部分 线上对照实验概览

显示全部
用户评论
实验“圣经”,关注这本书很久了,自己英文不好,所以一直在等中文版。
线上对照实验是硅谷大厂一直都在用的工具,国内差不多2010年之后才开始用起来,难得看到一本专门讲这个的书。
大体上算是读过一遍吧,不过这种工具书适合时时翻一下(我觉得需要配合上统计学的书一起看效果更佳
ab实验参考书
结合实践效果会更好
很棒,里边的不少论文有时间也要去读读。
内容质量高,但不少地方翻译的不太好导致读起来费解。
翻译的有点一言难尽,and谢谢帮我复习了一遍统计
作者译者主要来自我司,加上读者本人,真的是自产自销一条龙了……一开始对本书期望不大,但读完还是很满意,前几章再说方法论和心态,中间再说一些实操问题,最后直接硬核开始推公式,不过推公式部分着重结论,不说推导细节,所以对非数学专业还算友好。书的前后几章挺值得读的,中间部分稍稍软件工程可能看读者了。
下载
收藏