看了本书

大家好，我是宝器！

在之前的工作经历中，我主要做过产品用户行为分析、用户画像分析，报表设计，0-1的指标体系搭建，社交网络分析...等各种杂活。

共同点是写了很多SQL，非常多。

来字节之后，我的工作内容相对之前有了些变化。首先是业务线，对个人来说是全新的一个方向，业务目标是不断提升用户体验，具体是啥暂时先不透露。

数据分析工作本身的话，SQL写的比以前少了，AB实验做的更多了，包括复杂AB实验的设计、验证、分析和迭代。

说到AB实验，了解和熟悉是不同的一个阶段。实际上AB实验的本质是把不确定性的结果量化，其一可以控制风险，其二可以迭代试错。

这其中当然是要求实验的Owner对实验的统计学知识，实验基础原理，实验的置信度指标分类和评估分析等都非常熟悉。

如何和深入这些知识？

第一，官方文档，比如字节内部AB实验平台Libra的帮助文档，看完这部分后基本上是可以上手去做实验和分析了。

建议有兴趣的同学可以读读这篇文章：
我在字节看到的AB实验

第二，AB实验的“圣经”之作《Trustworthy Online Controlled Experiments》，非常经典。

先说结论：这本书基本属于涉及到AB实验工作同学必读。

当然，看完这本书后，国内各大厂关于AB实验这一块的面试内容应该问题不大。（一共23章）

作者罗恩等大佬在第一章会跟你讲为什么要做AB实验？AB实验的相关性、因果性和可依赖程度等内容。

第二章会用一个实际案例带你运行和分析AB实验，如何设计实验、确定显著性，实验结果分析和决策等。

第三章中会讲到了一些AB实验的坑，比如辛普森悖论，细分群的差异。

在实际工作中，在两个阶段会经常容易出错：实验设计和验证阶段，实验分析和迭代阶段。

常见坑的背后一般是因为对AB实验不够熟悉。

限于篇幅，第4-23章不做细致说明了，放一张图就能知道这本书讲的有多细。

有没有发现有什么不同，是的，之前一直是英文版，现在有中文版了，这对英文不太好的同学简直就是福利。

老规矩，继续安排一波福利，赠送 5本《关键迭代：可信赖的线上对照实验》，由「机械工业出版社华章公司」赞助提供。

参与规则的话：一键三连的同学中抽5本（分享、在看、点赞其一都行）。

罗曼罗兰说世界上只有一种英雄主义，就是认清了生活的真相后依然热爱它

宝器，2021年4月24日于北京。

更多所想所悟欢迎关注：