概要03：推荐系统的AB测试
推荐系统算法工程师的日常工作就是改进模型和策略，目标是提升推荐系统的业务指标。所有对模型和策略的改进，都需要经过线上 AB 测试，用实验数据来验证模型和策略是否有效。这节课介绍工业界AB测试的一些基本概念。
1. 分层实验，同层互斥，不同层正交，这样可以同时开很多实验。
2. Holdout 机制用于衡量整个部门的业务指标收益。
3. 实验推全、反转实验的基本思想。
课件和讲义地址：
https://github.com/wangshusen/Recomme...