为了搞清楚哪个功能、哪个版的设计更好,每个网站或应用的数据科学家都少不了A/B这样的工具。Facebook发布了自己的A/B 测试源代码——叫做PlanOut,以帮助数据科学家又准、又方便地测试。
Facebook在官博中写道,
“Facebook每天运行的测试有上行次,有些为了优化结果,有些出于为远期的设计提供决策基础,因为工作量如此可观,我们需要一套可靠、稳定的测试程序,很多在线测试由工程师代劳,而他们并非有经验丰富的统计学家。测试做对的时候很容易解析,但在它们的设计、实现、记录和解析上很容易出错。