Algorithm or Creative? A Three-Arm Experimental Design for Decomposing Algorithmic Bias in Platform A/B Tests
算法还是创意?用于分解平台A/B测试中算法偏差的三臂实验设计
AI总结 本文研究了在线广告平台A/B测试中算法偏差的分解问题,提出了一种三组实验设计,以区分算法推荐和创意内容对受众触达的影响。该方法通过控制创意内容不变,仅改变算法的处理信息,从而识别出算法的间接效应和创意的直接效应,避免了传统两组实验中因受众选择而产生的偏差。实证研究表明,算法对受众触达的影响远大于创意内容,传统两组实验可能低估算法效应达两倍之多。