WWWOct, 2016

一种非参数序列检验用于在线随机实验

TL;DR提出了一种非参数顺序检验方法,可解决在线随机实验中出现的复杂度量的假设检验以及在持续监控下如何防止类型 I 错误膨胀的问题。该方法无需了解数据生成的概率分布,利用 Bootstrap 估计数据块的似然,然后采用混合序列概率比检验。在来自一家重要的在线电商网站的数据上验证了该过程。结果表明,该检验在任何时候都能控制 I 型错误,在在线随机实验中具有良好的功率,对于数据生成的分布错误具有鲁棒性,并且允许快速推断。