新的abtest方法: Innovating Faster on Personalization Algorithms at Netflix Using Interleaving

1. 我們在線上做實驗的時候，常常會用到abtest，來確定線上效果。而我們的abtest方法，往往就是對用戶進行分組，對於相同比例的隨機用戶，進行效果比較。這種方法有個前提/假定，就是各組隨機用戶的分佈是完全一樣的。當然，一般情況下（如用戶量特別大），這種方法大概率情況是不太有問題的，但是對於某些場景，如Netflix推薦場景，這種方法會有所侷限； 2. 在Netflix的推薦場景中，較少部分用

>>阅读原文<<