q****c 发帖数: 1 | 1 在工业界,a/b testing vs multivariate testing分析有什么不一样呢?
比如比较两个不同的网页,感觉都是比较conversion rate 或者 click rate, 是否
statistically significant different.
如果p-value significant,
区别在于 1) 如果是a/b testing,那么我们知道区别在于哪里 2) 如果是
multivariate testing, 如何分析这个区别的来源; 有没有后续分析来分析来源来自
于啥。
请教,有没有人可以详细讲解一下区别。感谢!! | j*****y 发帖数: 26 | 2 工业界,对A/B test有明确定义么?
大部分时候A/B test就是问“两个group某种metric有没有什么差别”,或者“有没有
treatment effect" 吧?
至于用什么model,Anova,还是regression,还是甚至一些高大上的模型,都属于A/B
test的范畴吧? | T*****u 发帖数: 7103 | 3 工业界就不要太追去p-value多少多少。machine learning最难的地方在于decision
making。 |
|