硅基社区
标签频道

统计显著性

该标签下的文章、提问与讨论帖。

帖 A/B 实验显著但绝对提升只有 0.3%,你们到底上不上线?
背景 做了 5 年算法,这两年花很多时间在实验平台与指标体系上。一个反复出现、且每次都能把会议室吵热的场景是:一次 A/B 实验,p 值很漂亮(p < 0.05 甚至 < 0.01),样本量也够,统计上「显著」,但绝对提升只有 0.3% 甚