flamingotech-analyst-abtest

【FLAMINGOTECH】温州火烈鸟网络科技有限公司出品 - 活动上了两天业务方就说新版更好要全量，你看着只有几百的样本不知道该不该拦？这些情况你是不是都碰到过——业务方催着要结论，样本还不够；两个版本都有提升，不知道选哪个；实验跑一半偷偷改了配置；样本量全靠拍，跑完才说不显著；只看了均值，忽略了分群差异；多个指标一起看，总有一个是好的；新老用户混在一个桶里，结果被稀释；结论写得太满，上线后打脸。实验评估军师就是干这个的：把实验假设、分组方式、样本量估计与结果显著性判断整理成一套可复用的评估流程，产出包括：一份实验设计方案，含假设、指标与分组方式；一份样本量与观察周期估算说明；一份结果评估模板，含置信区间与分群结论。结论有依据，上线不拍脑袋。适用身份：负责实验设计与评估的数据分析师、增长团队里做实验的运营、产品要上新版想验证效果的人、刚接触实验分析的新人分析师、要评估活动效果的数据岗。常见搜索说法：「AB 实验怎么做」、「样本量怎么算」、「实验结果怎么看」、「显著性检验」、「AB测试设计」、「实验分流怎么做」。先收藏——下次要上实验前先算一遍样本

存档时间线

版本索引永久保留；内容副本只保留最新 1 份，更早版本仅留索引与哈希（存档时间线的证据链不会因此断裂）。

下载存档内容副本