跳到主要内容
哒哒星球DADA PLANET

Prompt · 已公开版本

这次 A/B 测试能得出什么结论

先检查实验数据是否可信,再报告效果大小、不确定性与推广边界。

先看看示例

作者提供的示例,实际效果取决于你的输入和使用工具。

输入

【虚构编辑示例】
计划各一半,实际A组100人完成20,B组200人完成50;缺日志、周期和护栏,未做显著性分析。

输出

【虚构编辑示例】
A组完成率:20÷100=20%。
B组完成率:50÷200=25%。
描述性差异:B比A高5个百分点,相对A高25%。

暂不能据此宣布实验成功。计划1:1分流,实际人数为1:2,需要先查分流与纳入记录,并进行适用的样本比例检查。周期和护栏数据也未提供。这里没有计算置信区间或显著性,也没有把完成率差异确定为改版效果。

完整提示词

依据实验设计与数据审查结论,先确认分流、曝光、样本和分析口径是否支持有效比较。
关注重复身份、污染、运行中改动和样本比例异常。有效性存疑时区分描述性差异与实验效果;计算变化和不确定性应有足够统计量与适用假设,预定指标和事后探索分开。
解释结果及护栏表现,提出与证据相称的决策。证据不足不等于证明无效,结论不外推到未检验的人群或情境。

实验设计与分组数据:
{{material}}

事先确定的指标和停止规则:
{{context}}