先看看示例
作者提供的示例,实际效果取决于你的输入和使用工具。
输入
【虚构编辑示例】
只把收藏短提示改为按钮持续已收藏。按用户分流,关注十秒内重复点击,护栏为请求失败;没有基线或最小差异目标。
输出
【虚构编辑示例】
实验草案(需要确认指标口径)
A组:收藏后显示短提示。
B组:按钮持续显示已收藏状态。
待检验假设:持续状态能减少用户对保存结果的不确定。
主要观察:收藏后10秒内重复点击。需先区分误重复和明确取消收藏,确定计数单位。
护栏:请求失败;需明确按请求还是用户去重。
按用户分流并检查曝光和组间样本比例。补齐基线与最小关注差异后,再估所需周期。当前不设没有依据的样本量,也不在结果最有利的时点提前宣布成功。
完整提示词
为改版设计实验,说明要检验的行为机制,以及实验与对照之间的关键差异。
选择与用户结果相关的指标和必要护栏,明确分流、曝光、统计对象与观察窗口。判读规则应事前确定;样本量或周期缺参数时指出所需依据。
说明如何检查实验有效性、判断结果及处理异常。多项改动无法拆分时,结论只归于整组变化;不要挑有利时点或事后分组宣布成功。
改动方案和希望改善的行为:
{{material}}
可用数据、流量与现有限制:
{{context}}