跳到主要内容
哒哒星球DADA PLANET

实践笔记

给检索做评估,先写标准答案来自哪一段

给检索做评估,先写标准答案来自哪一段

没有答案依据,评分也会跟着主观漂移。

留给 AI 的材料
资料第1段:“周二至周日10:00—18:00开放,周一闭馆。”第2段:“已预约者凭预约编号入场。”第3段:“团体活动须提前两天预约。”五问:周一开放吗?周三几点开门?凭什么入场?团体提前多久预约?有停车场吗?

先让它做这一件事

材料:
资料第1段:“周二至周日10:00—18:00开放,周一闭馆。”第2段:“已预约者凭预约编号入场。”第3段:“团体活动须提前两天预约。”五问:周一开放吗?周三几点开门?凭什么入场?团体提前多久预约?有停车场吗?

任务:
建立题目、相关段落、允许答案要点、应拒答项的评估表;把无答案题也纳入统计。

交付要求:
按问题、证据位置、可回答内容、缺失信息四列输出;仅引用这次提供的材料。
不要把待测模型自己生成的答案当唯一标准。

核对时看这两处:

  • 前两问对应第1段;入场凭证对应第2段;团体预约对应第3段;停车信息在资料中缺失。
  • 不要把待测模型自己生成的答案当唯一标准。

以上为演示案例,可替换成自己的材料。