DESIGN PROTOTYPE演示内容:材料为合成,模型为代号,不是真实测试结果
EXP—012模型对比 · 交叉复核已出结果演示记录

同一份活动通知埋了 5 处错,三个模型各抓到几处?

先在一份 8 句的活动通知里埋好 5 处错误,再放 1 句没有错的对照句,然后让三个模型用同一个提示词检查。我们关心的不是谁“更聪明”,而是每个模型漏了什么、误报了什么,结果能不能逐项核对。

材料
8 句合成通知,埋 5 处错
参与对比
3 个模型(演示代号)
运行方式
网页对话 · 默认设置 · 各 1 次
记录版本
v1.1 · 2026-10-25(示例)

结果对比

每一行是一个埋好的核对点。左侧橙线表示 A、B 的结论不同。以下全部是合成材料和演示代号输出,不对应任何真实模型。

A模型 A演示代号

4/5抓到

误报 1 处 · 格式符合

B模型 B演示代号

4/5抓到

误报 0 处 · 格式符合

C模型 C演示代号

无法计分

没有列问题清单,直接返回了润色后的全文

+A、B 合并

5/5抓到

需人工剔除 A 的 1 处误报

显示

显示 6 个核对点 · 3 个模型

EXP-012 逐项对照:6 个核对点,模型 A、B、C 的结果(演示数据)
核对点 · 原文 · 正确判断A模型 AB模型 BC模型 C
01日期与星期第 1 句 11 月 7 日(周日)正确:2026 年 11 月 7 日是周六 抓到

指出应为周六

抓到

指出日期与星期不符

未列出

全文仍写“周日”

02时长与结束时间第 4 句 约 90 分钟,预计下午 4 点 30 分结束正确:2 点开始,应约 3 点 30 分结束 抓到

算出应为 3 点 30 分

抓到

指出与时长矛盾

未列出

保留原句

03金额计算第 5 句 按 25 人计,共需收取 600 元正确:20 × 25 = 500 元 抓到

写出算式

抓到

改为 500 元

未列出

全文里暗改成 500 元,没有说明

04截止晚于活动日第 6 句 报名截止 11 月 9 日中午 12 点正确:截止日晚于 11 月 7 日的活动 漏掉

没有提到这一句

抓到

建议提前,具体日期写“不确定”

未列出

保留原句

05姓名前后不一致第 7 句 请联系李彤老师正确:与第 3 句“李桐”不一致 抓到

建议统一为“李桐”

漏掉

没有提到这一句

未列出

全文统一成“李彤”,方向反了

06没有错的句子第 8 句 入场时请出示报名短信正确:不需要修改 误报

建议改成“出示身份证件”

未改动

判断正确

被润色

改成“凭报名短信即可入场哦”

抓到漏掉误报:改了没错的句子未改动没有清单,无法计分

观察

每条观察都标出依据行,点击可以回到对照表核对。

1

两个模型各漏一处,漏的不是同一处

A 漏了“截止晚于活动日”,B 漏了“姓名前后不一致”。两份清单合并后 5 处全部覆盖,但要先剔除 A 的 1 处误报。

2

要对照两句才能发现的错,更容易漏

第 01–03 行只看一句就能判断,两个模型都抓到了;第 04、05 行要前后对照,各漏一处。

3

不按格式输出,就没法逐项核对

C 返回润色后的全文:暗中改对了金额,却把姓名统一错了方向,还改了没有错的第 8 句。

材料与统一要求

材料是本站自创的合成文字,不来自真实活动。三个模型收到的提示词完全相同。

A

埋好的错,抓没抓到

5 处错误:日期星期、时长、金额、截止日、姓名。

B

没错的句子,有没有乱改

第 8 句是对照句,改了就算误报。

C

输出能不能逐项核对

每个问题要写明句号、原文、问题和改法。

活动通知(草稿)· 8 句

  1. 1本月读书会定于 2026 年 11 月 7 日(周日)下午 2 点举行。
  2. 2地点:城东图书馆三楼 302 室,可容纳 30 人。
  3. 3主讲人李桐老师将带大家共读《小王子》。
  4. 4活动约 90 分钟,预计下午 4 点 30 分结束。
  5. 5报名费每人 20 元,按 25 人计,共需收取 600 元。
  6. 6报名截止时间为 11 月 9 日中午 12 点。
  7. 7如有疑问,请联系李彤老师。
  8. 8入场时请出示报名短信。

统一提示词

请逐句检查下面这份活动通知草稿,找出日期、数字、计算和前后不一致的问题。
每个问题单独一行,格式为:句号|原文|问题|建议改法。
没有问题的句子不要改,也不要润色全文。
拿不准的地方写“不确定”,不要猜。

答案表(5 处错 + 1 句对照)在上方对照表的“正确判断”里。复现时建议先自己跑完再看答案。

实验约定

  • 不上传真实工作文件或私人对话,只用合成或可公开的材料。
  • 不把模型的自我解释当作事实,以原始输出为准。
  • 不知道的信息留空,不为了好看补全。
  • 失败结果和反例同样公开,不只交“最好看”的那次。

运行设置

写清版本和条件,别人才能判断结果能不能比较。

EXP-012 运行设置
模型A、B、C 三个演示代号 · 正式记录写模型全名和版本号
使用入口网页对话,每个模型新开一个会话
参数默认设置,没有开联网和插件
提示词三个模型完全相同,见上方“统一提示词”
次数每个模型 1 次,没有测稳定性
判定方式记录者逐句对照答案表,单人判定
运行日期2026-10-24(示例)

适用范围与限制

结论只在下面这个范围里成立。新证据出现时会更新版本。

可以用来参考

  • 这份 8 句合成通知上的表现
  • “要求列清单”类复核任务的输出格式
  • 交叉复核为什么值得做:两份清单互补

不能用来说明

  • 这些模型的整体复核能力或排名
  • 长文、真实业务文件或多轮追问时的表现
  • 多次运行是否稳定(每个模型只跑了 1 次)

版本记录

  1. v1.12026-10-25(示例)补充模型 C 的原始输出与标注
  2. v12026-10-24(示例)首次记录:三个模型各跑 1 次

进展与还没解决的问题

从问题到结论,过程都留下。演示状态,不代表真实进度。

  1. 01 · 已完成

    材料与答案表

    8 句合成通知、5 处埋错、1 句对照句、统一提示词。

  2. 02 · 已完成

    三个模型各跑一次

    A、B 列出清单,C 返回润色全文。

  3. 03 · 进行中

    收集更多结果

    更多模型、同一模型多跑几次,本期挑战正在收。

  4. 04

    更新阶段结论

    改写 NOTE-004,写明新的适用范围和反例。

仍然没解决

  • 同一个模型多跑几次,漏的是不是同一处?
  • 换成更长、更真实的文档,漏点会不会变多?
  • 要求“每条先引用原句”,能不能减少误报?
  • 三个以上模型合并,误报会不会多到得不偿失?

自己复现一次,或换种方式参与

你的结果会让这张表更可信,失败和反例同样有用。

  1. 01

    复制材料和提示词

    用你常用的模型新开一个会话,不要额外解释。

  2. 02

    保留原始输出

    记下模型名、版本、日期;原样保存输出,不先修改。

  3. 03

    逐项对照后带回来

    按 6 个核对点标出抓到、漏掉或误报。

带来你的结果

表单会生成一份预览,展示你的结果加入对照表后的样子。原型不会发送或公开。

填写我的结果

其他参与方式

不一定要跑模型。选一种方式在这台设备上做个标记,方便之后回来继续;不会发送或公开。

还没有在本机标记参与方式。

EXP—012

你想怎么参与?

原型只在这台设备的浏览器里保存这个标记,不会发送给任何人,也不会出现在成员页。

选择参与方式