AIAI学习站
继续学习
本章进度 7 / 18
39%
评测与可观测性·理解·10 分钟
正文已完成

人工评分不是“我觉得不错”

用可观察行为和分档锚点把主观判断变成可重复 Rubric。

L174
为什么现在学

先用本课建立“人工评分”的基本直觉，后面的判断和练习才不会只靠记结论。

本课会用什么
  • 无需安装新工具
  • 直接阅读并完成本页理解检查

开放式回答需要人工判断，但“专业、深入、有帮助”没有共同尺度。Rubric 应描述答案中实际出现或缺失的证据。

这一课的结果

能把模糊评价词改写成评分者可观察的标准。

核心概念

先把关键判断说清楚

01

维度单一

事实正确、完整、表达清楚分开评分，避免一个总体印象覆盖具体缺陷。

02

分档有锚点

每个分数写可观察例子，例如 2 分为关键主张均有来源，1 分为部分有来源。

03

阻断错误独立

泄密和编造不应靠其他维度高分补偿。

案例拆解

“内容深入”让两位评分者差两分

一人看篇幅，一人看证据，Rubric 没有定义。

  1. 01

    拆成问题覆盖、证据引用和因果解释三维。

  2. 02

    为每维 0/1/2 分写具体信号。

  3. 03

    虚构来源单独判失败，不计总分。

案例结果

评分者不再用个人对“深入”的理解决定结果。

提交前练习

现在轮到你

把一个模糊评价词改成三档 Rubric。

选做练习：本节练习可用于加速你巩固，但不影响继续学习。

内容会自动保存在当前设备
查看参考答案与评分标准

参考答案

维度=证据覆盖；0=无来源，1=部分关键结论有来源，2=全部关键结论可定位原文；伪造链接为阻断失败。

评分标准

  • 维度没有混合多个概念
  • 锚点可从答案观察
  • 阻断错误独立

本课收口 · 理解检查

用 30 秒确认你理解了

用 30 秒理解检查确认你抓住了重点；阅读标记、练习和总结都不设硬门槛。

0 / 1
02完成练习（选做）0 / 3 项已填写，不影响完成03通过理解检查点此去回答，约 30 秒
04补一句总结（可选）可以留空，不影响完成本课。
哪项是更好的评分锚点？
你现在更接近哪一种状态？
尚有必填项未完成，请补齐后再继续。

资料来源

继续核对与延伸阅读

本课内容最近更新于 。