P335 · 测试与评估

知道答案后的描述不算独立验证

Conditioned Description Is Not Independent Validation

评分者已看到被测答案时,应标为有条件的描述,不能当成独立佐证。

编辑审核

以下示例与示意结果由本站编写,用于说明方法,不是模型实测结果。

使用场景

媒体测量给出教学对比度指标34,随后把34输入模型让其描述。模型重复34是依据已有结果的说明,并非第二次独立测量。

具体做法

记录描述者看到的原始材料、指标、目标值和提示。将受测值驱动的输出标有条件描述,用于表达或解读;需要佐证时让独立方法直接从同一稳定源计算,预先定义单位与算法并记录共享依赖。公开一致与不一致,不把引用结果的语句当新观测。

反例

把34告诉模型,模型也说34,报告两次独立验证完全一致。

改进写法

描述注明“根据已给对比度34”,保留提示依赖。另按声明算法从同一稳定媒体计算指标,未运行则没有独立佐证。比较结果时说明源和共享依赖,不以模型复述证明原测量正确。

为什么这样改

继承答案的输出会自然一致,无法独立支持答案。依赖记录揭示这种一致性来自哪里,也保留描述在解释任务中的合理用途。

如何验证

教学证据表把测量A=34与条件描述B引用A分列,只计一次测量。若新方法C直接计算32,报告差异并核算法/单位,而非要求C改成34。数字为说明依赖的虚拟值。

适用边界

独立方法也可能共享同一错误来源,两个值相同不保证真相。对比度指标并无本例通用定义,需实际测量契约;不得将教学34当无障碍对比度或效果实测。

原文与版本

如何收录这些方法