Paper Trellis Citation Verifier
核对论文引用是否支持对应论述
实现思路与验证边界 →JEV GUIDE
一条引用链接能打开,不等于它支持正文中的论述。Jev 可以参与证据片段与论述之间的关系判断,但抓取、引用匹配和最终研究判断仍需要各自的检查。
编辑建议把流程拆为:引用是否指向正确文献;候选证据是否真实出现在获取的原文中;该证据是否支持这条具体论述。前两个问题失败时,不应直接显示“已支持”。
例如“实验组在某一条件下改善”不能自动支持“对所有人都有效”。设计问题时要保留研究对象、条件与比较范围,避免把同主题当成同结论。此例为合成说明。
Paper Trellis Citation Verifier 将引用句与获取的文献配对,可让 Claude 提议原文片段,再由代码检查片段存在性与数字,Jev 判断支持、矛盾或未涉及,用户记录最终结论。该项目的模型阈值尚未在标注集上验证。
以下是编辑建议的结果状态,重点是向读者说明这次究竟看到了什么。
| 拿到的资料 | 合适的结果表述 |
|---|---|
| 只有摘要且未提及论述 | 需要全文,当前证据不足 |
| 全文存在对应原文片段 | 展示片段、位置和支持关系,等待人工核对 |
| 文献匹配或文本解析失败 | 无法完成核验,保留失败原因 |
Jev Reviewer 展示从带编号文本中选择和核对证据的另一种路径。文件在浏览器解析,不意味着推理文本不会发送到模型服务。
编辑建议:为每条论述保存文献版本、实际读取范围、原文位置、模型配置及人工结论。建立包含正确引用、范围夸大、矛盾证据和缺全文的标注样本,分别检查错误支持与错误否定。
不要用另一模型的同意当作唯一真值。研究者仍需打开原文核对;本站没有实测这些项目的学术核验准确率。
核对论文引用是否支持对应论述
实现思路与验证边界 →从研究报告中定位可核对的原文证据
实现思路与验证边界 →03 / JEV GUIDE
学习 Jev 提示词的任务拆分与题型选择,用原创反馈分流示例区分 Choice、Score、Noul,并设计边界样本。
阅读指南 →07 / JEV GUIDE
把 Jev 接在召回之后:定义相关性问题、保留候选来源、区分网页摘要与全文,并用标注查询检查排序是否改善。
阅读指南 →14 / JEV GUIDE
比较 Jev 判断模型与生成式 LLM 的任务边界,用改写评估和脚本审核案例理解混合架构,不把固定输出当成事实正确或性能保证。
阅读指南 →