Jev Gallery

JEV GUIDE

Jev 论文引用核验:原文证据提取与支持关系判断

一条引用链接能打开,不等于它支持正文中的论述。Jev 可以参与证据片段与论述之间的关系判断,但抓取、引用匹配和最终研究判断仍需要各自的检查。

引用核验至少有三个不同问题

编辑建议把流程拆为:引用是否指向正确文献;候选证据是否真实出现在获取的原文中;该证据是否支持这条具体论述。前两个问题失败时,不应直接显示“已支持”。

例如“实验组在某一条件下改善”不能自动支持“对所有人都有效”。设计问题时要保留研究对象、条件与比较范围,避免把同主题当成同结论。此例为合成说明。

已有案例如何组合模型与代码?

Paper Trellis Citation Verifier 将引用句与获取的文献配对,可让 Claude 提议原文片段,再由代码检查片段存在性与数字,Jev 判断支持、矛盾或未涉及,用户记录最终结论。该项目的模型阈值尚未在标注集上验证。

依据: Paper Trellis Citation Verifier · pinned source ↗

摘要、全文和解析失败要分开显示

以下是编辑建议的结果状态,重点是向读者说明这次究竟看到了什么。

摘要、全文和解析失败要分开显示
拿到的资料合适的结果表述
只有摘要且未提及论述需要全文,当前证据不足
全文存在对应原文片段展示片段、位置和支持关系,等待人工核对
文献匹配或文本解析失败无法完成核验,保留失败原因

如何做一轮有意义的验证?

Jev Reviewer 展示从带编号文本中选择和核对证据的另一种路径。文件在浏览器解析,不意味着推理文本不会发送到模型服务。

依据: Jev Reviewer · pinned source ↗

保留可以复核的证据包

编辑建议:为每条论述保存文献版本、实际读取范围、原文位置、模型配置及人工结论。建立包含正确引用、范围夸大、矛盾证据和缺全文的标注样本,分别检查错误支持与错误否定。

不要用另一模型的同意当作唯一真值。研究者仍需打开原文核对;本站没有实测这些项目的学术核验准确率。

接着看这些项目

继续阅读