引文幻觉大幅下降的AI模子降生 准确率与人类专家相近
2026-03-01 00:31:31

泉源:科技日报

黑龙江北境农产品集团有限公司

科技日报记者 张梦然

《自然》4日报道了一个开源语言模子“OpenScholar”,,,,,,其在准确举行文献综述方面可逾越商用大语言模子。。。。。。。 。好比,,,,,,在该研究开展的实验中,,,,,,GPT4o会在78%至90%的情形下泛起引文幻觉,,,,,,而“OpenScholar”的引文准确率却与人类专家相仿。。。。。。。 。虽然仍需进一步优化,,,,,,但该工具有望资助科学家处置惩罚重大且日益沉重的科学文献综述使命。。。。。。。 。

科学文献综述关于支持循证决议、微调科学历程和指导新发明都很主要。。。。。。。 。然而,,,,,,文献揭晓数目的增添使研究职员很难掌握所有资讯。。。。。。。 。商用大语言模子可以提供协助,,,,,,但却很容易蜕化,,,,,,如归因能力有限和引文幻觉。。。。。。。 。

为了天生准确、周全、透明的科学文献综述,,,,,,美国华盛顿大学团队推出了“OpenScholar”。。。。。。。 。该模子是专为科研使命设计的检索增强语言模子。。。。。。。 。其他系统也用过这个框架,,,,,,但研究团队将其与一个包括4500万篇最新开放获取科研论文的专业数据库以及一个自我评估机制相团结,,,,,,从而优化了其输出。。。。。。。 。

研究团队还建设了名为“ScholarQABench”的基准工具来评估文献综述的自动化。。。。。。。 。测试显示,,,,,,“OpenScholar”的准确率比GPT4o和PaperQA2(一个文献综述工具)这类现有系统划分横跨6.1%和5.5%。。。。。。。 。别的,,,,,,“OpenScholar”天生的谜底,,,,,,在50%到70%的情形下比专家注释器的谜底更有用。。。。。。。 。

团队总结道,,,,,,以上效果和引文幻觉大幅下降证实晰“OpenScholar”有望支持和推动进一步研究事情。。。。。。。 。但他们指出,,,,,,该系统仍有局限性并强调基于语言模子的系统无法使科学文献综述完全自动化。。。。。。。 。他们向学界同时开放“ScholarQABench”和“OpenScholar”,,,,,,以勉励进一步研究和优化。。。。。。。 。

总编辑圈点

科研职员天天寻找有用的论文,,,,,,黑龙江北境农产品集团有限公司相当于在信息的“海洋”里捞“珍珠”。。。。。。。 。但现在海水暴涨,,,,,,真正有用之物和以假乱真之物一起浮上了水面。。。。。。。 。以前各人用的是通用的“万能捞网”,,,,,,好比GPT。。。。。。。 。但它的网眼太大,,,,,,捞上来的有可能是“塑料珠子”,,,,,,也就是假的或过失的引文,,,,,,需花大宗时间去挑,,,,,,还可能会被误导。。。。。。。 。而这个“OpenScholar”,,,,,,是一个专门为这片科学海洋设计的网。。。。。。。 。它不追求万能,,,,,,而追求可靠,,,,,,并且所有科学家都能一起刷新这个工具,,,,,,让它更准确。。。。。。。 。这有望把科研职员从繁琐、易错的文献苦海中部分解放出来,,,,,,让他们能把名贵精神用在真正的思索和发明上。。。。。。。 。这正是科学工具走向可信化的主要一步。。。。。。。 。