人工智能

AI崛起,真假难辨 60%参考文献被撤稿 Nature绷不住了

字号+作者: 来源:新智元 2024-09-17 14:08 评论(创建话题) 收藏成功收藏本文

AI崛起,真假难辨。研究发表了,参考文献却撤稿了。到底是故意还是不小心?在今年一月份,IEEE发表的会议论文集中,有一篇通过检查眼睛来判断人类疾病方法的论文'...

AI崛起,真假难辨。研究发表了,参考文献却撤稿了。到底是故意还是不小心?在今年一月份,IEEE发表的会议论文集中,有一篇通过检查眼睛来判断人类疾病方法的论文。这篇文章引用的30篇参考文献中,已经有18篇被撤回。作者和编辑都没有注意到这个问题,但是被最近的检测工具给曝了出来。WKF品论天涯网


WKF品论天涯网

上面是Nature整理的一份列表,开篇提到的论文排在第二位,参考文献被撤稿占比60%,而榜首甚至达到了65%。WKF品论天涯网

另外,撤稿这件事本身,也在过去几十年中“稳步发展”,去年的撤稿量直接飙升到近14000篇,而2009年之前每年还不到1000篇。WKF品论天涯网


WKF品论天涯网

真是AI崛起了,学术产业也“崛起”了。WKF品论天涯网

Nature甚至用了个“Chainretraction”作为评论文章的标题,——学术界也有自己的链式求导法则。WKF品论天涯网

这次用来检测问题论文的工具名为FeetofClayDetector,来自于法国图卢兹大学的计算机科学家GuillaumeCabanac创建的一个项目。WKF品论天涯网

FeetofClay源于圣经中的一个类比,指的是雕像或建筑物表面雄伟,却用的是脆弱的粘土地基。WKF品论天涯网


WKF品论天涯网

对于把这些问题文章拎出来公开处刑,Cabanac表示:“我们并不是指责任何人做错事。我们只是观察到,一些参考文献已被撤回,这意味着该论文可能不可靠。”WKF品论天涯网

——我不是在针对谁,我是说在座的各位都......都应该意识到参考文献被撤稿对论文的影响。WKF品论天涯网

当然了,这么多的撤稿里面,肯定也有一部分是正常撤稿的,而且光是感叹和批判也解决不了任何问题。WKF品论天涯网

我们真正应该讨论的是,在当今的时代背景下,如何减少这些学术错误的产生和传播。WKF品论天涯网

不同的观点WKF品论天涯网

除了在自己的网站上发布FeetofClay探测到的结果,Cabanac还在论文评论网站PubPeer和社交媒体上,明确标记了1700多篇涉及参考文献撤回的文章。WKF品论天涯网

对此,一些作者表示感谢提醒,而另一些人则认为此乃诽谤,发表后的撤稿不会影响他们的论文。WKF品论天涯网

从结果来看,一些高比例引用被撤回参考文献的论文的作者,是有学术欺诈前科的,本身自己的许多论文也都被撤稿了。WKF品论天涯网

其中包括工程研究员AliNazari,他于2019年被澳大利亚墨尔本斯威本科技大学(SwinburneUniversityofTechnology)开除,原因是学校对其进行了不当行为调查。WKF品论天涯网

另一项被标记的研究来自德黑兰伊斯兰阿扎德大学(IslamicAzadUniversity)的物理学家AhmadSalarElahi,他的几十篇论文已经被撤回,许多是因为过度自引和伪造同行评审。WKF品论天涯网

另外也有“不予置评”的作者,《肿瘤学前沿》2023年发表的一篇关于RNA和妇科癌症的评论论文,有20篇参考文献在文章提交之前已被撤回。WKF品论天涯网

不过论文的作者之一,伊朗马什哈德医科大学(MashhadUniversityofMedicalSciences)的药剂师MaryamMahjoubin-Tehran表示,她的团队并不知道撤稿的情况,也不打算更新或撤回该论文,而出版商Frontiers表示正在调查。WKF品论天涯网

工具变革WKF品论天涯网

发文章和被引用就是学术界的货币,在利益之下,整个造假流程可以形成闭环。WKF品论天涯网

研究人员、出版商、机构和资助者都必须采取行动维护科学记录的完整性。WKF品论天涯网

传统途径WKF品论天涯网

发现有问题论文的科学家,一般可以通过传统途径联系该论文所在期刊的编辑团队,但找谁来解决这个问题就比较困难了。WKF品论天涯网

此外,这个过程通常不是匿名的,出于自身立场,一些研究人员可能不愿意或无法参与。WKF品论天涯网

而且期刊的速度是出了名的慢,过程中需要期刊工作人员调解各方之间的对话。WKF品论天涯网

受到批评的论文作者通常不愿意参与这种讨论,有时还涉及额外的数据和审稿人。所以大多数调查可能需要几个月甚至几年的时间才能公布结果。WKF品论天涯网

其他途径WKF品论天涯网

当然非传统途径也是有的,例如在PubPeer平台上发表评论。WKF品论天涯网


WKF品论天涯网

截至8月20日,PubPeer上已收到191463篇文章的评论——几乎所有都是批评。WKF品论天涯网

但出版商通常不看这个,而受到批评的论文作者也没有义务做出回应。WKF品论天涯网

2021年2月,GuillaumeCabanac推出了ProblematicPaperScreener(PPS),用来追踪论文中存在的问题。WKF品论天涯网

下面举一个有趣的例子来了解PPS其中的一项功能。WKF品论天涯网

近来,由于AI介入等原因,论文中开始大量出现一些非正常人类表述,这里被称为“折磨短语”(torturedphrases)。WKF品论天涯网


WKF品论天涯网

比如人工智能(Artificialintelligence)可以被表述成Counterfeitconsciousness(伪造意识),或者人造脑力(Man-madebrainpower);WKF品论天涯网

肾衰竭(Kidneyfailure)被写成肾脏失望(Kidneydisappointment);WKF品论天涯网

DNA修复(DNArepair):DNAfix;DNA损伤(DNAdamage):DNAharm;WKF品论天涯网

而免疫系统(Immunesystem)直接成了坚不可摧的框架(Invulnerableframework)。WKF品论天涯网

——就还......挺学术的,最起码查重肯定是过了。WKF品论天涯网

这些“折磨短语”首先需要人类读者识别出来,然后作为“指纹”添加到数据平台Dimensions的索引,截至目前,已核对了这样的指纹5800个。WKF品论天涯网

截至8月20日,问题论文筛选器已标记了超过16,000篇论文(包含不少于5个这种短语),其中只有18%已被撤回。WKF品论天涯网

为了便于持续检查和持续清理文献,Cabanac还为PPS设计了另外两个工具。WKF品论天涯网

其中之一是无效检测器,跟踪已被撤回或删除的论文。WKF品论天涯网

检测器从各个出版商、Crossref数据库(包括RetractionWatch数据库)和生物医学数据库PubMed收集数据,目前大约有62000篇被撤回或者删除的文章仍然被引用,总饮用量超过836000次。WKF品论天涯网

另外一个就是我们开篇提到的FeetofClayDetector,用来快速发现那些在参考文献列表中引用了无效论文的文章。WKF品论天涯网

整治乱象WKF品论天涯网

通常来说,论文作者在引用参考文献时,应该检查是否有任何发表后的批评或撤回,在做不到的情况下就需要工具的监督和提醒。WKF品论天涯网

2016年,英国牛津大学的研究人员开发了一个名为RetractoBot的工具,当作者之前引用的一项研究被撤回时,该工具会自动通过电子邮件通知作者。WKF品论天涯网

RetractoBot已经监控了20,000篇被撤回的论文,以及大约400,000篇2000年之后发表的引用它们的论文。WKF品论天涯网

另外,在当前情况下,不纠正或撤回错误论文几乎不会产生什么后果,而监督它们也没有什么回报。WKF品论天涯网

Cabanac认为应该对此实行问责制。大学和资助者必须优先考虑良好、扎实的科学成果,而非那些绩效指标(发表论文数、影响因子等)。WKF品论天涯网

而对于出版商来说,撤稿的这部分收入应该捐出去。比如伦敦物理研究所旗下的IOPPublishing,将撤回文章的收入捐赠给了Research4Life,用于为低收入和中等收入国家的机构提供在线访问学术文献的机会。WKF品论天涯网

参考资料:WKF品论天涯网

https://www.nature.com/articles/d41586-024-02747-1WKF品论天涯网

本网除标明“PLTYW原创”的文章外,其它文章均为转载或者爬虫(PBot)抓取; 本文只代表作者个人观点,不代表本站观点,仅供大家学习参考。本网站属非谋利性质,旨在传播马克思主义和共产主义历史文献和参考资料。凡刊登的著作文献侵犯了作者、译者或版权持有人权益的,可来信联系本站删除。 本站邮箱[email protected]