预印本能够在同行评审之前就发布研究结果,从而受到一些研究者的欢迎(尤其是当结果可能对公共卫生产生重大影响时),但其研究质量会因为缺乏同行评审而受到多大的影响呢?你又是怎么看待medRxiv这样的预印本平台的?众所周知,同行评审周期通常都很漫长。举个真实的例子,作者在2022年7月8日将稿件提交给了一家期刊。文章被送去同行评审,作者在2022年11月30日即145天后收到了审稿人意见;2023年1月9日,将修改后的稿件再次交给了审稿人;2023年3月16日即66天后又收到新的评审意见,要求进一步修改;2023年3月23日作者回复了审稿人,并重新提交稿件;到4月20日,还没有新的消息。从最初提交到现在已经283天,大概九个多月(孩子都生出来了……)。
图源:
https://www.methodsman.com/blog/preprint-server-spin
预印本平台的短周期相比同行评审期刊的长周期,预印本确实具有一定的吸引力。但同行评审不仅仅是等待审稿人的意见;事实上,审稿人对稿件的意见可以极大提升论文的质量(审稿人会对主要结果提出新的分析),还能促使作者能够更加公正地描述研究发现。缺乏这种评审机制,预印本服务器上的文章是否会夸大结果?在COVID时代,预印本服务器的稿件呈爆炸式增长,尤其是倾向发表临床研究的MedRxiv平台。公共卫生的需求很明确,需要快速最新的数据,而不是在稿件提交后一年才看到。但是研究质量如何?David Schriger等研究者在JAMA上发表了一篇Letter,纳入的COVID随机对照试验最开始传到了MedRxiv,之后又在同行评审的期刊上发表了终版。这项研究比较了最初版本与最终发表版本的“spin”情况。注:spin是一种特别的报告策略,尽管主要结局未得出统计学意义,但仍强调治疗方法的益处;或者分散读者对阴性结果的关注,关注有统计学意义的次要结局。图源:JAMA. 2023;329(15):1310-1312.
https://jamanetwork.com/journals/jama/article-abstract/2803817研究们审查了从2020年1月到2021年12月上传到medRxiv上的236篇预印本。其中有54篇文章在2022年11月还未在同行评审的期刊上发表过。在已经发表到同行评审期刊的论文中,从预印本提交到同行评审期刊发表的中位时间为134天。作者对摘要的完整性进行了分类打分,涉及三类摘要:①从未在同行评审期刊上发表过的文章的摘要;②在同行评审期刊上发表了的文章,最开始提交到预印本平台的摘要;③同行评审期刊上发表的最终版本摘要。完整性的一个指标是,文章在摘要中是否提供了主要结局的结果?以上三类摘要分别有30%、53.4%和57.8%提供了主要结局。看起来初始的预印本文章与发表的最终版本的摘要很相似,但是有个问题,同行评审的文章,40%没有在摘要中报告主要成果?这感觉像是对同行评审的质疑,不像是对预印本平台的质疑。图源:
https://www.methodsman.com/blog/preprint-server-spin
这里想重点谈论“spin”情况。作者设计了一套体系来观察“spin”(包括主要结局为阴性时强调阳性的次要结局;将结论扩展到研究的目标人群之外)。那些从未发表到同行评审期刊的预印本文章,“spin”更为常见。最终发表了的文章,经过同行评审后,“spin”情况有一些好转。当将预印本摘要与其同行评审的摘要进行比较时,整体来看,同行评审的摘要更完整,总体上存在更少的“spin”。但是看到下图那些米灰色区域了吗?这些是配对的预印本和同行评审的摘要,没有差异的文章还是占多数。图源:JAMA. 2023;329(15):1310-1312.链接:
https://jamanetwork.com/journals/jama/article-abstract/2803817
随机对照试验比观察性研究更不容易出现“spin”问题,因为观察性研究的作者在挑选重要结局和统计分析时有更大的灵活性。那些从未在同行评审期刊上发表的预印本,可能从一开始就夸大了结果,但是,当一篇稿件出现在预印本平台上时,我们还无法得知它未来是否会在同行评审期刊上发表。https://www.methodsman.com/blog/preprint-server-spin微信公众号信息流改版导致收不到消息推送或者推送靠下?想要及时获取投必得学术的最新动态,可以试试以下方法✔
整理自耶鲁大学医学院副教授F. Perry Wilson的一篇观点声明:本文转载仅仅是出于传播信息的需要,并不意味着代表本公众号观点或证实其内容的真实性;如其他媒体、网站或个人从本公众号转载使用,须保留本公众号注明的“来源”,并自负版权等法律责任。如本公众号内容不妥,或者有侵权之嫌,请先联系小编topedit2021删除,万分感谢!