編輯丨王多魚
排版丨水成文
自 COVID-19 以來,大量的生物醫學研究論文在經過同行評議之前就已在預印本平臺發布,并得多廣泛傳播。由于尚未經過同行評議,一些研究人員認為,預印本論文中的結論未經驗證或可能并不可靠。然而,這些研究結論在正式發表前究竟發生了多大程度的改變,迄今為止僅在較小規模的研究群體中進行了量化分析,且結果因領域和主題的不同而有所差異。
如今,發布預印本在科學界已十分普遍,但洛杉磯南加州大學的神經科學家魯斯蘭·魯斯特表示,他經常聽到同行科學家說這些預印本并不可靠。根據他的經驗,同行評審通常不會對研究內容帶來重大修改。魯斯特希望驗證這一情況是否也適用于不同的生物醫學研究領域。
近日,韋仕敦大學及美國南加州大學的研究人員在預印本平臺bioRxiv上發表了題為:Tracking claim changes from preprint to publication across 72,644 biomedical studies using large language models 的研究論文。
這項研究顯示,發表于預印本平臺的生物醫學研究論文,在經過同行評議在期刊正式發表后,其核心結論基本保持不變。此外,相比直接通過同行評議在期刊正式發表的論文,那些先以預印本形式發表的論文被撤稿的概率僅為前者的一半。研究團隊表示,這些發現表明,bioRxiv 預印本平臺是生物醫學信息可靠的早期來源。
![]()
在這項研究中,研究團隊匯總了 2018-2025 年間所有能夠通過論文 DOI 標識號匹配到后續通過同行評議正式發表的 bioRxiv 預印本論文,共獲得 72644 對預印本-發表論文。利用大語言模型(Claude Sonnet 4.6),研究團隊將每對預印本-發表論文的摘要解析為一個主要結論和兩個次要結論,并對每對預印本-發表論文的內容變化(無變化、輕微修改、重大修改)以及語氣傾向變化(更謹慎、更自信、無變化)進行分類。
在驗證子樣本中,該模型與兩位獨立領域專家的一致性程度與專家彼此之間的一致性相當(Cohen's kappa 值為 0.63-0.66)。論文摘要中主要結論保持不變的占 39.9%,輕微修訂的占 50.0%,而重大修改的僅占 10.2%。語氣傾向變化較為少見且不對稱,變得更加謹慎的是變得更加自信的兩倍(8.4% vs 4.2%)。該研究還顯示,經過較長時間同行評議才得以發表的論文,重大修改則更為頻繁(同行評議時間最慢的三分之一組別發生重大修改的比例為 14.1%,而最快組別則為 7.0%),且在整個研究期間呈下降趨勢(2019 年為 17.0%,2024 年為 5.7%)。在同一時期,從未作為預印本發布的生物醫學論文被撤稿的比例大約是曾作為預印本發布的論文的 2 倍。
![]()
研究團隊表示,這些數據共同表明,從預印本到經過同行評議正式發表的過程基本保留了大多數生物醫學論文摘要的核心結論,這說明預印本是可靠的生物醫學研究信息來源。
論文鏈接:
https://www.nature.com/articles/d41586-026-02167-3
![]()
![]()
![]()
![]()
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.