科學家提出期刊評價新標準
美國科學家最近提出一套新的標準框架,認為它能比影響因子(Impact Factor,IF)更加準確地評價學術(shù)期刊質(zhì)量和影響力。相關(guān)論文發(fā)表在《公共科學圖書館·綜合》(PLoS ONE)上。
提出新標準的是美國西北大學化學與生物工程學副教授Luis Amaral及他的同事。與IF依靠平均引用率來評價期刊不同,新體系使用數(shù)學模型來刻畫某一期刊論文引用數(shù)的特征值。
20世紀60年代由美國科學信息研究所(現(xiàn)在的湯姆森科技信息集團)提出的“影響因子”概念,已經(jīng)成為學術(shù)界權(quán)威的期刊評價系統(tǒng)。它的主要依據(jù)就是期刊論文引用率的算術(shù)平均值——將某一期刊兩年內(nèi)發(fā)表的所有論文引用率相加,再除以總的可引用論文數(shù)。
不過,Luis Amaral等人認為,該評價方法存在兩大主要缺陷。首先,只有當被研究對象是正態(tài)分布(貝爾曲線)時,平均數(shù)才有充分的意義,但論文引用率并非如此。
Amaral小組分析了一個論文數(shù)據(jù)庫,其中包括1955年來2000多本期刊的2300萬篇論文。他們發(fā)現(xiàn),其中引用率最高的論文共被引用20萬次,相比之下,其中一半的論文根本沒有被引用過。Amaral說,“考慮到如此寬泛的引用范圍,平均值真是個很差的衡量尺度。引用率很高的論文會顯著影響到這一平均數(shù)字,無論其他論文的引用率高低與否!
而IF的第二大缺陷就是不同領(lǐng)域研究論文的引用度往往不同。比如醫(yī)學和物理學方面的論文常常在發(fā)表后不久就得到引用,而經(jīng)濟學和數(shù)學方面的成果甚至需要幾年幾十年來積累引用率。Amaral認為,同一領(lǐng)域內(nèi)的不同期刊同樣存在這種情況。
研究人員提出的新標準對此進行了改進。他們的方法是:用每篇論文引用率的對數(shù)作為基礎數(shù)據(jù),來反映期刊的影響力。對此的解釋是讓“寬帶”的引用次數(shù)范圍變成“窄帶”的,通過更加接近的方法減弱少數(shù)高引用率論文的干擾。
他們表示,特定期刊中各篇論文引用率的對數(shù)能夠較好地形成正態(tài)分布。隨著時間的推移,一篇論文被引用的可能性會下降,因此它的對數(shù)也會趨于穩(wěn)定。這時,研究人員就可以利用新開發(fā)的數(shù)學模型來預測不同期刊論文獲得引用“特征值”(即上述的對數(shù))的速度。Amaral說,“這就為評價某一特定期刊提供了一種較為固定的模式!
如果新系統(tǒng)能夠付諸實踐,那么期刊的排名或多或少就會發(fā)生改變。比如目前《生物化學趨勢》(Trends in Biochemical Sciences)的影響因子要高于《歐洲分子生物學會雜志》(EMBO)、《植物細胞》(Plant Cell)以及《生物化學雜志》(Journal of Biological Chemistry),但在新的評價系統(tǒng)中,其排名可能會低于后三者。
Amaral說,所謂好的期刊評價系統(tǒng),應該讓高排名期刊中的論文在大多數(shù)情況下,比排名較低期刊中論文的引用率更高。在這一點上,新的系統(tǒng)要優(yōu)于影響因子。
對于新的評價標準,湯姆森科技集團產(chǎn)品開發(fā)部門負責人Jim Pringle表示,“湯姆森科技鼓勵在引用率基礎上,針對期刊新評價方法和標準的嘗試與發(fā)展。這篇論文以一種新奇的方式,將復雜的數(shù)學方法應用其中。我們期待著必將接踵而至的討論!保ǹ茖W網(wǎng) 任霄鵬/編譯)
(《公共科學圖書館·綜合》(PLoS ONE),doi:10.1371/journal.pone.0001683,Michael J. Stringer, Luís A. Nunes Amaral)
http://paper.sciencenet.cn/htmlpaper/200837940475951359.html