| 9 | 1/1 | 返回列表 |
| 查看: 3241 | 回復(fù): 8 | ||||
[交流]
如何評判科研人員的水平及其論文影響力? 已有8人參與
|
|
2013-10-22 來源:Nature 作者:Nature 關(guān)于科研評價體系的爭論,多年來未曾停歇過,尤其是隨著近年來唯 SCI 的評價體系出現(xiàn)了各種各樣的問題,科學(xué)家們也希望能有更公平更有效的評價系統(tǒng)。 如何評判科研人員的水平? 在申請基金、選擇導(dǎo)師、合作者和招聘科研人員等多個方面都需要判斷科研人員的學(xué)術(shù)水平。評價科研人員學(xué)術(shù)水平的金指標(biāo)是對社會貢獻的大小,除了個別純理論的研究。但是對社會的貢獻有時候需要很久才能顯示出來,而且有時社會效益評價的主觀性很強。在社會效益顯示出來之前,評價科研人員的學(xué)術(shù)水平從高到低有三種層次的方法。 同行評議法 可信指數(shù):五顆星 直接看他發(fā)表的文章,根據(jù)自己的學(xué)識判斷其學(xué)術(shù)價值,這是最準(zhǔn)確最可靠的方法。但是要能對別人的文章進行判斷需要兩個前提條件:一是要求自己和作者是同行,最好是小同行;二是自己的學(xué)術(shù)水平和作者相比更高,最好是高一個等級,至少是相當(dāng),無論如何不能差太遠(yuǎn)。只有這樣,自己才有能力對別人的文章進行評價。你比被評價者水平高的越多,評價就越準(zhǔn)確。這也是期刊選擇審稿人的依據(jù),所以能被著名期刊選為審稿人、編輯本身就是對其學(xué)術(shù)水平的認(rèn)可。對于基礎(chǔ)知識尚有欠缺,對選題的重要性、新穎性一無所知的本科生和外行,或知之不多的研究生而言,是無法對一篇文獻做出準(zhǔn)確的判斷的。如果自己不具備評價別人文章的能力,也可以參考別的專家對該文章的同行評價的意見的。同行評價,即使是本領(lǐng)域的權(quán)威的評價也不是絕對正確的,只能說是正確的概率很大。愛因斯坦的相對論剛提出來的時候,據(jù)說全世界只有三個人能看懂。那么如果用同行評價的方法去評價愛因斯坦,如果請的不是那看的懂的三個人,結(jié)果可能就是愛因斯坦的理論是胡扯。為什么?因為他們的水平遠(yuǎn)不及愛因斯坦。當(dāng)然愛因斯坦只有一個,如果你不認(rèn)為自己是愛因斯坦,對于權(quán)威的否定,至少要清楚大部分情況下他們是正確的。 發(fā)表論文檔次查閱法 可信指數(shù):三顆星 SCI 論文用的是國內(nèi)常說的影響因子,即看期刊的影響因子有多高,國內(nèi)非SCI 收錄的期刊一般也有檔次,例如中華牌、中國牌、核心期刊、省級期刊等。一般而言,發(fā)表在低影響因子期刊上的論文質(zhì)量不如高影響因子上的,但是并非全部如此。例如,發(fā)表在IF2.5 的一篇論著,如果被引次數(shù)是25,而發(fā)表在IF5.0 的一篇論文被引只有4 次,那么應(yīng)該前者水平要高。事實上有很多諾獎獲得者的獲獎代表作不是發(fā)表在nature、science、cell 這些頂級期刊,而是發(fā)表在影響因子相對不是很高的期刊上的。這就是為什么被引次數(shù)比期刊影響因子更能準(zhǔn)確判斷學(xué)術(shù)水平的原因。當(dāng)然影響因子也有優(yōu)點:簡單。要查一個作者發(fā)表的所有論文被引次數(shù)一共有多少,是需要一定時間的,尤其是先要確定作者之前一共在哪些單位呆過,不然就容易漏查。 發(fā)表論文數(shù)量法! 可信指數(shù):一顆星; 是最不可靠的方法,就是看發(fā)表論文是數(shù)量。由于以前的科研評價體制只重數(shù)量不重質(zhì)量,結(jié)果造成了大量的低水平的論文發(fā)表,這些論文無論是影響因子還是被引次數(shù)都很低,很多是把一篇論文拆開為幾篇發(fā)表,或者重復(fù)發(fā)表。所以,那些宣傳“發(fā)表了XX 篇論文”的說法其實是難以真實的反應(yīng)作者的學(xué)術(shù)水平的。 如何評判科學(xué)研究的影響力 調(diào)整科研評價體系 適用度:有待商榷 英國高等教育局(HEFCE)討論推行卓越研究框架(REF),替代原有的研究評估制度(REA),以強調(diào)科學(xué)研究為英國經(jīng)濟和社會發(fā)展服務(wù)。7 F- g. D+ _1 k5 q9 w 從REA到REF,三項評價指標(biāo)中前兩項即“研究質(zhì)量”和“研究環(huán)境”不變,但是第三項“研究的聲譽”將被“研究的經(jīng)濟社會影響”所替代。各項指標(biāo)的權(quán)重有所調(diào)整,分別是:研究質(zhì)量(60%)、研究環(huán)境(15%)和研究的經(jīng)濟社會影響(25%)。 英國計劃2014年開始執(zhí)行REF,其中“研究的經(jīng)濟社會影響”(impact)這一指標(biāo)替代的原來的“聲譽”指標(biāo),但其比重將從20%開始試行,以后要調(diào)整到25%。HEFCE還表示,只有研究質(zhì)量到達2級或2級以上的研究成果,才有資格進行研究影響的指標(biāo)的評估。 REF的“研究的經(jīng)濟社會影響”(impact)概念提出以后,受到英國學(xué)術(shù)界的極大關(guān)注。英國學(xué)術(shù)院(BA)建議比例不宜太高,應(yīng)設(shè)定為15%,其理由是人文藝術(shù)學(xué)科與理工科不同,其經(jīng)濟社會效益很難衡量。許多科學(xué)家對這一概念也提出質(zhì)疑,認(rèn)為“研究的經(jīng)濟社會影響”(impact)這一指標(biāo)操作性不強。 以重大產(chǎn)出為導(dǎo)向 適用度:四顆星. M 中國科學(xué)院此前曾宣布,將建立從評價、評估到驗收及年度監(jiān)測的一整套新評價體系,充分發(fā)揮評價的導(dǎo)向、診斷、衡量作用。 根據(jù)新的評價體系,中科院將組織國內(nèi)外高水平同行專家和用戶專家,對研究進展情況進行診斷評估。中科院還將根據(jù)6-7個核心指標(biāo)和創(chuàng)新能力指數(shù),對研究所進行年度監(jiān)測,監(jiān)測指標(biāo)主要是研究所狀態(tài)、產(chǎn)出和效益情況。并對中科院宏觀布局和發(fā)展態(tài)勢也進行監(jiān)測。2015年,中科院將根據(jù)“重大突破”的標(biāo)準(zhǔn)、人才引進和培養(yǎng)等情況,對研究所任務(wù)完成情況進行驗收。 中科院目前每年在國際上發(fā)表的文章數(shù)量雖然不少,但對科技發(fā)展的“貢獻”卻不多。相關(guān)人員表示,這一新的評價體系將一改從前“重成果輕應(yīng)用”的論文、資源導(dǎo)向,引導(dǎo)科學(xué)研究向?qū)嵸|(zhì)性的貢獻看齊。 科研評價體系失當(dāng)導(dǎo)致優(yōu)秀論文外流 中國科協(xié)曾進行過一次問卷調(diào)查,在“科技論文外流的原因”一題中,不少學(xué)者都選了“外部評價體系方面原因,科技評價、職稱評聘、獎勵制度等均以外國科技期刊為高水準(zhǔn)”這一項。 確實,科學(xué)引文索引(SCI)可謂是目前中國科技界時髦的詞語之一,也被作為衡量大學(xué)、科研機構(gòu)和科技工作者學(xué)術(shù)水平的重要尺度,而這種導(dǎo)向在某種程度上導(dǎo)致了國內(nèi)科研成果和智力資源的流失。 除此之外,我國現(xiàn)有英文科技期刊也存在量少質(zhì)低的情況。數(shù)據(jù)顯示,我國現(xiàn)有英文科技期刊有230多種,僅占我國科技期刊總量的4.3%。2012年,中國大陸有134種科技期刊被國際著名檢索系統(tǒng) SCI 收錄,但被收錄期刊的總體水平偏低,平均影響因子和平均被引頻次遠(yuǎn)低于國際總體平均值。 科技界的專家指出,要完善政策環(huán)境,制定適當(dāng)?shù)钠诳龀终,鼓勵科技人員把科研成果,尤其是國家財政支持的科研項目產(chǎn)出的優(yōu)秀論文,優(yōu)先發(fā)表在國內(nèi)優(yōu)秀科技期刊上 為促進科技期刊出版質(zhì)量和論文發(fā)表水平的提高,已有為之努力者。據(jù)中國科學(xué)技術(shù)協(xié)會學(xué)會學(xué)術(shù)部副部長劉興平介紹,從2006年起,中國科協(xié)開始實施精品科技期刊工程。截止目前,已資助科技期刊224種772項(次),累計資助金額達9025萬元。 |
小木蟲VIP帖-職場 |
木蟲 (正式寫手)
金蟲 (著名寫手)
金蟲 (著名寫手)
新蟲 (初入文壇)
新蟲 (小有名氣)

新蟲 (正式寫手)
| 上述觀點有些值得肯定,但有不少值得商榷!如,第一點,同行評議法,主觀因素占一定的比例,具有一定暗箱操作的可能,中國是個人情社會,只要有主觀因素?fù)诫s,必然導(dǎo)致一些不公,如當(dāng)下被抱怨的國家基金(雖然相對最公平),更不用說那些個部門行業(yè)基金、973、863等,因此,個人認(rèn)為同行評議法是明顯次于發(fā)表論文檔次查閱法,可以說和發(fā)表論文數(shù)量法一樣,均存在明顯的缺陷;第二點,以重大產(chǎn)出為導(dǎo)向,這個產(chǎn)出是指啥?是指論文?專利?以及其他研究成果?還是這些研究成果的社會效益/經(jīng)濟價值等?看樓主后面的意思是指研究成果所致的社會效益/經(jīng)濟價值等,那么問題就來了,對于很多基礎(chǔ)理論研究以及應(yīng)用基礎(chǔ)理論研究,其社會效益/經(jīng)濟價值可能需要幾年甚至幾十年才能判斷出來,所以這個基于研究成果所致的社會效益/經(jīng)濟價值為標(biāo)準(zhǔn)用于基礎(chǔ)研究或應(yīng)用基礎(chǔ)研究市基本不具備可操作性的,或者說這樣一來助漲了那些出短、快效益的,而用于以專利為主的技術(shù)研發(fā)等方面的可行性相對較高。個人認(rèn)為對于基礎(chǔ)研究以及應(yīng)用基礎(chǔ)研究是應(yīng)該以重大產(chǎn)出為導(dǎo)向,但這個產(chǎn)出用論文質(zhì)量來衡量相對更為合理,論文質(zhì)量可以用影響因子和年被引次數(shù)進行衡量。 |
銅蟲 (小有名氣)
新蟲 (初入文壇)
| 9 | 1/1 | 返回列表 |
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 一志愿華中科技大學(xué),080502,354分求調(diào)劑 +3 | 守候夕陽CF 2026-03-18 | 3/150 |
|
|---|---|---|---|---|
|
[考研] 一志愿中國海洋大學(xué),生物學(xué),301分,求調(diào)劑 +4 | 1孫悟空 2026-03-17 | 4/200 |
|
|
[考研] 085600材料與化工調(diào)劑 324分 +7 | llllkkkhh 2026-03-18 | 7/350 |
|
|
[考研] 302求調(diào)劑 +10 | 呼呼呼。。。。 2026-03-17 | 10/500 |
|
|
[考研] 材料,紡織,生物(0856、0710),化學(xué)招生啦 +3 | Eember. 2026-03-17 | 9/450 |
|
|
[考研] 268求調(diào)劑 +8 | 一定有學(xué)上- 2026-03-14 | 9/450 |
|
|
[考研] 332求調(diào)劑 +6 | Zz版 2026-03-13 | 6/300 |
|
|
[考研] 材料與化工專碩調(diào)劑 +5 | heming3743 2026-03-16 | 5/250 |
|
|
[考研] 333求調(diào)劑 +3 | 文思客 2026-03-16 | 7/350 |
|
|
[考研] 一志愿211 0703方向310分求調(diào)劑 +3 | 努力奮斗112 2026-03-15 | 3/150 |
|
|
[考研] 318求調(diào)劑 +3 | Yanyali 2026-03-15 | 3/150 |
|
|
[考研] 304求調(diào)劑 +3 | 曼殊2266 2026-03-14 | 3/150 |
|
|
[考研] 070300化學(xué)學(xué)碩求調(diào)劑 +6 | 太想進步了0608 2026-03-16 | 6/300 |
|
|
[考研] 085600調(diào)劑 +5 | 漾漾123sun 2026-03-12 | 6/300 |
|
|
[考研] 265求調(diào)劑 +4 | 威化餅07 2026-03-12 | 4/200 |
|
|
[考研] 復(fù)試調(diào)劑 +3 | 呼呼?~+123456 2026-03-14 | 3/150 |
|
|
[考研] 266求調(diào)劑 +4 | 學(xué)員97LZgn 2026-03-13 | 4/200 |
|
|
[考研] 材料與化工(0856)304求B區(qū)調(diào)劑 +6 | 邱gl 2026-03-12 | 7/350 |
|
|
[考研] 304求調(diào)劑 +6 | Mochaaaa 2026-03-12 | 7/350 |
|
|
[考研] 085600材料與化工 309分請求調(diào)劑 +7 | dtdxzxx 2026-03-12 | 8/400 |
|