亚州av综合色区无码一区,午夜一区二区三区亚洲影院电影网,天堂а√在线地址,性人久久网av,无码内射成人免费喷射

曉木蟲(chóng)
學(xué)術(shù)數(shù)據(jù)庫(kù)客戶端

學(xué)術(shù)評(píng)價(jià)中,勿被定量指標(biāo)蒙蔽雙眼

 找回密碼
 注冊(cè)新賬號(hào)

QQ登录

微信登录

學(xué)術(shù)評(píng)價(jià)中,勿被定量指標(biāo)蒙蔽雙眼

摘要:   Nature最新刊出的文章揭示,在舊金山宣言和萊頓宣言之后,科研評(píng)價(jià)對(duì)定量指標(biāo)(如“影響因子”)的依賴并未有大的改變。依賴定量指標(biāo)的科研評(píng)價(jià)體系只會(huì)帶來(lái)越來(lái)越多的“保守”學(xué)習(xí),而高創(chuàng)新性的文章極少。   ...
  Nature最新刊出的文章揭示,在舊金山宣言和萊頓宣言之后,科研評(píng)價(jià)對(duì)定量指標(biāo)(如“影響因子”)的依賴并未有大的改變。依賴定量指標(biāo)的科研評(píng)價(jià)體系只會(huì)帶來(lái)越來(lái)越多的“保守”學(xué)習(xí),而高創(chuàng)新性的文章極少。
  編譯作者:石燕青 / 南京大學(xué)       原文作者: StephanP, Veugelers R  Wang J(王。
  素材推薦人:石燕青 / 南京大學(xué)      圖文編輯:李江 / 浙江大學(xué)



  注:圖片來(lái)源于參考文獻(xiàn)中的論文(右圖揭示創(chuàng)新被認(rèn)可需要時(shí)間)
  2012年提出的舊金山宣言中,學(xué)術(shù)共同體承諾不再過(guò)度依賴影響因子,而去尋找新的學(xué)習(xí)成果評(píng)估方法。但近期發(fā)表在Nature上的一項(xiàng)學(xué)習(xí)表明,學(xué)術(shù)界用來(lái)評(píng)價(jià)學(xué)術(shù)質(zhì)量和影響的文獻(xiàn)計(jì)量指標(biāo)并未產(chǎn)生大的變化。
  表面贊賞的學(xué)習(xí)VS 實(shí)際支持的學(xué)習(xí)
  常用的文獻(xiàn)計(jì)量指標(biāo)依賴短期的數(shù)據(jù),科研評(píng)審人習(xí)慣用評(píng)估期刊的影響因子、被引頻次、谷歌學(xué)術(shù)搜索結(jié)果來(lái)評(píng)價(jià)候選人及其學(xué)習(xí),即使在禁止此類評(píng)估方式的歐洲學(xué)習(xí)委員會(huì),這樣的做法仍然很普遍。
  原文作者采訪的評(píng)委抱怨,大多數(shù)學(xué)習(xí)者不愿意做“有風(fēng)險(xiǎn)的學(xué)習(xí)”,而更偏向于保守的、安全的學(xué)習(xí)。然而,實(shí)際情況是,評(píng)委在抱怨的同時(shí),自己也在規(guī)避科研風(fēng)險(xiǎn)。接受采訪的多位科學(xué)家表示,他們?cè)诮?jīng)費(fèi)申請(qǐng)書(shū)里不敢提出大膽的學(xué)習(xí)項(xiàng)目,局部原因是因?yàn)榕聞e人期望他們?cè)诟咚狡诳显丛床粩嗟匕l(fā)表論文。
  文獻(xiàn)計(jì)量指標(biāo)的地位為什么難以撼動(dòng)?
  許多資助機(jī)構(gòu)并不要求申請(qǐng)人報(bào)告文獻(xiàn)計(jì)量數(shù)據(jù),但是申請(qǐng)人還是會(huì)這么做。當(dāng)申請(qǐng)人挑選自己最有分量的論文時(shí),他們?cè)u(píng)價(jià)的標(biāo)準(zhǔn)常常是期刊影響因子和近期被引頻次,而不是對(duì)論文更加深入的價(jià)值評(píng)估。即使沒(méi)有這些指標(biāo),大多數(shù)評(píng)閱人也會(huì)在評(píng)估時(shí)自己了解這些數(shù)據(jù)。
  在涉及聘用和晉升時(shí),文獻(xiàn)計(jì)量指標(biāo)的作用更加重要。在西班牙,根據(jù)科研生產(chǎn)力漲工資的“六年”評(píng)估,嚴(yán)重依賴期刊影響因子;在意大利,每位評(píng)閱人都掌握著晉升候選人的文獻(xiàn)計(jì)量數(shù)據(jù);在歐洲、美國(guó)、中國(guó)的大學(xué)里,都有一套期刊列表,尤其在中國(guó),科研人員的獎(jiǎng)金和論文發(fā)表的期刊直接相關(guān)。
  原文作者對(duì)背后的原因進(jìn)行了分析,政府資助機(jī)構(gòu)用這些指標(biāo)來(lái)給大學(xué)分配資源,大學(xué)用這些指標(biāo)來(lái)給院系分配資源。在比利時(shí)弗蘭德斯地區(qū)、巴西等地,期刊影響因子在經(jīng)費(fèi)分配中都占有很大比重。而英國(guó)的學(xué)習(xí)卓越框架(ResearchExcellence Framework, REF)則是例外,公開(kāi)宣稱不用期刊影響因子。
  冒險(xiǎn)的學(xué)習(xí)的影響力
  原文作者利用Web of Science數(shù)據(jù)庫(kù)對(duì)2001年發(fā)表的66萬(wàn)余篇論文進(jìn)行分析,學(xué)習(xí)“冒險(xiǎn)的學(xué)習(xí)”的期刊影響因子和被引頻次變化。對(duì)“冒險(xiǎn)的學(xué)習(xí)”的界定是,這篇論文的參考文獻(xiàn)中是否包含全新的期刊組合,并考慮組合的可能性,據(jù)此將論文分成“低創(chuàng)新性”、“中創(chuàng)新性”、“高創(chuàng)新性”三類。如:Journal ofBiological Chemistry的一篇論文中發(fā)現(xiàn)某知名抗精神病藥物和某蛋白質(zhì)發(fā)生了反應(yīng),并用該現(xiàn)象來(lái)識(shí)別其他的生物效應(yīng)。參考文獻(xiàn)中,Gene Expression首次和Journal of Clinical Psychiatry、Neuropsychopharmacology組合在了一起。該論文有42篇參考文獻(xiàn),可以組合成861個(gè)期刊組合,其中9個(gè)是全新的組合。
  學(xué)習(xí)結(jié)果發(fā)現(xiàn),只有11%的論文的參考文獻(xiàn)出現(xiàn)了新的組合,而這其中,54%只有1個(gè)新組合。通過(guò)考察這些論文在2001~2015年的被引頻次變化,發(fā)現(xiàn)高創(chuàng)新性論文要么一鳴驚人,要么默默無(wú)聞,而一鳴驚人的論文則需要很長(zhǎng)時(shí)間才能具有一定影響力。
  如上圖所示,在發(fā)表之后的前3年,高創(chuàng)新性論文成為前1%的高被引論文的可能性低于低創(chuàng)新性論文,3年之后實(shí)現(xiàn)趕超,發(fā)表15年后,比低創(chuàng)新性論文高將近60%。同時(shí),高創(chuàng)新性論文也傾向于發(fā)表在影響因子較低的期刊上。目前依賴短期評(píng)價(jià)指標(biāo)的評(píng)價(jià)系統(tǒng)將大大低估這些具有更高的、更長(zhǎng)期的影響力的學(xué)習(xí)。
  現(xiàn)在該怎么做?
  基于以上學(xué)習(xí),原文作者針對(duì)不同主體提出一些建議:
  ·        對(duì)于學(xué)習(xí)者,應(yīng)該停止依賴這些短期指標(biāo)來(lái)指導(dǎo)選題和論文發(fā)表的期刊;
  ·        對(duì)于資助機(jī)構(gòu),應(yīng)摒棄這些指標(biāo),堅(jiān)持用多種方式進(jìn)行評(píng)價(jià),邀請(qǐng)主要領(lǐng)域外的專家加入討論,用5年甚至10年的時(shí)間窗口考察申請(qǐng)人學(xué)習(xí)績(jī)效;
  ·        對(duì)于評(píng)審人,停止依賴這些指標(biāo),尤其是時(shí)間窗口在3年內(nèi)的指標(biāo)進(jìn)行科研評(píng)價(jià);
  ·        對(duì)于期刊編輯,倡導(dǎo)使用考察時(shí)間更長(zhǎng)的指標(biāo)來(lái)評(píng)估期刊;
  ·        對(duì)于大學(xué),應(yīng)當(dāng)要求評(píng)審人必須閱讀候選人的論文。

學(xué)術(shù)評(píng)價(jià)中,勿被定量指標(biāo)蒙蔽雙眼  |  責(zé)任編輯:蟲(chóng)子
返回頂部