人文社科期刊論文評價指標體系構建

前言:尋找寫作靈感?中文期刊網用心挑選的人文社科期刊論文評價指標體系構建,希望能為您的閱讀和創作帶來靈感,歡迎大家閱讀并分享。

人文社科期刊論文評價指標體系構建

1引言

期刊論文不僅是科研成果的重要組成部分,而且有助于研究人員詳細了解該研究領域的發展現狀,因此一直是業界研究的熱點,而如何對其質量進行評價是人文社科領域科研管理與創新的重點與難點。長期以來,對于人文社科期刊論文評價以同行評議法和文獻計量法為主,存在以發表載體判斷成果質量等不足138,如一些高校在科研成果認定中,大都以的期刊及其期刊影響因子(或是否為核心期刊)代替對論文本身的評價,這種評價雖然有一定的合理性,但也存在不足;又如一些評價是以文章是否為課題或基金項目的研究成果為標準,忽略了科研成果的社會影響力及其經濟價值。目前,國際學術交流日益開放,社交媒體的出現使學者間的交流方式更加便捷、靈活、多樣。替代計量學(Altme-tircs)作為一種新的學術成果評價方式在國外逐步興起。該方式重視社交網絡的計量指標,成為一種面向學術成果的全面影響力評價指標體系。因此,為使我國人文社科期刊論文評價更為合理,加快我國人文社科期刊論文評價研究的國際化步伐,提高我國人文社科研究的國際影響力,本文在前期研究的基礎上,借鑒替代計量學及國內人文社科期刊論文評價指標,經過廣泛調研和深入訪談,設計了國際化背景下基于層次分析法(AHP)的人文社科期刊論文評價指標體系。

2國際化背景下人文社科期刊論文評價體系構建

為減少研究者在制定評價指標體系時的主觀性、片面性,本文在文獻調研的基礎上,初步確定了評價指標內容,并邀請國內外圖書館專業的20位專家就指標內容進行問卷調查及訪談,根據問卷反饋及訪談結果最終確立了國際化背景下我國人文社科期刊論文評價指標體系(如圖所示)。該評價指標體系分為3級:一級指標包含外部因素和內部因素兩個指標;二級指標包含發文期刊影響力等5個指標;三級指標包含被中外文檢索刊物收錄等25個指標。

2.1一級指標

2.1.1外部因素

外部因素(A1)主要是指發文期刊的影響力以及論文本身的影響力。一般來說,期刊水平從某種程度上代表了論文的學術水平,所以對論文評價時,除了評價論文本身的影響力外,本研究仍選取了常用的期刊影響力這一指標。

2.1.2內部因素

內部因素(A2)側重論文的形式規范性和內容價值兩個方面。與內容相比,論文形式規范性往往容易被作者忽略,但在國際化背景下,為便于國際交流,論文形式規范性同樣需要引起作者的重視。

2.2二級指標

二級評價指標分為如下5個:一級指標外部因素(A1)包含發文期刊影響力(B1)、論文學術影響力(B2)與論文社會影響力(B3)3個二級指標;一級指標內部因素(A2)包含論文形式規范性(B4)和論文內容價值(B5)兩個二級指標。

2.3三級指標

根據指標的層次關系,5個二級指標下共包含25個三級評價指標,具體分析如下:

2.3.1發文期刊影響力

發文期刊影響力(B1)包含3個三級評價指標,分別為:①發文期刊被中外文數據庫收錄情況(C1)。論文被哪些數據庫收錄是期刊影響力的重要體現。當今國內乃至國際上比較知名的文獻數據庫有Elsvier、EBSCO、Emerrald等,但是這些數據庫收錄的文獻語種以英文為主,我國人文社科領域的學者雖然也以外文,但發文量占總發文量的比例有限。為此,在設計評價指標時,選取了國內的知名數據庫,如中國知網(CNKI)、萬方、維普等。這些數據庫分別收錄了中文社會科學引文索引(CSSCI)及北大核心期刊所涵蓋的高質量期刊。②近5年影響因子(C2)。對于被SCI等數據庫收錄的期刊而言,該指標指的是期刊近5年影響因子的平均值,之所以選擇5年影響因子的平均值,是因為相對于當年的影響因子,5年的平均值更為客觀。③當年平均被引數量(C3)。它是指某一期刊論文當年平均被引數量。這3個指標分別從不同側面反映了發文期刊在學術界的影響力。

2.3.2論文學術影響力

論文學術影響力(B2)包含5個三級指標,分別為:①被檢索系統收錄情況(C4),指是否被國際或國內知名檢索類數據庫收錄,如國際上比較認可的SSCI、SCI、Scopus等數據庫;國內的人大報刊復印資料、CSSCI等數據庫。一般而言,能被國際知名數據庫收錄,說明論文通過了國外同行評審,有一定的創新性,質量較高;根據國內的評價標準,學術界對發表在CSSCI及北大核心期刊上的論文認可度較高,但并不排除一些優秀在非核心期刊的情況。②被轉載或摘錄情況(C5),指論文公開發表后,經過二次加工以二次文獻的形式被新華文摘或人大報刊復印資料等轉載的情況。論文能夠以二次文獻的形式被轉載,說明其學術水平不僅得到了發文期刊的認可,而且還得到了業界專業人士的認可,是一種間接的同行再評審,足以說明該論文在業界具有較高的學術影響力。③被(他)引次數(C6),指論文是否被中、外文文獻引用,論文在一定時期內被引次數越多說明其學術影響力越大,質量越高。但是這里需要注意3個問題,首先,不同于自然科學,人文社會科學的新思想一般需要5-10年甚至更長時間才能被人們接受或認可,因此一般情況下短時間內其被引率不會太高?!犊茖W》雜志曾對發表在4500種頂級科研期刊上的文章作過調研,指出只有45%的論文在發表后的5年中被其他文章引用。大部分文章被淹沒在眾多的科研資料中,所以在制定評價指標時應考察一篇論文5-10年的被引次數,而不應采用1年的被引次數。其次,論文的被引包括他引和自引,他引更能夠體現文章的學術影響力,說明該文對后續研究產生了影響。第三,在關注論文被引次數的同時,還應考慮引用文獻來源期刊的水平。④被下載量(C7),指論文被下載的次數。之所以選取被下載量作為評價指標,是因為目前的數據庫均提供下載服務,被下載量的高低在很大程度上能夠體現該論文受讀者(包括研究者)關注的程度,從一個側面反映了論文的影響力。⑤基金資助(C8),指發表的論文是否有課題作為支撐。一般而言,有課題支撐的論文由于在立項時經過同行專家的充分論證,研究基礎扎實,研究內容豐富,起點較高,具有創新性。三級指標C4-C8分別從不同側面反映了論文學術影響力(B2),但并不能全面反映論文的社會影響力。隨著大數據時代的到來及開放獲取運動的興起,越來越多的學者青睞于借助微博、博客、臉書、推特等網絡社交平臺學術論文或表達學術觀點,進而擴大論文的社會影響力。近年來國際上出現的替代計量學就是借由網絡社交媒體平臺評估出版作品的線上影響,可以說其在很大程度上是評價論文的社會影響力,可令使用者快速獲悉研究成果的影響力。此外,高引文率的學科具有較高的替代計量學表現,而對低引文率學科的替代計量學分析可以從其他方面對該學科研究進行有效補充。姜春林、高飛等提出應把替代計量學納入我國已有的人文社科評價指標體系中;趙蓉英等以漢語言文學學科為例,應用Altmetrics對學術論文影響力進行評價研究。為使我國人文社會科學成果評價更好地與國際接軌,理應引入論文社會影響力評價指標。

2.3.3論文社會影響力

國際化背景下人文社科論文社會影響力(B3)包括5個三級指標:①社交媒體的討論和使用熱度(C9),指學術論文在社交媒體上的討論及傳播情況。國際上Altmetrics的數據來源廣泛,所說的社交媒體涵蓋Facebook、Twitter、Blog、微博、領英等。2014年起,新浪微博的數據已作為評價指標被收錄到Altmetrics中,數據可以回溯至2011年10月[14]。然而不能完全照搬Altmet-rics,因為國內學者目前不能使用Facebook、Twitter、YouTube等,所以設定社交媒體時需要體現中國元素,如可以把微信(如社科學術圈)加入考察指標,考察國內學者對該指標的認可度。②學術網站的討論及評價(C10),指學術論文在學術網站被討論及轉載的情況。學術網站包括國內的學術圈、小木蟲、科學網、經管之家、Re-searchGate、Academia.edu等。本研究選取的學術網站是國內研究者經常參與互動的網站。Ac-ademia.edu和ResearchGate均為成立于2008年的科研社交網絡服務網站,隨著網絡價值的不斷提高,越來越多的學者加入到學術社交網絡中。這種社交學術網站打破了國別和領域的限制,實現了全球范圍內學者的互聯互通和信息共享,學者可以在該類網站上交流和評價共同關注的論文或觀點。③出現在政策檔案或政府文件中的次數(C11),尤其指檔案文件中對論文的提及次數。Altmetrics把學術論文的觀點是否出現在政府文件中作為衡量論文社會影響力的指標并賦予一定的權重。筆者認為這是非常重要的,一般被政府部門批示、采納的觀點一旦在政府制定的政策和發展規劃中產生了影響,其社會影響力不言而喻。④被百科詞條引用(C12),指論文中的觀點或概念是否被百科詞條引用,百科詞條包括wiki及百度百科。Altmetrics通過統計被wiki詞條引用的次數或瀏覽、討論的次數評估論文的社會影響力。在國內,wiki使用的頻率不及百度百科,所以在評價論文的社會影響力時,加入了論文的觀點是否被百度百科詞條引用這一指標。⑤論文獲獎情況(C13),主要指論文的獲獎級別。國內外設立的人文社科論文獎項很多,一般而言獲獎論文的創新性、邏輯性、社會認可度均較高,所以將其列入論文社會影響力評價指標。

2.3.4論文形式規范性

除了以上外部因素外,在評價過程中還有非常重要的一個方面就是對論文內部因素的評價,體現內部因素的論文形式規范性(B4)及論文內容價值(即同行專家評審)(B5)兩個二級指標共包含12個三級指標,具體分析如下:論文形式規范性(B4)可以分解為C14-C18共5個三級指標。①中英文題目(C14),指論文選題的新穎性及中英文題目是否齊全完整。在國際化背景下要想擴大論文的學術交流范圍,論文必須有準確、精煉和完整的英文題目。標題的質量在某種程度上代表了論文的“臉面”,好的標題可以引起同行的注意,是吸引讀者關注論文的重要因素。②中英文摘要(C15),指論文是否同時含有中文、英文摘要,摘要的書寫是否全面詳細。為了與國際接軌,便于國際交流,英文摘要最好是敘述性摘要而非指示性摘要,通過閱讀摘要即可了解論文的主要研究內容和結論。摘要的質量直接關系到論文是否被期刊錄用、被文摘收錄,尤其是發表在國外期刊的論文,編輯首先關注的是論文的摘要而不是文章本身。③中英文關鍵詞(C16),指關鍵詞的選取是否齊全、規范,能否代表論文研究的范圍和內容。關鍵詞往往反映文章的主題,不論是國內數據庫還是國外數據庫都把關鍵詞作為論文檢索途徑。關鍵詞準確、規范、齊全與否直接關系到文章能否被研究者準確、快速鎖定。④參考文獻(C17),主要考察論文標注是否規范,引用資料、觀點的來源是否清晰,是否有侵權行為。不同期刊對參考文獻的著錄格式有不同的要求,但都要求具有可追溯性。如發表于國內期刊的論文參考文獻一般采用GB/T7714標準,國內對該標準會隨時更新調整;國外期刊參考文獻書寫有MLA(theModernLanguageAssoci-ation)和APA(theAmericanPsychologicalAs-sociation)兩種格式,一般人文社科論文多采用MLA格式,因此參考文獻需嚴格按照相關標準書寫。⑤作者中英文簡介及作者ID(C18),指作者學術簡介以及代表其身份標識的IDORCID或ResearchID。為了適應國際化的要求,國內學者在時最好附有中英文作者簡介,以便于國際交流。此外,為避免作者重名的情況,目前國內外部分期刊要求作者提供IDORCID或Re-searchID,這是未來期刊發文的要求,所以作者ID被確定為論文規范性(B4)的子指標之一。

2.3.5論文內容價值

論文內容價值(同行專家評審)(B5)很大程度上應由同行專家評審決定,實踐表明,同行評議更符合人文社會科學的學科特點,更能及時有效地發現優秀成果。該二級指標共有7個(C19-C25)三級指標:①理論創新(C19),指論文選題是否為該領域的重要課題,是否提出了新的理論觀點。②方法創新(C20),指論文是否提出或采用了新的方法,使研究取得了突破性進展。③描述創新(C21),指論文是否對重要領域或重要問題作出新的系統描述、分析和概括。④應用創新(C22),指論文是否科學合理地引入其他學科的理論方法,或將本學科知識應用到其他學科以解決問題。⑤學術價值(C23),指發表的論文是否具有原創性,是否有標志性話語,是否提出前瞻性的預測與建議,是否為學術探索提出方向性的指導??梢哉fC19-C23都是針對論文的創新性而言的,論文是否具有創新性需要同行專家評審確定。⑥社會價值(C24),人文社科領域的論文是否具備社會價值體現在文章提及的策略、觀點是否被政府部門認可或采納。⑦經濟價值(C25),指學術論文提出的對策建議被采納后是否產生經濟效益。社會價值(C24)和經濟價值(C25)兩個指標主要體現在論文所闡釋觀點的應用價值上,無論是創新性價值還是應用價值均屬于論文內容價值(B5)這一評價指標。

亚洲精品一二三区-久久