2018年9月，“金平果”第15次發(fā)布《中國研究生教育及學(xué)科專業(yè)評價報告》，本次評價由杭州電子科技大學(xué)中國科教評價研究院和浙江高等教育研究院、武漢大學(xué)中國科學(xué)評價研究中心聯(lián)合《中國科教評價網(wǎng)》（m.uvvvu.cn）隆重推出。這是“金平果”評價品牌連續(xù)十五年發(fā)布《中國研究生教育及學(xué)科專業(yè)評價報告》。

 

 

本次評價中，我們在審定了評價體系并確定評價對象后，對原始數(shù)據(jù)進(jìn)行了全面核查，并對異常數(shù)據(jù)進(jìn)行處理，然后利用我們自己設(shè)計的“中國研究生教育評價信息系統(tǒng)”進(jìn)行數(shù)值計算、統(tǒng)計得分。

 

分類評價是當(dāng)前科學(xué)評價的熱點和難點，專業(yè)評價是教育評價的微觀層面，其復(fù)雜度和難度之大難以想象。通過多年的評價實踐，研究者認(rèn)識到利用題錄信息可以完成論文分類，有人提出《中華人民共和國學(xué)科分類與代碼國家標(biāo)準(zhǔn)》是中國科學(xué)評價領(lǐng)域的最佳分類體系。它在梳理常規(guī)分類方法的基礎(chǔ)上，歸納出這些方法適合于分類評價的方面，而且對這些方面進(jìn)行進(jìn)一步的改造和融合，提出和構(gòu)建了科學(xué)評價論文分類系統(tǒng)，其特點是“二次分類”和“自動生成訓(xùn)練集”。該系統(tǒng)巧妙利用期刊分類器和類號轉(zhuǎn)換器，實現(xiàn)了二次分類和自動生成測試集，提高了支持向量機(jī)（support vector machine，SVM，一種機(jī)器學(xué)習(xí)算法）的分類精度，也避免了繁重的人工分類任務(wù)。實驗證明該系統(tǒng)能勝任科學(xué)評價中的論文分類任務(wù)。本次評價繼續(xù)使用該系統(tǒng)并適當(dāng)改進(jìn)。本次評價在其他數(shù)據(jù)指標(biāo)的分專業(yè)過程中，采用人機(jī)結(jié)合的方式，大量使用VBA、Java等設(shè)計程序，提高了工作效率和準(zhǔn)確性。

 

最后，我們利用“中國研究生教育評價信息系統(tǒng)”進(jìn)行數(shù)值計算、統(tǒng)計得分和排行榜生成。在評價過程中，我們進(jìn)一步實現(xiàn)智能與人工的密切配合，加強(qiáng)了誤差判定，對波動較大的數(shù)據(jù)進(jìn)行了人工校準(zhǔn)，提高了效率，保證了準(zhǔn)確率。

 

在評價的初步結(jié)果出來之后，我們邀請各領(lǐng)域?qū)＜覍Y(jié)果進(jìn)行分析，將反饋的意見納入最終的結(jié)果，達(dá)到了定量評價和定性評價的完美結(jié)合，使評價的結(jié)果更具科學(xué)性和權(quán)威性。