細(xì)看指標(biāo)，有些不必當(dāng)真

看排行榜，最重要的一步是什么？這個答案在許多業(yè)內(nèi)人士眼中，無疑是評估指標(biāo)。而這恰恰是很多學(xué)生忽略的問題。

評估指標(biāo)的合理性和數(shù)據(jù)的客觀性是一個排行榜能成功的關(guān)鍵。國內(nèi)的一家機(jī)構(gòu)曾經(jīng)推出大學(xué)排名的調(diào)查，其中一個指標(biāo)是畢業(yè)生質(zhì)量。這個指標(biāo)讓許多人看得百思不得其解，“是指畢業(yè)生的就業(yè)率，畢業(yè)后的薪水，還是就業(yè)單位？很難找到這項指標(biāo)的清晰解釋，而這個指標(biāo)是如何具體落實的，更是不甚了然�！睖�上一家大學(xué)的統(tǒng)計學(xué)副教授章老師表示很疑惑。

除了每個重要指標(biāo)是否設(shè)計得合理和科學(xué)外，評估過程是否透明，數(shù)據(jù)采集是怎樣完成的，各項指標(biāo)的具體得分是什么，也是推斷這個排行榜是否能為自己提供重要信息的因素。

程瑩是上海交通大學(xué)世界一流大學(xué)研究中心的執(zhí)行主任，她所在的機(jī)構(gòu)推出的《世界大學(xué)學(xué)術(shù)排名》自2003年發(fā)布以來，得到了許多國家的主流媒體、世界著名大學(xué)的網(wǎng)站和年報、Economist和Nature等學(xué)術(shù)刊物的重視。據(jù)她介紹，交大版排行榜的參考指標(biāo)一共有6項，每項都有說明和權(quán)重，為了避免主觀性，研究人員不采取深入調(diào)查的方式，所有數(shù)據(jù)皆由第三方提供。事實上，國際上的知名排行榜發(fā)布機(jī)構(gòu)在收集數(shù)據(jù)時，一方面依靠學(xué)校授權(quán)，另一方面從具有公信力的數(shù)據(jù)公司即第三方獲取，總體來說社會誠信度較高，數(shù)據(jù)還是比較真實和客觀的。

不過，即使這樣，各大知名排行榜仍然受到詬病。前不久，美國最受關(guān)注的US News大學(xué)排行榜爆出丑聞。美國名校喬治·華盛頓大學(xué)被逐出US News大學(xué)排名，因為該學(xué)校在提交有關(guān)新生在高中階段排名的數(shù)據(jù)有誤。US News被指責(zé)沒有核實學(xué)校提供的數(shù)據(jù)。

看榜人可以相信哪些數(shù)據(jù)？在程瑩看來，那些不是從學(xué)校直接取得的數(shù)據(jù)更可信。另外，能保證每個指標(biāo)的得分可以公布和檢驗，發(fā)布機(jī)構(gòu)還能提供核查數(shù)據(jù)的途徑的排名顯然更完善更準(zhǔn)確。

當(dāng)然，即便如此，也不要過于迷信這些排行榜。因為許多設(shè)計完美的指標(biāo)在現(xiàn)階段的技術(shù)條件下并不容易實現(xiàn)�！皩嶋H操作起來往往難度很大。不是找不到適合的指標(biāo)就是有了指標(biāo)卻采集不到數(shù)據(jù)，又或者采集難度太大，方法也不可靠�！睂Υ�，程瑩頗有些無奈。事實上，他們機(jī)構(gòu)在做一個世界研究型大學(xué)數(shù)據(jù)庫的計劃，向1200個研究型大學(xué)發(fā)問卷收集數(shù)據(jù)，盡管500強(qiáng)大學(xué)中有超過50%的回收率，1000強(qiáng)大學(xué)中這個數(shù)據(jù)達(dá)到了70%，但仍然有一些大學(xué)沒有回復(fù)。另外，統(tǒng)計來自不同渠道的研究經(jīng)費也很難操作，很多學(xué)校提供不出來，這就和當(dāng)初的設(shè)計有一定差異。

類似的困難在國外發(fā)布機(jī)構(gòu)也不鮮見。來自俄勒岡州里德學(xué)院的校長約翰·克魯格顯然很同意這個觀點，“所有的排名都不能準(zhǔn)確地計算出一個大學(xué)的學(xué)術(shù)能力和它對學(xué)生的幫助程度，因為它們的數(shù)據(jù)不見得真實和可靠，評估的方法也未必科學(xué)合理�！�