知識競賽中一個(gè)可能的評價(jià)方法
知識競賽是一種較為傳統(tǒng)的活動形式。已經(jīng)在社區(qū)和官群多次舉辦,規(guī)則無非為分高者優(yōu)先,乍一看無可厚非,是理所應(yīng)當(dāng)?shù)?。然而,由于?guī)則的不完備性,通常容易導(dǎo)致私下交流甚至抄襲事件的發(fā)生,埋下了矛盾產(chǎn)生的禍根,同時(shí)也因?yàn)轭}目討論,對于群管理,社區(qū)管理等造成了諸多不便,不利于個(gè)人水平的發(fā)揮,難以區(qū)分同分?jǐn)?shù)區(qū)間的玩家,即分辨率較低。
在周年慶的知識競賽中,引入了原始成績與最終成績的概念,采用了賦分制,并考慮了同分段的分配問題,相較于第一次舉辦,無疑是更完善的,但另一方面,時(shí)間因素的占比仍舊有限,甚至基本無法對結(jié)果產(chǎn)生影響,因此,第一次知識競賽的弊端仍有部分留存。
如下:
1.在保證開放性的前提下存在拖延答題情況,即逐個(gè)驗(yàn)證,使得答題時(shí)間T特別長,此規(guī)則某種程度上增加了平均消耗時(shí)間。
2.存在投機(jī)思想,即使答題結(jié)束時(shí)間t特別長,此過程中收集答案,后迅速完成答題。此規(guī)則某種程度上促發(fā)了不安定因素。
3.存在詢問他人意見,部分參賽者容易因此引發(fā)矛盾,且不是個(gè)例,尤其以競賽期間和競賽結(jié)束后發(fā)生頻率最高。
以上三個(gè)方面本質(zhì)上代表了分?jǐn)?shù)x,答題消耗時(shí)間T,答題結(jié)束時(shí)間t三個(gè)因素。因此,可以將以往的排序方法稱為分?jǐn)?shù)排序法,現(xiàn)將三因素統(tǒng)一考慮,確定綜合指標(biāo)y,利用y進(jìn)行排序,可稱為三因素排序法。
此方法的關(guān)鍵便在于確定y的表達(dá)式,即令
y=ax+bT+ct
a,b,c為正數(shù),其數(shù)學(xué)定義為指標(biāo)權(quán)重,由于x為正向指標(biāo),T,t均為逆向指標(biāo),故需通過指標(biāo)正向化過程將逆向指標(biāo)正向化,,同時(shí)消除量綱影響,運(yùn)算量較大,對于數(shù)千數(shù)據(jù)的量級分析,可使用excel表格處理或使用編程語言,數(shù)學(xué)軟件進(jìn)行處理。具體處理如下:
對于分?jǐn)?shù)x
x'=(x-x最小值)/(x最大值-x最小值)
x'為經(jīng)過標(biāo)準(zhǔn)化后的數(shù)據(jù),x為原始數(shù)據(jù)
對于時(shí)間T和t,二者處理辦法一致,
t'=(t最大值-t)/(t最大值-t最小值)
t'為經(jīng)過標(biāo)準(zhǔn)化后的數(shù)據(jù),t為原始數(shù)據(jù)
此處理可使數(shù)據(jù)變換到區(qū)間[0,1]之間,消除量綱影響。
權(quán)重的確定有兩種方法,此處采用客觀賦權(quán)法中的變異系數(shù)法。首先,應(yīng)當(dāng)計(jì)算出處理后三組數(shù)據(jù)的均值m和方差D,然后
k=(D)^0.5/m
k定義為變異系數(shù),本次有k1,k2,k3分別代表x,T,t的變異系數(shù),由此可確定指標(biāo)權(quán)重a,b,c的值
對應(yīng)關(guān)系如下:
a=k1/k1+k2+k3
b=k2/k1+k2+k3
c=k3/k1+k2+k3
此過程中,指標(biāo)權(quán)重即為變異系數(shù)的和歸一化處理結(jié)果。其應(yīng)該滿足歸一化條件,即a+b+c=1。
得到權(quán)重值以后,利用經(jīng)過標(biāo)準(zhǔn)化后的各數(shù)據(jù)計(jì)算每個(gè)人的綜合指標(biāo)y值,根據(jù)y大小進(jìn)行重排序。下面以上次知識競賽QQ頻道渠道前20名的答題數(shù)據(jù)作為參考數(shù)據(jù),進(jìn)行具體性分析。

左1列為原排名列,是按成績x的順序進(jìn)行排列的;左二列為分?jǐn)?shù)列,是按原始成績依次排序;左三列為分?jǐn)?shù)x經(jīng)過標(biāo)準(zhǔn)化處理后的數(shù)據(jù),即x';左四列為(x'-x'的均值)^2,是計(jì)算方差過程中產(chǎn)生的計(jì)算數(shù)據(jù),無實(shí)際意義;此列下方分別為方差,標(biāo)準(zhǔn)差,變異系數(shù);依次往右類推至右三列為止。此計(jì)算過程從左到右,從上到下。在求出abc三因素的權(quán)值后,將經(jīng)過標(biāo)準(zhǔn)化的數(shù)據(jù)(分?jǐn)?shù)列的列2,其余列為列1)進(jìn)行加權(quán)求和,得到最終得分y,y也是0與1之間的數(shù)據(jù),因此,可通過整體線性變換乘基數(shù)100將其映射至0-100,作為考量了三因素后的綜合得分。上面給出了前20數(shù)據(jù)的重新排序,可見,僅僅依靠分?jǐn)?shù)作為判斷標(biāo)準(zhǔn)是有失偏頗的,多因素的考慮更符合現(xiàn)實(shí)。
上圖中的權(quán)重0.5,0.35,0.15僅僅針對以上20組樣本數(shù)據(jù)成立,對于不同的數(shù)據(jù),其得出的結(jié)果不盡相同,不過方法卻是一致的,這也是客觀賦權(quán)法的精髓所在。均值,方差等全程求解不需要使用計(jì)算器進(jìn)行,使用excel或者手機(jī)端microsoft Office軟件均可完成求解,時(shí)間消耗不超過半小時(shí)即可完成任意規(guī)模樣本的運(yùn)算。
需要注意的是此方法求解的前提在于指標(biāo)重要性相當(dāng),即沒有明確的重要性傾向,各個(gè)指標(biāo)均可對結(jié)果產(chǎn)生較大的作用,而知識競賽中使用三因素排序法則近似滿足此要求。對于重要性不同的,有明顯區(qū)別者可使用主觀定權(quán)法定權(quán),不在本文討論范圍之內(nèi)。
注意事項(xiàng):指標(biāo)正向化是必不可少的一部分,當(dāng)為第一等要事;方差估計(jì)的樣本方差與總體方差應(yīng)當(dāng)明確;最終得分的取值區(qū)間可以任意映射。
部分名詞解釋:
指標(biāo):對評價(jià)對象的評價(jià)標(biāo)準(zhǔn)
標(biāo)準(zhǔn)化:消除單位影響,讓數(shù)據(jù)統(tǒng)一到某區(qū)間范圍內(nèi)
指標(biāo)正向化:將所有類型指標(biāo)轉(zhuǎn)換成正向指標(biāo)的過程
正向指標(biāo):數(shù)值越大越好
逆向指標(biāo):數(shù)值越小越好
方差:衡量樣本偏離中心程度的參量,可代表信息包含的多少
均值:即平均數(shù),描述樣本的分布中心
權(quán)重:具象化地描述各個(gè)指標(biāo)在計(jì)算最終得分時(shí)所占的重要性大小,是變異系數(shù)的歸一化表示。