07年自考“人事測量”串講資料（5）

　　三、測試題的預(yù)測試和分析

　　◎預(yù)備測試題：測試題編排完成并不意味著這項測量工具的編制就此完成。前面對題目的選取只是依靠編寫者的主觀經(jīng)驗，題目的效果如何還需要進(jìn)行定量的客觀分析。這時的測試題還只能叫做預(yù)備測試題，還需要獲取被試對這些題目的反應(yīng)的材料，為進(jìn)一步篩選題目和為編排測量工具提供客觀依據(jù)。

　　◎預(yù)測試：必須將預(yù)備測試題對一定規(guī)模的小樣本被試進(jìn)行施測，獲得數(shù)據(jù)以進(jìn)行校驗、修訂。這一過程稱為測試題的預(yù)測試。

　　◎題目分析：測驗數(shù)據(jù)收集上來之后，應(yīng)該利用這些數(shù)據(jù)對題目進(jìn)行分析，刪除不好的題目或?qū)︻}目進(jìn)行修改，這個過程稱為題目分析。具體內(nèi)容包括對題目的項目分析和對測驗信度、效度指標(biāo)的檢查。

　　對測試題的預(yù)測試應(yīng)注意以下問題：⑴預(yù)測試對象必須和將來正式測試的對象相似；⑵預(yù)測試的實施過程與情境應(yīng)力求與將來正式測量工具實施時的情境相似；⑶預(yù)測試的時限可稍寬些，最好使每個被試都能將題目答完，以便搜集充分的反應(yīng)資料，使統(tǒng)計分析的結(jié)果更為可靠；⑷在預(yù)測試過程中，應(yīng)將被試的各種反映情況隨時加以記錄。如，記錄在不同時限內(nèi)一般被試所完成的題目數(shù)、題意不清之處、被試的態(tài)度等，以便在在修改測驗時作為參考。

　　預(yù)測試完成后，可以根據(jù)預(yù)測結(jié)果進(jìn)行題目分析，對每個題目的具體分析稱為項目分析，主要是指根據(jù)題目的難度、區(qū)分度、備選答案的合適度等數(shù)量指標(biāo)來對題目進(jìn)行分析。

　　2.☆被試特點對測量結(jié)果的影響：

　?、艤y驗的技巧與練習(xí)因素?！蚓毩?xí)效應(yīng)：有不少研究發(fā)現(xiàn)，應(yīng)試者參加相同或重復(fù)的測驗，會由于練習(xí)效應(yīng)而使測驗成績提高。

　?、平箲]和動機因素。①應(yīng)試動機；②測驗焦慮?！蚪箲]是一種不愉快的、表現(xiàn)為焦急、恐懼和緊張的情緒體驗，它主要是由于對可能出現(xiàn)的結(jié)果的擔(dān)心或?qū)?yīng)付這一結(jié)果的能力的擔(dān)心而造成。大多數(shù)人都在測驗前和測驗中感到焦慮，故又稱測驗焦慮或考試焦慮。

　?、欠磻?yīng)定勢。◎反應(yīng)定勢也成為反應(yīng)的方式或反應(yīng)風(fēng)格，簡單地說，就是每個人回答問題的習(xí)慣方式。

　　☆影響測量結(jié)果的反應(yīng)定勢主要有以下幾種：①求“快”與求“精確”的反應(yīng)定勢。②偏好正面敘述的反應(yīng)定勢，又成為肯定反應(yīng)定勢，克倫巴赫發(fā)現(xiàn)。③偏好特殊位置的反應(yīng)定勢。吉爾福特認(rèn)為，被試如果完全不知道選擇題的正確答案，則不會以完全隨機的方式來決定該選擇哪一個選項，而有偏好某一個位置的選項的傾向，而有些測驗編制者也存在偏好某個位置的反應(yīng)定勢，這些現(xiàn)象稱為位置定勢。④偏好較長選項的反應(yīng)定勢。⑤猜測的反應(yīng)定勢。

　　四、猜測的校正

　　1.★猜測修正的公式：S=R-W/（n-1），其中，S是正確分?jǐn)?shù)；R為被試答對的題目數(shù)；W為被試答錯的題目數(shù)；n為選項數(shù)目。

　　2.☆猜測修正的優(yōu)缺點。優(yōu)點：⑴修正公式可避免減低測驗的信度。⑵修正公式可以反映被試真正的能力和水平。⑶使用修正公式對那些不能答完全部試題的被試來說比較公平。

　　缺點：⑴公式假設(shè)不成立，因為被試答錯試題，并非完全瞎猜。⑵猜測修正無實質(zhì)作用。⑶未采用猜測修正對信度并無重大影響。⑷完全不許猜測與實際生活不符。

　　第二節(jié)實施測量計分的要領(lǐng)與誤差控制

　　檢驗客觀與否，可以以兩個或兩個以上受過訓(xùn)練的合格評分者所評結(jié)果之間的一致性作為指標(biāo)。一般情況下，受過訓(xùn)練的評分者之間的平均一致性達(dá)到90%以上，我們就認(rèn)為計分是客觀的。

　　一、計分的一般程序

　　1.◆☆計分的基本步驟：⑴記錄反應(yīng)。及時和清楚地記錄被試的反應(yīng)。⑵檢索標(biāo)準(zhǔn)答案。標(biāo)準(zhǔn)答案有時又稱計分鍵。⑶反應(yīng)和標(biāo)準(zhǔn)答案的比較。

　　2.◇問答題的主要缺點是評分不夠客觀，也就是說問答題的計分經(jīng)常受到評分者的情感、態(tài)度的影響。問答題中常見的誤差有：寬容定勢和暈輪效應(yīng)。

　　3.◎?qū)捜荻▌荩褐钢髟嚨挠嫹诌^于寬松，即使沒有回答出題目所要求的答案，評分者也給予較高的分?jǐn)?shù)。

　　4.◎暈輪效應(yīng)：指給予被試某道題較高分?jǐn)?shù)僅僅是由于被試在另外一些試題上獲得了高分，也就是說對被試的一般印象影響到具體某個問題的評價。

　　5.◎整體計分：就是評分者根據(jù)總體印象給答案評一個總分。整體計分在實際中應(yīng)用較為普遍。

　　6.◎分析計分：是給問答題的不同部分分派不同的權(quán)數(shù)，按照各部分的要求對答案中所包括的信息和技能評分，最后將各部分的權(quán)數(shù)和得分組合起來得到該問答題的分?jǐn)?shù)。

　　比較整體計分和分析計分？（回答上面的名詞，再加以說明）

　　7.◇客觀題的一個主要優(yōu)點就是計分簡單、客觀。

　　8.不同的反應(yīng)依據(jù)主試認(rèn)為的重要性不同也可以給予不同的權(quán)數(shù)，我們還可以根據(jù)被試回答問題時的確定程度給予不同的權(quán)數(shù)，這叫做“信心權(quán)數(shù)”◎。

　　第六章 人事測量結(jié)果的解釋

　　人事測量的解釋不同于測量實施本身，它們是測量中兩個不同的、相對獨立的成分。測量的解釋是一個相當(dāng)復(fù)雜的系統(tǒng)程序。