心理測量學(xué)課件6第四章項(xiàng)目分析.ppt

《心理測量學(xué)課件6第四章項(xiàng)目分析.ppt》由會員分享，可在線閱讀，更多相關(guān)《心理測量學(xué)課件6第四章項(xiàng)目分析.ppt（49頁珍藏版）》請在裝配圖網(wǎng)上搜索。

1、第四章項(xiàng)目分析測驗(yàn)分?jǐn)?shù)的解釋與應(yīng)用,,第八章測驗(yàn)的項(xiàng)目分析項(xiàng)目分析包括定性分析和定量分析。定性分析包括考慮內(nèi)容效度、題目編寫的恰當(dāng)性和有效性等；定量分析主要是指題目難度和區(qū)分度的測量。對項(xiàng)目進(jìn)行篩選和修訂，可以提高測驗(yàn)的信度和效度。無論是何種類型的測驗(yàn)，都需要進(jìn)行分析。在對結(jié)果進(jìn)行分析時需要解答如下問題：設(shè)定的測試時間長度是否適當(dāng)？受測者是否理解指導(dǎo)語？施測條件是否適當(dāng)？緊急意外事件的處理是否恰當(dāng)？……….,,下面所列的問卷，是受測者完成成就測驗(yàn)后填寫的，其目的是提供關(guān)于測驗(yàn)公平性的信息：測驗(yàn)評價表指導(dǎo)語：請在完成測驗(yàn)后填寫這份表格，請您對每個項(xiàng)目的反應(yīng)上畫圓圈，并將您認(rèn)為恰當(dāng)?shù)睦碛商顚懺诳崭?/p>

2、處。1、YN測試環(huán)境（座位、溫度、通風(fēng)、噪音水平等）您是否滿意？2、YN在測試之前您是否已仔細(xì)閱讀了指導(dǎo)語？3、YN測驗(yàn)指導(dǎo)語是否清晰？,,4、YN測驗(yàn)的格式（項(xiàng)目類型、項(xiàng)目編排、答題卡等）您是否滿意？5、YN測驗(yàn)是否充分涵蓋了考試指定材料？6、YN測驗(yàn)問題的難度是否適宜？7、YN您對參加該測試是否做了充分的準(zhǔn)備？8、YN您是否學(xué)習(xí)了合適的材料？9、YN您認(rèn)為是否答錯了某些測驗(yàn)問題？具體是哪些？10、YN您是否對測驗(yàn)回答進(jìn)行了猜測？猜測的問題有多少？具體是哪些問題？11、YN您是否有沒作答的問題？具體是哪些問題？,,12、YN您是否有足夠的時間答完測驗(yàn)？13、YN您在完成測驗(yàn)后是否檢查了作答的

3、答案？14、YN在測驗(yàn)的過程中您是否有焦慮或情緒上的厭煩？15、YN測驗(yàn)是否公正？16、YN總的來說，這是否是一份好的測驗(yàn)？17、YN您是否觀察到測試中有欺詐行為？18、YN您期望在此測驗(yàn)上獲得哪個等級的成績？,,分析受測者在某個項(xiàng)目上的反應(yīng)，功能是：1、進(jìn)行項(xiàng)目分析的主要目的是提供測驗(yàn)質(zhì)量或刪除無效的項(xiàng)目。2、對于成就測驗(yàn)而言，是提供受測者掌握知識與否的診斷信息，看受測者是否對測驗(yàn)有充分的準(zhǔn)備，是否能滿足他們的期望等等。,,第一節(jié)測驗(yàn)的難度一、難度（difficulty）的意義難度，指項(xiàng)目的難易程度。在能力測驗(yàn)中，稱為“難度”，而在非能力測驗(yàn)中（如人格），則指“通俗性”。兩者都是指在總體中，

4、能夠正確或確切回答某項(xiàng)目的人數(shù)。,,二、難度的計算（一）二分法記分項(xiàng)目的難度1．通過率P=R/N100%P代表項(xiàng)目的通過率，N為全體受測人數(shù)，R為通過或答對該項(xiàng)目的人數(shù)。以通過率來表示項(xiàng)目的難度，P越大，項(xiàng)目越容易，難度越低。,,2．極端分組法（上下27%）P=（PH+PL）/2P代表難度，PH和PL分布代表高分組和低分組通過率，此公式還可轉(zhuǎn)換為P=(RH+RL)/2N100%RH和RL分別代表高分組和低分組通過該題的人數(shù)，N代表每個組的人數(shù)。,,例如：在100名被試中，選為高分組和低分組的被試各有27人，其中高分組有20人答對第一題，低分組有10人答對第一題，則第一題的難度為：(1)PH=2

5、0/27100%=74.1%PL=10/27100%=37%P=(74.1%+37%)/2=55.6%(2)P=(20+10)/227=55.6%,,練習(xí)：一個測驗(yàn)項(xiàng)目向75名受測者施測，高水平組（測驗(yàn)總分中最高27％）中有18名答對此項(xiàng)目，低水平（27％）中有12名受測者答對此題目，那么此項(xiàng)目的難度是多少？,,3、選擇題的難度校正公式：,CP為校正后的通過率，P為實(shí)際得到的通過率，K為備選項(xiàng)目的數(shù)目。,例如：假定某題有75％的被試通過，如果該題有5個備選項(xiàng)目，則校正后通過率實(shí)為：,（二）非二分法記分項(xiàng)目的難度，測試題為問答題或其他不能用二分法記分的形式時，常常對部分正確的反應(yīng)也給一定分?jǐn)?shù)，在

6、這樣情況下，可以先人為的確定通過每一題的分?jǐn)?shù)線，再按公式計算難度：x100％為所有被試在該項(xiàng)目上的平均得分，Xmax為該項(xiàng)目的滿分。,,例如：一個數(shù)學(xué)題的滿分為20分，全體考生在試題上所得的平均分?jǐn)?shù)為15分，其難度為：P=15/20＝0.75,三、測驗(yàn)難度水平的確定效標(biāo)參照測驗(yàn)、掌握測驗(yàn)：不考慮難度；選拔測驗(yàn)：難度=錄取率；對于選擇題來說，難度一般應(yīng)大于猜測概率；無論是速度測驗(yàn)，還是難度測驗(yàn)，一般都應(yīng)防止被試得滿分，因?yàn)闈M分的意義是不明確的。大體而言，難度為0.50時最理想，此時項(xiàng)目具有最大的鑒別力。但在實(shí)際操作中，讓所有項(xiàng)目難度都到達(dá)0.50困難很大，而且也不必要，一般只需使項(xiàng)目的平均難度接

7、近0.50，而各個項(xiàng)目的難度在0.500.20之間變化。,四、難度的等距變換根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉(zhuǎn)換成相應(yīng)的Z分?jǐn)?shù)，這就是等距量表。PY0Z,美國教育服務(wù)中心以Δ作為難度指標(biāo)：Δ=13+4ZP=.0013Z=+3Δ=25P=.16Z=+1Δ=17P=.50Z=0Δ=13P=.84Z=-1Δ=9P=.9987Z=-3Δ=1,五、難度對測驗(yàn)的影響（一）測驗(yàn)難度影響測驗(yàn)分?jǐn)?shù)的分布形態(tài)難度大，正偏態(tài)難度低，負(fù)偏態(tài),（二）測驗(yàn)難度影響測驗(yàn)分?jǐn)?shù)的離散程度測驗(yàn)過難或過易，分?jǐn)?shù)全距縮小，信度降低。P=0.50時最佳,第二節(jié)測驗(yàn)的區(qū)分度一、區(qū)分度的意義區(qū)分度（discriminatio

8、n）是指測驗(yàn)項(xiàng)目對被試心理品質(zhì)水平差異的區(qū)分能力或鑒別能力。項(xiàng)目的區(qū)分度是測驗(yàn)是否有效的“指示器”。鑒別力分析的設(shè)想基礎(chǔ)：如果單個項(xiàng)目與測驗(yàn)測的是同11、一特性，那么我們可以預(yù)期在測驗(yàn)上得高分的人正確回答這一問題的概率大，而在測驗(yàn)上得低分的人正確回答這一問題的概率低。鑒別力分析就是在這一設(shè)想的基礎(chǔ)上進(jìn)行的。項(xiàng)目的鑒別力就是其對于所測量的心理特性的區(qū)分能力。鑒別力分析的一般方法：鑒別力指數(shù)、項(xiàng)目-總分相關(guān)、項(xiàng)目間相關(guān)。,,二、區(qū)分度的計算（一）項(xiàng)目鑒別指數(shù)法1．鑒別指數(shù)（indexofdiscrimination，D）的計算D=PH-PL取值范圍：-1~+1D為鑒別指數(shù)，PH為高分組在某個項(xiàng)目上

9、的通過率，PL為低分組在該項(xiàng)目上的通過率。,,例如：某小學(xué)數(shù)學(xué)測驗(yàn)，受測者共18人，高分組和低分組若各取總?cè)藬?shù)的27％，則兩組各為5人，第8題高分組5人全部答對，低分組1人答對，則第8題的鑒別指數(shù)為：D＝5/5-1/5=0.8D值是鑒別項(xiàng)目測量效標(biāo)有效性的指標(biāo)，D越高，項(xiàng)目的區(qū)分度就越高，項(xiàng)目就越有效。如果測驗(yàn)只是用來考查學(xué)生對一些基本知識和技能是否掌握，則不用考慮區(qū)分度。,,一個測驗(yàn)項(xiàng)目向75名受測者施測，高水平組（測驗(yàn)總分中最高27％）中有18名答對此項(xiàng)目，低水平（27％）中有12名受測者答對此題目，那么此項(xiàng)目的區(qū)分度是多少？,2．極端組的劃分27%規(guī)則一般情況下，取上下25%~33%均可

10、。樣本少時，可以取50%注意：由于計算機(jī)的方便使用，可以上下50%作為劃分高低組的標(biāo)準(zhǔn)，或者多分幾組，對區(qū)分度和難度作詳細(xì)分析。因?yàn)橹蝗∩舷聝啥?，只利用了一部分資料，浪費(fèi)了很多信息，有可能得出錯誤結(jié)論。,,（二）相關(guān)法（項(xiàng)目-總分相關(guān)）1．點(diǎn)二列相關(guān),,是受測者總量,是答對該項(xiàng)目的受測者量,是通過該項(xiàng)目的受測者效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的標(biāo)準(zhǔn)差,,例如：假定有30人，他們測驗(yàn)總分的平均數(shù)和標(biāo)準(zhǔn)差分別是75和10，如果有17名受測者答對某個項(xiàng)目，他們測驗(yàn)總分的平均分?jǐn)?shù)是80，那么項(xiàng)目的效度是多少？,,,,一個測驗(yàn)的項(xiàng)目答對的記1分，答錯的記0分，這時項(xiàng)目的分?jǐn)?shù)就是一

11、個二分變量，而測驗(yàn)的總分則為連續(xù)變量，如果要計算該項(xiàng)目的區(qū)分度，就可用點(diǎn)二列相關(guān)公式：,,,通過該項(xiàng)目的受測者總分的平均值,未通過該項(xiàng)目的受測者的總分平均值,所有值的標(biāo)準(zhǔn)差,,方差的計算：,,例題：下表是某學(xué)校的15名學(xué)生的總分和某項(xiàng)目的解答情況，計算該項(xiàng)目與總分的相關(guān)系數(shù)。,（三）項(xiàng)目特征曲線（itemcharacteristiccurve,ICC）項(xiàng)目特征曲線描述了效標(biāo)分?jǐn)?shù)不同的被試在該項(xiàng)目上的通過率。曲線坡度越陡，鑒別力越好，預(yù)測的誤差越小。,,,,率概的目項(xiàng)答回確正,1.00,0.00,0.50,低中高能力,鑒別力較好,低中高能力,鑒別力為負(fù),鑒別力較低,,難度不同的3個項(xiàng)目的ICC,

12、,項(xiàng)目特征曲線：運(yùn)用圖象直觀地顯示了隨著測驗(yàn)者某種心理特征水平的變化，正確回答某個項(xiàng)目的概率是如何變化的。項(xiàng)目特征曲線是現(xiàn)代心理測量學(xué)最有影響的理論之一-項(xiàng)目反應(yīng)理論或稱潛特征理論的基礎(chǔ)。ICC歸納了項(xiàng)目分析的信息，顯示了心理能力水平與項(xiàng)目反應(yīng)之間的關(guān)系。當(dāng)項(xiàng)目-總體相關(guān)為正時，ICC的斜率也是正的；當(dāng)相關(guān)接近0時，ICC斜率也接近于0；當(dāng)相關(guān)為負(fù)時，ICC斜率為負(fù)。,多項(xiàng)選擇中每個選項(xiàng)的ICC,三、區(qū)分度與難度的關(guān)系,難度和區(qū)分度都是針對一定團(tuán)體而言的。一般來說，較難的項(xiàng)目對高水平被試區(qū)分度高，較易的項(xiàng)目對低水平被試的區(qū)分度高。,四、區(qū)分度的相對性（一）不同的計算方法，所得區(qū)分值不同區(qū)分度有

13、幾種計算方法？（二）樣本容量大小影響相關(guān)法區(qū)分度值的大小樣本越大，區(qū)分度越……（三）分組標(biāo)準(zhǔn)影響鑒別指數(shù)分組越極端，區(qū)分度越……（四）被試樣本的同質(zhì)性程度影響區(qū)分度值的大小樣本越同質(zhì)，區(qū)分度越……,第三節(jié)項(xiàng)目分析的特殊問題一、多重選擇題的項(xiàng)目分析（誘答分析）對于多重選擇題，除了分析難度和區(qū)分度外，還要對每個選項(xiàng)進(jìn)行分析。下列哪一個最有可能是偏執(zhí)型精神分裂癥患者的次級癥狀：A幻聽B癱瘓C記憶喪失D厭食,如果所有被試都選擇某一正確的選項(xiàng)，說明該選項(xiàng)……如果沒有一個被試選擇某個錯誤選項(xiàng)，說明該選項(xiàng)……如果所有被試都選擇某個錯誤選項(xiàng)，說明該選項(xiàng)……如果高分組被試的選擇集中在兩個選項(xiàng)上，說明該選項(xiàng)……如

14、果高分組和低分組對正確選項(xiàng)的選擇沒有區(qū)別，說明該選項(xiàng)……如果所有被試都未回答某個題目，說明該題……如果選擇各個選項(xiàng)的人數(shù)幾乎相等，說明該題……,二、速度測驗(yàn)的項(xiàng)目分析對前面部分的測驗(yàn)項(xiàng)目，難度和區(qū)分度都……對后面部分的測驗(yàn)項(xiàng)目，難度和區(qū)分度都……三、標(biāo)準(zhǔn)參照測驗(yàn)的項(xiàng)目分析在標(biāo)準(zhǔn)參照測驗(yàn)中，無須考慮項(xiàng)目的難度和區(qū)分度，只要項(xiàng)目的內(nèi)容很重要就行。也可以通過比較教學(xué)或訓(xùn)練的前測和后測結(jié)果來進(jìn)行項(xiàng)目分析，用來說明教學(xué)或訓(xùn)練的效果以及項(xiàng)目編制是否適當(dāng)。,四、項(xiàng)目-團(tuán)體的相互作用具有不同性質(zhì)（性別、種族、職業(yè)等）的團(tuán)體，在測驗(yàn)得分上也存在差異，即同樣的項(xiàng)目可能有不同的難度。如果測驗(yàn)要求對所有個體都相對“公

15、平”，那么，就應(yīng)該排除那些有利于或不利于不同性質(zhì)的亞團(tuán)體的項(xiàng)目；如果測驗(yàn)的目的就是為了考察不同亞團(tuán)體的差異，那么，就應(yīng)選擇使團(tuán)體差異盡可能大的題目。,五、有效性與可靠性的矛盾同質(zhì)性信度要求項(xiàng)目之間有高相關(guān)，各項(xiàng)目的難度均等；對于預(yù)測效度來說，因?yàn)樾?biāo)的變異范圍較大，如果項(xiàng)目越同質(zhì)，那么效標(biāo)關(guān)聯(lián)效度則低；因此，效標(biāo)關(guān)聯(lián)效度要求各項(xiàng)目之間要有一定的差異，即項(xiàng)目之間相關(guān)低，這樣才能保證測驗(yàn)得分與效標(biāo)之間有高相關(guān)，即高的效標(biāo)關(guān)聯(lián)效度。因此，對于多數(shù)心理測驗(yàn)來說，項(xiàng)目之間中等程度的相關(guān)，可使二者調(diào)和，獲得較為滿意的（同質(zhì)性）信度和（效標(biāo)關(guān)聯(lián)）效度。,,練習(xí)：選取一名同學(xué)作為你的觀察對象，要求最好是觀察你

16、不了解的同學(xué)，或者你對他既無好感也沒有不好的印象。在三次或四次以上的班會或其他活動中觀察他，在不引起別人注意的情況下記錄他的言行。你的觀察應(yīng)盡量客觀，觀察時要對固定的和典型的行為進(jìn)行觀察，同時還要記錄那些不常出現(xiàn)的行為。,,體貌特征：衣著打扮、身體描述（魅力、不尋常的特征等）行為：態(tài)度和情緒（合作、開朗或保守、友好或有敵意、防御等）運(yùn)動行為：積極的和消極的、身體姿勢、步態(tài)、舉止）,,在觀察結(jié)束階段，寫一份2－3頁的觀察報告，在這份報告中，不要對觀察對象有任何評價（如其他同學(xué)是如何談?wù)撍?，他在大學(xué)做得如何好等之類的），你將如何描繪他的個性和特征呢？最后，檢查你的觀察報告，找出與那些了解被觀察者也對被觀察者進(jìn)行觀察的人同的信息。在體驗(yàn)過用時間取樣技術(shù)進(jìn)行近距離觀察之后，你對客觀觀察作為評估人格的方法有何看法？它是否可信？是否有效？是否有用？,Clicktoeditcompanyslogan.,,ThankYou!,