心理測量學課件6第四章項目分析.ppt

《心理測量學課件6第四章項目分析.ppt》由會員分享，可在線閱讀，更多相關《心理測量學課件6第四章項目分析.ppt（49頁珍藏版）》請在裝配圖網(wǎng)上搜索。

1、第四章項目分析測驗分數(shù)的解釋與應用,,第八章測驗的項目分析項目分析包括定性分析和定量分析。定性分析包括考慮內容效度、題目編寫的恰當性和有效性等；定量分析主要是指題目難度和區(qū)分度的測量。對項目進行篩選和修訂，可以提高測驗的信度和效度。無論是何種類型的測驗，都需要進行分析。在對結果進行分析時需要解答如下問題：設定的測試時間長度是否適當？受測者是否理解指導語？施測條件是否適當？緊急意外事件的處理是否恰當？……….,,下面所列的問卷，是受測者完成成就測驗后填寫的，其目的是提供關于測驗公平性的信息：測驗評價表指導語：請在完成測驗后填寫這份表格，請您對每個項目的反應上畫圓圈，并將您認為恰當?shù)睦碛商顚懺诳崭?/p>

2、處。1、YN測試環(huán)境（座位、溫度、通風、噪音水平等）您是否滿意？2、YN在測試之前您是否已仔細閱讀了指導語？3、YN測驗指導語是否清晰？,,4、YN測驗的格式（項目類型、項目編排、答題卡等）您是否滿意？5、YN測驗是否充分涵蓋了考試指定材料？6、YN測驗問題的難度是否適宜？7、YN您對參加該測試是否做了充分的準備？8、YN您是否學習了合適的材料？9、YN您認為是否答錯了某些測驗問題？具體是哪些？10、YN您是否對測驗回答進行了猜測？猜測的問題有多少？具體是哪些問題？11、YN您是否有沒作答的問題？具體是哪些問題？,,12、YN您是否有足夠的時間答完測驗？13、YN您在完成測驗后是否檢查了作答的

3、答案？14、YN在測驗的過程中您是否有焦慮或情緒上的厭煩？15、YN測驗是否公正？16、YN總的來說，這是否是一份好的測驗？17、YN您是否觀察到測試中有欺詐行為？18、YN您期望在此測驗上獲得哪個等級的成績？,,分析受測者在某個項目上的反應，功能是：1、進行項目分析的主要目的是提供測驗質量或刪除無效的項目。2、對于成就測驗而言，是提供受測者掌握知識與否的診斷信息，看受測者是否對測驗有充分的準備，是否能滿足他們的期望等等。,,第一節(jié)測驗的難度一、難度（difficulty）的意義難度，指項目的難易程度。在能力測驗中，稱為“難度”，而在非能力測驗中（如人格），則指“通俗性”。兩者都是指在總體中，

4、能夠正確或確切回答某項目的人數(shù)。,,二、難度的計算（一）二分法記分項目的難度1．通過率P=R/N100%P代表項目的通過率，N為全體受測人數(shù)，R為通過或答對該項目的人數(shù)。以通過率來表示項目的難度，P越大，項目越容易，難度越低。,,2．極端分組法（上下27%）P=（PH+PL）/2P代表難度，PH和PL分布代表高分組和低分組通過率，此公式還可轉換為P=(RH+RL)/2N100%RH和RL分別代表高分組和低分組通過該題的人數(shù)，N代表每個組的人數(shù)。,,例如：在100名被試中，選為高分組和低分組的被試各有27人，其中高分組有20人答對第一題，低分組有10人答對第一題，則第一題的難度為：(1)PH=2

5、0/27100%=74.1%PL=10/27100%=37%P=(74.1%+37%)/2=55.6%(2)P=(20+10)/227=55.6%,,練習：一個測驗項目向75名受測者施測，高水平組（測驗總分中最高27％）中有18名答對此項目，低水平（27％）中有12名受測者答對此題目，那么此項目的難度是多少？,,3、選擇題的難度校正公式：,CP為校正后的通過率，P為實際得到的通過率，K為備選項目的數(shù)目。,例如：假定某題有75％的被試通過，如果該題有5個備選項目，則校正后通過率實為：,（二）非二分法記分項目的難度，測試題為問答題或其他不能用二分法記分的形式時，常常對部分正確的反應也給一定分數(shù)，在

6、這樣情況下，可以先人為的確定通過每一題的分數(shù)線，再按公式計算難度：x100％為所有被試在該項目上的平均得分，Xmax為該項目的滿分。,,例如：一個數(shù)學題的滿分為20分，全體考生在試題上所得的平均分數(shù)為15分，其難度為：P=15/20＝0.75,三、測驗難度水平的確定效標參照測驗、掌握測驗：不考慮難度；選拔測驗：難度=錄取率；對于選擇題來說，難度一般應大于猜測概率；無論是速度測驗，還是難度測驗，一般都應防止被試得滿分，因為滿分的意義是不明確的。大體而言，難度為0.50時最理想，此時項目具有最大的鑒別力。但在實際操作中，讓所有項目難度都到達0.50困難很大，而且也不必要，一般只需使項目的平均難度接

7、近0.50，而各個項目的難度在0.500.20之間變化。,四、難度的等距變換根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉換成相應的Z分數(shù)，這就是等距量表。PY0Z,美國教育服務中心以Δ作為難度指標：Δ=13+4ZP=.0013Z=+3Δ=25P=.16Z=+1Δ=17P=.50Z=0Δ=13P=.84Z=-1Δ=9P=.9987Z=-3Δ=1,五、難度對測驗的影響（一）測驗難度影響測驗分數(shù)的分布形態(tài)難度大，正偏態(tài)難度低，負偏態(tài),（二）測驗難度影響測驗分數(shù)的離散程度測驗過難或過易，分數(shù)全距縮小，信度降低。P=0.50時最佳,第二節(jié)測驗的區(qū)分度一、區(qū)分度的意義區(qū)分度（discriminatio

8、n）是指測驗項目對被試心理品質水平差異的區(qū)分能力或鑒別能力。項目的區(qū)分度是測驗是否有效的“指示器”。鑒別力分析的設想基礎：如果單個項目與測驗測的是同11、一特性，那么我們可以預期在測驗上得高分的人正確回答這一問題的概率大，而在測驗上得低分的人正確回答這一問題的概率低。鑒別力分析就是在這一設想的基礎上進行的。項目的鑒別力就是其對于所測量的心理特性的區(qū)分能力。鑒別力分析的一般方法：鑒別力指數(shù)、項目-總分相關、項目間相關。,,二、區(qū)分度的計算（一）項目鑒別指數(shù)法1．鑒別指數(shù)（indexofdiscrimination，D）的計算D=PH-PL取值范圍：-1~+1D為鑒別指數(shù)，PH為高分組在某個項目上

9、的通過率，PL為低分組在該項目上的通過率。,,例如：某小學數(shù)學測驗，受測者共18人，高分組和低分組若各取總人數(shù)的27％，則兩組各為5人，第8題高分組5人全部答對，低分組1人答對，則第8題的鑒別指數(shù)為：D＝5/5-1/5=0.8D值是鑒別項目測量效標有效性的指標，D越高，項目的區(qū)分度就越高，項目就越有效。如果測驗只是用來考查學生對一些基本知識和技能是否掌握，則不用考慮區(qū)分度。,,一個測驗項目向75名受測者施測，高水平組（測驗總分中最高27％）中有18名答對此項目，低水平（27％）中有12名受測者答對此題目，那么此項目的區(qū)分度是多少？,2．極端組的劃分27%規(guī)則一般情況下，取上下25%~33%均可

10、。樣本少時，可以取50%注意：由于計算機的方便使用，可以上下50%作為劃分高低組的標準，或者多分幾組，對區(qū)分度和難度作詳細分析。因為只取上下兩端，只利用了一部分資料，浪費了很多信息，有可能得出錯誤結論。,,（二）相關法（項目-總分相關）1．點二列相關,,是受測者總量,是答對該項目的受測者量,是通過該項目的受測者效標分數(shù)的平均數(shù),是所有效標分數(shù)的平均數(shù),是所有效標分數(shù)的標準差,,例如：假定有30人，他們測驗總分的平均數(shù)和標準差分別是75和10，如果有17名受測者答對某個項目，他們測驗總分的平均分數(shù)是80，那么項目的效度是多少？,,,,一個測驗的項目答對的記1分，答錯的記0分，這時項目的分數(shù)就是一

11、個二分變量，而測驗的總分則為連續(xù)變量，如果要計算該項目的區(qū)分度，就可用點二列相關公式：,,,通過該項目的受測者總分的平均值,未通過該項目的受測者的總分平均值,所有值的標準差,,方差的計算：,,例題：下表是某學校的15名學生的總分和某項目的解答情況，計算該項目與總分的相關系數(shù)。,（三）項目特征曲線（itemcharacteristiccurve,ICC）項目特征曲線描述了效標分數(shù)不同的被試在該項目上的通過率。曲線坡度越陡，鑒別力越好，預測的誤差越小。,,,,率概的目項答回確正,1.00,0.00,0.50,低中高能力,鑒別力較好,低中高能力,鑒別力為負,鑒別力較低,,難度不同的3個項目的ICC,

12、,項目特征曲線：運用圖象直觀地顯示了隨著測驗者某種心理特征水平的變化，正確回答某個項目的概率是如何變化的。項目特征曲線是現(xiàn)代心理測量學最有影響的理論之一-項目反應理論或稱潛特征理論的基礎。ICC歸納了項目分析的信息，顯示了心理能力水平與項目反應之間的關系。當項目-總體相關為正時，ICC的斜率也是正的；當相關接近0時，ICC斜率也接近于0；當相關為負時，ICC斜率為負。,多項選擇中每個選項的ICC,三、區(qū)分度與難度的關系,難度和區(qū)分度都是針對一定團體而言的。一般來說，較難的項目對高水平被試區(qū)分度高，較易的項目對低水平被試的區(qū)分度高。,四、區(qū)分度的相對性（一）不同的計算方法，所得區(qū)分值不同區(qū)分度有

13、幾種計算方法？（二）樣本容量大小影響相關法區(qū)分度值的大小樣本越大，區(qū)分度越……（三）分組標準影響鑒別指數(shù)分組越極端，區(qū)分度越……（四）被試樣本的同質性程度影響區(qū)分度值的大小樣本越同質，區(qū)分度越……,第三節(jié)項目分析的特殊問題一、多重選擇題的項目分析（誘答分析）對于多重選擇題，除了分析難度和區(qū)分度外，還要對每個選項進行分析。下列哪一個最有可能是偏執(zhí)型精神分裂癥患者的次級癥狀：A幻聽B癱瘓C記憶喪失D厭食,如果所有被試都選擇某一正確的選項，說明該選項……如果沒有一個被試選擇某個錯誤選項，說明該選項……如果所有被試都選擇某個錯誤選項，說明該選項……如果高分組被試的選擇集中在兩個選項上，說明該選項……如

14、果高分組和低分組對正確選項的選擇沒有區(qū)別，說明該選項……如果所有被試都未回答某個題目，說明該題……如果選擇各個選項的人數(shù)幾乎相等，說明該題……,二、速度測驗的項目分析對前面部分的測驗項目，難度和區(qū)分度都……對后面部分的測驗項目，難度和區(qū)分度都……三、標準參照測驗的項目分析在標準參照測驗中，無須考慮項目的難度和區(qū)分度，只要項目的內容很重要就行。也可以通過比較教學或訓練的前測和后測結果來進行項目分析，用來說明教學或訓練的效果以及項目編制是否適當。,四、項目-團體的相互作用具有不同性質（性別、種族、職業(yè)等）的團體，在測驗得分上也存在差異，即同樣的項目可能有不同的難度。如果測驗要求對所有個體都相對“公

15、平”，那么，就應該排除那些有利于或不利于不同性質的亞團體的項目；如果測驗的目的就是為了考察不同亞團體的差異，那么，就應選擇使團體差異盡可能大的題目。,五、有效性與可靠性的矛盾同質性信度要求項目之間有高相關，各項目的難度均等；對于預測效度來說，因為效標的變異范圍較大，如果項目越同質，那么效標關聯(lián)效度則低；因此，效標關聯(lián)效度要求各項目之間要有一定的差異，即項目之間相關低，這樣才能保證測驗得分與效標之間有高相關，即高的效標關聯(lián)效度。因此，對于多數(shù)心理測驗來說，項目之間中等程度的相關，可使二者調和，獲得較為滿意的（同質性）信度和（效標關聯(lián)）效度。,,練習：選取一名同學作為你的觀察對象，要求最好是觀察你

16、不了解的同學，或者你對他既無好感也沒有不好的印象。在三次或四次以上的班會或其他活動中觀察他，在不引起別人注意的情況下記錄他的言行。你的觀察應盡量客觀，觀察時要對固定的和典型的行為進行觀察，同時還要記錄那些不常出現(xiàn)的行為。,,體貌特征：衣著打扮、身體描述（魅力、不尋常的特征等）行為：態(tài)度和情緒（合作、開朗或保守、友好或有敵意、防御等）運動行為：積極的和消極的、身體姿勢、步態(tài)、舉止）,,在觀察結束階段，寫一份2－3頁的觀察報告，在這份報告中，不要對觀察對象有任何評價（如其他同學是如何談論他的，他在大學做得如何好等之類的），你將如何描繪他的個性和特征呢？最后，檢查你的觀察報告，找出與那些了解被觀察者也對被觀察者進行觀察的人同的信息。在體驗過用時間取樣技術進行近距離觀察之后，你對客觀觀察作為評估人格的方法有何看法？它是否可信？是否有效？是否有用？,Clicktoeditcompanyslogan.,,ThankYou!,