1.第二章教育考試質(zhì)量指標(biāo)效度·效度·難度·區(qū)別詞。 ?可靠性?難度主要是測(cè)試的項(xiàng)目。 ?決議第 1 節(jié)有效性 ?1. 可靠性的概念 2． 可靠性系數(shù)的類型 3． 信度對(duì)于教育測(cè)試的意義 ?4． 提高效度的途徑 1、信度的概念（）：指考試結(jié)果的穩(wěn)定、可靠程度，又稱考試結(jié)果是否真實(shí)、客觀地反映考生的實(shí)際水平，可記為rxx 。 ?具體來(lái)說(shuō)，檢驗(yàn)的效度可以從以下三個(gè)方面來(lái)理解： (1)效度是指測(cè)量值與真實(shí)值的差異程度 ?x=T+E (公式1-1) ?x代表測(cè)量值，T代表真值（未知，多次檢測(cè)的測(cè)量值的平均值可以作為真值的近似值），E代表偏差。 ?E=xT (公式1-2) (1) 效度是指測(cè)量值與真實(shí)值之間的差異程度?1。 嘗試比較以下兩次測(cè)試結(jié)果的有效性（僅一次）： ?用尺子測(cè)量100cm的孩子身高，得到1cm的絕對(duì)偏差； 測(cè)量身高185cm的運(yùn)動(dòng)員，也得得到1cm的絕對(duì)偏差。 要比較兩次測(cè)試結(jié)果的有效性，需要查看偏差分?jǐn)?shù)（E）與真實(shí)分?jǐn)?shù)（T）的百分比。 該百分比代表實(shí)際得分 (x) 的相對(duì)偏差。 其估計(jì)公式為：相對(duì)偏差=。
2、E/T×100%公式（1-3） 將上述兩次測(cè)試（設(shè)為A、B）以及絕對(duì)偏差分?jǐn)?shù)和真實(shí)分?jǐn)?shù)代入上式，得到：相對(duì)偏差（A）= 1/100 ×100%=1%相對(duì)偏差（B）=1/185×100%=0.54% 由此可見(jiàn)，措施B的有效性高于措施A的有效性。最大絕對(duì)偏差=E/x×100% 式（ 1-4) 2、如何衡量一組人或一個(gè)人多次的實(shí)際測(cè)量值與真實(shí)值（真實(shí)分?jǐn)?shù)）之間的差異？ ?要區(qū)分兩組數(shù)據(jù)哪一個(gè)好、哪一個(gè)不好，不能僅僅依靠平均值的統(tǒng)計(jì)和比較，關(guān)鍵是要確定兩組數(shù)據(jù)與各自平均值的偏差有多大。 為了消除數(shù)據(jù)容量的影響，我們參考研究加權(quán)平均的方法，選取每個(gè)誤差的平方平均值來(lái)描述一組數(shù)據(jù)與其平均值的偏差，這就是殘差。 ?根據(jù)假設(shè)，實(shí)際得分的殘差應(yīng)該等于真實(shí)得分的殘差加上檢測(cè)偏差的殘差。 即： ?公式(1-5) σσσ+? 2、如何多次衡量一組人或一個(gè)人的測(cè)量值與真實(shí)值（真分）之間的差異？ ?那么，有效性（rxx）可以定義為真實(shí)分?jǐn)?shù)的殘差與真實(shí)分?jǐn)?shù)的殘差的百分比。 即：式（1-6）式（1-7），可見(jiàn)該值越小，檢驗(yàn)的效度越高。 有效值范圍為[0,1]。 σσ1σσσr???????2Eσ示例：針對(duì) 5 個(gè)人的某種智力誘導(dǎo)。
3、測(cè)試結(jié)果如表1-1所示，檢驗(yàn)測(cè)試的有效性。 ?表1-1 檢測(cè)5名中學(xué)生的部分成績(jī) 中學(xué)生真實(shí)成績(jī)和偏差成績(jī) 實(shí)際成績(jī) A18-216B9+++-210 中學(xué)生真實(shí)成績(jī)和偏差成績(jī) 實(shí)際成績(jī) A18-216B9++++-210 平均值 15015 殘差 182.820。 8并包含在表里面。 σ、σ 分別根據(jù) σ???＝0.86520.82.8＝1－σσ1－r7 估計(jì) σ 的殘差公式，N)x(x(1)) 代入公式（1 若真實(shí)得分殘差為未知，則= 0.86520 .818＝σσ6) r 代入式(17)估計(jì)r6)或(1(2)代入式(???????) 統(tǒng)計(jì)是指樣本上的各種數(shù)字特征。(如樣本均值、標(biāo)準(zhǔn)差等）；參數(shù)一般是各種數(shù)值特征（如總體均值、標(biāo)準(zhǔn)差等）。 ? 在統(tǒng)計(jì)學(xué)中，統(tǒng)計(jì)量越接近參數(shù)，則統(tǒng)計(jì)量的可靠性越高。并且要知道統(tǒng)計(jì)量和參數(shù) (2) 效度是指統(tǒng)計(jì)量和參數(shù)之間的接近程度 ? 我們不妨將檢驗(yàn)的平均值視為均值抽樣分布中的平均值，將真實(shí)值視為總體平均值（μ ）的均值的抽樣分布，這樣只要得到實(shí)際分?jǐn)?shù)分布的標(biāo)準(zhǔn)差即可-。
4、對(duì)于測(cè)量的標(biāo)準(zhǔn)誤差，可以借助區(qū)間公式計(jì)算測(cè)量值與真實(shí)值的接近程度，進(jìn)而估計(jì)測(cè)試結(jié)果的有效性。 （2）效度是指統(tǒng)計(jì)量與參數(shù)之間的接近程度） 公式（－＝） 公式（－＝?????????????????? 示例：基于一組人（假設(shè)n>30）作為某種智力激勵(lì)測(cè)試的結(jié)果，對(duì)相關(guān)統(tǒng)計(jì)量進(jìn)行如下估計(jì)，得到真實(shí)分?jǐn)?shù)的置信區(qū)間（或真實(shí)值的范圍）。865.08.20152?? ??. 概率為該區(qū)間包含真實(shí)得分或真值答案：) = () (則) (區(qū)間的概率；計(jì)算某一區(qū)域真實(shí)得分的公式，)根據(jù)到總體平均區(qū)間（=）（=求檢測(cè)誤差標(biāo)準(zhǔn)；），式（）將已知統(tǒng)計(jì)量代入公式（解：95.027.1873.1195.027.1873.11P95.067.196.167.196.1P95.096.196.1P267 .1865.018.????????? ???? ?????????? (3) 效度是指兩次重復(fù)檢驗(yàn)或等效檢驗(yàn)之間的相關(guān)程度。事物或現(xiàn)象的數(shù)量是可以改變的，主要采用相關(guān)分析的方法，即估計(jì)兩個(gè)變量。
5.相關(guān)系數(shù)(rxy)。 ?當(dāng)用相關(guān)系數(shù)表示效度水平時(shí)，相關(guān)系數(shù)可稱為效度系數(shù)（lity）。 它是同一考生同一特征的兩次考試成績(jī)的相關(guān)系數(shù)，是衡量考試結(jié)果一致性的指標(biāo)。 3. 信度系數(shù)的類型 ? (1) 穩(wěn)定性系數(shù) ? (2) 等價(jià)系數(shù) ? (3) 內(nèi)部一致性系數(shù) ? (4) 紙質(zhì)測(cè)試效度系數(shù) ? (5) 評(píng)分者效度 ( 1) 穩(wěn)定性系數(shù) (ty) ? 也又稱重測(cè)效度，是指同一被試（人群）在不同時(shí)間、同一量表下兩次測(cè)試的實(shí)際成績(jī)的相關(guān)系數(shù)。 恐怕穩(wěn)定性系數(shù)的基本程序是： 測(cè)驗(yàn) A1 適當(dāng)?shù)臅r(shí)間間隔 測(cè)試 A2 (a) 穩(wěn)定性系數(shù) ? 根據(jù)數(shù)據(jù)的性質(zhì)，可以通過(guò)不同的方式估計(jì)相關(guān)系數(shù)。 最常見(jiàn)的是皮爾遜相關(guān)系數(shù)：） 10-1 (]) ([]) ([公式??????????? 為第一次測(cè)試的實(shí)際分?jǐn)?shù)；Y 為第一次測(cè)試的實(shí)際分?jǐn)?shù)(1) 穩(wěn)定性系數(shù) ?對(duì) 12 名高中生進(jìn)行四種算術(shù)規(guī)則的速度測(cè)試，記為 X，以考察測(cè)試結(jié)果的可靠性，3個(gè)月后再次進(jìn)行測(cè)試，記分?jǐn)?shù)為Y，詢問(wèn)測(cè)試結(jié)果是否可靠？?編號(hào)1112?。
6. ?ΣX＝280ΣY＝286ΣX2＝6594ΣY2＝6912ΣXY＝6420????????????????????[])([])([AA解： (1) 之后數(shù)據(jù)列表，估計(jì)式（1-10）所需的各項(xiàng)統(tǒng)計(jì)量： ΣX＝280ΣY＝286ΣX2＝6594ΣY2＝6912ΣXY＝6420 （2）將估計(jì)的統(tǒng)計(jì)量代入式（1-10）：用在估計(jì)穩(wěn)定性時(shí)采用重測(cè)法測(cè)定系數(shù)時(shí)，應(yīng)注意的問(wèn)題： 1、兩次測(cè)試的時(shí)間間隔要合適，且時(shí)間間隔盡可能短。 2、應(yīng)進(jìn)行兩次測(cè)試。
7、卷數(shù)應(yīng)相當(dāng)，即內(nèi)容范圍、題型、題數(shù)、難度、差異程度等基本相同。 3. 為了確定兩次測(cè)試是否等效，還應(yīng)考察兩次測(cè)繪結(jié)果的平均值和標(biāo)準(zhǔn)差。 4. 重測(cè)法適用于速度測(cè)試，但不適用于難度測(cè)試。 5. 測(cè)試要注重提高受試者的積極性。 （2）等價(jià)系數(shù)（ence） 也稱為復(fù)制效度（-）：是兩個(gè)數(shù)值相等（題目數(shù)量、難度、區(qū)分度相等）但具體內(nèi)容不同的量表，在最短時(shí)間內(nèi)的距離內(nèi)，同一考生兩次考試得到的兩組相應(yīng)分?jǐn)?shù)的相關(guān)系數(shù)。 模型為：11AB測(cè)試適當(dāng)時(shí)間間隔????? (2)等價(jià)系數(shù)(ence) ?采用A、B兩種法語(yǔ)重復(fù)測(cè)試，對(duì)小學(xué)五年級(jí)的10名中學(xué)生進(jìn)行測(cè)試。 考試順序造成的偏差，其中5名中學(xué)生先進(jìn)行A類考試，休息15分鐘后進(jìn)行B類考試； 而另外5名中學(xué)生則先進(jìn)行B類測(cè)試，休息15分鐘后再進(jìn)行A類測(cè)試。 10名中學(xué)生的A類測(cè)試結(jié)果記為X，B類測(cè)試結(jié)果記為Y。該測(cè)試的復(fù)制效度是多少？ 中學(xué)生編號(hào) ??（二）等值。
8、一致性系數(shù)（ence） 優(yōu)點(diǎn)： 1． 如果兩份試卷在不同時(shí)間使用，其效度可以反映不同時(shí)間的穩(wěn)定性和不同試題的一致性； ?2. 當(dāng)兩份同時(shí)使用時(shí)測(cè)量平均速度教案中公，可以防止復(fù)試信息的一些缺點(diǎn)，例如復(fù)試對(duì)初試時(shí)記憶、練習(xí)和效果的影響，間隔期間獲得的新知識(shí)的影響，以及對(duì)初試時(shí)復(fù)試的影響。的兩個(gè)測(cè)試。 不同環(huán)境和受試者不同主觀狀態(tài)的影響，以及訓(xùn)練應(yīng)對(duì)測(cè)試的影響等。 (2) 等價(jià)系數(shù)（ence） ? 缺點(diǎn)： ? 1. 編制兩個(gè)相同的數(shù)據(jù)非常困難測(cè)試。 如果兩個(gè)副本太相似，則會(huì)重新測(cè)試； 等價(jià)條件不存在； 2. 兩次重復(fù)測(cè)試可能在某種程度上檢測(cè)到不同的屬性，這會(huì)高估測(cè)試的有效性； 3. 受試者同時(shí)接受兩個(gè)性質(zhì)相似的測(cè)試，可能會(huì)降低完成測(cè)試的積極性； 4. 雖然兩次重復(fù)測(cè)試的題目材料不同，但一旦受試者掌握了一定的解題模式，就能舉一反三，可能會(huì)失去重復(fù)的意義。 (3) 內(nèi)部一致性系數(shù)() 也稱為同質(zhì)效度(ty)。 是同一測(cè)試量表的兩個(gè)部分（例如分為質(zhì)數(shù)和奇數(shù)項(xiàng)目，或量表的前一部分。
9、上半場(chǎng)和下半場(chǎng)）得分相關(guān)系數(shù)。 可能有兩種方法： 1. Split-：將一個(gè)測(cè)試分成假定相等且獨(dú)立的兩個(gè)部分來(lái)評(píng)分。 一般以題目的素?cái)?shù)為一組，以素?cái)?shù)為一組來(lái)估計(jì)兩級(jí)相關(guān)系數(shù)。 最后利用-Brown公式進(jìn)行校準(zhǔn)，得到整個(gè)檢驗(yàn)的效度系數(shù)。 ?-Brown 公式為：) 公式（11112?????rxy 為兩組測(cè)試成績(jī)的相關(guān)系數(shù)，rtt 代表整個(gè)測(cè)試的效度系數(shù)。問(wèn)題：為什么不直接使用總和偶數(shù)題和素?cái)?shù)題的分?jǐn)?shù) 估計(jì)的相關(guān)系數(shù)的一部分應(yīng)該被校準(zhǔn)為整個(gè)測(cè)試的效度系數(shù)嗎？這是因?yàn)闇y(cè)試的寬度（指量表包含的項(xiàng)目數(shù)）有對(duì)效度的大小有一定的影響，測(cè)試時(shí)間越長(zhǎng)，效度越高，但是使用分半法實(shí)際上相當(dāng)于把整個(gè)測(cè)試的厚度減少了一半，所以將數(shù)據(jù)除以得到的效度分成兩半必須高于整個(gè)測(cè)試的有效性。 ?示例：有一個(gè)由 100 個(gè)問(wèn)題組成的量表，發(fā)給 10 名初中生（分?jǐn)?shù)如下表所示），參加一次測(cè)試后，考生畢業(yè)后將離開(kāi)學(xué)校。 現(xiàn)在如何評(píng)估測(cè)試結(jié)果的有效性？ 評(píng)分方法：采用半分法對(duì)各科目質(zhì)數(shù)題總分進(jìn)行評(píng)分。
10. 59940ΣX＝382ΣY＝374ΣX2＝14624ΣY2＝14014ΣXY＝14311 解：將相關(guān)統(tǒng)計(jì)量代入公式(1-10)，求相關(guān)系數(shù) 84.0))((?????????xyr 使用 - Brown公式校準(zhǔn)，91.084.0184.0212??????? 校準(zhǔn)后，效度系數(shù)很大（0.91），說(shuō)明整個(gè)測(cè)試的效度很高，需要進(jìn)行一次測(cè)試，然后根據(jù)效度系數(shù)估算根據(jù)每道題的正確回答數(shù)（這可以看作是每道題的難度信息），或者根據(jù)每個(gè)人總分的平均值和標(biāo)準(zhǔn)差測(cè)量平均速度教案中公，這有幾個(gè)公式，其中，rKR為常用。