马来西亚独中联合论坛 » 各学科专区 » [考试] 如何分析
2006-10-26 10:43 AM
kenogl
[考试] 如何分析
(一)有关试题分析的几个基本点 :HL(|?k0C'z5sm
(i) 分数的解析 l ~h Z i
—— 单看原始分数容易造成解释错误，采用“百分比等级”(Percentile) 来解释分数将更全面。 V0m] Q QG t*T7j xs s
(ii) 考题区分能力的计算
—— 通过鉴别度指数来鉴别考生的能力。 v3F+@6s]"H
—— 通过点二系列相关系数来测量个别题目对整份试卷总分的贡献程度。
(iii) 难度
—— 指考生的选答率。难度适中的题目才具有鉴别力。
(iv) 效度 x(j4|6R$J\
—— 由全份试卷题目的“双向细目表”及“试题品质与类式”判断该份试卷的测试是否有达成测试目标。
(v) 可信度
—— 由全份试卷的试题难度及鉴别度等判断该份试卷的测试是否可靠。
-Nm;l\ Rle
(一)有关试题分析的几个基本概念 :sF e3@.f3Ot S Uz
(甲) 项目统计分析(Item Statistics) g#`.LS&hB&[&S]R
1. 难度指数(Proportion Correct)(介于0至1之间)(P)
1.1n[ v c4K W*W i&}|"d
0 — 太难，以至无人能正确反应；
1 — 太容易，每一个人都能正确反应。 B y G!bm
1.2
理想难度指数：0.5左右。 ,PF W%EH`0?x
2. 鉴别度指数(Disc. Index)(D)
对答案所在的选项而言：
D = 高分组考生选答百分比－低分组考生选答百分比。(D = P高－P低)
2.1
D介于 －1 至 ＋1之间。
2.25W2er L jlA2I's
理想鉴别度指数：≥0.3。 %D;}k I1nx"tJ _
例： @vNu:@.s]
第1题的鉴别度指数是：0.83 – 0.34 = 0.49； vqa&wdg bce
且大于0.3，所以这道题目可说具有鉴别力。
2.3
鉴别度指数低(即，不太具鉴别力)可能由下列因素造成：
* 能力低的学生胡乱猜测，结果碰巧猜对； R(|2o!sc*oRh
* 能力高的学生看不懂题目、会错意、粗心大意。 %r o/M#nW p
2.4W+q5N-u ~ m1~
难度与鉴别度的关系： {\Z+nU {9q \5V7A{]J
适当的难度是高鉴别度的必要条件；当D = 0.5时，该道试题可说是拥有最佳的鉴别能力。
3. 点二系列相关系数(Point Biserial)(r)
3.1D~y^ ]9Z0_
用以检查试题的信度。
3.2
“相关”是指考生是否答对本题与考生在整份试卷得分高低的相关；
3.3
r介于 －1至 ＋1之间
3.4x5k j@'o3f&\
r 为正，表示答对/错本题的学生，其在整份试卷的总得分也高/低；
r为负，表示答对/错本题的学生，其在整份试卷的总得分却低/高(表示这道题目可能隐藏一些问题)。 t@+r SZ5Mx"@$i
3.5 \#y3NDi e$Bh.}
在选择题里，正确的答案选项的r应为正，其他选项的r应为负。
Qh-S%} O;b C*Y}(X
(乙) 选项统计分析(Alternative Statistics)
4. Alternative：即答案的“选项”。
5. Prop Total即：全体考生选答某个选项的百分比。 2H?6b"E\t5x$a
例：第1题，共有59%的考生选答C sG#G [-s
6. 低分组学生选答该选项的百分比。 DD}T-W
例：第1题，低分组的学生中，有34%选答C
7. 高分组学生选答该选项的百分比。 4Hj5e"f `$x+~
例：第1题，高分组的学生中，有83%选答C (a%U [$[6K,w3?s9}[,}
8. Key: * 表示标准答案
%MD%{.y!{)s
V+Pm{"x8{i(p2J
[img]http://www.djz.edu.my/kaoshi/fenxi/image2.gif[/img]
10. 峰度(Kurtosis)(g2) @:v0CC Xc@ Ca
10.14K m @G_7EJ2u
用以了解分数分布在平均数四周的情况。
10.2;?~o/shS"^ T
高狭峰(leptokurtic)，g2 越大(g2>0)，
表示分数落在平均数的考生较多。 wA;dT:^G6w;y7v
10.3 wiH*n.B3j
低阔峰(platykurtic)，g2越小(g2<0)，
表示分数落在距离平均数较远之处的考生较多。
10.47D|$UL3X3Cc3p
g2 = 0，表示分数平均分布于平均数的四周。 *\n.`4Z4{a"X
[img]http://www.djz.edu.my/kaoshi/fenxi/image3.gif[/img] D6A U7B$bt/l u9l]
:\-iw$D[
(二)注意事项 Z9p dmj-YQ1o G)S+f
(i) 若出现“check the key”的题目，应思考：这道题目有着什么问题？出题时有什么疏忽？教学时对有关知识的观念的传授有没有很好地掌握？日后应如何加强教学？ %s9dm K\%w d2DM#C i
(ii) 每一题的难度指数是否介于0.4至0.6之间？(hpZX)o,m N
—— 难度处于此范围内的题目是较好的测试题。 QjU4l3N0v
(iii) 每一题的鉴别力指数是否大于0.3？ /| u }2VqG CN
—— 鉴别力指数大于0.3的题目才能区分出考生能力的强弱分布。
—— 若鉴别度太低意味着对有关题目而言，能力弱的学生猜题，碰巧猜对；而能力强的学生则粗心大意、误解题意、遗漏等。
(iv) 每一题的点二系列相关系数是否是“+”数(即正数)？ Q R5TV N
—— 点二系列相关系数为“+”，即表示能力强的学生答对，能力弱的学生答错。
(v) 选项的诱答力是否恰当？ *CP_ Y^ S*N$X
—— 选项的选答率过低即表示该选项无诱答力。诱答力太低的选项是装饰性选项，应尽量免掉。 aHw_%bt
(vi) 看看峰度 5c"Gm|UAR e }$C*X
—— 可看出考生分数在平均数四周分布情况。分两类： 0HT Wt9W,t
① 高狭峰（Leptokurtic）
—— 分数落在平均数上或很接近平均数的考生居多。 NRX"Og'C}%z
② 低阔峰（Platykurtic） B Q dzN/d
—— 分数落在平均数以外或较远之处的考生居多。
(vii) 看看偏态
—— 可看出全体考生得分分布情况。分两类：;O P#C&Xe3E
① 正偏态（Skewed to the left）
—— 较多考生集中在低分区。
② 负偏态（Skewed to the right）
—— 较多考生集中在高分区。
(viii) 将试题难度分布情况加以统计并绘图表示。 y S @#? TM!D(x6d
例：
某科选择题共15题，
试题难度分布统计如下： 7L,}x6y{W+q8F B
[img]http://www.djz.edu.my/kaoshi/fenxi/image8.jpg[/img]$X2\r2y!}#wAQ6Z?
!u } gM/PB/v&ZE
转帖子：[url]http://www.djz.edu.my/kaoshi/fenxi/soumin_2006.htm[/url]ZJgy O/o
[[i] 本帖最后由 TheWind 于 2006-11-19 11:34 PM 编辑 [/i]]
(一)有关试题分析的几个基本点 :HL(|?k0C'z5sm
(i) 分数的解析 l ~h Z i
—— 单看原始分数容易造成解释错误，采用“百分比等级”(Percentile) 来解释分数将更全面。 V0m] Q QG t*T7j xs s
(ii) 考题区分能力的计算
—— 通过鉴别度指数来鉴别考生的能力。 v3F+@6s]"H
—— 通过点二系列相关系数来测量个别题目对整份试卷总分的贡献程度。
(iii) 难度
—— 指考生的选答率。难度适中的题目才具有鉴别力。
(iv) 效度 x(j4|6R$J\
—— 由全份试卷题目的“双向细目表”及“试题品质与类式”判断该份试卷的测试是否有达成测试目标。
(v) 可信度
—— 由全份试卷的试题难度及鉴别度等判断该份试卷的测试是否可靠。
-Nm;l\ Rle
(一)有关试题分析的几个基本概念 :sF e3@.f3Ot S Uz
(甲) 项目统计分析(Item Statistics) g#`.LS&hB&[&S]R
1. 难度指数(Proportion Correct)(介于0至1之间)(P)
1.1n[ v c4K W*W i&}|"d
0 — 太难，以至无人能正确反应；
1 — 太容易，每一个人都能正确反应。 B y G!bm
1.2
理想难度指数：0.5左右。 ,PF W%EH`0?x
2. 鉴别度指数(Disc. Index)(D)
对答案所在的选项而言：
D = 高分组考生选答百分比－低分组考生选答百分比。(D = P高－P低)
2.1
D介于 －1 至 ＋1之间。
2.25W2er L jlA2I's
理想鉴别度指数：≥0.3。 %D;}k I1nx"tJ _
例： @vNu:@.s]
第1题的鉴别度指数是：0.83 – 0.34 = 0.49； vqa&wdg bce
且大于0.3，所以这道题目可说具有鉴别力。
2.3
鉴别度指数低(即，不太具鉴别力)可能由下列因素造成：
* 能力低的学生胡乱猜测，结果碰巧猜对； R(|2o!sc*oRh
* 能力高的学生看不懂题目、会错意、粗心大意。 %r o/M#nW p
2.4W+q5N-u ~ m1~
难度与鉴别度的关系： {\Z+nU {9q \5V7A{]J
适当的难度是高鉴别度的必要条件；当D = 0.5时，该道试题可说是拥有最佳的鉴别能力。
3. 点二系列相关系数(Point Biserial)(r)
3.1D~y^ ]9Z0_
用以检查试题的信度。
3.2
“相关”是指考生是否答对本题与考生在整份试卷得分高低的相关；
3.3
r介于 －1至 ＋1之间
3.4x5k j@'o3f&\
r 为正，表示答对/错本题的学生，其在整份试卷的总得分也高/低；
r为负，表示答对/错本题的学生，其在整份试卷的总得分却低/高(表示这道题目可能隐藏一些问题)。 t@+r SZ5Mx"@$i
3.5 \#y3NDi e$Bh.}
在选择题里，正确的答案选项的r应为正，其他选项的r应为负。
Qh-S%} O;b C*Y}(X
(乙) 选项统计分析(Alternative Statistics)
4. Alternative：即答案的“选项”。
5. Prop Total即：全体考生选答某个选项的百分比。 2H?6b"E\t5x$a
例：第1题，共有59%的考生选答C sG#G [-s
6. 低分组学生选答该选项的百分比。 DD}T-W
例：第1题，低分组的学生中，有34%选答C
7. 高分组学生选答该选项的百分比。 4Hj5e"f `$x+~
例：第1题，高分组的学生中，有83%选答C (a%U [$[6K,w3?s9}[,}
8. Key: * 表示标准答案
%MD%{.y!{)s
V+Pm{"x8{i(p2J
[img]http://www.djz.edu.my/kaoshi/fenxi/image2.gif[/img]
10. 峰度(Kurtosis)(g2) @:v0CC Xc@ Ca
10.14K m @G_7EJ2u
用以了解分数分布在平均数四周的情况。
10.2;?~o/shS"^ T
高狭峰(leptokurtic)，g2 越大(g2>0)，
表示分数落在平均数的考生较多。 wA;dT:^G6w;y7v
10.3 wiH*n.B3j
低阔峰(platykurtic)，g2越小(g2<0)，
表示分数落在距离平均数较远之处的考生较多。
10.47D|$UL3X3Cc3p
g2 = 0，表示分数平均分布于平均数的四周。 *\n.`4Z4{a"X
[img]http://www.djz.edu.my/kaoshi/fenxi/image3.gif[/img] D6A U7B$bt/l u9l]
:\-iw$D[
(二)注意事项 Z9p dmj-YQ1o G)S+f
(i) 若出现“check the key”的题目，应思考：这道题目有着什么问题？出题时有什么疏忽？教学时对有关知识的观念的传授有没有很好地掌握？日后应如何加强教学？ %s9dm K\%w d2DM#C i
(ii) 每一题的难度指数是否介于0.4至0.6之间？(hpZX)o,m N
—— 难度处于此范围内的题目是较好的测试题。 QjU4l3N0v
(iii) 每一题的鉴别力指数是否大于0.3？ /| u }2VqG CN
—— 鉴别力指数大于0.3的题目才能区分出考生能力的强弱分布。
—— 若鉴别度太低意味着对有关题目而言，能力弱的学生猜题，碰巧猜对；而能力强的学生则粗心大意、误解题意、遗漏等。
(iv) 每一题的点二系列相关系数是否是“+”数(即正数)？ Q R5TV N
—— 点二系列相关系数为“+”，即表示能力强的学生答对，能力弱的学生答错。
(v) 选项的诱答力是否恰当？ *CP_ Y^ S*N$X
—— 选项的选答率过低即表示该选项无诱答力。诱答力太低的选项是装饰性选项，应尽量免掉。 aHw_%bt
(vi) 看看峰度 5c"Gm|UAR e }$C*X
—— 可看出考生分数在平均数四周分布情况。分两类： 0HT Wt9W,t
① 高狭峰（Leptokurtic）
—— 分数落在平均数上或很接近平均数的考生居多。 NRX"Og'C}%z
② 低阔峰（Platykurtic） B Q dzN/d
—— 分数落在平均数以外或较远之处的考生居多。
(vii) 看看偏态
—— 可看出全体考生得分分布情况。分两类：;O P#C&Xe3E
① 正偏态（Skewed to the left）
—— 较多考生集中在低分区。
② 负偏态（Skewed to the right）
—— 较多考生集中在高分区。
(viii) 将试题难度分布情况加以统计并绘图表示。 y S @#? TM!D(x6d
例：
某科选择题共15题，
试题难度分布统计如下： 7L,}x6y{W+q8F B
[img]http://www.djz.edu.my/kaoshi/fenxi/image8.jpg[/img]$X2\r2y!}#wAQ6Z?
!u } gM/PB/v&ZE
转帖子：[url]http://www.djz.edu.my/kaoshi/fenxi/soumin_2006.htm[/url]ZJgy O/o
[[i] 本帖最后由 TheWind 于 2006-11-19 11:34 PM 编辑 [/i]]
页: [1]
查看完整版本: [考试] 如何分析
.gif)
Powered by Discuz! Archiver 5.5.0 © 2001-2006 Comsenz Inc.