试述教育质量监测工具开发中的试题编制流程。
【正确答案】:(1)构建测试框架。
根据监测的目的和内容,确定学业成就测验的测试框架,即“考査什么内容”,然后编制测验蓝图(亦称双向细目表)。
(2)编写测验题目。
当测验框架、测验蓝图确定后,就可以开始编制题目。命题者需要根据双向细目表中考查内容的情况选择合适的题目。命题结束后,需要填写题目属性表,清楚说明题目涵盖的内容维度、认知维度和具体指标,方便后续修改等工作。
(3)组卷。
在教育质量监测中,学业成就测验需要较好地覆盖课程内容,题量较大,而学生作答时间有限。因此要把所有符合要求的测试题目,按照一定的测量技术和方法(如用矩阵抽样设计)选取题目组合成若干个题本,确保覆盖所有指标。
(4)专家审核。
为保证试题的科学性、准确性和规范性,在试题编制、组卷、形成题本后,都需要专家对题目进行审核。审核的内容包括:题目是否符合测验蓝图的设计;题目的难度是否适宜;题目的材料选取是否合适、有效;题目的表述和设置是否适合学生年龄、适合实际情况;题目是否创新,避免常用教材、教辅中出现的题目或情境;题目的语言表述是否通顺、准确、简洁、易懂等。
(5)预试分析。
试题编制过程中至少需要两次预试。第一次是对所有试题进行小范围预试,并对每道试题抽取几名学生进行访谈,了解其答题的思路,了解评分准则的准确性和有效性等,依据预试结果进行修改。第二次预试是对修改后的试题进行一定范围预试,预试条件尽量与正式施测保持一致。
(6)形成正式测验。
根据预试结果,对试题质量进行分析,筛选和修订试题,组成正式的测验。然后对测验进行标准化,撰写测验实施手册、评分准则等。P286