透过PISA能否解读中国教育

首页 > 教育新闻 > 教育杂谈/2013-12-12 / 加入收藏 / 阅读 [打印]

    测了哪些方面?

    PISA2012的核心测评领域为四个:数学、科学、阅读、问题解决,其中问题解决采用计算机辅助测试。此外还有两个国际选项:财经素养(纸笔测试)、计算机辅助阅读和数学测试。上海学生参加了上述所有领域的测试。

    与PISA2009相比,PISA2012的数学测评框架有了较大的变化:一是把问题解决过程划分为三个阶段:(1)用数学语言表述问题情境,(2)运用数学概念、事实、步骤和推理,(3)阐释、应用和评价数学结果;二是对学习者特征进行了更全面深入的阐述,包括数学学习的动机和信念等。

    PISA2012问题解决测试采用计算机辅助测试,它有四个特点,一是仿真性,例如,模拟科技设备的功能,包括手机、遥控器和自动售票机等。二是交互性,问题解决者无需了解设备的内部工作原理,只需通过设备面板按钮的操作,通过人机交互来探究和理解设备的使用方法和功能。三是过程性,有利于中间和最终结果的获取与评分。只要编写出合适的试题,计算机就能够有目的地获取一系列数据,比如学生在解决问题时所采取的行动的种类、频率、持续时间以及顺序,从而能够收集和分析问题处理以及解决策略的相关数据。四是可控性,测试时可以监控并限制学生在某一特定试题上所花的时间,比如,限制学生在钻研某复杂问题情境时所浪费的时间,因此,学生一旦登录测试环境,时间就完全交给计算机控制。

    举个实例:电子表。学生将看到一块有四个按钮控制的电子表,但并没有向学生透露它们各自的功能。学生需要完成以下任务:探究“时间”模式中每个按钮的功能;完成一张说明电子表各模式之间如何转换的展示图;根据以上了解,操控手表,设置时间。

    除了认知领域的测试外,PISA还通过问卷调查收集学生个人、家庭和学校背景信息,分析影响教育质量的因素,为学校教育系统的改进提供政策建议。学生问卷内容涉及他们的家庭社会经济背景、问题解决策略、数学学习动机和学习机会等。校长问卷主要关于教师状况、学校资源状况、学校风气和学校政策等,时间为30分钟。

    PISA问卷一般要求学生对一系列具体事实或行为做出描述或评价,而不是笼统地提问。例如对学生家庭经济社会文化地位的调查,包括父母的学历、父母的职业、家庭拥有物三个方面的问题。关于父母的职业,学生不是在几个有限的大类中做选择,而是具体描述父母的工作内容,比如“你父(母)亲主要从事什么工作?(如,学校老师,帮厨,销售经理)”“你父(母)亲从事的主要工作是怎样的?(如,教高中学生,在餐厅帮厨师备菜,管理一支销售队伍)”。然后由经过专门培训的编码员将父母的职业按照国际职业标准分类进行编码。又如,家庭拥有物包括家庭财富、文化资源和教育资源(问学生家中有哪些物品,在20多种物品中做选择)以及家庭藏书量。将学生对上述问题的回答综合为家庭经济社会文化地位(ESCS)指数,通过计算该指数与成绩的相关、对成绩差异的解释率和对成绩差异的作用大小,可以估计家庭背景对成绩的影响,如果相关系数、解释率或回归线的斜率有统计上的显著性,那么说明教育结果是与家庭背景相联系的,是不公平的,反之则较公平。

    是如何评卷打分的?

    PISA测试中的开放题大约占45%,需要专家对开放题进行评分,但实际并不是给出分数,而是给予一个评分代码。PISA2012正式测试评卷工作分纸笔和机考两方面。

    纸笔测试评卷聘用32名评卷专家,其中12名评数学,8名评阅读,8名评科学,另外还有4名数学、财经、阅读、科学领域的评卷负责人,他们都参加过国际评卷培训,负责开展上海本地评卷培训以及检查评卷员每天的工作,并且在个别评卷员请假的时候担任替补。计算机辅助测试聘用12名评卷专家,4名评计算机辅助问题解决,4名(兼)评计算机辅助阅读素养,4名(兼)评计算机辅助数学素养,其中计算机辅助阅读和数学素养的评卷专家都是参加过纸笔测试评卷的。所有评卷专家都签署了保密协议。

    评卷的培训工作非常严格,培训时间占了总时间的30%左右,培训和评分交替进行,每次1个单元组。所有评卷专家都要先做一遍即将进行评卷的单元组试题,对照评卷指南给自己做的试卷打分,然后采用全组公开讨论的方式来分析这些评分,再利用本地学生回答的样例开展评分实习。评分实习时评卷专家不能提问,不能咨询其他的评卷专家。完成实习后,培训者要对他们的评分进行审阅,并深入讨论以确保评卷专家明白正确评分的理由。只有当所有的评卷专家的评分质量和可靠性都达到要求了,才可以开始正式评分。

    评卷过程分为单次评分和多次评分两个阶段,每个试题本都要抽出100本,由4位专家独立评分,用于检查专家之间的一致性。在所有数据提交后,国际组织还会要求抽样扫描200本试题本,由国际组织另外聘请一组国际专家来评分,以此检查各国(地区)对评分标准掌握的宽严程度,检查结果会在测试的技术报告中列出。

    除了试题本需要专家编码外,学生问卷中的父母职业需要根据ISCO-08标准进行职业分类编码,这是一个相当繁重的工作,SHPISA中心聘请了7位编码人员,前后历时1个月才完成。

    试题本评卷和问卷职业分类编码完成后便开始数据输入,共聘请15位数据输入员,用了11天时间完成。(PISA2012中国上海项目组秘书长 陆璟)

  • 最新内容
  • 相关内容
  • 网友推荐
  • 图文推荐