写作能力行为测试评分员培训研究述评

在大规模语言考试实践中,评分员培训通常被认为是作文人工评分的必经环节,其目的在于提高评分一致性,保证考试公平性。然而,语言测试界对于评分员培训目的以及自身价值的争论颇多,本文将对这些观点进行梳理。同时,还将对评分员培训步骤、评分员培训效果与持续时间、培训中评分员认知发展过程等相关研究进行探讨。     

“弹性作文评分法”好

所谓“弹性作文评分法”,就是根据不同学生的不同情况而采取不同标准的作文评分方法。我们知道,学生平时的作文训练不同于成绩考试或选拔考试中的作文能力测试。因此,作文训练的评分应与作文考试的评分不同,作文考试时的评分标准是统一的,而平时作文训练我们可以根据需要对同一次作文的不同对象采用不同的评分标准。从这一认识     

评分标准研究的基本出发点──大规模考试作文评分研究系列之三

评分标准研究的基本出发点──大规模考试作文评分研究系列之三章熊评分方法研究的结果表明：仅仅从方法入手，还不足以遏制评分误差。大规模考试中，作文评分误差控制是一项系统工程，它包含评分方法、评分标准、阅卷管理三个基本环节，缺一不可。评分标准研究之所以重要...     

阅卷管理与监测系统─—大规模考试作文评分研究系列之六

阅卷管理与监测系统─—大规模考试作文评分研究系列之六章熊上文说过，大规模考试中作文评分的误差控制包括三个不可缺少的基本环节，这就是评分标准、评分方法和阅卷管理。监测系统是阅卷管理系统中一个有特殊意义的组成部分。一次大规模作文考试，如果没有一套完善的管...     

写作机评原理及应用述评

本文依据语言测试领域的作文评分要素,对国外具有代表性的三种写作机评系统原理和国内主要的写作机评应用进行评介和比较,指出这些评分系统和软件在评分信度和效度等方面优势和劣势,并分析这些作文自动评分系统为我国自主开发作文自动评分系统所提供的借鉴作用。     

基于作文自动评分的大学英语口语评估系统可行性(英文)

论述了作文自动评分系统平台上大学英语口语测试的实现途径.英语口语测试的可信度和有效度向中国当今的大学英语口语机考提出了挑战,涉及机考英语口语测试是否需要还原传统的对话、叙述或评述、问答问题三大评估内容.首先简述了口头言语转化文字言语实现概率(72%)的现况,并以此为自动评分的前提设想.其次,设想了大学英语口语测试的实现途径,即在口头言语转化为文字后,应用作文自动平分对话语进行口语测试系统的2种建模:言语内容检测模型和语言本身检测模型.通过实验,论证了运用作文自动评分系统平台进行大学英语口语测试的可实现性,即实现了首先借助语音识别技术将口头言语转化为文字言语,然后进行文字言语评估的自动评分.这种基于作文自动评分的大学英语口语测试系统建模研究和试验揭示了我国大学英语口语机考的可信度和有效度.     

小学生作文心理漫谈之八 小学生作文测试的实践与研究

写作文,是世界上出现最早的文化科目考试形式之一,在我国可追溯到2000多年前的西汉。然而,从现代测量学的角度看,这又是最难进行客观化测试的内容。从本世纪初开始一直有人调查研究,以期控制作文评分的主观随意性,遗憾的是至今尚未取得让人满意的效果。无论是教学过程中形成性测试,毕业、升学测试,作文评分误差都是普遍存在的,这在一定程度     

作文教学的优化

优化作文教学对于提高学生语文素质十分重要。作文教学的优化应落实在命题，写作指导，修改，评分四个环节上。     

汉语测试电子评分员实验研究报告

根据《汉语测试电子评分员研究设想》(以下简称《研究设想》)提出的研究思路，我们随机选取了700份中国少数民族汉语水平等级考试(MHK)三级作文预测卷，由3位评分员严格按照MHK(三级)作文评分要求进行独立评分。设计、编写电子评分员程序，由电子评分员对这700份作文的电子文件进行评分。随后计算电子评分员     

评分员对不同体裁作文评分的多面Rasch模型分析

主观性测试中,评分员差异是影响测试信度、效度和公平性的重要因素。本文采用多面Rasch模型考察8位评分员对记叙文和议论文两种体裁各60篇作文的评分情况。结果表明,评分员对不同体裁作文的评分存在不一致性:在评分员层面上,评分员的严厉度基本不受体裁的影响,但在评分员的信度与内在一致性方面,议论文评分好于记叙文评分;在评分量表层面上,评分员在评定语言和内容项目上,议论文比记叙文严格,而在条理项目上,议论文比记叙文宽松,并且议论文高分的使用频率比记叙文高。本文还就评分员评分的不一致性的原因进行了探讨,以求为降低评分偏差提供参考。     

高考小作文常见失误展示

自90年代以来,普通高考作文形成了相对稳定的命题模式,除了1994年只有一篇作文外,均采取了一大一小两篇作文的方式。这种测试形式,已得到广大师生、专家及社会的认可,主要原因有二:一是将评分主观性强的作文分成两块,可由两个以上的阅卷人批阅评分,减少     

作文批改,从“独白”走向“互动”

作文批改是作文教学中一个不可忽视的环节,作文评改的最终目的应该是帮助学生活跃思维,开拓思路,激发想象,提高写作的自觉性和主动性。传统的作文批改是教师全包干,实行错别字、病句、结构、文采、语言批改"一条龙"服务,怎么样呢?不尽如人意。许多教师平时认认真真,勤勤恳恳,将作文改得密密麻麻,可学生不领情,拿到作文本子看一下作文评分后,就会丢在一边,从不思考自己写得"差"在哪里,老师     

高中作文教学改革的思考

本文针对当前高中作文教学改革的推进相对滞后;高考作文命题及评分带来的负面效应;作文常规教学的低投入的现状,以调动学生写作情感,激发学生写作欲望为出发点,从命题、阅读、讨论、评语四个环节对作文教学进行扼要阐述,旨在改变作文教学现状,探寻作文教学出路。     

情铸评语间——作文评语刍议

评语,是指教师在学生作文上所写的文字。写在旁边的,称为旁批,写在最后的称为总批。教师的评语,是评改中最被注目的环节。它同评分构成对一篇作文的最终裁判。这     

中美作文命题与评分准则的比较

近年来中国的开放性作文命题越来越受到国内命题界的关注,它与美国的SAT考试,中文名称为学术能力评估测试中的作文命题,在命题与评分准则方面有很多的相似之处和不同之处。在此,通过中国高考开放性作文与"美国高考"作文在命题与评分准则两个方面进行比较分析,试图能发现我国高考作文命题和评分准则存在的一些问题。     

iWrite 2.0在线英语作文评分信度研究

随着国内自动评分技术的飞速发展,写作自动评分方法不断涌现,i Write英语写作教学与评阅系统2.0应运而生。该系统拥有包含写作教学系统、智能批改引擎和自动评分引擎在内的多项自主知识产权技术,能够实现对英语作文的语言、内容、篇章结构和技术规范四个维度的机器智能评阅。文章从真实语言测试中获取了大量英语作文语料,充分利用一致性和一致率算法,将作文的人工评分与i Write 2.0的机器评分做了多角度对比,并对i Write 2.0在线英语作文评分的信度进行了实证研究。     

题及另一种构想

高考作文60分，占高考总分值750分的8％。这样的一道举足轻重的大型主观题，如果离开了科学的评分方式，将会严重影响高考的信度和效度。现在的情形是，一方面，有关部门不断加强对评分的管理和控制；另一方面，误差较大、分数趋中等问题依然没有解决，社会对高考作文评分的质疑持续不断。作文评分方式涉及命题环节评分量表的制订和阅卷环节...     

大学英语分级测试作文评分的效度分析

作者阐述了分级测试对于大学英语学习者的重要意义，以教师和学生问卷结果和批阅完成的试卷作文中进行随机抽样的统计分析结果，发现教师倾向印象法评分而学生倾向机械法评分。因此，作文评分的效度需要通过从制订详细的评分细则、建立互评制度等方面加以保证。     

从语言测试学角度分析CET写作能力实质

在目前广大师生对于大学英语作文部分的要求和评分体系缺乏清楚认识的前提下,本文从语言测试学的角度展示CET作文的基本要求和大学英语写作能力的实质及构成要素,对于大学英语写作教学尤其是作文的整体质量的提高有积极的推动作用。     

采用多面Rasch模型提高英语运用测试的评分质量

目前电大系统英语考试的口试和作文部分多采用语言运用测试的方式.语言运用测试由于引入评分者而使评分的主观性变大.如何控制评分者差异对考生分数的影响成为保证语言运用测试评分质量的重要环节.本文在比较了行为测试中评分质量控制方面常用的三种理论的基础上,着重介绍了多面Rasch模型在提高评分质量方面的贡献,并探讨了在电大系统如何采用该模型对英语运用测试中的评分者进行培训,以控制评分质量和提高考试信度.