职场英语水平考试的测试分析与反思

叶梅

【摘要】本文对上海工商外国语职业学院首届职场英语水平考试，从正态性、信度效度、难度和区分度等方面进行了试卷质量分析，在此基础上对试卷各题型的设置及分值分配进行反思，以期编制出更好的职场英语水平考试试卷。

【关键词】职场英语 考试分析 反思

教育部高职高专英语教指委颁布的《高等职业教育英语课程教学要求》（试行）（2010年6月）中明确提出“高职英语课程以培养学生实际应用英语的能力为目标，侧重职场环境下语言交际能力的培养，使学生逐步提高用英语进行交流和沟通的能力”。在教学中，我们要遵循外语学习规律，结合高职教育特点，在打好语言基本功的基础上，以职场岗位需求为主线开发和构建教学内容体系，着力培养学生职场环境下的英语口头和书面交际能力。因此，我们提出并实施了“三五”教改方案，就是将大学英语教学分成三个阶段和五个学期，即：基础英语阶段（大一两个学期）、通用职场英语阶段（大二两个学期）及专业职场英语阶段（大三第一学期八周）。三阶段五学期的教学内容各有侧重，相互渗透。

课程考核是构建课程体系的重要一环，为进一步完善了公共英语课程体系，在大二年级第四学期期末设置职场英语水平考试，考查学生语言水平和教学效果。职场英语水平考试有两个显著的特点：一是重视考查学生的英语口语能力。口试由“微型演讲”（Mini-Talk）和“简短对话”（Short Conversation）两部分组成。通过现场演讲和即兴对话，考查学生的口语表达能力；二是注重考查职场英语应用能力。笔试部分的试题不仅涉及基础英语，还包含了职场英语内容（如词汇、翻译和应用文写作），较好体现了职业教育的特点和就业岗位对求职者英语能力的需求。

2012级学生在2014年6月参加了上海工商外国语学院首届职场英语水平考试。本次考试总分150分，分笔试（100分）和口试（50分）两部分，口试由班级授课老师进行一对一的口试，给出分数。笔试为2012级学生第四学期的期末统考，考试规范，成绩可信度较高。本文拟采用SPSS.19软件对1333份笔试成绩样本进行分析，并提出对职场英语水平考试题型设置及分值分配的反思。

一、考试分析及主要指标

考试分析的首要环节是试卷质量分析。根据测量学原理，在对考试成绩进行正态拟合检验的基础上，从试卷的信度效度和难度、区分度三个方面获取本次考试的相关信息。

1.正态拟合检验。一门课程考试的质量首先取决于作为考试工具的试卷是否能够反映学生学习的实际水平。一项符合学生试卷水平的考试，理论上，其考试成绩应该服从或近似服从正态分布。也就是说，成绩中等水平的学生占大多数，而成绩特别好和特别差的学生均为少数。因此，试卷分析首先必须检验其考试结果的分布情况。采用SPSS.19软件对1333份笔试样本进行分析后，本次考试的成绩分布频数如图一。

本次职场英语水平考试笔试部分的平均成绩为61.4，标准差为15.7。通过正态拟合检验发现本次考试的成绩接近负偏态分布（见图一），试卷基本上能反映学生的实际情况。

2.信度效度。考试信度指考试结果的一致性程度，是表明考试质量的稳定性和可靠性的一个重要指标。试卷的信度高，意味着考试结果很少受随机因素的影响，考试的结果与其他等价考试的结果是一致的，考试成绩能真实可靠地反映学生的学业水平。效度是对考试所要测量的内容所达到的程度的估计，考试是否准确地测定了要测定的内容。

只有信度较高的测试才能有较高的效度，但是，效度较高不能保证信度也一样高。可以说，信度和效度的关系是单方面的，信度差则效度差，但效度差不一定信度差。只有信度高的考试结果才能为试卷分析提供有意义的信息。

首先通过SPSS.19软件计算出试题的均值和标准差，然后通过库德·理查逊公式计算出本次考试的信度。

根据计算，本次考试的信度系数为0.939，可见本次考试信度较好，考试结果是稳定可靠的。

3.难度、区分度。试题的难度就是试题的难易程度，也是试题质量分析的一个数量指标。试题的难度与考试分数的分布有着直接的关系。如果试题太难，则考试分数成负偏态分布。如果试题太容易，则考试分数成正偏态分布。难度可用正确回答试题人数与参加测验总人数之比值作为指标，也可以采用极端分组法。试卷难度会对试卷多方面的质量产生深刻的影响。因此，难度必须适宜。本次考试分析采用极端分组法分析了试卷试题的难度，把全体考生的成绩从高分到低分排列，把处于前27%的考生列为高分组，处于后27%的考生列为低分组。

试题的区分度是用来判断试题具有多大能力把成绩较好和较差的学生档次区分开来的指标，也就是试题在用于考试时使水平高的学生得高分，使水平低的学生得低分的倾向。区分度是鉴定试题的重要依据。区分度不高的考试，学业优秀和学业差的学生在考试成绩上差异不大，或没有规律性。它可用一组学生的本试题得分与这组学生的本试卷考分之间的相关程度来表示。另一种方法是比较两个极端组通过一个题项的比例，即从分布的两端选出高分组和低分组，然后将高分组和低分组通过每个项目的分数用百分比来表示，这两个百分数之差就提供了题目区分度的指标。其计算公式如下：D= PH-PL

一般要求题项得分与总分的相关达到0.2以上。通过极端分组法计算后，D≥0.3表示区分度好；0.3>D≥0.15 表示区分度较好；D<0.15则表示区分度差。从本次考试的结果分析来看，试卷整体上具有良好的区分度（见表一）。

二、对于职场英语水平考试的反思

通过以上对试卷质量的分析表明，本次考试的试卷总体上具有良好的信度效度和区分度，考试成绩较真实的反映了学生的学业水平。对本次考试，笔者有以下几点思考。

1.职场英语水平考试的定位。语言测试按用途来分类，至少可以分出四类：水平测试、成绩测试、潜能测试和诊断测试。水平测试考查学生的语言能力，不管从前学过没有或学了多少，或是如何学的，也不考虑学生的文化、教育、年龄等环境因素。如“托福”和“雅思”测试都属于水平测试。成绩测试考查学生对所学知识的掌握，它一般要参考某种教学大纲，甚至考虑到教学方法。如随堂测试、期中期末测试，以及学校的毕业考试，都属于成绩测试。潜能测试用来预示学生学习某种语言的潜力和天赋。诊断测试用来发现教和学两方面的问题，目的是为了改进教学，调整教学计划，进行个别指导。

职场英语水平考试就其性质来说应该属于水平测试，而在本次考试中又把它定位为第四学期期末考试。从本次职场英语水平考试分析结果来看，二外和商务文法专业学生成绩较好，而机电信息和艺术专业学生的成绩不理想。作为期末考试，对于机电信息和艺术专业的学生来说，是次难度偏大的考试，直接导致学生的大面积不及格。成绩测试的性质一般就限定了试题的难易程度，一般在成绩测验中，试题难度应该小一点，因为这类试卷是要考虑让大多数学生都能通过，即准予及格这一原则。那么，如何调整职场英语水平考试和作为成绩测试的期末考试之间的矛盾，就成了我们必须解决的问题。

2.题型设置及分值分配。本次考试的题型第一部分为词汇和语法结构，考查学生对职场英语基础词汇（10%），基本语法结构（30%）的掌握；第二部分为对话补全，考查学生交际场合的口语得体应答（10%）；第三部分为阅读理解题共三篇文章，主要考查学生英语阅读能力（20%）。第四部分和第五部分分别为翻译（15%）和写作（15%），考查学生职场英语的翻译和实用写作能力。从笔试卷面题型的设置来看，还是以基础英语知识的考查为重，而反映职场环境下的交际能力的听力任务没有涉及。从考试的内容上，也还是以日常英语（60%）为主，涉及职场环境下的英语内容只占（40%）。在以后的试卷编制中，应从全面考查学生在职场环境下的英语运用能力的视角来进行题型设置和分值分配。

结语

本文对2012级学生职场英语水平考试的结果进行了分析，从考试成绩的分布、考试的信度效度、试题的难度和区分度等方面进行了试卷质量分析，在此基础上对试卷各题型的设置及分值分配进行了反思，以期在后续的职场英语水平考试试卷的编制中加以改进和提高。

参考文献：

[1]刘润清，韩定成.语言测试和它的方法[M].北京：外语教学与研究出版社，2010.

[2]蒙诗茜等.高职英语等级测试对“就业为导向”课程设计的积极反拨[J].职业时空，2013（7）.

[3]钱朝霞.考试分析及其应用[J].海南大学学报（自然科学版）， 1999（06）.

[4]王孝玲.教育统计学[M].上海：华东师范大学出版社，2009.

[5]吴明隆.SPSS统计应用实务[M].北京：中国铁道出版社，2003.

[6]徐小丽.浅议基于职场工作视角的英语考试设计[J].中国校外教育，2013（3）.