从研究方法的角度评析论文

胡新月

摘  要：本文以一篇期刊论文（《我国英语专业与其他文科类大学生思辨能力的对比研究》）的研究方法为出发点，试图从样本选取、量具选取、数据分析等方面探讨其研究方法的优点与局限性。

关键词：研究方法;优点;局限性

一、《我国英语专业与其他文科类大学生思辨能力的对比研究》研究内容概述

该研究假设英语专业大学生的思辨能力低于其他文科类大学生，旨在用实证数据检验这一假设。从文献回顾中我们可以看出，国外十分重视对学生思辨能力的培养，也进行了许多关于大学生思辨能力的研究。在培养学生思辨能力的重要性上，我国与国外没有太大差异。但是国内对于大学生思辨能力现状的实证研究寥寥无几，更没有系统的实证研究结果用于指导教学实践。该课题是我国首个大规模文科类大学生思辨能力调查研究，具有一定的创新性，为未来关于大学生思辨能力的研究提供了借鉴和方向。

二、《我国英语专业与其他文科类大学生思辨能力的对比研究》研究方法概述

该研究首先构建测量大学生思辨能力的理论框架，然后根据理论框架设计量具开展先导研究，在根据先导研究的结果对量具进行修订后对来自全国11所高校的14个文科专业1～3年级2189名学生进行了测试。在数据采集后对数据进行了总结和分析（涉及的主要分析方法有独立样本t 检验与单因素方差分析及两两配对比较）。最后对研究结果进行了汇报和评估。该研究主要采用的是定量分析的研究方法，主要是用數据来验证假设的真伪。其中在涉及到原因分析的部分采用定性分析方法解释了可能的原因。

三、对《我国英语专业与其他文科类大学生思辨能力的对比研究》研究方法的评价

1 研究方法的优点

从样本的选取来看，受试的11所高校类型包括综合类、理工类、财经类和师范类院校，具体来说，这11所高校分别属于理工类985、省部共建省属综合类、省部共建省属财经类、省属普通师范类、省部共建省属财经类、省属普通师范类、理工类985、综合类985、2004年专升本省属财经类、财经类211、理工类211。受试学校种类较多，基本涵盖了全国高校的类型，生源质量不同，可使样本更具代表性，更能代表全国的一般性水平。每个学校1、2、3 年级的英语专业与其他文科专业各有1-2 个班参加，非英语专业学生的选择首先考虑文、史、哲专业，其次考虑经、法、管专业。选取的其他文科专业的样本也基本涵盖了文科专业的类型，增加了样本的代表性。同时考虑到学生的学习成绩和文化水平可能会对思辨能力有所影响，在样本选取时，每个学校选择的其他文科专业学生的高考成绩与当年入学英语专业学生的水平相当，这避免了由学生水平差异导致的思辨能力水平不同，增加了英语专业学生与其他文科类专业学生数据的可比性。

从量具的选取来看，在构建量具之前，文秋芳等（2009）首先构建了思辨理论量具的层级理论框架，并对国内外现有的思辨能力量具进行了分析与评价。在此基础上，文秋芳等（2010）在三所大学750名大学生中用题型、难易度、数量相同的A、B两卷进行了先导研究。最终量具的选定是在先导研究结果的基础上进行修订的，这增加了量具的信度与效度。该量具包括40道题，分为10类。具体包括识别预设、形式推理、匹配相似推理、评价附加证据对结论的影响、数字题、图表题、根据争论内容评价结论、根据实验报告评价陈述以及分析案例评价推论。本测试的总体难易度为.61，区分度为.31，内部一致性信度为.70。题目类型多样，能够较为客观地测试出学生的分析、推理与评价技能。此外，作者还提供了该量具的效度证据：第一，该量具能够较好地区分生源质量不同的参加测试的学校;第二，该量具基本能够区分三个不同年级学生的思维水平;第三，思辨能力测试成绩与英语专业笔试成绩呈显著正相关（文秋芳等2010）。综上所述，该量具的信度与效度较高，可以较好地反映出学生的思辨能力水平。

从测试的实施来看，测试分班级或年级进行，时间为45 分钟。一般情况下每班有两位老师负责监考，1 名为课题组成员，另1 名为任课教师。测试前老师根据统一的测试指导语向学生解释测试要求、测试步骤与需注意的问题。受测学生被明确告知，该测试来源于国家社科课题，目的是了解大学生思辨能力现状。个人的测试结果会告知每个受试者。该测试采用正规考试的形式进行，并安排老师监考，可使受试者独立思考，认真对待，从而使测试结果更加可信。此外。测试前向受试学生说明测试目的，并表示会将测试结果告知受试者。这一方面是对受试者的尊重，另一方面也会使受试者感到该测试的重要性，大多数受试者会更加配合，从而更加认真地完成试题，增加了测试结果的可信度。

从对数据分析的结果来看，该研究对数据的解释是十分合理的。该研究从总体样本、各年级样本及三年内变化趋势三个层面对英语专业与其他文科类大学生的成绩进行了对比。两类学生总体样本的数据显示，英语专业学生思辨能力的平均分为61 .07，其他文科学生的平均分为58 .32，两者的均差为2 .75，英语专业学生思辨测试成绩的标准差为11.96，其他文科专业成绩的标准差为12.88。从而得出结论：英语专业学生不仅思辨能力测试成绩高，而且内部的差异还小于其他文科专业学生。此外，独立样本t检验结果表明他们之间的差异具有统计意义，显著性水平为.000。在各年级样本的比较中，英语专业每个年级的思辨水平测试平均分都高于其他文科专业学生。其中，一年级平均高出3.65分，二年级高出2 .64 分，三年级高出1 .62 分。比较两类学生每个年级的均差，随着年级的提高，两类学生的均差在逐步减少。差异显著性的水平也随之发生变化：一年级差异显著性达到.000 水平，二年级达到.006，三年级达到.078超过了.05，此差异就不再具有统计意义了。作者由这些数据推断出：英语专业学生在思辨能力测试中显示出的优势主要源于新生的总体水平明显好于其他文科类学生。虽然外语专业学生入学时的思辨能力高于其他文科类学生，但这种优势逐渐丧失，到三年级时，就不复存在。在两类学生三年内变化趋势的比较中，两类学生三个年级之间的变化差异分别达到.03与.000的显著性水平，两类学生的思辨测试平均分随着年级的提高不断增加。英语专业学生一年级到二年级的均差只有.05（p=.999），二年级到三年级的均差为2 .11，不具有统计意义（p =0 .087），一年级到三年级的均差为2 .16，也未达到统计显著性要求（p =0 .065）。而其他文科类大学生，一年级到二年级的均差为1 .05（p =.495），二年级到三年级的均差为3 .14（p =.004），一年级到三年级的均差为4 .19（p =.000）。除一年级与二年级的差异未达到显著性指标外，其他差异均具有统计意义。由此作者得出结论：两类学生一、二、三年级思辨水平内部的变化均达到显著性水平，但英语专业学生三年内变化的幅度明显小于其他文科类大学生;英语专业学生思辨水平虽有小幅量变，但未出现质变的关键期，1-2 年级，2-3 年级与1-3 年级之间的差异均未达到显著水平，而其他文科类大学生变化幅度大，同时呈现质变的关键期在2-3 年级。该研究通过三个层面对数据进行了分析和对比，层次清晰，条理清楚，并且能够较全面地反映出结果。

此外，通过数据的对比和分析，该研究发现英语专业学生大学三年的学习对思辨能力发展的影响没有其他文科类专业强。对此，作者从《高等学校英语专业英语教学大纲》的规定，认知角度以及语言学习过程等定性地分析了可能造成这一现象的原因，将该研究与英语专业教学特点和规定结合起来分析，增加了该研究的深度与广度，为后人的研究提供了视角。

2 研究方法的局限性

从样本的选取来看，该研究选取的11所高校虽然种类涵盖了全国高校的种类，但没有说明这11所高校所在的地区。地区不同，学校的教学质量、教学方式和生源水平会存在差异，这些都有可能对学生的思辨能力产生一定的影响。因此，要想通过11所高校来预测全国的水平，这11所高校必须涵盖我国东中西部地区的高校，以提高样本的代表性。正如文中所说，“上述研究虽涉及11 所高校2189 名学生，但研究结果是否能应用于全国文科类大学生还有待进一步验证。”此外，该研究采用横向调查方式，测试的一、二、三年级学生不是同一批学生，由此推断出的各年级思辨能力的发展情况很可能不准确，这需要跟踪研究做进一步检驗。

从量具的选取来看，该研究的量具虽具有较好地信度与效度，但是难度与区分度参数并不十分理想。虽然题型种类多样，但都是以多项选择的客观题形式来测试学生的思辨能力，未能测量到思辨能力中的综合技能。如果学生不是认真对待，可能存在随意选择的情况。有些题目可能是学生瞎猜而非认真思考的结果，从而影响数据的准确性和可信度。

从对结果的解释来看，研究所得的结果并不能确切地证实或证伪假设。虽然结果显示，英语专业学生总体思辨水平显著高于其他文科类大学生，但是其他文科类专业学生思辨能力在大学三年的进步比英语专业的学生显著得多。按照这一速度继续前行，或许待到大学毕业时，他们的思辨水平就会超过英语专业学生。由于该课题研究未涉及四年级的毕业生，所以结果如何还有待进一步调查。

此外，该研究没有对各类高校的数据分开进行对比。我认为可以将综合类大学、理工类大学、财经类大学和师范类大学这四类大学的样本进行独立地对比分析，从而可以探究各类大学英语专业学生与其他文科类专业学生思辨水平的不同，进一步探究各类大学的教育方式教育特色与培养学生思辨水平的关系。

该研究没有具体涉及对未来研究的展望，也没有对未来研究提供建议。我认为未来对大学生思辨水平的研究可以更加紧密地与教育方式结合在一起，探究如何通过教育提高学生的思辨水平，探索能够培养学生思辨能力的教育方式和课程。该研究虽然定性的分析了英语专业学习对思辨能力发展影响不强的可能原因，但未能提出具体改进英语专业教育方式方法的可行建议。而且此研究所得的结果很大程度上还有待进一步证实，也没有将此研究结果与学界已有的结果进行对比分析。

参考文献

[1]  文秋芳等. 我国英语专业与其他文科类大学生思辨能力的对比研究. 外语教学与研究（外国语文双月刊），2010（5）：350-355.