要进行定量研究,首先需要弄清楚什么是研究。研究包含三大要素:研究问题、系统的方法和答案。具体说来,研究需要做到问题要适当、方法要系统、答案要有效。所谓问题的适当性,就是提出的研究问题既要有意义又要可行。方法的系统性则要求研究者必须遵循本领域的既定原则,或者说要按照不同研究方法的要求开展工作。所谓答案的有效性,就是获得的研究结果对于研究问题来说必须是有效的。
对于研究所涉及的三大要素的重要性及评价标准,人们估计不会有异议。然而在实践过程中,人们尤其是初学者往往由于重视程度不够或其他原因,存在着各种问题。以下根据研究的三个主要组成部分及其评价标准简要地讨论国内外语教学研究者容易出现的问题。
首先,不重视研究问题的呈现。
通过检索国内外语教学研究的文献我们不难发现,不少实证研究论文缺少对具体的研究问题的呈现。这里所说的明确的研究问题是指如“英语专业学习者的语法能力及其意识程度是否存在性格差异?”、“英语专业学生的语用能力及其意识程度是否存在性格差异?”等类的问题;暗示的研究问题是指“本文研究在课堂教学中使用哪种媒介语更有利于提高大学英语课堂教学质量”、“本文采取定性分析方法,对词汇记忆能力强的学习者与记忆能力弱的学习者之间是否存在种种差异进行探讨”等;完全没有研究问题的论文一般只是简略地介绍了自己的研究话题,如“本研究运用定量研究方法,借鉴管理学、心理学和教育学中的特征理论来构建大学英语教师的胜任特征”、“本研究试图通过对教师话语进行定性和定量分析, 揭示采用‘以学生为中心的主题教学模式’的课堂中交互形式的特点”等等。
提出明确的研究问题很有必要,一来有助于作者本人弄清楚自己的研究目标,其次有助于读者了解论文的具体研究内容,而不是让读者去琢磨作者究竟要回答什么问题。没有研究问题或问题不明确会让读者不知道研究者究竟要研究什么。Hatch和Farhady(1982)描述了提出研究问题的过程,对我们有启发意义。这一过程始于确认研究题目,之后是尽量缩小题目范围,然后是在综述文献的基础上以问题的形式陈述研究题目。研究问题的提出过程实际上反映了一个从抽象到具体的过程,解决了研究题目的可操作性问题。
虽然没有规定要求所有的研究都要提出明确的研究问题,但总的说来,可以遵循如下原则,绝大多数研究,尤其是比较复杂的研究需要明确提出研究问题。如果研究不是太复杂,或者研究问题本身是不言而喻的(如从研究题目就可以看出想要探讨的问题),这时研究者也可以不给出明确的研究问题。但即使这样,研究者至少需要明确地表明自己的研究要达到什么目标。
其次,国内一些外语教学研究论文缺少相应的或恰当的研究方法。
或者说,论文中有研究问题,也有答案或结果,但就是没有相应的或恰当的研究方法。在外语教学研究学位论文和期刊论文中,经常会发现这类文献。如某核心期刊中有篇论文探讨了两个不同的变量与二语学习之间的关系,提出了以下研究问题(这里以变量A和变量B指代上述两个变量):
(1)初级阶段不同性别的学习者在变量A方面有何不同,该差异对二语学习有何影响?
(2)中级阶段不同性别的学习者在变量A方面有何不同,该差异对二语学习有何影响?
(3)变量A是否比变量B更有利于二语学习?为什么?
对于前两个问题,研究者首先希望对比分析变量A上是否存在性别差异,然后探讨该变量对二语学习的影响。为此,研究者使用了描述性统计方法(最小值、最大值、平均值和标准差)进行性别比较,然后再使用相关分析探讨变量A和变量B对二语学习的影响。事实上,描述统计无法揭示不同群组之间是否真正存在差异,相关分析只能表明不同变量之间是否存在联系,但不能表明变量之间是否存在因果关系(关于描述统计方法和相关分析方法的功能可参见本书后面的相关章节)。换言之,作者使用的这两个方法根本无法回答他所提出的研究问题。
第三, 一些外语教学研究论文在呈现研究结果时存在着效度问题。
一种情况是上面所说的方法使用不当或没有研究方法。方法不当导致得出的结论是错误的,没有方法导致得出的是子虚乌有的结果,这两种情况均严重地影响了研究效度。另一种情况是使用了某些研究方法,却没有汇报结果,或者只有结论而没有交代数据结果,读者无法知道他的结论依据是什么。仍以上面的那篇核心期刊论文为例,该论文声称使用了问卷调查和访谈的定性研究方法,以便对定量部分的结果有更为详尽和准确的了解。遗憾的是,关于问卷调查的结果,文中只字未提;访谈部分的研究结果有两大不足,一是完全没有汇报数据结果,二是只汇报了对初级阶段受试者的访谈情况,没有中级阶段的访谈情况。作者是这样汇报的:
通过对部分受访者的访谈,我们发现:语言学习背景、兴趣、努力程度和学习策略等因素都对二语学习的效果产生重要影响,它进一步说明了为什么初级阶段男性学习者的变量A对他们的二语习得没能产生重要影响。
严格来讲,上述这段文字算不上研究结果,它只是作者自己访谈后得出的结论。也许这些结论本身没有问题,但是论文并没有汇报访谈的数据结果,作者依据什么得出的这一结论就不得而知了。国内外语类核心期刊论文中只汇报结论而不汇报数据结果的现象非常普遍,研究生学位论文中这种现象更是不胜枚举。不汇报数据直接告诉读者自己的研究结论的做法不符合研究的严谨性、科学性和逻辑性要求。
第四,个别论文只介绍了所使用的研究工具,可是论文的研究结果部分没有相应的结果。
如某核心期刊中有一篇关于词汇附带习得方面的实验研究,该文称:
本项研究共使用了以下6 种常用量表或问卷:
1) 积极、消极英语词汇量分别采用Nation (1990)的Vocabulary Levels Test 和Laufer 和 Nation (1999)的Productive Levels Test: Version C;
2) 学习动机采用Cohen 和 Dörnyei (2001) 的Taking My Motivational Temperature on a Language Task (由实验人员译成中文) ;
3) 学习策略、学习风格分别采用Cohen 等 (2002) 的Language Strategy Use Survey 和Learning Style Survey (由实验人员译成中文) ;
4) 目标词的即时与延迟测试试卷依据Paribakht 和 Wesche (1997) 的五级词汇知识量表VKS 制成(其指示亦译成中文,并根据Read [2000]的意见进行修改) 。
遗憾的是,该研究虽然使用了学习动机、学习策略和学习风格方面的问卷,可是没有介绍如何处理由这些工具所收集的数据,也没有汇报信度和效度分析结果,甚至结果部分中压根儿就没有出现与这些工具对应的研究结果。
综上所述,正确地理解什么是研究,它有哪些组成部分,这些组成部分的要求是什么,有助于避免出现上述问题。进行研究时要做到以下三点:一是尽量提出具体的研究问题;二是选择能够有效地回答研究问题的方法;三是客观地汇报根据每一种研究方法得出的研究结果,并依据研究结果得出结论。这三个方面缺一不可。
以上内容节选并改编自《外语教学定量研究方法及数据分析》(秦晓晴 2015)