1、我 国 高 校 英 语 专业本科毕业论文评测的效度检验研究 鲁东大学外国语学院 修旭东该研究的主要过程分为三个阶段: 对语言测试与评价的效度检验框架进行综述,提供学术性写作测试的效度检验框架的详细参数;(第一部分:文献综述) 根据效度检验框架开发和 /或预试经验性的、全面的、操作性强的检验英语写作测试效度的工具;(第二部分:预示研究) 把开发和预试后的工具运用到检验毕业论文评测的效度中去,为其在多大程度上有效提供证据。(第三部分:主体研究)第一部分第一部分 文献综述(第一、二章)文献综述(第一、二章)环境效度背景:任 务 要求:任 务*目的 *语 言的( 输 入和 输出)*回答形式 -渠道*公
2、开的 标 准 -话语 方式*加 权 -文章 长 度*项 目 顺 序 -作者、 读 者关系*时间 限制 -信息性 质背景: 测试 的 实 施*硬件条件-内容知 识-词汇 范 围*实 施一致性 -结 构范 围*安全性 -功能范 围认知效度写作内在过程写作 实 施 过 程监控写作支持源*确定目 标 语 言知 识*主 题 /体裁 调 整*产 生思想*语 法的*语 篇的*功能的*组织 思想*表达 *社会 语 言学的*检查 内容知 识*内在的 *外在的评 分效度评分标 准 /评 分尺度评 分步 骤 评 分 员 培 训 评 分 统 一 标 准 调 整 评 分条件 统计 分析评 分 员定 级 和公布回答试 后
3、效度分数解 释 差异影响 对课 堂的反 拨 对 社会的影响效 标 关 联 效度分数价 值 同一 测试 的不同版本比较 同一 测试 在不同 场 合 实施 的比 较 与其他 测试 或 测 量比 较 与将来成 绩 比 较图 2.14 检验学术写作测试效度的社会认知模型 (编自 Weir 2005: 47)研究问题 我国高校英语专业本科毕业论文在多大程度上是对学生英语写作能力的有效测试? 为了回答这个总问题,需要研究下面两个分问题: 应开发和 /或预试哪些工具和程序来检验我国高校英语专业毕业论文的效度? 有什么证据说明毕业论文是对我国英语专业学生英语语言能力的有效测试? 第二部分:预试研究(第 3章) 预试研究回答第一个研究问题: 应开发和 /或预试哪些工具和程序来检验我国高校英语专业毕业论文的效度第 3章 开发和预试将效度框架应用于毕业论文中的工具和程序 3.1预试研究一:开发和预试调查 受试者特征 的工具和程序 预试研究一的目的是: 建立抽取参加者样本的原则; 根据第 2章 2.1找出受试者哪些特征(作为变量)影响其成绩; 预试调查学生的基本人口统计数据和心理特点的工具和程序。 数据来源:学生和他们的测试分数 工具:问卷 A1和问卷 A2(见下文 3.1.3和附录 3.2-3.3)。