类型a：

人机多元反馈对提高英语写作文本质量的效果研究学术报告

一、研究作者及发表信息
本研究由温州医科大学外国语学院的张华（Zhang Hua）完成，发表于《外语电化教学》（Foreign Language Education Technology）2019年第2期（总第186期），文章编号为1001-5795(2019)02-0034-0006。

二、学术背景与研究目标
本研究属于计算机辅助语言教学（Computer-Assisted Language Learning, CALL）与二语写作（Second Language Writing）交叉领域。随着大数据时代的发展，基于互联网的自动作文评分系统（Automated Essay Scoring, AES）逐渐应用于英语写作教学，但其反馈机制存在局限性，例如过度关注语言形式而忽视内容与篇章结构。因此，本研究旨在探讨两种反馈方式——人机多元反馈（整合在线自动反馈与人工反馈）与纯在线自动反馈——对大学生英语写作质量的影响，并通过量化与质性分析验证哪种方式更有效。

研究目标包括：
1. 比较两种反馈方式对作文成绩及文本语言特征的影响；
2. 分析差异产生的原因；
3. 为优化AES系统在教学中的应用提供建议。

三、研究设计与方法
研究采用混合方法设计，结合量化分析（文本特征统计与成绩对比）与质性研究（问卷调查与访谈）。具体流程如下：

1. 研究对象与分组

   • 选取非英语专业大二学生104人（实验班49人，对照班55人），通过前测作文成绩确保两组水平无显著差异（独立样本t检验，p>0.05）。
     
   • 实验班采用人机多元反馈（冰果系统自动评分+教师人工反馈+同伴互评），对照班仅使用冰果系统自动反馈。
     

2. 实验周期与数据收集

   • 实验持续12周，每两周布置一篇作文，共6篇。首篇为前测，末篇为后测，均需在40分钟内完成。
     
   • 使用冰果英语智能写作平台（浙江大学与杭州增慧联合开发）进行自动评分，后测作文同时由教师人工评分，取两者均值作为最终成绩。
     

3. 文本分析工具

   • 采用Coh-Metrix 3.0（基于潜语义分析LSA的文本分析系统）量化13个语言特征变量，涵盖5个维度：
     
     • 描述统计量（如句子平均单词数、单词音节数）；
       
     • 文本主构易读性（指称衔接、深度衔接、动词衔接的Z分数）；
       
     • LSA指标（相邻句子、所有句子及段落间的语义连贯性）；
       
     • 词汇多样性（实词词元形符比）；
       
     • 句法复杂度（动词左边嵌入单词数、相邻句子句法相似度）。
       

4. 质性数据收集

   • 通过问卷调查（19题）了解学生对反馈方式的评价；
     
   • 半结构化访谈（每组3人）探讨使用体验与改进建议。
     

四、主要研究结果
1. 成绩对比
- 实验班后测成绩显著提高（均值差=-0.45，p=0.033），对照班无显著变化（p=0.573）。

1. 文本特征分析

   • 词汇复杂度：两组单词音节数均显著增加（p<0.001），表明两种反馈均促进复杂词汇使用。
     
   • 衔接与连贯：
     
     • 实验班在指称衔接（p=0.024）、深度衔接（p=0.035）和动词衔接（p<0.001）上显著提升，对照班则下降或不变。
       
     • 实验班LSA指标（段落间连贯性p=0.024）显著改善，对照班无变化。
       
   • 句法复杂度：实验班句法相似度降低（p=0.003），表明句式多样性提高，而对照班无显著差异。
     

2. 质性分析

   • 75%学生认为冰果系统“有帮助”，但自动反馈局限明显：
     
     • 仅关注语言形式（如语法、词汇），忽视内容逻辑；
       
     • 学生修改动机以“提高分数”为主（55.77%），而非写作能力；
       
     • 69.23%学生偏好人机结合反馈，认为人工反馈能提供情感支持与深层指导。
       

五、结论与价值
1. 科学价值
- 首次通过Coh-Metrix量化验证人机多元反馈对文本深层特征（如衔接、连贯）的促进作用；
- 揭示了AES系统在语义分析上的不足，为自然语言处理研究提供改进方向。

1. 应用价值
   
   • 提出“三阶段反馈模式”：一稿机评→二稿人工/同伴反馈→终稿范文分析；
     
   • 建议AES开发者优化语义分析功能，并引入匿名同伴互评机制（如Peerceptiv系统）。
     

六、研究亮点
1. 方法创新：结合Coh-Metrix深层文本分析与混合研究方法，突破传统AES研究的表层特征局限。
2. 实践意义：为教师合理利用AES系统提供实证依据，强调人工反馈不可替代性。

七、其他发现
- 学生过度依赖评分系统可能导致“为分数而写作”的功利行为，需通过教学设计引导正确学习动机。