Making GenAI revision accountable: learner evaluation, uptake, and revision quality in source-based academic writing

质量(理念) 学术写作 心理学 数学教育 教育学 医学教育 学习发展 学业成绩 计算机科学 定性研究 高等教育 自主学习 写作评估 语言习得 教学方法 体验式学习 行动研究
作者
Huican Huo,Yanfan Cheng,Yue Peng,Weiwei Xie
出处
期刊:Innovation in Language Learning and Teaching [Taylor & Francis]
卷期号:: 1-22
标识
DOI:10.1080/17501229.2026.2745108
摘要

Generative artificial intelligence (GenAI) can provide fluent revision suggestions, but source-based writing requires learners to judge whether those suggestions preserve source meaning, evidence, attribution, task requirements, and intended stance. This classroom-based study examined 40 second-year English majors completing two source-based writing tasks. The dataset comprised 160 drafts, 80 reflections, 793 traceable revision episodes, and independent ratings of 80 D1–D2 pairs. Cross-classifying 131 reflection-linked rationales with uptake showed that language-clarity reasons were concentrated in local language uptake, trust or uncertainty frequently accompanied checked uptake, and efficiency or time was concentrated in weakly checked uptake. Excluding 34 risk-unclear episodes, substantive-risk suggestions were more often associated with visible checking than local-only suggestions (32.5% vs. 18.9%; participant-clustered GEE, OR = 2.07, 95% CI [1.48, 2.91], p < 0.001), although the authorial-stance contrast was not robust. Within substantive-risk episodes with determinate consequences, visible checking was associated with higher odds of local improvement (84.6% vs. 39.6%; adjusted OR = 8.11, 95% CI [4.88, 13.47], p < 0.001) and lower odds of degradation. D2 texts were rated higher than D1 texts, but absolute rater agreement was moderate, ICC(A,k) = 0.625, and no participant–task-level uptake proportion was significantly associated with whole-text gain after multiplicity correction. The findings are consistent with risk-calibrated accountability as an observational design principle; they do not establish a causal effect of visible checking.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
1秒前
1秒前
123完成签到,获得积分10
1秒前
1秒前
2秒前
感动惜萍发布了新的文献求助10
2秒前
zheng-homes发布了新的文献求助10
2秒前
3秒前
3秒前
4秒前
4秒前
ding的应助被蕾先生采纳,获得10
4秒前
zz完成签到,获得积分10
5秒前
zhang关注了科研通微信公众号
5秒前
羲禾发布了新的文献求助10
7秒前
ASCC完成签到 ,获得积分10
7秒前
怡然绝悟完成签到,获得积分10
7秒前
魁梧的电脑完成签到,获得积分10
8秒前
欣慰问柳发布了新的文献求助10
8秒前
软软萌萌发布了新的文献求助10
8秒前
Celine发布了新的文献求助10
8秒前
Crssss发布了新的文献求助10
9秒前
9秒前
XXX完成签到,获得积分10
9秒前
Hello的应助被Happy采纳,获得10
9秒前
温纲完成签到,获得积分10
10秒前
lw完成签到 ,获得积分10
11秒前
神勇友灵发布了新的文献求助10
12秒前
Ymj完成签到,获得积分10
13秒前
无极微光的应助被123采纳,获得20
13秒前
14秒前
hhhh发布了新的文献求助30
15秒前
小二郎的应助被大力的白玉采纳,获得30
15秒前
16秒前
阿甘不暴走完成签到,获得积分10
16秒前
欣慰问柳完成签到,获得积分10
16秒前
上官若男的应助被天天小女孩采纳,获得10
16秒前
情怀的应助被丸子采纳,获得10
18秒前
orixero的应助被安安采纳,获得10
19秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Encyclopedia of Modern Artificial Intelligence 1000
Особенности технологий и методов информационно-психологических войн СССР с Великобританией и США в период 1939-1953 гг 1000
Das Matthäusevangelium: Kapitel 1:1–17 1000
Analyses de reconnaissances de dettes passées devant les échevins d'Ypres (1249-1291) 600
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 600
Cellulose and Cellulose Derivatives: Synthesis, Modification and Applications 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8141510
求助须知:如何正确求助?哪些是违规求助? 9541324
关于积分的说明 21645690
捐赠科研通 7725567
什么是DOI,文献DOI怎么找? 3421374
关于科研通互助平台的介绍 2546516
邀请新用户注册赠送积分活动 2463608