Identifying Item Preknowledge Through Convergence Iteration Count Analysis in Ability Estimation

可解释性 稳健性(进化) 项目反应理论 计算机科学 趋同(经济学) 蒙特卡罗方法 作弊 航程(航空) 估计 计量经济学 计算机化自适应测验 过程(计算) 差异项目功能 机器学习 数据挖掘 算法 数学优化 可靠性(半导体) 统计 项目分析 人工智能 数学 估计理论 马尔科夫蒙特卡洛 芯(光纤)
作者
Han Han,Ruihang He,Yongze Xu
出处
期刊:Applied Psychological Measurement [SAGE Publishing]
卷期号:: 01466216261489271-01466216261489271
标识
DOI:10.1177/01466216261489271
摘要

Item preknowledge (IP) is a severe form of cheating that fundamentally undermines the fairness and score interpretability of educational assessments. Existing detection methods for IP are predominantly constructed under the item response theory (IRT) framework, but these conventional indicators are inherently static: they rely solely on the final converged estimates of item parameters and examinee ability, while completely overlooking the rich dynamic information embedded in the iterative convergence process of ability estimation. To address this core limitation, this paper proposes a novel dynamic detection indicator-the convergence iteration count (CIC)-defined as the number of iterations required for the IRT model to converge to a stable ability estimate for each examinee. We validate the effectiveness of the CIC indicator through Monte Carlo simulated experiments across diverse scenarios, with varying proportions of compromised items and levels of misclassification uncertainty of compromised items, covering both known and unknown compromised item range conditions. Results show that the CIC indicator significantly outperforms traditional static indicators (including the TW, KL, and SR indicators) in identifying IP examinees. Notably, even in the extreme complex scenario with a 60% high proportion of compromised items and 50% high misclassification uncertainty, the area under the curve of the CIC indicator remains approaching or exceeding 0.8. The CIC indicator also exhibits strong robustness in scenarios where the range of compromised items is unknown, with detection performance surpassing most conventional non-prior-information based indicators.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
lemmon完成签到,获得积分10
刚刚
Smile关注了科研通微信公众号
刚刚
刚刚
1秒前
Lucas的应助被失眠的诗蕊采纳,获得20
1秒前
黑米粥发布了新的文献求助10
1秒前
YH完成签到,获得积分10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
黑米粥发布了新的文献求助10
2秒前
Rina发布了新的文献求助10
3秒前
无极微光的应助被科研通管家采纳,获得20
4秒前
4秒前
CodeCraft的应助被科研通管家采纳,获得10
4秒前
耶耶业发布了新的文献求助10
4秒前
科研通AI65的应助被科研通管家采纳,获得10
4秒前
噔噔发布了新的文献求助10
4秒前
1101592875的应助被科研通管家采纳,获得10
4秒前
传奇3的应助被科研通管家采纳,获得10
4秒前
zilicai的应助被科研通管家采纳,获得20
4秒前
酷波er的应助被科研通管家采纳,获得10
5秒前
华仔的应助被科研通管家采纳,获得10
5秒前
vvv发布了新的文献求助10
5秒前
Nole的应助被科研通管家采纳,获得10
5秒前
5秒前
阿申爱乐的应助被负责的寒烟采纳,获得30
5秒前
5秒前
FashionBoy的应助被Sunny采纳,获得10
5秒前
5秒前
充电宝的应助被科研通管家采纳,获得10
5秒前
赘婿的应助被科研通管家采纳,获得10
5秒前
鳗鱼裙子完成签到,获得积分10
5秒前
顾矜的应助被科研通管家采纳,获得10
5秒前
烟花的应助被科研通管家采纳,获得10
5秒前
JamesPei的应助被科研通管家采纳,获得10
6秒前
CodeCraft的应助被科研通管家采纳,获得10
6秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8193425
求助须知:如何正确求助?哪些是违规求助? 9579620
关于积分的说明 21866505
捐赠科研通 7793025
什么是DOI,文献DOI怎么找? 3437297
关于科研通互助平台的介绍 2560718
邀请新用户注册赠送积分活动 2484128