You Are the Best Reviewer of Your Own Papers: The Isotonic Mechanism

机制(生物学) 等渗 计算机科学 集合(抽象数据类型) 诚实 秩(图论) 人工智能 运筹学 数据科学 最佳实践 法律与经济学 政治学 数理经济学 功勋 机器学习 假新闻
作者
Weijie Su
出处
期刊:Operations Research [Institute for Operations Research and the Management Sciences]
卷期号:74 (2): 804-824
标识
DOI:10.1287/opre.2022.0622
摘要

Fixing AI’s “Peer Review Lottery” Getting a paper into a top AI conference can feel like a lottery, with studies showing reviewer scores are often arbitrary. Now, research from Weijie Su introduces a fix set to reform the field. The new "isotonic mechanism" tackles the crisis by asking authors to do the seemingly counter-intuitive: rank their own submissions from best to worst. The method’s effectiveness lies in its game-theoretic proof that honesty is actually the author’s best possible strategy. By harnessing this truthful self-assessment, the mechanism calibrates noisy and random reviewer scores, ensuring genuine scientific merit rises to the top. After successful large-scale experiments at major conferences, this mechanism isn’t just a theory. It’s being officially adopted by the International Conference on Machine Learning (ICML) in 2026, promising a fairer, more reliable future for millions of AI researchers.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
研友_LwlAgn完成签到,获得积分10
3秒前
MoChin完成签到,获得积分10
3秒前
3秒前
3秒前
jhy完成签到 ,获得积分10
4秒前
笨笨发布了新的文献求助30
4秒前
思源的应助被西南林彭于晏采纳,获得10
6秒前
谷云完成签到,获得积分10
9秒前
风趣秋白完成签到,获得积分0
10秒前
哈哈哈的应助被zyy采纳,获得10
11秒前
桐桐的应助被魔修采纳,获得10
11秒前
12秒前
13秒前
UAECT完成签到,获得积分10
13秒前
14秒前
ygh完成签到,获得积分10
14秒前
Nole的应助被JIW采纳,获得10
14秒前
15秒前
西南林彭于晏完成签到,获得积分10
15秒前
秋风的应助被naikuizi采纳,获得10
15秒前
meng若发布了新的文献求助10
17秒前
耸耸完成签到 ,获得积分10
17秒前
17秒前
18秒前
英俊的铭的应助被高昱菲采纳,获得10
18秒前
苯巴比妥完成签到,获得积分10
18秒前
19秒前
FashionBoy的应助被Lwm采纳,获得10
20秒前
20秒前
21秒前
21秒前
zzuli_liu完成签到,获得积分10
22秒前
大个的应助被逐梦小绳采纳,获得10
22秒前
李健的应助被和田玉采纳,获得10
22秒前
Akim的应助被好事成双采纳,获得10
23秒前
24秒前
红糖馒头发布了新的文献求助10
25秒前
hamzhang0426发布了新的文献求助10
25秒前
B_lue完成签到 ,获得积分10
25秒前
XiaonanTang完成签到 ,获得积分10
26秒前
高分求助中
(应助此贴封号)通过应助OA文献获取积分 10000
Rosenblum, Global Change Biology 800
Computational Chemical Reaction Engineering: Modeling, Simulation, and Design with MATLAB 600
Organizational Behavior 510
Management and the Arts 510
A Will for the Machine: Computerization, Automation, and the Arts in South Africa 400
Decentring Leadership 400
热门求助领域 (近24小时)
化学 材料科学 医学 生物 计算机科学 工程类 纳米技术 内科学 物理 有机化学 化学工程 生物化学 复合材料 光电子学 细胞生物学 心理学 量子力学 催化作用 物理化学 电极
热门帖子
关注 科研通微信公众号,转发送积分 7810206
求助须知:如何正确求助?哪些是违规求助? 9342090
关于积分的说明 20510773
捐赠科研通 7403078
什么是DOI,文献DOI怎么找? 3329336
关于科研通互助平台的介绍 2476182
邀请新用户注册赠送积分活动 2348212