Visualising two approaches to explore reliability-power relationships

作者
Sam Parsons
标识
DOI:10.31234/osf.io/qh5mf
摘要

The relationship between measurement reliability and statistical power is a complex one. Where reliability is defined by classical test theory as the proportion of 'true' variance to total variance (the sum of true score and error variance), power is only functionally related to total variance. Therefore, to explore direct relationships between reliability and power, one must hold either true-score variance or error variance constant while varying the other. Here, visualisations are used to illustrate the reliability-power relationship under conditions of fixed true-score variance and fixed error variance. From these visualisations, conceptual distinctions between fixing true-score or error variance can be raised. Namely, when true-score variance is fixed, low reliability (and low power) suggests a true effect may be hidden by error. Whereas, when error variance is fixed, high reliability (and low power) may simply suggest a very small effect. I raise several observations I hope will be useful in considering the utility of measurement reliability and it's relationship to effect sizes and statistical power.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
1秒前
1秒前
1秒前
2秒前
huohuo143发布了新的文献求助10
2秒前
2秒前
斯文败类应助科研瑶采纳,获得10
3秒前
3秒前
3秒前
zcc111发布了新的文献求助10
4秒前
senli2018发布了新的文献求助10
4秒前
5秒前
科研通AI6.2应助1111采纳,获得10
6秒前
123发布了新的文献求助10
6秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
KBRS发布了新的文献求助10
7秒前
康阿蛋发布了新的文献求助10
8秒前
9秒前
9秒前
10秒前
cdercder应助lei采纳,获得10
10秒前
小蘑菇应助明理溪流采纳,获得10
11秒前
12秒前
cbf发布了新的文献求助10
12秒前
传奇3应助mojomars采纳,获得10
12秒前
12秒前
12秒前
李健应助友好含雁采纳,获得10
13秒前
乔达摩完成签到 ,获得积分0
13秒前
huili完成签到,获得积分10
14秒前
14秒前
mfaith发布了新的文献求助10
14秒前
Lei发布了新的文献求助30
14秒前
风趣的万天完成签到,获得积分10
14秒前
山泉水发布了新的文献求助10
16秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Römisch-Germanische Forschungen 1000
APA handbook of comparative psychology: Basic concepts, methods, neural substrate, and behavior 1000
Matrix Methods in Data Mining and Pattern Recognition Second Edition 510
The fast track to determining transfer functions of linear circuits: The student guide 500
Electric machines: theory, operating applications, and controls 500
The Analytical and Numerical Solution of Electric and Magnetic Fields 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7604045
求助须知:如何正确求助?哪些是违规求助? 9179807
关于积分的说明 19660229
捐赠科研通 7179217
什么是DOI,文献DOI怎么找? 3269251
关于科研通互助平台的介绍 2433341
邀请新用户注册赠送积分活动 2263280