An exploratory study on a statistical method to deal with multi-factor loading items in exploratory factor analysis

본 연구에서는 두 개 이상의 문항에 중복적으로 부하된 문항을 활용하여 하위검사 점수를 산출할 때 양호도에 미치는 영향을 판단할 수 있도록 해주는 통계적 지수, RoVARs(Ratio of Value Added Ratios)를 제시하였다. 해당 지수가 적절히 기능하는지 살펴보고자 모의실험을 수행하였으며 모의실험 고려 조건은 요인 간 상관 수준, 단일부하 문항의 부하 수준(단일부하 수준), 중복부하 문항의 부하 수준(중복부하 수준), 단일부하 문항수 및 중복부하 문항 수였다. 조건별로 100개의 모의 자료를 생성하여 분석한 결과, 중복부하 문항을 통하여 하위검사의 신뢰도와 타당도가 상승함을 알 수 있었고 RoVARs가 1이상일 경우 타당도가 높은 수준으로 향상됨을 알 수 있었다. 본 연구의 의의는 탐색적 요인분석 결과 나타난 중복부하 문항의 사용 여부에 대한 판단을 위하여, 실제 검사도구 제작과정에서 활용 가능한 통계적 지수를 제안하고 그 유용성을 확인하였다는 점이다.This study suggested a statistical index, RoVARs (Ratio of Value Added Ratios), which was expected to determine whether to increase the reliability and validity of a test by using multi-factor loading items. In order to see if the RoVARs functioned properly, a simulation study was conducted and correlation levels between factors, the loading levels of multi-factor loading items and single-factor loading items and the numbers of multi-factor loading items and single-factor loading items were considered as conditions of the simulation study. One hundred simulation data sets for each simulation condition were generated and analyzed. As a result, it was found that the reliability and validity of the test were increased by using multi-factor loading items and the validity was significantly improved when the RoVARs values were 1 or more. The contribution of this study is that, in order to determine whether to use the multi-factor loading items appearing as a result of exploratory factor analysis, the statistical index, RoVars, which could be easily used in the actual test development process was proposed and its usefulness was verified.