
open access
메뉴
ISSN : 1229-0696
본 연구는 국내 A기업 책임급 승진 AC 자료(N = 324)를 활용하여, MTMM 상관행렬 패턴을 통해 수렴․변별 타당도 단서를 탐색하고, CFA 기반 점수 구조 모형(차원모형, 과제모형, 차원-과제 결합모형)을 비교하여 차원효과와 방법효과의 상대적 기여를 검토하였다. MTMM 상관분석 결과, 동일 과제 내 상이한 차원 간 상관이 높게 나타났으며 상이한 과제 간 동일 차원 상관이 비교적 낮게 나타나 방법효과의 개연성이 확인되었다. CFA 결과, 차원모형은 자료를 충분히 설명하지 못한 반면 과제모형은 제한적으로 수용 가능했으며, 차원-과제 결합모형이 가장 우수한 적합을 보였다. 본 연구는 국내 실제 운영 AC의 점수 구조를 제시하여, MTMM 상관 패턴만으로 구성개념 타당도를 단정하기보다 CFA(차원․과제․결합)와 병행하는 다중접근 해석이 필요함을 시사한다. 아울러 역량×상황 결합 관점에서, AC 간소화 국면에서도 중복측정 설계의 유지, 과제당 역량 탑재의 적정화, FoR 기반 평정 절차와 통합회의 운영의 표준화, 차원×과제 점수의 피드백․개발 활용 확대가 요구됨을 제안한다.
This study used promotion assessment center (AC) data from a large Korean corporation (Company A) for managerial-level promotion candidates (N = 324). We examined convergent and discriminant validity cues from multitrait-multimethod (MTMM) correlation patterns and compared CFA score-structure models (dimension, exercise, and dimension-exercise mixed) to assess the relative contributions of dimension and method effects. MTMM results showed high correlations among different dimensions within the same exercise but relatively low correlations for the same dimension across exercises, indicating plausible method effects. CFA results showed poor fit for the dimension model, marginally acceptable fit for the exercise model, and the best fit for the mixed model. These findings suggest that construct validity should not be inferred from MTMM patterns alone and support a multi-approach interpretation that combines MTMM and CFA model comparisons. From a competency × situation perspective, we recommend maintaining an overlapping measurement design in which each competency is assessed in two exercises, calibrating the number of competencies per exercise, standardizing Frame-of-Reference (FoR)-based ratings and integration meetings, and expanding the use of dimension × exercise scores for feedback and development.