업무 시뮬레이션을 활용한 상호평가 기반 논술형 SJT와 직무적성검사의 타당도 비교
Predictive Validity of Peer-Assessed Constructed SJT and Aptitude Tests on Work Simulation Performance
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
조직에서 우수 인재 확보하려면 선발 도구의 예측 타당도가 높아야 한다. 본 연구는 실제 직무 상황을 반영한 업무 시뮬레이션 과제 수행을 준거로, 논술형 상황판단검사(Situation Judgment Task: SJT)와 구성형 및 선다형 직무적성검사의 상대적 예측력을 비교하였다. 이를 위해 분석적 사고력, 의사소통능력, 문제해결능력을 평가하도록 설계된 네 가지 시뮬레이션 과제를 개발하였다. 대학교 재학생 및 졸업생 50명을 대상으로 논술형 SJT, 직무적성검사, 그리고 개발된 시뮬레이션 과제를 수행하도록 하고, 업무 시뮬레이션 과제 수행 점수를 종속변수로 설정하여 SJT 점수와 직무적성검사 점수를 독립변수로 회귀분석을 수행하였다. 이와 함께, 참여자 간 상호평가를 통해 채점한 SJT 결과와 전문가 평정 결과 간의 일치도를 통해 상호평가 채점 방식의 준거타당도를 검토하였다. 그 결과, 논술형 SJT 점수는 의사소통 능력과 문제해결 능력 과제 수행을 유의미하게 예측한 반면, 직무적성검사 점수의 예측력은 모든 영역에서 미미한 것으로 나타났다. 또한, 상호평가를 기반으로 한 채점 결과와 전문가 평정 간에는 유의미하게 높은 상관이 관찰되었다. 이상의 결과가 갖는 이론적, 실무적 함의와 후속 연구 방향에 대해 논의하였다.
Abstract
The use of valid selection tools is critical for identifying high-potential talent and ensuring effective organizational hiring decisions. This study empirically investigates the predictive validity of a constructed situational judgment test (SJT) relative to a general aptitude test using work simulation tasks designed to reflect actual job demands. Four simulation tasks were specifically developed to assess analytical thinking, communication skills, and problem-solving abilities. Fifty university students completed both the constructed SJT and a standardized general aptitude test. Regression analyses were conducted using their performance on the simulation tasks as dependent variables. Results indicated that the writing-based SJT significantly predicted performance in communication and problem-solving simulation tasks, whereas the general aptitude test showed insignificant predictive validity across these domains. Additionally, peer-assessed SJT scores correlated strongly with expert ratings, further supporting the criterion validity of peer evaluations within the SJT context. These findings underscore the promise of writing-based assessments, particularly those utilizing peer evaluation, as effective tools for assessing cognitive skills in selection settings. This study contributes to the literature advocating for cognitively demanding assessment formats and offers practical insights into developing cost-effective, scalable hiring systems.