본문 바로가기
KERD
논문

다척도 심리검사 자료의 이질적 극단응답양식 탐색을 위한 혼합문항반응나무모형의 적용

Mixture item response tree model for measuring extreme response style in multiple psychological scales

장윤선|오정수|이주연
한국심리학회 (The Korean Psychological Association)|2022.06|한국심리학회지:일반 (Korean Journal of Psychology: General)|제41권 제2호|pp. 197-220|DOI http://dx.doi.org/10.22257/kjp.2022.6.41.2.197

1

조회

0

다운로드

0

인용

0

참고문헌

키워드

KCYPS한국 아동․청소년 패널조사문항반응나무모형혼합문항반응이론극단반응양식Item response tree modelMixture item response tree modelExtreme response style
주제분류심리과학

초록

문항반응나무모형(Item Response Tree: IRTree)은 응답자의 설문 응답 시 발생할 수 있는 인지적응답 반응 과정을 나무구조로 반영하여 문항반응이론에 접목시킨 모형으로, 최근 응답 편향의일종인 극단응답반응양식(Extreme Response Style: ERS)과 관련한 연구에서 활발하게 활용되고 있다. 나아가 ERS로 인해 발생할 수 있는 자료의 이질성을 탐색하는 방법으로 IRTree 모형에 잠재집단모형을 추가한 혼합문항반응나무모형(Mixture Item Response Tree: MixIRTree)을 제안되고있다. 본 연구에서는 MixIRTree 모형의 적용 가능성을 탐색하기 위하여 한국청소년정책연구원의 한국 아동·청소년 패널조사의 부적정서 문제 중 신체적 증상과 우울 척도를 활용하였다. 연구 결과에 따르면 서로 다른 수준의 ERS를 보이는 세 개의 잠재집단을 확인할 수 있었다. 첫 번째로, 잠재집단 3은 잠재집단 1과 2에 비하여 적은 ERS 경향을 보였고, 잠재집단 1이 모든 척도에서 가장 강한 ERS 경향을 보였다. 두 번째로, ERS 경향을 보인 잠재집단 1과 2에서는 척도에 따라서 ERS 경향이 다르게 나타났다. 잠재집단 1은 우울 척도에서 상대적으로 더강한 ERS 경향을 보였으며, 잠재집단 2는 신체적 증상 척도에 상대적으로 더 강한 ERS를 보이는 것으로 나타났다. 이와 같은 결과를 바탕으로, 본 연구에서 제안된 MixIRTree와 같은 심리측정모형을 활용하여 잠재목표특성치와 ERS를 동시에 측정하면서 ERS로 발생할 수 있는 잠재집단 간 차이를 탐색하는 것이 필요함을 경험적 자료 분석을 통하여 시사하였다.

Abstract

Item response tree model (IRTree) is a sort of a multidimensional item response theory that incorporates a tree structure depicting a respondent's cognitive response process into item response theory. IRTree has recently received considerable attention from researchers for measuring extreme response style (ERS) that can threaten reliability and factor structure in self-report survey data. In addition to the work of IRTree, we extend IRTree as the mixture item response tree model (MixIRTree), which combines latent class analysis with IRTree for measuring and investigating the possible heterogeneity of data caused by ERS. For analyses, this study used the body symptom and depression scales of the emotional problems in the third wave of KCYPS 2018. The results of the study are as follows. First, the three latent classes were captured, showing the different levels of ERS. The latent class 3 did not show the ERS tendency than the latent classes 1 and 2. The latent class 1 showed the largest ERS tendency. Second, the ERS tendency across the latent classes was different between the negative affect scales. For example, the ERS tendency of the latent class 1 was larger in the depression scale than body symptom scale, while the ERS tendency of the latent class 2 was larger in the body symptom scale than the depression scale. Based on these findings, we provide practical implications of the MixIRTree for measuring the heterogeneity of ERS and discuss the future direction for further study.

참고문헌 (45)

  1. Ames, A. J., "Measuring Response Style Stability Across Constructs With Item Response Trees", Educational Psychological Measurement, 82(2), pp.281~306 (2022)[DOI]
  2. Baumgartner, H., "Response styles in marketing research: a cross national investigation", Journal of Marketing Research, 38(2), pp.143~156 (2001)[DOI]
  3. Böckenholt, U., "Modeling multiple response processes in judgment and choice", Psychological Methods, 17(4), pp.665~678 (2012)[DOI]
  4. Böckenholt, U., "Modeling motivated misreports to sensitive survey questions", Psychometrika, 79(3), pp.515~537 (2014)[DOI]
  5. Böckenholt, U., "Measuring response styles in Likert items", Psychological Methods, 22(1), pp.69~83 (2017)[DOI]
  6. Böckenholt, U., "Assessing item feature effects with item response tree models", British Journal of Mathematical and Statistical Psychology, 72(3), pp.486~500 (2019)[DOI]
  7. Böckenholt, U., "Response style analysis with threshold and multi process IRT models: A review and tutorial", British Journal of Mathematical and Statistical Psychology, 70(1), pp.159~181 (2017)[DOI]
  8. Bolt, D. M., "Addressing score bias and differential item functioning due to individual differences in response style", Applied Psychological Measurement, 33(5), pp.335~352 (2009)[DOI]
  9. Bolt, D. M., "Multiscale measurement of extreme response style", Educational and Psychological Measurement, 71(5), pp.814~833 (2011)[DOI]
  10. Cronbach, L. J., "Response sets and test validity", Educational and Psychological Measurement, 6(4), pp.475~494 (1946)[DOI]
  11. Cronbach, L. J., "Further evidence on response sets and test design", Educational and Psychological Measurement, 10(1), pp.3~31 (1950)[DOI]
  12. De Beuckelaer, A., "Using ad hoc measures for response styles: A cautionary note", Quality & Quantity, 44(4), pp.761~775 (2009)[DOI]
  13. De Boeck, P., "IRTrees:Tree-based item response models of the GLMM family", Journal of Statistical Software, 48(1), pp.1~28 (2012)[DOI]
  14. Deng, S., "Extreme response style and the measurement of intra-individual variability in affect", Multivariate Behavioral Research, 53(2), pp.199~218 (2018)[DOI]
  15. Gollwitzer, M., "Response styles in the assessment of anger expression", Psychological Assessment, 17(1), pp.56~69 (2005)[DOI]
  16. Hallquist, M. N., "MplusAutomation: an R package for facilitating large-scale latent variable analyses in Mplus", Structural Equation Modeling: A Multidisciplinary Journal, 25(4), pp.621~638 (2018)[DOI]
  17. Jackson, D. N., "Content and style in personality assessment", Psychological Bulletin, 55(4), pp.243~252 (1958)[DOI]
  18. 장윤선, "문항반응나무(IRTree) 모형: 자기보고식 서열척도 자료 분석의 대안적 방법", 교육평가연구, 32(2), pp.303~323 (2019), 한국교육평가학회[DOI]
  19. Jeon, M., "A generalized item response tree model for psychological assessments", Behavior Research Methods, 48(3), pp.1070~1085 (2016)[DOI]
  20. Jeon, M., "Evaluation on types of invariance in studying extreme response bias with an IRTree approach", British Journal of Mathematical and Statistical Psychology, 72(3), pp.517~537 (2019)[DOI]
  21. Jin, K. Y., "Mixture item response models for inattentive responding behavior", Organizational Research Methods, 21(1), pp.197~225 (2018)[DOI]
  22. Jin, K. Y., "Generalized IRT models for extreme response style", Educational and Psychological Measurement, 74(1), pp.116~138 (2014)[DOI]
  23. Jin, K. -Y., "A new multiprocess IRT Model with ideal points for likert–type items", Journal of Educational and Behavioral Statistics, 47(3), pp.297~321 (2022)[DOI]
  24. Johnson, T., "On the use of factor-analytic multinomial logit item response models to account for individual differences in response style", Journal of Educational and Behavioral Statistics, 35(1), pp.92~114 (2010)[DOI]
  25. Johnson, T., "The relation between culutre and response styles: Evidence from 19 countries", Journal of Cross-cultural Psychology, 36(2), pp.264~277 (2005)[DOI]
  26. Khorramdel, L., "Combining mixture distribution and multidimensional IRTree models for the measurement of extreme response styles", British Journal of Mathematical and Statistical Psychology, 72(3), pp.538~559 (2019)[DOI]
  27. Kim, N., "A Mixture IRTree Model for Extreme Response Style:Accounting for Response Process Uncertainty", Educational and Psychological Measurement, 81(1), pp.131~154 (2021)[DOI]
  28. 이주연, "국가 간 응답양식의 변동성 분석을 위한 다층 문항반응나무모형", 교육평가연구, 34(1), pp.131~153 (2021), 한국교육평가학회
  29. 이선희, "성격검사문항에 대한 이상점 반응 모형의 적용", 한국심리학회지:일반, 27(3), pp.839~857 (2008), 한국심리학회
  30. Li, F., "Model selection methods for dichotomous IRT models", Applied Psychological Measurement, 33(5), pp.353~373 (2009)[DOI]
  31. Meade, A. W., "Identifying careless responses in survey data", Psychological Methods, 17(3), pp.437~455 (2012)[DOI]
  32. Meiser, T., "IRT ree models with ordinal and multidimensional decision nodes for response styles and trait based rating responses", British Journal of Mathematical and Statistical Psychology, 72(3), pp.501~516 (2019)[DOI]
  33. Messick, S., "Improving inquiry in social science:A volume in honor of Lee J. Cronbach", pp.161~200 (1991), Lawrence Erlbaum
  34. Muthén, B. O., "Handbook of quantitative methodology for the social science", pp.345~368 (2004), Sage
  35. Muthén, L. K., "Mplus user’s guide" (1998), Muthén & Muthén
  36. Naemi, B. D., "Personality predictors of extreme response style", Journal of personality, 77(1), pp.261~286 (2009)[DOI]
  37. 노언경, "청소년의 컴퓨터 사용 목적에 따른 잠재프로파일 분류 및 관련 변인들의 영향력 검증", 한국청소년연구, 23(3), pp.51~76 (2012), 한국청소년정책연구원[DOI]
  38. 박동건, "성격 측정에서 우세반응 모형과 이상점반응 모형의 비교", 한국심리학회지: 산업 및 조직, 25(2), pp.421~452 (2012), 한국산업및조직심리학회[DOI]
  39. Paulhus, D. L., "Measures of personality and social psychological attitudes (Vol. 1)", pp.17~59 (1991), Academic Press
  40. Plieninger, H., "Validity of multiprocess IRT models for separating content and response styles", Educational and Psychological Measurement, 74(5), pp.875~899 (2014)[DOI]
  41. 손원숙, "극단 및 중간 응답양식의 종단적 안정성 검증", 교육평가연구, 29(2), pp.279~299 (2016), 한국교육평가학회
  42. Tijmstra, J., "General mixture item response models with different item response structures: Exposition with an application to Likert scales", Behavior Research Methods, 50(6), pp.2325~2344 (2018)[DOI]
  43. Tourangeau, R., "The psychology of survey response" (2000), Cambridge University Press
  44. Weijters, B., "The stability of individual response styles", Psychological Methods, 15(1), pp.96~110 (2010)[DOI]
  45. Wetzel, E., "Consistency of extreme response style and non-extreme response style across traits", Journal of Research in Personality, 47(2), pp.178~189 (2013)[DOI]

관련 논문AI추천

Rasch 모형을 활용한 청소년기 정서 문제 관련 문항의 타당도 검증권순보, 유진은, 최인희한국열린교육학회 · 열린교육연구2024 · 제32권 제4호종단 문항반응이론 혼합모형의 적용을 통한 청소년 자아존중감 변화 유형 탐색박찬호, 서공주한국청소년정책연구원 · 한국청소년연구2020 · 제31권 제3호A literature review of detecting aberrant response patterns by using IRT-based fit indices설현수한국교육과정평가원 · 교육과정평가연구2002 · 제5권 제1호정의적 특성의 요인 구조 파악을 위한 다차원 문항반응모형강경석, 이용상교육연구소 · 교육문화연구2024 · 제30권 제5호청소년용 인터넷 게임중독 척도 자료에 대한 이상점반응모형 적용 가능성 탐색강태훈, 오민아한국교육방법학회 · 교육방법연구2014 · 제26권 제2호컴퓨터 기반 적응적 심리 검사 제작을 위한 문항 선정 알고리즘으로서 Alternating Model Tree의 활용 가능성 탐색윤정한, 이태헌한국심리학회 · 한국심리학회지:일반2021 · 제40권 제4호

이 간행물의 다른 논문 (3건)

구조방정식 모형을 활용한 매개효과 검정 방법의 비교: 백분위수 부트스트랩과 편향조정 부트스트랩김수영, 심미경, 서영숙pp. 103-131한국판 트라우마 분노반응척도-5(DAR-5-K)의 종단 타당화 연구엄희준, 이덕희, 이동훈pp. 133-161텍스트 빅데이터 분석을 통한 조직 구성원의 조직 평가 토픽 추출: 이직과 연관성 탐색을 중심으로이태헌, 원호은pp. 163-196
원문 보기