한국춤 연기력 평정척도의 타당화: 신뢰도와 평정자효과를 중심으로
Validation of Rating Scale about Performance of Korean Traditional Dance: Based on Reliability and Rator's Influence
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
한국춤의 연기력을 정확하게 평가하기 위해서는 타당도와 신뢰도를 갖춘 평정척도가 필요하다. 본 연구에서는 선행연구에서 개발된 평정척도의 신뢰도를 확인하기 위하여 재시험 신뢰도뿐만 아니라 일반화가능도 이론을 이용한 분석을 실시하였다. 또한 본 연구에서는 평정자 효과를 분석함에 있어 기존의 FACETS 모형에 문항의 변별도를 고려한 새로운 모형을 적용하여 평정자가 미치는 영향도 분석하였다. 연구 결과에 따르면 선행연구에서 개발된 평정척도가 한국춤의 연기력을 평가함에 있어 신뢰할 만한 도구라는 것이 입증되었다. 그러나 무시할 수 없는 수준의 평정자 효과도 발견되었으므로 사용에 있어 주의를 요한다. 또한 이러한 평정자 효과를 감소시키기 위해 평정자 교육을 실시하거나 평정자를 위한 매뉴얼을 개발할 필요가 있다.
Abstract
In order to accurately evaluate Korean dance performance, a valid and reliable rating scale was necessary. Therefore, in this study the reliability of the already-developed rating scale was presented using test-retest reliability and generalizability theory. Also, rater effects were analyzed based on a new methodology incorporating item discrimination parameters into the FACETS model. The results showed that the developed rating scale was a reliable measure of Korean dance performance. However, cautions were required since non-ignorable rater effects had been found. In order to reduce rater effects, education of raters and manuals for raters were also necessary.
참고문헌 (21)
- AERA, "Standards for educational and psychological testing", AERA, ~ (1999)
- 배진경, "창작발레연기력의 평정척도개발과 최적범주", 한국체육학회지, 42(1), pp.499~508 (2003), 한국체육학회
- Bartenieff, "Movement notation; Space perception; Harmony (Aesthetics)" (1977), Dance Notation Bureau Press
- Brennan, R. L., "Generalizability theory" (2001), Springer
- 최윤선, "심사자의 엄격성과 전공유형이 무용 연기력 판정에 미치는 효과", 한국체육학회지, 43(1), pp.647~660 (2004), 한국체육학회
- Choi, Y. S., "Development of Scale for Evaluation of Mordern Dance", The Korean Journal of Physical Education Summer Semina (1998)
- Crick, J. E., "Manual for GENOVA: A generalized analysis of variance system", American College Testing Program, ~ (1983)
- Crocker, L., "Introduction to classical and modern test theory" (1986), Holt, Rinehart and Winston
- Cronbach, L. J, "Coefficient alpha and the internal structure of tests", Psychometrika, 16, pp.297~334 (1951)
- Krasnow, D. H., "Imagery and conditioning practices for dancers", Dance Research Journal, 29, pp.43~64 (1997)
- Lee, M. Y., "Development of Korean traditional dance performance rating scale appling rasch model", 박사, pp.2012
- 이미영, "중등교육현장에서 한국춤 연기력 평정척도의 적합도", 한국무용연구, 30(3), pp.247~262 (2012), 한국무용연구학회
- 이미영, "축약형 한국춤 연기력 평정척도 개발", 한국무용연구, 32(3), pp.215~234 (2014), 한국무용연구학회[DOI]
- Linacre, J. M., "Many-faceted Rash measurement" (1989), MESA Press
- Linacre, J. M., "FACETS: Rasch Measurement Computer Program" (2002), MESA Press
- Looney, M., "Objective measurement of Figure skating performance", Journal of Outcome Measurement, 1, pp.143~163 (1997)
- Looney, M. A., "Validity and generalizability of social dance performance ratings", Research Quarterly for Exercise and Sport, 62(4), pp.399~405 (1991)
- Rasch, G., "Probabilistic models for some intelligence and attainment tests" (1960), University of Chicago Press
- Spiegelhalter, D. J., "WinBUGS Version 1. 4 User Manual. MRC Biostatistics Unit", MRC Biostatistics Unit, ~ (2003)
- Stahl, J. A., "Objective measurement: Theory into practice Vol.3", pp.113~125 (1996), Ablex
- "R : A language and environment for statistical computing" (2013)[URL]