다변량 일반화가능도 이론을 활용한 창의적 사고력 검사(TTCT- 도형 A형) 독창성 평가 최적화 조건 탐색
Finding Optimal Condition for Conducting TTCT-Figural A(originality) Using Multivariate Generalizability Theory
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
본 연구에서는 TTCT 도형 A검사를 활용한 독창성 요소 측정 시 문항유형별(활동 1, 2, 3) 적절 문항수와 상대가중치 산출 조건을 탐색함으로써 독창성 평가 최적화를 위한 대안을 제시하는데 목적이 있다. 이를 위하여 수도권 지역 초등학생 61명을 대상으로 TTCT도형 A검사를 실시하여 정규형 버전과 간편형 버전으로 각각 채점을 하였다. 주요 결과를 요약하면 다음과 같다. 첫째, 각 채점 방법에서 문항유형별로 피험자 점수에 영향을 주는 요인들의 상대적 영향력 분석 결과 공통적으로 피험자와 문항의 상호작용에 의한 오차분산이 매우 큰 것으로 나타났으며, 피험자 오차 분산보다 문항 오차 분산은 상대적으로 높게 나타났다. 둘째, 각 채점 기준에서 합성점수 산출 시 간편형 채점기준에서는 일반화가능도 계수에서 적합신뢰도에 못미친 반면 정규형 채점기준에서는 .8이상의 신뢰로운 결과값이 나타났다. 간편형 채점기준은 최적 문항 유형별 상대 가중치 조건이 산출되지 못하였으며, 정규형 채점기준은 현행 상대가중치인 .18 : .82에서 오차분산이 높은 활동 2에 가중치를 더한 .2 : .8의 조건에서도 적합 신뢰도로 나타났다. 마지막으로 각 각의 채점 방법에서 유형별 문항 수와 상대가중치 조합 조절을 통해 재분석해 본 결과 간편형 채점기준의 경우는 문항 수 및 상대가중치 조합을 변화시켜도 신뢰도 계수값을 만족하지 못했으며, 정규형 채점기준의 경우는 활동 3의 문항수를 최대 10개까지 줄여도 적합 신뢰도값을 보였다. 이때 문항유형별 최적 상대가중치는 활동 2와 활동 3이 각각 .2 : .8이었다. 즉, 연구 결과 정규형 채점기준에서만 신뢰성과 효율성을 만족하는 최적의 측정 조건 구성이 도출되었다. 더불어 검사실시의 시간적 어려움으로 활동 2만을 활용하여 독창성을 측정한다면 필히 신뢰도를 확보할 대안 마련 및 검증이 선행되어야 한다는 시사점을 얻을 수 있었다.
Abstract
This research is to find the right number of questions per category and an ideal set of conditions for computing relative significance value, thus providing an alternative as a better originality assessment tool. 61 elementary school children took the TTCT figural A and were each reviewed by both regular scoring version and steamlined version. Here is the summary of meaningful outcome. First, in each scoring method, relative influences of factors affecting the subjects’ score were analyzed and it was shown that each testing method had in common a high error variance from interaction between the subjects and items. Also, subject error variance was shown relatively higher than items error variance. Second, when computing the total score, steamed version was short of reliability on generalizability coefficient whereas regular version showed a reliable result above .8. Steamlined version was inadequate to produce ideal condition for relative significance and regular version has shown adequate reliability under current relative significance value, .18 : .82, as well as under .2 : .8, a weighted value on activity 2, which showed high error variance. Lastly, each scoring method was reanalyzed under different combinations of question per category and relative significance. Steamlined version didn’t satisfy the reliability coefficient value under any combinations and regular version showed acceptable reliability value when number of questions in activity 3 was reduced by up to 10. At that point, optimal relative significance on activity 2 and 3 were .2 : .8. In summary, optimal test condition that satisfies both reliability and efficiency was produced only in regular scoring version. Also, when performing the test with only activity 2, perhaps due to lack of time, results of the research underscored the need to find solution to secure reliability.
참고문헌 (38)
- 강윤정, "Torrance의 창의적 사고 검사에 대한 구성개념 타당도 분석", 한국심리학회지:일반, 29(3), pp.461~488 (2010), 한국심리학회
- 김보라, "일반화가능도 이론을 적용한 초등학교 쓰기 수행평가의 총체적 채점과 분석적 채점 방식 비교", 교육학연구, 50(4), pp.49~76 (2012), 한국교육학회
- 김보선, "TTCT에 대한 미국인과 한국인의 반응결과의 차이 연구", 석사, 교육학, pp.1999
- 김성찬, "관찰․추천에 의한 수학영재 선발 시 사용되는 자기소개서와 교사추천서 평가에 대한 일반화가능도 이론의 활용", 수학교육 논문집, 26(3), pp.251~271 (2012), 한국수학교육학회
- 김성숙, "e-learning 강의평가 도구의 일반화가능도와 평가활용의 최적화 조건", 교육평가연구, 19(1), pp.305~322 (2006), 한국교육평가학회
- 김성숙, "일반화가능도이론" (2001), 교육과학사
- 김성연, "과학 창의성 검사의 효율적인 측정 조건 탐색", 중등교육연구, 64(1), pp.49~75 (2016), 사범대학부속중등교육연구소
- 김수진, "정규형 TTCT 독창성 채점준거의 타당성에 대한 분석: 도형 A형 Section 2를 중심으로", 창의력교육연구, 16(2), pp.17~34 (2016), 한국창의력교육학회
- 김영채, "한국판 TTCT(도형)검사 검사요강" (1999), 중앙적성연구소
- 김호, "창의성 교육이 예비유아교사들의 확산적 사고 및 확산적 사고에 대한 태도에 미치는 효과", 유아교육학논집, 12(2), pp.127~145 (2008), 한국영유아교원교육학회
- 류춘렬, "일반화가능도 이론을 이용한 집단논리적사고력검사 (GALT)의 신뢰도 분석", 한국지구과학회지, 31(1), pp.95~105 (2010), 한국지구과학회
- 박문정, "수학적 창의성 태도 측정도구의 개발", 석사, 초등수학교육, pp.2008
- 서미옥, "토렌스 창의성 검사(도형 A형)의 독창성 채점에 대한 문화적 영향", 아시아교육연구, 10(3), pp.171~189 (2009), 교육연구소
- 손지유, "Wallach & Kogan 창의성 검사 독창성 채점 기준분석", 창의력교육연구, 15(2), pp.49~66 (2015), 한국창의력교육학회
- 송인섭, "다변량 일반화가능도 이론을 통한 인식론적 신념 검사 타당화 연구", 교육방법연구, 24(1), pp.107~130 (2012), 한국교육방법학회
- 안동근, "창의성의 다측면적 구인에 대한 이론적 탐색", 영재와 영재교육, 14(4), pp.199~224 (2015), 한국영재교육학회[DOI]
- 윤명희, "초등학생용 창의성 성향검사 개발", 아시아교육연구, 6(4), pp.33~51 (2005), 교육연구소
- 이경화, "초․중등 학생용「집단 통합 창의성 검사」개발 및 표준화", 교육심리연구, 26(1), pp.291~305 (2012), 한국교육심리학회
- 이선영, "다변량 일반화가능도 이론을 활용한 창의성 예비검사의 신뢰도 분석", 창의력교육연구, 15(3), pp.83~107 (2015), 한국창의력교육학회
- 이진아, "일반화가능도 이론을 활용한 TTCT(도형 A형- 활동 2) 독창성 평가 방안 탐색", 창의력교육연구, 16(3), pp.65~77 (2016), 한국창의력교육학회
- 이현숙, "혼합형 검사의 문항 유형별 가중치에 따른 신뢰도 및 다변량 일반화가능도 분석", 교육평가연구, 25(1), pp.95~116 (2012), 한국교육평가학회
- 정미선, "2001-2012년 창의력관련 연구의 통합적 분석", 사고개발, 9(1), pp.1~26 (2013), 대한사고개발학회
- 조한익, "초등학교 고학년용 정서 창의성 척도의 개발과 타당화 연구", 초등교육연구, 25(4), pp.169~189 (2012), 한국초등교육학회
- KEDI 창의인성 검사 3종 개발보고서, "하주연", 한국교육개발원, ~ (2011)
- 허경조, "일반화가능도 이론의 문제점탐색", 교육연구논총, 32(2), pp.57~84 (2011)
- (2001)[URL]
- Chase, C. I., "Review of the Torrance tests of creative thinking", The ninth mental measurements yearbook, 2, pp.1630~1632 (1985)
- Guilford, J. P., "Creativity", American Psychologist, 5, pp.444~454 (1959)
- Guilford, J. P., "The nature of human intellingence" (1967), McGraw-Hill
- Kim, K. H., "Is creativity unidimensional or multidimensional? Analyses of the Torrancee Tests of Creative Thinking", Creativity Research Journal, 18(3), pp.251~259 (2006)
- Kim, K. H., "Can we trust creativity tests? A Review of the Torrance Tests of creative thinking(TTCT)", Creativity Research Journal, 18(1), pp.3~14 (2006)
- Palaniappan, A. K., "Comparison between regular and streamlined versions of scoring of Torrance Tests of Creative Thinking", The International Journal of Creativity & Problem Solving, 11(2), pp.5~7 (2001)
- Runco, M. A., "The standard definition of creativity", Creativity Research Journal, 24, pp.92~96 (2012)
- Torrance, E. P., "Creativity and learning" (1966), Houhton Mifflin
- Torrance, E. P., "The Torrnace Tests of Creative Thinking" (1966), Scholastic Testing Service
- Torrance, E. P., "The Torrance tests of creative thinking-TTCT Manual and Scoring Guide:Verbal test A, figural test" (1974), Ginn
- Yoruk, S., "The Neuroscience of Divergent Thinking", Activitas Nernosa Superior, 56, pp.1~16 (2014)
- Wallach, M. A., "Modes of thinking in young children: A study of the creativity-intelligence distinction" (1965), Holt, Rinehart & Winston
