체육의 심동적 영역 평가를 위한 SPRT형 컴퓨터 맞춤검사모형
Development of a Computerized Adaptive Test for Psychomotor Skills using Sequential Probability Ratio
0
조회
0
다운로드
1
인용
0
참고문헌
초록
심동적 영역에서 시행횟수를 설정하는 문제와 관련하여 Wald(1947)의 축차확률비검사(sequential probability ratio test: SPRT)의 적용을 제안할 수 있다. SPRT에서는 네 가지 모수(α, β, θ0 그리고 θ1)에 따라서 수험자가 실시하는 검사의 시행횟수는 달라진다. 그러나 SPRT는 계산의 복잡함과 분류평가표를 모수가 다른 형태의 검사에 적용할 수 없다는 이유로 현장에서 제한적으로만 사용되었다. SPRT를 컴퓨터 맞춤검사로 개발했을 사후확률의 계산 노력을 감소시킬 수 있고, 수험자 능력에 대한 판정결과를 이미지로 나타내어 사용자가 결과를 해석하기 쉬우며, 계산 및 능력평가에 대한 오류를 최소화 할 수 있다는 이점이 있다. 따라서 이 연구에서는 SPRT에 이론적 근거를 두고 체육분야 심동적 영역에서 사용가능한 맞춤형 검사도구를 개발하였다. 프로그램은 Windows XP에 기반을 두고 Visual Basic과 Microsoft Excel을 사용하였으며 대화상자를 이용한 입력창과 결과창을 제작하였다. 이 프로그램을 전통적으로 사용되던 SPRT 분류평가표와 비교하여 동일한 결과가 산출된다는 사실을 확인하였으며, 분류평가표보다 사용이 쉽고 결과확인이 즉각적으로 이루어진다는 측면에서 효율성 높은 도구로 판단된다.
Abstract
Wald(1947) addressed the issues of sample size or test length by developing a Sequential Probability Ratio Test(SPRT). In SPRT, the desired test length is determined by taking into account four parameters: (a) probability of false mastery/positive classifications, defined as alpha; (b) probability of false non-mastery/negative classifications, defined as beta; (c) minimum level of skill for mastery classification, defined as theta0; and (d) minimum level of skill for non-mastery classification, defined as theta1. There are however, some limitations to the original SPRT work including complexity in calculation process, labor-intensiveness, and requiring ample statistical knowledge for physical educators. In addition, four parameters (i.e., alpha, beta, theta0, and theta1) could vary depending on the psychomotor skill tests, which would make traditional SPRT score sheets not feasible for physical educators under regular class settings. Thus, developing a computerized SPRT achievement test holds great promise in physical education. Computers have several advantages over the traditional methods such as, it may shorten the amount of time and effort spent by physical educators and it is usually easy to use and can be used with a variety of different motor skill tests. The purpose of this study is to develop and introduce a computerized SPRT program for the repeat-trial psychomotor skill tests. Compared to traditional SPRT score sheets, the computerized SPRT test is written using MS-EXCEL and Visual Basic, and it has an easy to use interactive dialog box. The computer program will help refine the assessments for the students performed by the skilled pedagogy teachers and offers a potential sound measurement device for physical educations researcher.
참고문헌 (22)
- "멀티미디어를 활용한 적응적 학습능력평가형 저작도구 개발연구.", pp.462~476 (2000)
- "커뮤터를 활용한 적응적 개별학습 성취도 검사의 제작과 활용을 위한 표준화 지침 개발 및 효과연구.", 3, pp.109~130 (1997)
- "컴퓨터 기반 적응적 검사의 이론과 실제." (2002), 도서출판 문음사.
- "축차확률비 모형에 의한 체육 인지영역 평가용 컴퓨터 맞춤검사 알고리즘." (2005), 한국체육학회
- ". 컴퓨터를 이용한 개별 적응검사 태도검사에 활용. 교육평가연구", pp.155~174 (1994)
- ". 컴퓨터 이용검사와 컴퓨터 능력 적응검사. 교육평가연구", pp.73~97 (1992)
- "축차확률비검사의 활용.", 56, pp.58~62 (1996)
- "농구자유투 검사에서 축차확률비 검사의 유용성 검증" (1996)
- "운동기능평가에서 축차확률비검사의 이론적 고찰.", 1(2), pp.13~24 (1999)
- ". Taxonomy of education objectives The classification of educational golas. Handbook I" (1956)
- ". On sequential tests of the binomial distribution. Technometrics", 12, pp.635~646 (1970)
- "Computerized adaptive testing for classifying examinees into three categories.", 60(5), pp.713~734 (2000)
- ". Effects of test length and advancement score on several criterion-referenced test reliability and validity indices. Laboratory of Psychometric and Evaluative Research School of Education University of Massachusetts." (1979)
- ".Construct and predictive validity of the alaska state high school graduation qualifying examination: First administration Annual meeting of the American Educational Research Association" (2001)
- "Development of computerized achievement tests tool with sequential probability ratio test." (2004), KAHPERD
- ". Computerized testing for Psychomotor skills Possible alternative to conventional tests." (2005), KAHPERD
- ". The application of sequential probability ratio testing to a test of motor skill. Research Quarterly for Exercise and Sport", pp.58~65 (1985)
- ". Sequential testing in physical education Paper presented at the meeting of the American Alliance for Health" (1983)
- ". A sequential testing procedures for the determination of minimal competency of a motor skill of sport skill. Technical report. University of Iowa" (1982)
- ". The selection of test items for decision making with a computer adaptive test. Paper presented at the national meeting of the National Council on Measurement in Education" (1994)
- ". Computerized adaptive testing in instructional settings. Educational Technology Research and Development", pp.47~62 (1993)
- "Computerized achievement tests: Sequential and fixed length tests", 29 (2003), Ume university