ICT기반 교육 ODA 사업의 성과평가도구 개발 및 타당화연구: 첨단교실사업을 중심으로
Development and validation of assessment tools for educational ODA outcomes: Case of the innovative ICT-based classroom project
0
조회
0
다운로드
7
인용
0
참고문헌
키워드
초록
본 연구의 목적은 우리나라 교육 ODA 사업의 대표적인 사례 가운데 하나인 ‘ICT 활용 시범교실 구축․운영 지원 사업’의 성과 측정을 위해 타당한 평가준거 및 문항을 개발하고, 이를 활용하여 사업목표달성의 예측력을 살펴보는데 있다. 이를 위해 ODA사업의 성과측정과 관련된 문헌고찰을 통해 성과측정의 3개 준거(ICT 자원의 적절성, ICT 교육 친화성 개선, ICT 리터러시 개선)와 해당 준거를 측정할 수 있는 18개 자기보고식 설문문항을 개발하고 전문가 검증을 통해 내용타당도를 확보하였다. 개발된 평가준거와 문항에 대해 첨단교실이 구축된 캄보디아, 아제르바이잔, 스리랑카, 파라과이 학생 543명을 대상으로 타당화를 위한 설문조사를 실시하고 탐색적 요인분석을 실시하였다. 더불어 측정 도구가 학습자의 ICT활용능력 향상 정도를 어느 정도 예측하는지 검증하기 위해 기초통계, 상관관계 분석, 회귀분석을 실시하였다. 연구 결과, 첨단교실 사업 성과 측정을 위한 3개 준거와 이를 측정할 수 있는 16개 문항의 타당성과 신뢰성을 검증하였다. 또한 첨단교실 사업 목표인 학습자의 ICT활용능력 향상에는 ICT 리터러시 개선, ICT 교육 친화성 개선이 긍정적 영향을 주는 예측변수로 유의미하게 나타났다. 본 연구의 결과는 증가하고 있는 ICT와 연계된 다양한 교육 ODA 사업의 체제적인 성과평가 모형의 개발과 실행에 대한 학문적, 실천적 논의에 활용될 수 있을 것으로 기대된다.
Abstract
The purpose of this study is to develop criteria and items for measuring outcomes for the innovative ICT-based classroom project, which is a educational ODA project of Korea, and verify its validity and outcome prediction. Relevant literature review was conducted to define criteria and items for measuring outcomes. The model consists of 3 criteria; relevance of inputs, improvements of ICT literacy, and improvements of ICT friendly instruction in innovative ICT-based classrooms. In order to verify its validity and reliability, a developed survey derived from the previous researches was conducted on 543 learners in Cambodia, Azerbaijan, Sri Lanka, and Paraguay, where innovative ICT-based classroom is operating. Content validity analysis, exploratory factor analysis were conducted. In addition, descriptive statistics, correlation, and regression analysis were performed using SPSS 20.0. The specific results are as follows. First, 3 criteria(relevance of inputs, improvements of ICT literacy and improvements of ICT in education-friendly) and 16 items were confirmed after verifying its validity and reliability. Second, the impacts of all 3 criteria(improvements of ICT literacy, improvements of ICT friendly instruction, and relevance of inputs) on achieving participated learners' ICT literacy competencies were statistically significant. The result of study implies the importance of outcome-based ODA project design including the development and implementation of credible assessment tools. In addition, the result of this study could be considered as a exemplary case of ICT applied ODA project assessment in the field of education that is consistently increasing.
참고문헌 (24)
- ICT 개발협력 성과제고 및 전략적 이행방안연구, "강인수", ~, pp.방송통신정책연구 15-진흥-060 (2016)
- 김성수, "성과 측정, 어떻게 하는가?" (2006), 보문각
- 류제명, "우리나라 ICT 국제개발협력사업(ODA)의 결정요인에 관한 연구", 사회과학연구, 40(3), pp.1~24 (2014), 사회과학연구원[DOI]
- ICT 리터러시 검사도구 개발 연구 - 중․고등학생용 -, "백순근", 한국교육학술정보원, ~, pp.KR 2008-4 (2008)
- 국내외 IT 공적개발원조(ODA) 사업의 추진 동향 분석, "송효진", 한국지역정보개발원, ~, pp.지역정보화 동향분석 (2013)
- 2014년도 국가수준 초․중학생 ICT 리터러시 수준 측정 연구, "안성훈", 한국교육학술정보원, ~, pp.KR 2014-2 (2015)
- 한국의 교육 ODA 실천전략 연구, "윤종혁", 한국교육개발원, ~, pp.연구보고 RR 2012-18 (2012)
- 엄명용, "사회복지실천과 척도개발" (2010), 학지사
- 이상은, "한국의ICT분야 무상원조 현황 및 개선방안", Internet & Security Focus February 2014, ~ (2014)
- 이희진, "정보통신기술은 개발도상국 발전을 가져올까? 한국의 ICT4D프로그램 수립을 위한 고찰", 국제.지역연구, 16(4), pp.113~141 (2007), 국제학연구소
- 교육분야 ODA 성과 측정 가이드라인 개발 연구, "임진호", 한국국제협력단, ~ (2013)
- 조현아, "한국의 교육 ODA사업으로서 '라오스 중등학교 교과서 보급사업'의 특성에 관한 연구", 석사, 교육행정, pp.2009
- 천무영, "학교정보화사업의 성과분석에 관한 연구", 교육정치학연구, 19(1), pp.127~155 (2012), 한국교육정치학회
- 한국국제협력단, "개발협력사업평가 가이드라인", 한국국제협력단, ~ (2008)
- 한국국제협력단 교육분야 지원사업 분야별 평가 보고서, "한국국제협력단", 한국국제협력단, ~ (2008)
- 교육정보화 백서, "한국교육학술정보원", 한국교육학술정보원, ~ (2000)
- 교육분야 ODA 종합평가 연구, "홍은표", APEC국제교육력원․상명대학교, ~ (2014)
- Cabrol, M., "Assessing the effects of ICT in education: Indicators, criteria and benchmarks for international comparison", pp.83~105 (2009), European Commission & Organization for Economic Co-operation and Development
- DAC, "DAC principles for effective aid" (1991), OECD
- Frechtling, J., "프로그램 평가와 로직모델" (2013), 학지사
- Hatry, H. P., "Quicker, Better", pp.17~34 (2001), Managing Performance in American Government
- Ex-post evaluation report on the project for effective ICT education at the college of engineering and technology, university of Dar es Salaam, "KOICA", KOICA, ~ (2012)
- Kozma, R. B., "Monitoring and Evaluation of ICT in Education Projects: A Handbook for Developing Countries", pp.2005, infoDev
- Solar, M., "A maturity model for assessing the use of ICT in school education", Educational Technology & Society, 16(1), pp.206~218 (2013)