증거 중심 설계를 활용한 디지털 리터러시 평가도구 개발
Development of Digital Literacy Assessment based on Evidence Centered Design
0
조회
0
다운로드
15
인용
0
참고문헌
키워드
초록
증거 중심 설계(Evidence Centered Design)는 평가 계획 및 실행의 첫 단계에서부터 타당도를 뒷받침할 수 있는 증거를 다양하게 수집하도록 하는 평가도구 설계 및 개발의 틀로서, 최근 해외의 여러 역량 기반 평가도구 개발에 적용되고 있다. 이에 이 연구에서는 미래사회 핵심역량 중 하나로 논의되고 있는 디지털 리터러시에 주목하여, 디지털 리터러시 평가도구 개발 과정에 증거 중심 설계를 활용함으로써 그 적절성을 평가하고자 하였다. 증거 중심 설계는 평가 영역 분석, 평가 영역 모형화, 개념적 평가틀 정의, 평가 시행, 평가 결과 보고 절차로 구성되어 있으며, 이 연구에서는 대학생 대상 디지털 리터러시 평가도구 프로토타입 문항 개발 과정에 이와 같은 일련의 절차를 구체적으로 적용하였다. 적용 결과, 증거 중심 설계는 디지털 리터러시의 구인을 이루는 핵심 지식, 기능, 역량에 대하여 논증 원리를 만들고 그것을 뒷받침하기 위한 증거를 마련함으로써 보다 타당한 평가도구 개발에 기여함을 확인할 수 있었다. 이 연구의 성과는 향후 디지털 리터러시를 포함한 각종 평가도구의 질적 개선에 긍정적인 영향을 미칠 수 있을 것으로 기대한다.
Abstract
As the framework for the design and development of evaluation tools which help gather a variety of evidence that supports the effectiveness of the assessment from the start, Evidence Centered Design is being used to develop competency-based evaluation tools overseas. Consequently, this study evaluated the effectiveness of using Evidence Centered Design to develop evaluation tools for digital literacy, a skill which is being considered as a core competency for future society. Evidence Centered Design is composed of Domain Analysis, Domain Modeling, Conceptual Assessment Framework, Assessment Implementation, Assessment Delivery. This study applied these models to the development process of a prototype for the cognitive domains of a digital literacy assessment for college students. The results showed that Evidence Based Design supports the core knowledge, skills, and competencies of digital literacy and provides support to an efficient development of evaluation tools. The results of this are expected to have a positive impact on the improvement of quality for various competency evaluation tools including digital literacy.
참고문헌 (27)
- 미디어 리터러시 교육과정 운영을 통한 시민역량 제고방안 연구, "강진숙", 교육부, ~ (2019)
- 김종윤, "디지털 리터러시의 인지적 영역 평가도구 개발을 위한 기초 연구", 청람어문교육, (62), pp.7~39 (2017), 청람어문교육학회[DOI]
- 김종윤, "디지털 리터러시 인지적 영역의 평가 요소 개발", 청람어문교육, (66), pp.133~166 (2018), 청람어문교육학회[DOI]
- 김지연, "디지털 리터러시의 정의적 영역 평가 도구 개발 방향에 대한 탐색적 연구", 국어교육학연구, 50(2), pp.205~230 (2015), 국어교육학회[DOI]
- 교과 교육에서의 디지털 리터러시 교육 실태 분석 및 개선 방안 연구, "노은희", 한국교육과정평가원, ~, pp.한국교육과정평가원 연구보고서 RRC 2018-7 (2018)
- 박혜영, "디지털 시대, 쓰기 평가의 특징 분석 - 미국 ‘학력평가 2.0’의 쓰기 영역을 중심으로 -", 국어교육, (154), pp.199~227 (2016), 한국어교육학회
- 서수현, "중학생 학습자를 위한 디지털 리터러시 표현 영역 성취기준 연구", 작문연구, (41), pp.161~190 (2019), 한국작문학회[DOI]
- 옥현진, "디지털 리터러시 태도 평가 도구개발 및 타당화 연구", 국어교육, (152), pp.251~283 (2016), 한국어교육학회
- 옥현진, "중학생 학습자를 위한 디지털 리터러시 인지적 영역 성취기준 개발", 국어교육연구, (41), pp.81~112 (2018), 국어교육연구소[DOI]
- 유상희, "상황 기반 리터러시 평가를 위한 시론: 리터러시 평가에서 ‘상황’을 고려한다는 것은 어떤 의미인가?", 교과교육학연구, 22(4), pp.264~273 (2018), 교과교육연구소[DOI]
- OECD Education 2030교육과정 조사에 따른 역량 중심 교육과정 비교 연구, "이근호", 한국교육과정평가원, ~, pp.한국교육과정평가원 연구보고서 CRC2017-8 (2017)
- 정현선, "핵심역량 중심의 미디어 리터러시 교육 내용 체계화 연구", 학습자중심교과교육연구, 16(11), pp.211~238 (2016), 학습자중심교과교육학회[DOI]
- Almond, R., "Enhancing the design and delivery of assessment systems: A four process architecture", Journal of Technology, Learning, and Assessment, 1(5), pp.3~63 (2002)
- Arieli-Attali, M., "The expanded evidence-centered design(e-ECD)for learning and assessment systems", Frontiers in Psychology, 10(853), pp.1~17 (2019)
- Costa, C., "Why does society need media literacy?", Media literacy: Ambitions, Policies and Measures, pp.26~30 (2011)
- Deane, P., "Key practices in the English language arts(ELA) : Linking learning theory, assessment, and instruction", ETS Research Report Series, 2015(2), pp.1~29 (2015)
- Gilster, P., "Digital literacy" (1997), Wiley Computer Pub
- Evidence-centered design: A summary, "Herman, J.", University of California, National Center for Research on Evaluation, Standards, and Student Testing (CRESST), ~ (2015)
- Martens, H., "Evaluating media literacy education : Concepts, theories and future directions", Journal of Media Literacy Education, 2(1), pp.1~22 (2010)
- Martin, A., "Digital literacies: Concepts, policies ad practices", pp.151~176 (2008), Peter Lang
- Mislevy, R. J., "Implications for evidence-centered design for educational assessment", Educational Measurement : Issues and Practice, 25, pp.6~20 (2006)
- Mislevy, R. J., "Evidence-centered design : Layers, structures, and terminology" (2005), SRI International
- Mislevy, R. J., "Focus article : On the structure of educational assessments", Measurement : Interdisciplinary Research and Perspectives, 1(1), pp.3~62 (2003)
- Mislevy, R. J, "Evidence-centered assessment design" (1999), Educational Testing Service
- Mislevy, R. J., "On the structure of assessment arguments", Measurement : Interdisciplinary Research and Perspectives, 1(1), pp.3~62 (2003)
- "Common Core State Standards for English Language Arts & Literacy History/Social Studies & Science and Technical Subjects" (2010)[URL]
- OECD, "OECD Future of education and skills 2030 : OECD Learning Compass 2030", OECD, ~ (2019)