본문 바로가기
KERD
논문KCI 등재

Rasch 측정 모형을 이용한 교양 영어 수업 만족도 설문 도구타당화 연구

Validation of the scale of satisfaction of college English classes using the Rasch measurement model

김은영|이희경|황명환
팬코리아영어교육학회 (Pan-Korea English Teachers Association)|2019.09|영어교육연구 (English Language Teaching)|제31권 제3호|pp. 127-154|DOI 10.17936/pkelt.2019.31.3.007

0

조회

0

다운로드

10

인용

0

참고문헌

키워드

validation타당화포커스 그룹 인터뷰교양 영어college Englishfocus group interview수업 만족도Rasch 모형 분석the Rasch analysisEnglish class satisfaction
주제분류영어와문학

초록

This study aims to develop and validate the scale of undergraduates’ satisfaction of college English classes. For the study, a total of 673 students were pooled. The scale items were writtenbased on the results from focus group interview with 35 students from different disciplines. A wide variety of evidence for the scale validity such as content, internal structure-related,generalizability, and substantive validity was collected through the Rasch modeling. The results are as follows. As evidence of content validity, both item fit measures and point-biserialcorrelation were acceptable. The Rasch modeling showed, as structural evidence, that the internal structure of the scale is unidimensional. Additionally, most items were found to be generalized toboth male and female students without differential item functioning, and the scale displayed highreliability. Lastly, the Rasch analysis, as substantive evidence of validity, showed that the respondents responded appropriately to the rating system as intended by the scale developers. However, the inconsistency was found in item-person map, signifying that the distribution of item difficulty did not cover the whole level of students’ satisfaction, which means that more items to measure a high level of satisfaction of college English class need to be added. More pedagogical implications are discussed in the study.

Abstract

This study aims to develop and validate the scale of undergraduates’ satisfaction of college English classes. For the study, a total of 673 students were pooled. The scale items were writtenbased on the results from focus group interview with 35 students from different disciplines. A wide variety of evidence for the scale validity such as content, internal structure-related,generalizability, and substantive validity was collected through the Rasch modeling. The results are as follows. As evidence of content validity, both item fit measures and point-biserialcorrelation were acceptable. The Rasch modeling showed, as structural evidence, that the internal structure of the scale is unidimensional. Additionally, most items were found to be generalized toboth male and female students without differential item functioning, and the scale displayed highreliability. Lastly, the Rasch analysis, as substantive evidence of validity, showed that the respondents responded appropriately to the rating system as intended by the scale developers. However, the inconsistency was found in item-person map, signifying that the distribution of item difficulty did not cover the whole level of students’ satisfaction, which means that more items to measure a high level of satisfaction of college English class need to be added. More pedagogical implications are discussed in the study.

참고문헌 (43)

  1. 강민경, "법학전문대학원생을 위한 특수 목적 영어 요구분석", Foreign Languages Education, 21(2), pp.205~229 (2014), 한국외국어교육학회[DOI]
  2. 권선희, "대학 교양영어 프로그램 개선 방안 연구: 교육과정 구성 및 학습자 인식도 분석을 중심으로", 영어어문교육, 18(4), pp.211~235 (2012), 한국영어어문교육학회
  3. 김명숙, "Rasch 측정모형에 의한K 비판적 사고성향 검사의 양호도 검증", 교육평가연구, 20(2), pp.101~124 (2007), 한국교육평가학회
  4. 김미영, "대학생의 교양영어 학습에 관한 인식과 수업 개선에 대한 연구", 영미어문학, (103), pp.159~181 (2012), 한국영미어문학회[DOI]
  5. 김미영, "EFL 학습자의 학습동기, 수업만족도 및 영어능숙도에 관한 연구", 인문연구, (76), pp.81~110 (2016), 인문과학연구소
  6. 김상경, "대학 교양영어교육 선진화를 위한 “S” 대학사례연구", 학습자중심교과교육연구, 14(6), pp.101~120 (2014), 학습자중심교과교육학회
  7. 김진의, "Rasch 평정척도 모형을 적용한 중학생 체육수업인식 측정척도 개발 및 탐색", 한국체육과학회지, 27(1), pp.841~852 (2018), 한국체육과학회[DOI]
  8. 김현옥, "교양영어 프로그램에 관한 교수자와 학습자의 만족도 및 인식 비교", Foreign Languages Education, 14(3), pp.179~205 (2007), 한국외국어교육학회
  9. 김혜경, "수요자 중심의 교양영어 운영 방안 연구 - H대학 예체능계열 운영 사례를 중심으로", 교양교육연구, 10(2), pp.73~92 (2016), 한국교양교육학회
  10. 김혜림, "학습자 맞춤형 ESP 코스 개발을 위한 요구분석", 외국어교육연구, 21(2), pp.55~83 (2007), 외국어교육연구소[DOI]
  11. 남정미, "교양영어 만족도와 효율성 연구: 학생과 담당교수 인식 비교 중심으로", 언어과학, 24(1), pp.47~65 (2017), 한국언어과학회[DOI]
  12. 박혜숙, "Rasch 측정모형을 사용한 대학생 대상 다문화 수용성 척도개발 및 타당화", 교육심리연구, 27(2), pp.453~477 (2013), 한국교육심리학회
  13. 박혜숙, "Rasch 측정모형을 사용한 범법 청소년 대상 PAI-A 공격성 척도 타당화", 교육평가연구, 28(3), pp.803~829 (2015), 한국교육평가학회
  14. 서정아, "대학 교양영어 수준별 수업에 대한 학생들의인식에 관한 연구", 교육문화연구, 24(5), pp.355~374 (2018), 교육연구소[DOI]
  15. 설현수, "Messick의 타당도 관점에서 Rasch 측정모형 적용을 통한 대학 강의평가 도구개발의 타당화", 교육평가연구, 20(4), pp.31~51 (2007), 한국교육평가학회
  16. 성태제, "현대교육평가" (2014), 학지사
  17. 송영선, "대학의 강의평가 만족도에 영향을 미치는 요인 분석", 역량개발학습연구(구 한국HRD연구), 13(2), pp.141~163 (2018), Human Engagement Institute[DOI]
  18. 신소영, "수업영향요인과 수업, 교육만족도와 학습성과 간의 구조적 관계 분석", 학습자중심교과교육연구, 16(11), pp.383~402 (2016), 학습자중심교과교육학회[DOI]
  19. 양용준, "대학 교양영어에 대한 교수자와 학습자의 만족도 비교 연구", 영미어문학, (129), pp.163~184 (2018), 한국영미어문학회
  20. 유기웅, "대학 교양교육과정 만족도 및 강의 선택 관련 요인 분석", 교육문제연구, (45), pp.31~54 (2012), 교육문제연구소
  21. 이누리, "초등 교사의 자기장학이 자기수업만족도에 미치는 영향", 석사, 평생교육, pp.2011
  22. 임희주, "항공서비스 관련학과 영어교과과정 개발을 위한 요구분석: A 대학 사례분석", 현대영어영문학, 59(4), pp.363~385 (2015), 한국현대영어영문학회
  23. 장소영, "Rasch 측정모형 적용을 통한 영어 읽기 동기 측정 도구 타당화 연구", 영어교육연구, 25(3), pp.347~364 (2013), 팬코리아영어교육학회[DOI]
  24. 장소영, "Rasch 측정 모형을 이용한 문법 학습전략 도구개발의 타당화 연구", 영어영문학연구, 39(4), pp.253~277 (2013), 대한영어영문학회[DOI]
  25. 정덕교, "교양영어교육에서의 수준별 영어수업 - 한양대학교 사례를 중심으로 -", 교양교육연구, 4(1), pp.177~197 (2010), 한국교양교육학회
  26. 정동수, "대학의 교양영어 과목 개선을 위한 연구", 영어교육, 56(4), pp.265~292 (2001)
  27. 조정순, "대학 교양영어 교육의 현황과 방향성 탐구", 영어교육, 57(2), pp.365~394 (2002), 한국영어교육학회
  28. 조진현, "영어 학습에 있어 다양한 학습방법과 활동이 학습자들의 학습 만족도와 인식에 미치는 영향", 인문사회 21, 9(3), pp.1059~1074 (2018), 인문사회 21[DOI]
  29. 지은림, "Rasch 모형의 이론과 실제" (2000), 교육과학사
  30. 최경민, "대학생이 인식하는 강의 질이 학습만족도에 미치는 영향-학업적 자기효능감의 매개효과를 중심으로-", 학습자중심교과교육연구, 17(17), pp.131~150 (2017), 학습자중심교과교육학회[DOI]
  31. 최자경, "대학생의 교양체육에 대한 인식과 수업만족도에 관한 연구", 석사, 체육교육학, pp.2002
  32. 한신일, "대학생들의 영어능력과 수업참여 적극성이 학업적 자기효능감, 수업만족도 및 학업성취에 미치는 영향", 열린교육연구, 20(2), pp.103~125 (2012), 한국열린교육학회[DOI]
  33. AERA, "Standards for educational and psychological testing", American Psychological Association, ~ (1999)
  34. Blair, J. Czaja, R., "Designing surveys : A guide to decisions and procedures" (2014), SAGE Publications
  35. Bond, T. G., "Applying the Rasch model" (2001), Lawrence Erlbaum Associates
  36. Kline, R. B., "Beyond significant testing: Reforming data analysis methods in behavioral research" (2004), American Psychology Association
  38. Messick, S., "Educational measurement", pp.13~103 (1989), Macmillan
  39. Messick, S., "Standards of validity and the validity of standards in performance assessment", Educational Measurement: Issues and Practice, pp.5~8 (1995)
  40. Park, H. S., "Assessing the effect of cohort, gender, and race on differential item functioning(DIF)in an adaptive test designed for multi-age groups", Reading Psychology, 26(1), pp.81~101 (2005)
  41. Seol, H. S., "A psychometric investigation of the Marlow-Crowne social desirability scale using Rasch measurement", Measurement and Evaluation in Counseling and Development, 40(3), pp.155~168 (2007)
  42. Wolfe, E. W., "Rasch measurement: Advanced and specialized application", pp.243~290 (2007), JAM Press
  43. Zwick, R., "An empirical bayes approach to Mantel-Haenszel DIF analysis", Journal of Educational Measurement, 36(1), pp.1~28 (1999)

관련 논문AI추천

Rasch 측정모형 적용을 통한 영어 읽기 동기 측정 도구 타당화 연구김희정, 장소영, 최선희팬코리아영어교육학회 · 영어교육연구2013 · 제25권 제3호Rasch 측정 모형을 이용한 문법 학습전략 도구개발의 타당화 연구이성영, 장소영대한영어영문학회 · 영어영문학연구2013 · 제39권 제4호An Application of the Rasch Model to Assessing an English Achievement Test in a High School Setting심재우, Keiko Samimy현대영어교육학회 · 현대영어교육2010 · 제11권 제2호A Rasch Analysis of a Nationwide English Placement Test in Korea최문홍한국영어교육학회 · 영어교육2010 · 제65권 제2호대학영어 단계별 교육과정에 대한 학습자 인식 및 만족도 연구: C대학 사례를 중심으로김성해, 사재진, 최태환, 홍서경한국영어영문학회 · 영어영문학2021 · 제26권 제1호교양영어 만족도와 효율성 연구: 학생과 담당교수 인식 비교 중심으로남정미한국언어과학회 · 언어과학2017 · 제24권 제1호

이 간행물의 다른 논문 (6건)

Critical Literacy in Korea: A Review of Research on Critical Approaches to Texts최수정pp. 1-20Technology Attributes Stimulating Learner Behaviors and Outcomes of Language Learning정희정pp. 21-41Research Analysis on Issues and Suggestions for Improving 2015 National English Curriculum이병천pp. 43-65Changes of Pre-service Teachers’ Beliefs on EFL Teaching and Learning김양희, Changjuan Wangpp. 67-91English Learning and Peer Culture: An Ethnographic Case Study of English Underachievers in SchoolJinsuk Yangpp. 93-109
원문 보기