본문 바로가기
KERD
논문KCI 등재

문항반응이론을 이용한 원격교육환경에서 사회적 실재감 측정도구의 타당도 검증

A study on validation of social presence scale in distance education using item response theory

김정주
한국교육정보미디어학회 (Korea Association for Educational Information and Media)|2011.03|교육정보미디어연구 (Journal of Korean Association for Educational Information and Media)|제17권 제1호|pp. 109-132

0

조회

0

다운로드

16

인용

0

참고문헌

키워드

원격교육문항반응이론item response theory사회적 실재감distance educationsocial presence
주제분류교육학

초록

본 연구는 원격교육에서 사회적 실재감 측정도구의 타당도를 검증하고 활용방안을 제시하는 것을 목적으로 한다. 이를 위해 Kim(2010)의 측정도구를 가지고 문항반응이론의 Rasch 모형분석을 실시하였다. 도구는 상호지원 및 집중, 정서적 유대감, 공동체감 및 개방적 커뮤니케이션의 4개 하위영역의 총 19개 문항으로 이루어졌다. 분석 자료는 기존의 국내 5개 사이버대학의 재학생들의 설문을 통해 수거된 유효응답자 492개의 표본을 사용하였다. 분석 결과는 다음과 같다. 우선, 문항의 적합도 분석 결과 외적합도수가 기준치인 1.50 이상으로 나온 1개 문항을 제거하는 것이 적절한 것으로 판단되었다. 둘째, 기존 도구에서 구인을 측정하는 데 사용된 5점 척도의 유용함을 분석한 결과 각 응답범주가 명확하고 유용하여 5점 척도의 사용이 타당함을 검증할 수 있었다. 셋째, 문항난이도 분석을 통해 개인들의 속성을 모두 측정할 수 있도록 비교적 난이도가 골고루 분포되어 있음을 확인하였다. 다만 개인의 속성 점수가 매우 높거나 매우 낮은 부분을 측정하는 문항들이 중간부분에 비해 상대적으로 적게 분포되어 있었다. 본 연구의 결과를 바탕으로 사회적 실재감의 영역별 속성, 변화 양태에 따른 연구와 구체적이고 실천적인 교수법을 제안하는 연구 등 많은 영역과 주제에 본 도구를 활용할 수 있음을 제시하였다.

Abstract

This study is purported to verify the validation of social presence scale and represent its application in distance education. To meet its purpose, this study applied Rasch model based on item response theory to analyze Kim's social presence scale (2010) among others. This scale was composed of 19 items from 4 domains such as mutual attention and support, affective connectedness, sense of community and open communication. The data used in this study was 492 samples valid for analysis that was collected from the students surveyed from 5 cyber universities in Korea. The result of analysis is as following. First, the appropriateness of overall items would be better adjusted with deletion of 1 item. Second, 5 response categories used in the instrument are confirmed to be appropriate to measure individuals' responses. Third, item difficulty analysis showed that items are well distributed to measure overall individuals' attributes but not the ones with very high or low social presence. Based on this result, this study suggested the application of the scale in such a way that it can be used in many studies using 4 domains and developmental attributes of social presence resulted from this study and suggesting specific and practical instructional methods. It is expected that this scale can be elaborated and generated by being used in many forthcoming studies.

참고문헌 (50)

  1. 강명희, "e-Learning 환경에서 인식되는 사회적 실재감과 성취도, 만족도, 학습지속도 관계 규명", 교육공학연구, 22(4), pp.1~27 (2006), 한국교육공학회
  2. 설현수, "Messick의 타당도 관점에서 Rasch 측정모형 적용을 통한 대학 강의평가 도구개발의 타당화", 교육평가연구, 20(4), pp.31~51 (2007), 한국교육평가학회
  3. 설현수, "Rasch 모형을 이용한 Marlowe-Crowne의 사회적 정향성 척도 타당화", 교육평가연구, 18(1), pp.101~124 (2005), 한국교육평가학회
  4. 성태제, "검사와 질문지 제작을 위한 중급이론: 문항반응이론", 한국심리학회 창립 50주년 동계연구세미나 (1996)
  5. 시기자, "Rasch모형에 근거한 피험자 적합도 지수를 이용한 문항반응유형과 피험자 특성 분석", 교육평가연구, 11(2), pp.106~131 (1998)
  6. 이은미, "탐구기반 CSCL에서 실재감 유형이 학습성과에 미치는 영향", 석사, pp.2007
  7. 이익섭, "장애 정체감 척도의 Rasch 모형 적용", 한국사회복지학, 59(4), pp.273~295 (2007), 한국사회복지학회
  8. 정혁, "Rasch 모형: 서열척도 분석의 대안적 방법", 코칭능력개발지, 7(3), pp.133~141 (2005), 한국코칭능력개발원
  9. 지은림, "Rasch 측정 모형의 이론과 실제" (2000), 교육과학사
  10. 홍세희, "역기능적 신념검사 단축판의 구성: Rasch 평정척도모형의 적용", 한국심리학회지 임상, 25(3), pp.865~880 (2006), 한국임상심리학회
  11. 황하성, "사회적 현존감(Social Presence) 측정도구 개발에 관한 탐색적 연구 : 인스턴트 메신저의 이용 사례를 중심으로", 언론과학연구, 7(2), pp.529~561 (2007), 한국지역언론학회
  12. Andrich, D, "Rating formulation for ordered response categories", Psychometrika, 43(4), pp.561~173 (1978)
  13. Argon, S. R, "Creating social presence in onlne environments", New Directions for Adult and Continuing Education, 100, pp.57~68 (2003)
  14. Baker, F. B, "The basics of item response theory" (1985), Heineman Publishing
  15. Baskin, C, "Scoping social presence and social contest cues to support knowledge construction in an ICT rich environment", In Proceedings of 2004 AARE Conference. Melbourne (2004)
  16. Criteria and scope conditions for a theory and measure of social presence, "Biocca, F", ~ (2001)
  17. Cervellione, K. L, "Rasch modeling of the self-deception scale of the balanced inventory of desirable responding", Educational and Psychological Measurement, 69(3), pp.438~458 (2009)
  18. Embreston, S. E, "Item response theory for psychologists" (2000), Erlbaum
  19. Fox, C. M, "Uses of Rasch modeling in counseling psychology research", Journal of Counseling Psychology, 45(1), pp.30~45 (1998)
  20. Garrison, D. R, "Online communication of inquiry review: Social, cognitive, and teaching presence issues", Paper presented at the Sloan-C Summer workshop, pp.61~72 (2007)
  21. Gunawardena, C. N, "Social presence theory and implication for interaction and collaborative learning in computer conferences", International Journal of Educational Telecommunications, 1(2, pp.3) (1995), 147~166
  22. Gunawardena, C. N, "Social Presence as a predictor of satisfaction within a computer-mediated conferencing environment", The American Journal of Distance Education, 11(3), pp.8~26 (1997)
  23. Harms, C, "Internal consistency and reliability of the networked minds social presence measure", Seventh Annual International Workshop: Presence 2004 (2004), Universidad Politecnica de Valencia.
  24. Hong, S, "A psychometric revision of the European American Values Scale for Asian Americans using the Rasch model", MEASUREMENT AND EVALUATION IN COUNSELING AND DEVELOPMENT, 37(4), pp.194~207 (2005), AMER COUNSELING ASSOC
  25. Humphrey, L, "A theoretical and empirical study of the psychometric assessment of psychological test dimensionality and bias (ONR Research Proposal)" (1984), Office of Naval Research
  26. Kehrwald, B, "The ties that bind: Social presence, relations and productive collaboration in online learning environments", Paper presented at Proceedings of Ascilite Singapore 2007 (2007)
  27. Kim, J, "Developing an instrument to measure social presence in distance higher education", British Journal of Educational Technology (2010)
  28. Lee, A. S, "Electronic mail as a medium for rich communication: An empirical investigation using hermeneutic interpretation", MIS Quarterly, 18(2), pp.143~157 (1994)
  29. Lee, K. M, "Presence, explicated", Communication Theory, 14(1), pp.27~50 (2004)
  30. Lin, G. Y, "Social presence questionnaire of online collaborative learning: Development and validity. Association for Educational Communications and Technology, ERIC# ED484999", ~ (2004)
  31. "A user’s guide to WINSTEPS (Program manual 3.68.0)" (2009)[URL]
  32. Mehrabian, A, "Some referents and measures of nonverbal behavior", Behavior Research Methods and Instrumentation, 6(1), pp.203~207 (1969)
  33. Mykota, D, "Learner characteristics as predictors of online social presence", Canadian Journal of Education, 30(1), pp.157~170 (2007)
  34. Nam, S, "A Psychometric revision of the career decision self-efficacy scale: A Rasch model approach", Journal of Career Development (2010)
  35. Nowak, K. L, "The effect of the agency and anthropomorphism on users‘ sense of telepresence, copresence, and social presence in virtual environment", Presence, 12(5), pp.481~494 (2003)
  36. Pratt, K, "Building learning communities in cyberspace" (1999), Jossey-Bass Inc
  37. Retti, R, "Connectedness, awareness and social presence. Paper presented at Presence 2003", 6th Annual International Workshop on Presence (2003)
  38. Richardson, J. C, "Examining social presence in online courses in relation to students' perceived learning and satisfaction", Journal of Asynchronous Learning Networks, 7(1), pp.68~88 (2003)
  39. Rourke, L, "Assessing social presence in asynchronous text-based computer conferencing", The Journal of Distance Education, 14(2), pp.50~71 (1999)
  40. Rovai, A. P, "A constructivist approach to online college learning", Internet and Higher Education, 7(2), pp.79~93 (2004)
  41. Rovai, A. P, "Facilitating online discussions effectively", The internet and Higher Education, 10(1), pp.77~88 (2007)
  42. Short, J, "The social psychology of telecommunication" (1976), John Wiley & Sons
  43. So, H. J, "Student perceptions of collaborative learning, social presence and satisfaction in a blended learning environment: Relationships and critical factors", Computers & Education, 51(1), pp.318~336 (2008)
  44. Swan, K, "Developing social presence in online discussions, in Learning and teaching with technology: Principles and practices", pp.147~164 (2003), Kogan page
  45. Swan, K, "On the nature and development of social presence in online course", Journal of Asynchronous Learning Networks, 9(3), pp.115~136 (2005)
  46. Tu, C, "The measurement of social presence in an online learning environment", International Journal on E-Learning (2002)
  47. Vaughan, N, "Investing how a blended learning approach can support an inquiry process within a faculty learning community", 박사, pp.2004
  48. Wise, A, "The effects of teacher social presence on student satisfaction, engagement, and learning", Journal of Educational Computing Research, 31(3), pp.247~271 (2004)
  49. Wolfe, E. W, "Instrument development tools and activities for measure validation using Rasch models", Journal of Applied Measurement, 8(2), pp.204~234 (2007)
  50. Wright, B. D, "A procedure for sample-free item analysis", Educational and Psychological Measurement, 29, pp.23~48 (1969)

관련 논문AI추천

온라인 학습환경에서 사회적 실재감 하위요인이 지각된 토론효과에 미치는 영향권성연한국교육정보미디어학회 · 교육정보미디어연구2016 · 제22권 제1호사회적 현존감(Social Presence) 측정도구 개발에 관한 탐색적 연구 : 인스턴트 메신저의 이용 사례를 중심으로황하성한국지역언론학회 · 언론과학연구2007 · 제7권 제2호e-러닝에서의 교수실재감 구인 요인에 대한 실증적 탐색고은현한국교육정보미디어학회 · 교육정보미디어연구2006 · 제12권 제4호온라인 학습공동체에서 사회적 실재감이 학습몰입과 학습효과에 미치는 영향조은미, 한안나한국교육정보미디어학회 · 교육정보미디어연구2010 · 제16권 제1호온라인 수업의 조별 상호작용에서 나타난 사회적 실재감의 양상: 메시지 분석을 중심으로권성연한국교육정보미디어학회 · 교육정보미디어연구2012 · 제18권 제2호사이버대학에서 교수실재감, 인지적 실재감, 사회적 실재감과 학습성과와의 구조적 관계 규명김은경, 유지원, 주영주, 하영자한국정보교육학회 · 정보교육학회논문지2010 · 제14권 제2호

이 간행물의 다른 논문 (5건)

교수-학습 환경에서의 맥락설계 원리 및 모형 개발 연구박경선, 나일주pp. 1-37웹 기반 과학실험 시뮬레이션의 학습성과에 대한 학습몰입과 인지적실재감의 예측력 규명이정민, 강명희, 김혜선pp. 39-61학습유형별 웹 기반 수업 선호 영향 요인 분석이동엽pp. 63-89보편적 학습 설계(UDL) 기반 차별화 교수 지원 도구인 PAL 툴의 스마트폰 응용프로그램 설계차현진, 안미리pp. 91-108대학 원격교육환경에서 학습자의 정의적 특성, 학습실재감, 몰입감, 학습만족도간 구조적 관계 분석김정겸, 강대식, 정회인pp. 133-152
원문 보기