본문 바로가기
KERD
논문KCI 등재

온라인 토론활동의 참여를 촉진하기 위한 대시보드 개발 및 적용

Development and Application of Dashboards to Improve Online Discussion Engagement

진성희|유미나
한국교육정보미디어학회 (Korea Association for Educational Information and Media)|2018.09|교육정보미디어연구 (Journal of Korean Association for Educational Information and Media)|제24권 제3호|pp. 517-542|DOI http://dx.doi.org/10.15833/KAFEIAM.24.3.517

2

조회

0

다운로드

12

인용

0

참고문헌

키워드

상호작용interactionparticipation참여도dashboard대시보드online discussion온라인 토론참여 촉진participation enhancement
주제분류교육학

초록

온라인 토론이 면대면 토론학습에 비해 독립성과 자율성을 가진다는 장점이 있지만, 학습자는 비동시적으로 이루어지는 다른 학습자들의 의견을 읽고 상호작용함으로써 토론에 참여하는 것에 대해 어려움을 느낄 수 있다. 본 연구에서는 학습자의 토론활동에 대한 참여를 촉진하기 위해 참여도와 상호작용 현황을 시각물로 제공하는 대시보드를 개발하였다. 그리고 대시보드에 대한 사용성과 사용자 경험을 평가함으로써 그 적용 가능성을 확인해 보고자 하였다. 참여도와 상호작용 대시보드 개발은 설계․개발 연구방법을 적용하여 개발하였다. 참여도 대시보드는 토론 게시글 수(37%), 댓글 및 답글 수(28%), 읽은 글의 수(13%), 게시글의 길이(9%), 접속 시간의 규칙성(5%), 접속횟수(4%), 접속시간(4%)의 여섯 개의 대표변인과 가중치를 활용하여 막대그래프 형태로 시각화하였다. 상호작용 대시보드는 팀원들 간 상호작용과 팀 간 상호작용을 원과 화살표를 활용하여 시각화하였다. 참여도 대시보드에 대한 사용성 평가 결과 학습자와 교수자 모두 ‘학습용이성’ 항목에 대해 가장 긍정적으로 평가한 것으로 나타났고, 상호작용 대시보드에 대해서는 학습자와 교수자 모두 ‘만족감’ 항목의 점수가 가장 높은 것으로 확인되었다. 사용자 경험 평가 결과, 참여도 대시보드에 대해서는 학습자와 교수자 모두 ‘명확성’과 ‘효율성’에 대해 가장 긍정적으로 평가하였고, 상호작용 대시보드에 대해서는 학습자와 교수자 모두 ‘자극성’과 ‘참신성’ 항목에 대해 가장 긍정적으로 평가한 것으로 분석되었다. 참여도와 상호작용 대시보드에 대한 사용성 평가와 사용자 경험 평가 결과를 기반으로 온라인 토론활동의 참여를 촉진하기 위한 대시보드의 적용 가능성과 시사점, 그리고 본 연구의 제한점에 대해 논의하였다.

Abstract

Although online discussions have the advantage of independence and autonomy compared to face-to-face discussion activities, learners may have difficulty participating in discussions by reading posts created by other learners asynchronously and interacting with them. This study developed a dashboard that visualize participation and interaction to facilitate learner 's participation in discussion activities. The applicability of the dashboard has been investigated through usability test and user experience evaluation. The dashboard of participation and interaction was developed by applying design and development research methodology. The Participation Dashboard was visualized as a bar graph with six proxy variables and weights, such as number of posts(37%), number of comments and replies(28%), and number of reads(13%), post lengt (9%), and login frequency(4%). The Interaction Dashboard visualized the level of interaction levels between team members and teams using circles and arrows. As a result of the usability test for the participation dashboard, both ‘learner’ and ‘instructor’ were most positively evaluated for ‘easy to learn’ items, and for the interaction dashboard, both the learner and the instructor showed the highest score in the ‘satisfaction’ items. As a result of user experience evaluation on the participation dashboard, both learner and instructor gave high score to ‘clarity’ and ‘efficiency’, and for the interaction dashboard, both learner and instructor showed ‘stimulation’ and ‘novelty’. The applicability and implication of the dashboard was discussed based on the results of usability test and user experience evaluation. Lastly, the limitations of this study and further studies have been suggested.

참고문헌 (42)

  1. 강인구, "CSCL에서 SN(Social Network)데이터의 제시가 상호작용 과정과 활동성과에 미치는 영향", 교육공학연구, 20(1), pp.89~115 (2004), 한국교육공학회
  2. 김신자, "교육공학의 이론과 실제" (1999), 문음사
  3. 나일주, "온라인 학습공동체의 학습게시판에 나타난 메시지 유형별 정서적 표현의 내용요인 분석", 평생학습사회, 1(1), pp.49~70 (2005), 미래원격교육연구원
  4. 박연정, "학습 분석학 기반 대시보드의 설계와 적용", 교육정보미디어연구, 20(2), pp.191~216 (2014), 한국교육정보미디어학회
  5. 유미나, "학습분석학 기반의 온라인 토론활동 시각화 원리 개발 연구", 박사, pp.2017
  6. 이석남, "온라인 동시토론에서 토론 개요서 활용이 토론자의 인지적 참여 수준에 미치는 영향", 사고개발, 5(2), pp.65~85 (2009), 대한사고개발학회
  7. 임병노, "토론기반의 온라인학습에서 교수자 역할과 운영전략", 교육발전연구, 21(1), pp.79~100 (2005)
  8. 조영환, "온라인 토론 촉진을 위한 피드백의 역할 탐색", 아시아교육연구, 16(2), pp.289~313 (2015), 교육연구소[DOI]
  9. 진성희, "이러닝 학습자들의 사회비교동기 유형에 따른 EngageGram이 학습참여도에 미치는 효과", 한국콘텐츠학회 논문지, 15(9), pp.652~661 (2015), 한국콘텐츠학회[DOI]
  10. 진성희, "이러닝 학습환경에서 학습분석기반 대시보드 연구동향 분석", 교육정보미디어연구, 21(2), pp.185~213 (2015), 한국교육정보미디어학회[DOI]
  11. 진성희, "이러닝 학습참여활동 및 상호작용에 대한 대시보드 설계 연구", 교육공학연구, 31(2), pp.191~221 (2015), 한국교육공학회[DOI]
  12. 진성희, "온라인 토론활동에 대한 참여도 대표변인 및 AHP 기법에 의한 가중치 결정", 교육정보미디어연구, 23(4), pp.945~971 (2017), 한국교육정보미디어학회[DOI]
  13. Anderson, S. E., "Factors associated with amount of use and benefits obtained by users of a statewide educational telecomputing network", Educational Technology Research and Development, 45(1), pp.19~50 (1997)
  14. Anderson, T., "Theory and practice of online learning", pp.45~74 (2008), AU Press
  15. Choi, S., "Factors-related to the collaboration use of computer-mediated communication in a graduate community:A study of electronic mail", doctor, pp.1996
  16. Donath, J., "The chat circles series: explorations in designing abstract graphical communication inter", Proceedings of the 4th Conference on Designing Interactive Systems: Processes, Practices, Methods, and Techniques, pp.359~369 (2002), ACM
  17. Festinger, L., "A theory of social comparison processes", Human relations, 7(2), pp.117~140 (1954)
  18. Govaerts, S., "The student activity meter for awareness and self-reflection", Proceedings of CHI'12 Extended Abstracts on Human Factors in Computing Systems, pp.869~884 (2012), ACM
  19. Harasim, L. M., "Online education: Perspectives on a new environment" (1990), Greenwood Publishing Group Inc
  20. Henri, F., "Computer conferencing and content analysis", Collaborative learning through computer conferencing, pp.117~136 (1992), Springer Berlin Heidelberg
  21. Holzinger, A., "Usability engineering methods for software developers", Communications of the ACM, 48(1), pp.71~74 (2005)
  22. Hrastinski, S., "The potential of synchronous communication to enhance participation in online discussions: A case study of two e-learning courses", Information and Management, 45(7), pp.499~506 (2008)
  23. Iandoli, L., "Socially augmented argumentation tools:Rationale, design and evaluation of a debate dashboard", International Journal of Human-Computer Studies, 72(3), pp.298~319 (2014)
  24. Janssen, J. J. H. M., "Visualizing participation to facilitate argumentation", Proceedings of the 7th International Conference of the Learning Sciences (2006)
  25. Jin, S., "Using visualization to motivate student participation in collaborative online learning environments", Educational Technology and Society, 20(2), pp.51~62 (2017)
  26. Kim, D., "Toward evidence-based learning analytics: Using proxy variables to improve asynchronous online discussion environments", The Internet and Higher Education, 30, pp.30~43 (2016)
  27. Lambropoulos, N., "Supporting social awareness in collaborative e-learning", British Journal of Educational Technology, 43(2), pp.295~306 (2012)
  28. Laugwitz, B., "Construction and evaluation of a user experience questionnaire", Symposium of the Austrian HCI and Usability Engineering Group, pp.63~76 (2008), Springer
  29. Levine, J. M., "Acquisition of relative performance information: The roles of intrapersonal and interpersonal comparison", Personality and Social Psychology Bulletin, 10(3), pp.385~393 (1984)
  30. Lund, A. M., "Measuring usability with the use questionnaire", Usability Interface, 8(2), pp.3~6 (2001)
  31. Mazza, R., "Monitoring an online course with the GISMO tool: A case study", Journal of Interactive Learning Research, 18(2), pp.251~265 (2007)
  32. Morgan, C. K., "Unravelling the complexities of distance education student attrition", Distance education, 20(1), pp.96~108 (1999)
  33. Nokelainen, P., "An empirical assessment of pedagogical usability criteria for digital learning material with elementary school students", Journal of Educational Technology and Society, 9(2), pp.178~197 (2006)
  34. Pallotta, V., "Automatic argumentative analysis for interaction mining", Argument and Computation, 2(2-3), pp.77~106 (2011)
  35. Rapport, M., "Computer mediated communication: Bulletin boards, computer conferencing, electronic mail, information retrieval" (1991), Wiley & Sons
  36. Richey, R. C., "Design and development research: Methods, strategies, and issues" (2007), Routledge
  37. Schrepp, M., "Applying the user experience questionnaire (UEQ)in different evaluation scenarios", International Conference of Design, User Experience, and Usability, pp.383~392 (2014), Springer
  38. Tan, J. P. L., "Learner dashboards a double-edged sword? Students’ sense-making of a collaborative critical reading and learning analytics environment for fostering 21st century literacies", Journal of Learning Analytics, 4(1), pp.117~140 (2017)
  39. Teplovs, C., "The Knowledge Space Visualizer: A tool for visualizing online discourse", Proceedings of the International Conference of the Learning Sciences, pp.1~12 (2008)
  40. Wang, Y., "Big data analytics: Understanding its capabilities and potential benefits for healthcare organizations", Technological Forecasting and Social Change, 126, pp.3~13 (2018)
  41. Weinberger, A., "Knowledge convergence in collaborative learning:Concepts and assessment", Learning and Instruction, 17, pp.416~426 (2007)
  42. Wills, T. A., "Downward comparison principles in social psychology", Psychological Bulletin, 90(2), pp.245~271 (1981)

관련 논문AI추천

팀기반 온라인 토론의 내용분석을 지원하는 대시보드 개발 및 사용성 평가유미나, 진성희한국교육공학회 · 교육공학연구2018 · 제34권 제3호온라인 토론활동에 대한 학습분석기반 대시보드 사례 분석 연구유미나, 진성희한국교육정보미디어학회 · 교육정보미디어연구2017 · 제23권 제3호비동시적 온라인 토론에서 대시보드 유형과 학습자 특성이 교육효과에 미치는 영향진성희한국교육공학회 · 교육공학연구2019 · 제35권 제2호이러닝 학습참여활동 및 상호작용에 대한 대시보드 설계 연구김태현, 유미나, 진성희한국교육공학회 · 교육공학연구2015 · 제31권 제2호학습자 대시보드의 사용성 평가: 상호작용 정보의 시각화에 대한 학습자 인식 탐색김윤진, 김혜준, 임규연, 최지수한국교육정보미디어학회 · 교육정보미디어연구2020 · 제26권 제2호온라인 토론활동 참여정보에 대한 피드백 유형이 학습참여 및 학습성과에 미치는 영향유미나, 진성희한국교육공학회 · 교육공학연구2020 · 제36권 제3호

이 간행물의 다른 논문 (7건)

대리적 상호작용 교수 전략이 온라인 토론 참여와 만족도에 미치는 효과강성희, 이영주pp. 441-457VR, AR, MR 기반 학습의 효과에 관한 메타분석구요한, 유명현, 김재현, 송지훈pp. 459-488대학 수업 지원을 위한 학습분석 기반 교수자 대시보드 개발신종호, 최재원, 오상희, 박수영pp. 489-515생성적 대학강의에서의 자기조절학습, 인지부하와 학업성취도 분석오선아pp. 543-567대학 팀 프로젝트 학습에서 다양성 수용도, 과업갈등과 팀 몰입 및 인지된 성취도의 관계에서 관계갈등의 매개효과정하연, 이정민pp. 569-591
원문 보기