말소리의 음성 정보 전달에 효과적인 글자 움직임 속성 - 청각장애인을 대상으로
Effective Properties of Type Movement in Delivering Voice Tone - Based on Hearing-Impaired Individuals
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
말소리 인식이 원활치 않은 청각장애인은 대화를 통한 정서적인 교류를 경 험하기 어려우며 이로 인해 언어 발달이 지체되어 나타난다. 특히 글자는 청각장애인이 소통 과정에서 가장 많이 사용하는 수단인 데 반해 말소리와 글자와의 연관성을 습득하지 못하는 데서 심각한 지연이 일어난다. 키네틱 타이포그래피는 글자 움직임을 통해 말소리를 구현하는 데 적합한 요건을 갖추었으므로 청각장애인에게 말소리의 음성 정보를 전달하는 데 유용한 도구로 활용될 수 있다. 키네틱 타이포그래피를 기반으로 다양한 글자 움직 임에 대한 청각장애인의 말소리 인식 반응을 조사하였으며, 이때 말소리를 ‘강약’, ‘고저’, ‘장단’으로 세분화하여 각 음성 정보를 전달하는 데 효과적 으로 나타난 글자 움직임 속성을 도출하였다. 먼저 ‘강약’을 전달하는 데 효과적인 글자 움직임 속성으로 ‘공간’을 도출하였으며 세부적으로는 글자 크기나 수가 증가하며 공간 확장이 일어날 때 해당 음성 정보를 인식할 수 있었다. 또한 ‘고저’에 대한 움직임 속성은 ‘운동’으로 글자 형태가 부서지 며 날카로운 고음을 선사하는 것으로 나타났다. 마지막으로 ‘장단’을 전달하 는 데 효과적인 움직임 속성으로 ‘리듬’을 도출하였으며 세부적으로는 특정 움직임이 짧고 반복적으로 지속될 때 인식할 수 있었다.
Abstract
Hearing-impaired individuals, who struggle with perceiving voice tones, often face difficulties experiencing emotional exchanges during conversations. There is a significant delay in acquiring the correlation between speech sounds and letters, whereas written language has been one of the most frequently used tools for communication among the hearing impaired. Kinetic typography, which implements speech sounds through type movements, is suitable for conveying vocal information to the hearing impaired. As a result, properties of type movements that effectively convey voice tones, such as 'intensity,' 'pitch,' and 'duration,' were discovered accordingly. Firstly, 'intensity' was associated with 'space,' where there is an expansion of space, such as an increase in letter size or quantity. Additionally, 'pitch' was linked to 'motion,' as letter forms breaking apart produced sharp, high-pitched sounds. Lastly, 'duration' was connected with 'rhythm,' while certain movements were consistently repeated.
참고문헌 (39)
- 김현정, "키네틱 타이포그래피에서의 감정 표현", 디자인학연구, 20(5), pp.291~302 (2007)
- 권순복, "의사소통 상황에서 목소리의 준언어학적 요소", 언어치료연구, 21(2), pp.1~22 (2012)
- 노승관, "한글과 애니메이션", 나라사랑, 123, pp.137~146 (2014)
- 박일태, "목소리", 인간연구, 43, pp.197~210 (2021)
- 서유경, "청각장애학생들의 정서표현어휘 이해능력과 얼굴표정 읽기능력의 관계 탐색", 특수아동교육연구, 18(4), pp.1~19 (2016)
- 이현화, "소리, 문자, 움직임의 의미에 관한 실험적 작품연구 : 키네틱 타이포그래피를이용한 뮤직비디오 제작을 중심으로", 디자인융복합연구, 5(2), pp.17~28 (2006)
- 장호현, "키네틱 타이포그래피의 모션과 사운드에 관한 연구", 디자인과학연구, 5(3), pp.37~44 (2002)
- 장효진, "글자의 비언어적 시각표현을 통해서 본 타이포그래피의 영역 확장 가능성과그 의미", 기초조형학연구, 8(1), pp.543~551 (2007)
- 하주현, "목소리 표기 체계를 기반으로 한 감정 전달 : 키네틱 한글꼴 ‘보이스폰트’를 중심으로", 디자인융복합학회, 17(5), pp.33~48 (2018)
- 하주현, "화면 상의 글자 움직임에 대한 청각 장애인의 비언어적 정보 인식 : 목소리의 음성정보와 감정 정보를 기준으로", 디지털콘텐츠학회논문지, 21(2), pp.337~346 (2020)
- 하주현, "한글 키네틱 타이포그래피를 활용한 말소리의 음성 정보 전달-청각장애인을 중심으로", 디자인융복합연구, 21(4), pp.56~72 (2022)
- 홍승완, "키네틱 타이포그래피의 역사적 배경과 특징에 관한 연구", 자연과학연구, 11(1), pp.1~10 (2004)
- Barca, L., "Visual word recognition in deaf readers : lexicality is modulated by communication mode", PLoS One, 8(3), pp.e59080~ (2013)[DOI]
- Deaf adults and manipulative visual language: A Pilot Study of Deaf Connections and Glasgow Community Leaning Strategy Partnership, "Cole, L.", Deaf Connections, 1~17 (2009)
- Dasgupta, P., "Detection and analysis of human emotions through voice and speech pattern processing", International Journal of Computer Trends and Technology, 52(1), pp.1~3 (2017)[DOI]
- Lau, Newman M. L., "Enhancing Children’s Language Learning and Cognition Experience through Interactive Kinetic Typography", International Education Studies, 8(9), pp.36~45 (2015)[DOI]
- Mehrabian, A., "Nonverbal concomitants of perceived and intended persuasiveness", Journal of Personality and Social Psychology, 13(1), pp.37~58 (1969)[DOI]
- Nunnally, J. C., "Patterns of Word Association in the Deaf", Psychological Reports, 18(1), pp.87~92 (1966)[DOI]
- 최진기, "한권으로 정리하는 4차 산업혁명" (2019), 이지퍼블리싱
- 배희숙, "언어발달" (2021), 학지사
- 송성재, "한글 타이포그래피" (2013), 커뮤니케이션북스
- 원유홍, "타이포그래피 천일야화" (2015), 안그라픽스
- 이규식, "청각장애아 교육" (2011), 학지사
- 이필상, "청각장애 아동교육의 이해" (2020), 학지사
- 최현석, "인간의 모든 감각" (2009), 서해문집
- 한국농아인협회 국립국어원, "청각장애인의 언어 사용 실태 연구 : 언어 사용 실태와 수화에대한 청인의 인식" (2009)
- Crystal, D., "Prosodic Systems of Language Acquisition. University of Reading" (1970), Cambridge University Press
- Bola Ł, "Task-specific reorganization of the auditory cortex in deaf humans", Proceedings of the National Academy of Sciences, 114(4), pp.E600~E609 (2017)
- Drigas, A. S., "An e-learning management system for the deaf people", Proceedings of the 4th WSEAS International Conference on Artificial Intelligence, Knowledge Engineering Data Bases (AIKED'05), pp.1~5 (2005), World Scientific and Engineering Academy and Society (WSEAS)
- Kim, J. Y., "Visible Nuances: A Caption System to Visualize Paralinguistic Speech Cues for Deaf and Hard-of-Hearing Individuals", Proceedings of the 2023 CHI Conference on Human Factors in Computing Systems (CHI '23), pp.1~15 (2023), Association for Computing Machinery
- Lacerda Pataca, C., "Visualization of Speech Prosody and Emotion in Captions: Accessibility for Deaf and Hard-of-Hearing Users", Proceedings of the 2023 CHI Conference on Human Factors in Computing Systems (CHI '23), pp.1~15 (2023), Association for Computing Machinery
- Mori, J. L., "Seeing the music can animated lyrics provide access to the emotional content in music for people who are deaf or hard of hearing?", Proceedings of IEEE Toronto International Conference Science and Technology for Humanity, pp.951~956 (2009)
- Wölfel, M., "Voice driven type design", Proceedings of 8th International Conference on Speech Technology and Human-Computer Dialogue, pp.1~9 (2015)
- 이재명, "키네틱 타이포그래피의 자막방송 활용과 청각장애인의 시지각 확장성에 관한 연구", 석사, 프로덕션디자인학과 프로덕션디자인전공, pp.2013
- 강구룡, "말소리의 성질을 이용한 문자 캐릭터 개발", 석사, pp.2016
- 유정희, "독서 지도가 청각장애 중학생의 읽기·쓰기 능력에 미치는 효과", 석사, pp.2006
- Colasurdo, H. E., "The Meaning of Movement: Using Motion Design to Enrich Words for Deaf and Hard of Hearing Children", Master, pp.2021
- "How Deaf People Are Unable To Hear High-Pitched Sounds" (2022)[URL]
- "How Deaf People Experience Music" (2017)[URL]