출품자 : 안지현,강예미,이수빈
지도교수 :
학교명 : 홍익대
- 발명의 목적
본 발명은 청각장애인용 언어재활시스템 및 방법으로, 청각장애인의 맞춤 학습서비스 연계 방식을 위하여 현대적 의학기술을 배경으로 계획하였다. 그 배경은 다음과 같다. 청각장애인들은 대부분 소리로 대화하는 구화를 사용할 수 있는데, 이는 최근 의학기술의 발달로 태어나고 2개월 정도 남짓의 아이의 귀 내부에 장치를 삽입해 아이들의 청각적인 발달을 촉진시키는 ‘인공와우수술’이 개발되었기 때문이다. 이 수술은 노인 난청 환자에게도 사용할 수 있을 정도로 사용 나이 범위가 넓기에, 아이가 아닌 성인에게도 장려된다. 위와 같은 부분에 초점을 두어, 수화 중심이 아닌 소리에 중점을 둔 청각재활치료의 관점에서 발명을 진행하였다. 세부적으로, 본 발명은 컴퓨터, 디지털 사이니지를 포함한 전자기기를 이용하여 학습자에게 소리의 인식을 도와주는 단체 치료와 이의 결과를 전송 받은 로봇형 전자기기가 학습자에게 1:1로 교육을 해주는 개인치료, 상기의 학습 달성정도에 따라 학습자의 가정 학습 치료를 제공함으로써, 학습자의 수준에 따라 유형별 학습 자료를 제공하고 이 데이터를 다시 교육자에게 제공하는 사용자 단말기를 동반, 효과적으로 청각치료를 진행, 관리할 수 있는 청각 재활 치료 연계 서비스 제공 방법에 관한 것이다.
-발명의 핵심내용
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 각각의 대상자의 청력 발달과정에 따라 디지털 사이니지를 이용한 제 1 언어재활용 컨텐츠와 로봇형 전자기기를 이용한 제 2언어 재활용 컨텐츠를 통해 대상자들의 언어 재활에 역효과가 일어나지 않도록 함으로써 대상자들에게 필요한 체계적인 언어 재활을 조력할 수 있도록 한 청각장애인용 언어재활시스템 및 방법을 제공하는 과제를 기초로 한다. 또한 모든 학습 과정에서 대상자의 음성, 행동, 표정 등의 반응정보를 저장하여 서버로 송신해 상기 재활 치료구동데이터를 분석, 데이터베이스화 하고, 이를 제 3 언어재활용 컨텐츠가 이루어지는 어플리케이션으로 전송하여 아이들의 현재 상태나, 고유 성향파악, 학습 시 문제점등에 대한 이용정보 데이터를 제공 하고, 이를 서버와 네트워크를 통해 송신해 교육자에게 전달, 피드백 함으로써 교육자와 수용자의 연계를 최대로 하여 1:1 케어 서비스를 제공할 수 있도록 한 청각장애인용 언어재활시스템 및 방법을 제공하는 것이 핵심이다. 아래는 시스템 플랫폼의 상세 설명이다. [디지털 사이니지] 사용자의 주요 공간에 사이니지 기술을 접목시켜 청각장애인들의 청각재활 교육을 체험 형식으로 돕는다. 이 교육은 단체 활동으로 진행되어, 청각적 자극을 통한 청각 치료와 더불어 청각장애인의 사회성 증진에도 도움을 줄 것이다. 디지털사이니지의 디스플레이에서 청각장애인들은 오디오를 통해 나오는 음성을 듣고 올바른 소리를 파악하여 이를 터치하며, 화면을 다 터치하게 되면 이야기의 한 장면이 완성된다. 장면 내 등장인물들은 간단한 대사를 하고 청각장애인들은 대화를 따라 하며 단문 교육을 실시한다. 이러한 장면은 재활과정 내 구화 발달을 위해 구성된 책과 연계가 되어 이후 책을 통한 장문 교육에 청각장애인의 흥미를 유발하고 교육적 효과를 극대화할 것이다. *디지털 사이니지란 디지털 정보 디스플레이를 이용한 옥외광고로, 관제센터에서 통신망을 통해 광고 내용을 제어할 수 있는 광고판을 말한다. 지하철 역사, 버스정류장, 아파트 엘리베이터, 은행 등 유동인구가 많은 곳에서 흔히 볼 수 있다. [로봇형 전자기기] 청각장애인들의 1:1케어를 해줄 수 있는 무인로봇으로 디지털 사이니지에서 청력발달을 촉진하고 단문 교육을 하였다면 이를 기준으로 장문 교육과 더불어 구화 교육을 위한 플랫폼이다. 청각장애인들이 이야기에서 배울 단어를 반복적으로 정확히 발음을 해주고 사용자가 따라 하는 소리를 음성인식, 녹음하여 목표 달성 여부를 파악, 잘 발음했을 경우 사용자에게 이야기 등의 흥미로운 콘텐츠를 읽어주며 그를 활용한 문장이나 단어의 교육을 시작하고 발음이 잘 안되었을 경우 교육 이후 사용자가 수행하지 못한 단어와 문장들을 빅데이터화 하여 사용자 단말기로 전송, 청각장애인들이 재활센터 외의 공간에서 효과적으로 복습을 할 수 있도록 돕는다. [사용자 단말기 - 어플리케이션 로보(Lovo)] 센터 내부의 로봇형 전자기기, 그리고 그와 연동된 사용자 단말기로 센터의 재활 교육 중재 내용을 연계하는데 어려움을 겪었던 기존의 문제를 해결하는데 도움을 주고자 고안되었다. 청각장애인과 교육기간 내 선생님 간 소통을 주목적으로 하루하루 수업 활동 동안 로봇이 데이터화하여 전송하는 청각장애인의 중재 정보와 교육 진도를 확인할 수 있을 뿐만 아니라 사용자의 성향분석과 그에 따른 중재 방법, 후 교육 프로그램, 사용자 케어 기능 등을 동반한다. 사용자는 이 어플리케이션을 통해 센터 내 중재 이후 필요한 후 학습을 할 수 있고, 이를 선생님 등의 학습 조력자에게 보내 즉각적인 학습 피드백을 받을 수 있다. 선생님 또한 어플리케이션의 기능을 통해 중재 내용을 확인, 부족한 내용을 다음 수업 시간에 반영하여 효과적으로 사용자를 교육하고 Lovo가 데이터화한 사용자의 교육 상태를 확인하며 다음 교육의 커리큘럼에 반영할 수 있다.