수어 아바타 기술 개발

그동안 소리를 듣지 못하는 청각장애인은 TV 방송 내용을 이해하기 어려워 아쉬움이 많았다. 최근 코로나19와 관련해 많은 방역 관련 정보가 발표되고 있지만, 장애인들에게는 정보의 전달이 충분히 이뤄지지 못해 적절히 대응하기 어렵다는 지적이 있었다. 청각장애인들에게 정보를 전달하기 위해서는 수어 통역이 필요한데 국내 연구진이 각종 방송 콘텐츠를 수어로 알기 쉽게 표현해 주는 아바타 기술을 개발하고 있다.

아바타 수어 기술은 한국어 원고를 ‘딥러닝’ 번역 엔진을 통해 수어 원고로 변환한 뒤 아바타 애니메이션의 수어 동작으로 구현하는 기술이다. 이는 스마트폰에서 사용되는 자동 통번역 앱의 원리와 비슷하다. 기계 학습 기술을 탑재해 1500여개 단어를 수어로 자동 번역하고, 각 단어를 연결해 문장으로 만들어 수어로 영상화했다.

문자를 수어로 번역해 영상으로 표현하는 수어 아바타 기술에는 수어의 중요 요소 중 하나인 얼굴의 표정 변화나 입 모양 등 감정을 표현하는 손 이외의 신호 등을 추가로 연구해 반영하고 10만개 규모의 문장 데이터를 추가적으로 구축할 계획이다. 연구진은 한국수어방송, 상황해설방송, 감정표현 자막방송 등 장애인방송의 품질 제고를 위한 기술을 연구 중이며 향후 방송뿐 아니라 미디어 콘텐츠 전반을 대상으로 장애인들의 접근권을 확대하기 위한 기술개발을 목표로 하고 있다. 장애인을 위한 따뜻한 과학기술이 날개를 달고 훨훨 비상하길 기대한다.

안충현 한국전자통신연구원 책임연구원