IT/과학
3위
KAIST, 입모양과 문맥 읽는 AI 개발…단어 오류율 19.4% 기록
뉴스보이
2026.11.15. 12:01
뉴스보이
2026.11.15. 12:01
간단 요약
간단 요약
KAIST 연구팀이 확산 대형 언어 모델을 활용해 입술 움직임만으로 말을 정확히 인식하는 기술을 개발했습니다.
확실한 단어부터 인식하는 방식을 도입해 단어 오류율 19.4%라는 높은 성능을 입증했습니다.
이 기사는 8개 언론사의 보도를 교차 검증하여 작성되었습니다.
이 기사는 8개 언론사의 보도를 교차 검증하여 작성되었습니다.
KAIST 전기및전자공학부 노용만 교수 연구팀이 입술 움직임만으로 말을 문자로 변환하는 ‘시각적 음성 인식(VSR)’ 기술의 정확도를 획기적으로 높였습니다. 연구팀은 문장의 빈칸을 반복해서 채워나가는 ‘확산 대형 언어 모델(DLLM)’을 활용해, 입 모양이 모호한 부분을 앞뒤 문맥으로 해독하는 방식을 택했습니다.
기존 기술이 처음부터 순서대로 단어를 읽어 내려갔다면, 이번 연구는 확실한 단어부터 인식하는 방식을 도입했습니다. 연구팀은 433시간 분량의 입 모양 영상 데이터셋 ‘LRS3’를 학습한 결과, 단어 오류율 19.4%를 기록하며 기술적 완성도를 입증했습니다.
이번 성과는 자연어 처리 분야 국제학술대회인 ‘EMNLP 2026’에서 우수논문상을 받으며 학계의 주목을 받았습니다. 연구팀은 향후 AI 모델을 경량화해 기기 자체에서 실시간으로 작동하는 온디바이스 AI를 구현하고, 소음이 심한 산업 현장이나 은밀한 작전이 필요한 국방 분야에 적용할 계획입니다.
