목소리에 실린 감정까지 실시간 통역…딥엘, 음성AI '오러' 공개
한국어 등 8개 언어 초기 지원…텍스트 받아쓰기 없이 음성 자체 변환
비언어적 표현방식을 통역 음성에 그대로 반영
[파이낸셜뉴스]언어 인공지능(AI) 기업 딥엘(DeepL)이 목소리와 감정, 어조까지 실시간으로 통역해주는 모델을 선보였다.
딥엘은 실시간 통역 소프트웨어 '딥엘 보이스'에 이 같은 기능을 갖춘 새 AI 모델 '오러'(Aure)를 적용한다고 11일(현지시간) 밝혔다.
오러는 상대방 음성을 실시간으로 분석한다. 이를 통해 오러는 대화 진행 상황에 따라 변화하는 억양이나 강세, 감정, 발화 속도 등 비언어적 표현방식을 통역 음성에 그대로 반영하는 등 소통을 한 단계 고도화했다고 회사 측은 설명했다. 기존 딥엘의 음성 통역 기술이 고정된 음성 샘플만 바탕으로 화자의 목소리 특성을 인식했었다.
딥엘은 이를 구현하기 위해 화자의 음성 특성과 운율, 발화 내용 등을 분리해 학습하는 기법과 강화학습 기법을 결합했다.
또 목소리를 텍스트로 받아써서 번역하고 이를 다시 음성으로 바꾸는 방식 대신 오디오 자체를 직접 변환하는 방식을 적용했다.
배경 소음과 울림을 걷어내고 다른 언어로 재현할 때 발생할 수 있는 억양 왜곡도 최소화했다.
딥엘은 음성 통역 기능을 사용한 회의 녹취록이나 번역 내용을 시스템에 저장하지 않고, 세션이 종료되면 데이터를 메모리에서 삭제하는 등 보안이 중요한 기업 내에서 사용하는 데도 문제가 없도록 했다.
야렉 쿠틸로브스키 최고경영자(CEO)는 새 모델 오러에 대해 연합뉴스와의 인터뷰에서 "언어가 바뀌더라도 말하는 사람의 고유한 특성은 충실히 유지되는 단계로 나아가는 중요한 진전"이라고 강조했다. 또 "목소리는 정체성을 이루는 핵심 요소로, 감정을 표현하고 관계를 맺는 데 중요한 역할을 한다"고 말했다.
오러는 출시 초기 한국어를 비롯해 영어, 독일어, 스페인어, 프랑스어, 이탈리아어, 일본어, 포르투갈어 등 8개 언어를 지원한다. 이후 지원 대상 언어를 확대해나갈 방침이다.
[email protected] 이석우 국제전문기자
