딥브레인AI, 사진·영상만으로 AI 최경주 구현했다

SKT 오픈 2023 대회에 해설자로 등장한
AI 최경주 구현
"대상의 직접 스튜디오 방문 등 없이도 AI 인간 구현 가능해져"

AI 최경주. 딥브레인AI 제공

[파이낸셜뉴스] 인공지능(AI) 전문 기업 딥브레인AI가 'AI 최경주'를 기존 사진, 영상만으로 구현했다.

딥브레인AI는 SK텔레콤이 주최하는 SKT 오픈 2023 대회의 'AI 최경주 제작 프로젝트'에 참여해 최경주 선수를 AI 휴먼으로 구현했다고 30일 밝혔다.

딥브레인AI는 AI 최경주 구현에 가상인간 기술을 접목했다. 여기에 SKT의 음성합성 기술이 함께 접목됐다.

딥브레인AI는 최경주 선수의 사진과 인터뷰 영상만으로 얼굴 데이터를 추출, 딥러닝 학습을 진행시켰다. 이후 별도 촬영한 대역 모델에 영상합성 기술로 립싱크 학습을 접목, SKT의 음성합성 TTS(Text to Speech) 엔진을 결합해 최경주 선수의 목소리를 완성했다.

통상적으로 가상인간 구현에 대상 인물의 별도 스튜디오 방문 및 촬영이 요구되는데, 이와 달리 기존 사진과 영상만으로 AI 인간을 구현했다는 설명이다.

AI 최경주는 지난 18일부터 나흘간 열린 KPGA 코리안투어 SKT 오픈 2023에서 해설위원 등으로 등장했다. 딥브레인AI 관계자는 "발화 시 자연스러운 입모양과 제스처를 선보이며 화제를 모았다"며 "AI 휴먼 제작 시 통상적으로 진행하는 500문장의 학습 외에 골프 중계 멘트 립싱크를 위해 골프 용어 학습을 추가적으로 진행했다"고 설명했다.

딥브레인AI는 향후에도 AI 최경주 사례와 같이 영상과 음성만으로 원하는 대상을 AI 휴먼으로 구성할 수 있도록 선택지를 추가할 계획이다. 앞서 딥브레인AI가 제작한 'AI 윤석열', 'AI 김주하' 등은 모두 직접 촬영을 통해 구현한 바 있다.

장세영 딥브레인AI 대표는 "최경주 선수의 사진과 영상을 기반으로 딥러닝 과정을 거쳐 모델과 똑 닮은 AI 휴먼을 구현했다"며 "이제는 스튜디오 촬영 외 또 다른 선택지를 제공해 모델의 시간과 비용을 절약할 수 있어 보다 합리적으로 AI 휴먼 제작이 가능하다"고 말했다.

[e-mail] 김준혁 기자