“오늘 여러분께 흥미로운 성과를 보여드리고 싶습니다. 일레븐랩스(ElevenLabs)의 최신 모델 ‘v3’입니다.” 달튼 파칼라 일레븐랩스 GTM(Go-To-Market, 시장 진출) 담당자는 5일(현지시각) “v3는 일레븐랩스의 모든 제품에 적용될 미래를 위한 기반 모델”이라며 이같이 말했다. 뉴욕 맨해튼 루프톱에서 일레븐랩스 주관으로 진행된 ‘노변정담(fireside chat)’에서 차세대 텍스트 음성 변환(Text to Speech, TTS) 모델 ‘일레븐 v3 알파(Eleven v3 alpha)’를 공개한 것이다.
안녕하세요, 앞서가는 더밀크 구독자 여러분을 위한 AI 뉴스레터 [박원익의 AI인사이트]입니다. “나리 랩스(Nari Labs)의 ‘Dia(다이아)’는 제가 본 것 중 가장 표현력이 뛰어난 AI 음성을 구현했습니다.”에단 몰릭(Ethan Mollick) 와튼 스쿨 교수는 22일(현지시각) 소셜미디어를 통해 “충격적인 AI 모멘트(moment, 순간)였다”며 이같이 밝혔습니다. 실리콘밸리 VC 멘로벤처스의 AI 투자자 디디 다스 역시 “Dia가 텍스트(text, 문자) 스피치(speech, 음성) 변환을 해결했다”며 나리 랩스를 언급했습니다. TTS(text-to-speech) 변환 AI의 정점을 보여줬다는 극찬이었죠. 이런 반응, 평가가 나온 이유는 무엇일까요?
2024년 6월, 대만 타이페이에서 열린 컴퓨텍스에서 젠슨 황 엔비디아 CEO가 기조연설에 나섰다. 곧이어 놀라운 일이 벌어졌다. 영어로 시작된 연설이 유창한 중국어로 바뀌었고 6500여명의 관객들은 환호했다. 영상 속에서 젠슨 황 CEO는 중국어를 능숙하게 구사했다(그는 과거에 중국어에 서툴다고 고백한 바 있다.). 젠슨 황 CEO가 갑자기 중국어에 능통해진 걸까? 아니면 그의 목소리를 빼닮은 통역사가 있는걸까? 젠슨 황 CEO는 "영상에서 중국어를 유창하게 한 사람은 내가 아니고 '젠슨AI'"라고 설명했다. 젠슨 황 CEO의 중국어 연설은 폴란드 출신의 두 젊은 창업가가 만든 AI의 작품이었다. 일레븐랩스(ElevenLabs)라는 스타트업은 단 7분의 음성 샘플로 젠슨 황의 목소리를 완벽하게 복제했고 이를 중국어로 변환하는 데 성공했다. 일레븐랩스는 생성AI를 이용해 고품질의 맞춤형 음성 합성 솔루션을 제공한다. 이들의 사명은 모든 음성 언어로 사람들이 콘텐츠를 보편적으로 이용할 수 있도록 만드는 것이다. 일레븐랩스는 영화와 TV 프로그램부터 팟캐스트, 오디오북, 실시간 대화에 이르기까지 다양한 오디오 콘텐츠를 원어민의 음성 특성을 유지하며 모든 언어로 자유롭게 변환할 수 있길 꿈꾼다. 폴란드의 작은 도시에서 시작된 이 스타트업은 어떻게 2년 만에 실리콘 밸리의 거인들과 어깨를 나란히 하게 됐을까?
