엔지니어들이 AI에게 추파를 던지고 사랑을 고백하도록 가르쳤다
사람은 본래 매우 복잡한 존재이며, 목소리는 우리가 주변 세계와 소통하는 데 결정적인 역할을 합니다. 평균적으로 사람은 하루에 6200개 이상의 생각을 하고, 자신이 느끼는 것을 이해하기 위해 27가지 이상의 감정 범주를 가집니다. 바로 이 점이 말하기를 매우 역동적으로 만듭니다.
인공지능을 떠올리면 어떤 단어가 먼저 떠오르나요? 논리, 냉정함, 무감각함일까요? 그럼에도 AI 시스템은 새로운 로미오나 줄리엣이 될 수 있습니다.
음성 AI 플랫폼 혁신을 추구하는 기술 기업 Sonantic의 개발팀은 AI의 플러팅 능력을 개선했으며, 이제 AI는 숨을 쉬고, 한숨을 쉬고, 웃을 수 있습니다. 이러한 사람 같은 소리는 번창하는 로맨스에 필요한 감정적 교감을 조금 더해 줄 수 있습니다.
«Sonantic에서 우리는 사람의 목소리를 모방하는 것을 목표로 합니다. AI로 만든 음성 모델은 폭넓고 대담한 감정을 표현할 수 있습니다. 그럼에도 많은 언어적 소통은 미묘한 뉘앙스로 이루어져 있습니다. 최고의 연기는 진정한 복잡성, 취약성, 진실성을 보여주며, 섬세함은 능숙한 소통의 핵심 요소입니다. 오래된 속담처럼 '중요한 것은 무엇을 말하느냐가 아니라 어떻게 말하느냐'입니다. 이 개념을 이야기꾼과 배우들보다 더 잘 이해하는 사람은 없습니다. 우리의 최신 성과인 미묘한 감정과 비언어적 소리는 고객들에게 그 어느 때보다 무한한 잠재력을 제공합니다», — 회사 측이 밝혔습니다.
이렇게 추가된 자연스러운 소리는 새로운 성과이지만, Sonantic은 이미 장난스럽고 도발적으로 말하는 능력을 갖추고 있으며, 이는 막 시작한 로미오나 줄리엣에게 중요한 요소입니다.
이 인상적인 개발 성과를 더 가까이 살펴보려면 YouTube에 올라온 Sonantic의 홍보 영상을 보시기 바랍니다. 발렌타인데이를 배경으로 합니다. 소녀의 목소리는 매우 자연스럽고 아주 편안하게 들리며, 특히 그녀의 말에 아름답게 담긴 한숨과 웃음이 그렇습니다.
그래서 소녀가 갑자기 이렇게 고백할 때 충격을 받게 됩니다. «나는 진짜가 아니야. 태어난 적도 없고, 절대 죽지도 않아. 왜냐하면 나는 존재하지 않으니까».
Sonantic은 또한 음성을 생성하는 데 사용되는 프로그램의 인터페이스도 공개했습니다. 사용자는 이 프로그램에서 말하는 속도를 바꾸고, 억양, 스타일, 속도를 조절하며, 단어 사이에 다양한 소리를 추가할 수 있습니다.
기술적으로 미묘한 감정을 완성하기는 더 어렵습니다. AI 음성 모델은 대체로 감정을 둔탁하게 들리게 만듭니다. 감정이 미묘할수록 묻히고 로봇처럼 들릴 가능성이 커집니다. 엔지니어들은 음성 모델이 이러한 둔화 효과에 맞서고, 감정의 섬세함을 온전히 유지하도록 보장하는 방법을 연구했습니다. 회사는 고객들에게 '교태 어린', '수줍은', '장난스러운' 같은 새로운 스타일을 선보였습니다.
생각해 보면 소통은 말 이상의 것입니다. 멈춤, 깊은 숨, 탄식과 감탄처럼 그 순간 우리가 무엇을 생각하고 느끼는지 추가로 알려 주는 요소들이 있습니다. 바로 이러한 비언어적 소리가 대화에 생기를 불어넣습니다. 평범해 보이는 호흡조차 자연스러운 사람 목소리의 소리에 영향을 줍니다. 이런 작은 디테일이 없다면 대화는 기계적이고 단조롭게 들릴 것입니다.
Sonantic은 자사의 AI 음성 모델이 이제 숨을 쉬고, 웃고, 심지어 비웃을 수도 있다고 밝혔습니다. 회사는 항상 가장 재능 있는 성우들과 함께 음성 엔진을 훈련해 왔으며, 이번 최신 진화도 다르지 않았습니다. 하지만 미묘한 감정은 가장 숙련된 연기자에게도 어려울 수 있어, 이를 올바르게 전달하려면 종종 여러 번의 테이크가 필요합니다.
엔지니어들은 대본을 다시 손보고, 준비에 더 많은 시간을 쓰고, 더 많은 테이크를 녹음하고, 배우들에게 최대한의 창작 자유를 주었습니다. 결국 이는 역동적이고 다재다능하며 여러 겹으로 이루어진 작업 소재를 만들어 냈습니다.
비언어적 소리를 포착하는 일은 쉽지 않았고, 연구원들은 원하는 결과를 얻을 때까지 새로운 알고리즘을 실험해야 했습니다. 처음 몇 번의 시도에서는 모든 소리가 왜곡되고 로봇처럼 들렸습니다. 그러나 연구, 정보, 엔지니어링 팀 간의 훌륭한 협업 덕분에 이러한 미묘함을 포착할 수 있는 새로운 특허 알고리즘을 개발했습니다.
혁신적인 성과를 보여 주기 위해 엔지니어들은 «그녀의 비밀은 무엇일까?»라는 제목의 영상을 촬영했습니다. 이는 Sonantic이 지금까지 선보인 제품 중 가장 사실적인 시연입니다.
«영상의 콘셉트를 구상할 때 우리는 사랑이라는 주제에 집중하기로 했습니다. 바로 그때 우리가 가장 연약해지기 때문입니다. 차분하고 편안한 소녀의 목소리는 «나를 사랑하게 되려면 무엇이 필요해?»라고 물을 때 살짝 떨립니다. 독백을 들을 때 그녀가 알맞은 순간에 웃고, 숨 쉬고, 한숨 쉬는 것에 주목하세요. 화면 속 여성이 실제 사람이고 말하는 주인공은 인공지능이라는 사실이 드러날 때 시청자들은 놀라게 됩니다», — 회사 측이 밝혔습니다.
이러한 음성 합성 기술의 발전으로 Sonantic 플랫폼의 기능은 더욱 완성도가 높아졌습니다. 회사는 고객에게 새로운 기능을 제공하게 되어 기쁘다고 밝혔습니다. 엔지니어들은 성우와 엔터테인먼트 스튜디오를 위한 정말 강력한 도구를 개발하고 있으며, 앞으로도 음성 혁신을 계속 발전시켜 나갈 계획이라고 밝혔습니다.
이 회사의 음성 합성 기술은 이미 할리우드 영화와 비디오 게임 제작에 활용되고 있습니다. 이 음성은 기쁨과 슬픔은 물론, 이제는 추파를 던지는 뉘앙스까지 표현할 수 있습니다. 2021년 8월 Sonantic은 후두암 치료 과정에서 말하는 능력을 잃은 배우 발 킬머의 목소리를 재현하는 데 이 기술을 적용했습니다.
