음성 상호작용에서 감정을 이해하고 표현하는 오디오 LLM을 구축하는 오디오 AI 스타트업이다.

오디오는 AGI의 사회정서적 계층이다. 억양, 어조, 악센트를 읽고 진정한 감정으로 응답하는 오디오 LLM은 텍스트 전용 어시스턴트가 할 수 없는 일을 할 수 있다.

알렉시스 코노는 3년 전 페이스북 연구원으로서 자신의 AI 영웅에게 이메일을 보낸 후 OpenAI에 합류했으며, ChatGPT 음성 기능을 개발한 연구팀을 이끌었다. 이 기능은 한 목소리가 스칼렛 요한슨의 목소리와 닮았다는 이유로 좋지 않은 헤드라인을 장식하기도 했다.

코노는 2024년 9월 OpenAI를 떠나 '@OpenAI에서 #Her를 구축하는 놀라운 여정을 마치고, 새 회사를 시작하기로 결정했습니다'라고 게시한 뒤, 엔지니어에서 비즈니스 전략가로 전향한 코랄리 르메트르와 함께 WaveForms를 설립했다.

WaveForms는 2024년 12월 9일 a16z로부터 4,000만 달러의 시드 투자를 받아 스텔스에서 나왔으며, 감정적 미묘함을 포착하고 대화 맥락을 이해하며 그에 맞게 응답하는 오디오 LLM을 약속했다.

음성 감정은 대형 연구소들이 벌이고 있는 텍스트와 추론 경쟁과는 별개의 축이다.

이 팀의 ChatGPT 음성 작업은 프로덕션 오디오 AI에서 직접적이고 모방하기 어려운 경험이다.

a16z의 4,000만 달러 시드는 감정 오디오가 기능이 아닌 하나의 카테고리라는 확신을 보여준다.

AI 음성에 대한 소비자의 친숙함은 — 공정하든 아니든 — 감정 오디오 제품에 즉각적인 맥락을 제공한다.

일반적인 경쟁 속의 전문 영역은 그 자체로 하나의 회사가 될 수 있다. 거대 기업들이 AGI 전반을 최적화하고 있다면, 음성의 감정 계층은 아직 점유되지 않은 채로 남아 있다.

2024년 12월 9일 출범 시점 기준으로 WaveForms는 감정적 이해를 위한 오디오 LLM을 구축하고 있었으며, 아직 공개적으로 출시된 제품은 없었다.

근거 확인하기

출처

  1. Ilya Sutskever hired him to create ChatGPT's voice at OpenAI. Now, his startup aims to unlock AI's emotional intelligence Fortune · fortune.com ·