타버스, 상호작용 모델 '그리핀' 공개…영상통화 시험서 48%가 사람으로 착각
AI 스타트업 타버스(Tavus)가 실시간 영상 대화 모델 '그리핀(Griffin)'을 발표했다. 시각과 음성을 동시 처리하는 전이중 방식을 통해 대화 중 자연스럽게 고개를 끄덕이거나 끼어들 수 있으며, 통화 테스트에서 48%가 실제 사람으로 착각했다. 현재 일부 초기 테스터에게 프리뷰로 제공된다.
AI 스타트업 타버스(Tavus)가 실시간 영상 대화 모델 '그리핀(Griffin)'을 발표했다. 시각과 음성을 동시 처리하는 전이중 방식을 통해 대화 중 자연스럽게 고개를 끄덕이거나 끼어들 수 있으며, 통화 테스트에서 48%가 실제 사람으로 착각했다. 현재 일부 초기 테스터에게 프리뷰로 제공된다.
Tavus가 실시간 인간 렌더링 모델 Phoenix-4.5를 발표했습니다. 얼굴만 오려 붙이던 기존 방식 대신 상반신 전체를 한 번에 생성해 음성-영상 지연을 134ms로 줄였으며, 단 한 장의 이미지로 1분 만에 제로샷 미리보기를 생성합니다.
타버스는 코딩 없이 인터랙티브 AI 비디오 컴패니언을 제작할 수 있는 'PAL 메이커'를 출시했다. 사용자가 AI 에이전트에게 원하는 기능을 말하면 얼굴, 음성, 기억력, 안전장치를 자동으로 구성해 준다. 레이븐-1 등 자체 모델을 기반으로 구동되며, 아마존과 메이요 클리닉 등에서 채용 및 수술 후 환자 관리에 활용되고 있다.
타부스(Tavus)가 대화 상대의 어조와 표정을 실시간으로 파악하는 멀티모달 인식 시스템 '레이븐-1(Raven-1)'을 공개했다. 감정을 단순 분류하지 않고 자연어로 묘사하며, 음성과 영상을 300ms 이내 지연 시간으로 처리한다. OpenAI 호환 도구 호출도 지원해 텍스트에만 의존하던 대화형 AI가 뉘앙스와 맥락을 정확히 읽어낼 수 있게 돕는다.
타부스(Tavus)가 실시간 인간 렌더링 모델 '피닉스-4(Phoenix-4)'를 공개했다. 기존의 반복 재생 영상 기반 아바타와 달리, 밀리초 단위 지연 시간으로 대화 맥락에 맞는 감정 표정과 경청 반응, 두경부 움직임을 실시간 생성한다.
Tavus는 fal 플랫폼을 통해 새로운 립싱크 모델 'Hummingbird-0'의 연구 프리뷰를 공개했다. 회사 측은 오픈소스와 상용 모델을 통틀어 자체 테스트한 제로샷 립싱크 모델 중 가장 뛰어난 정확도를 보였다고 설명했다.
타버스가 대화형 비디오 AI 모델 피닉스-3, 레이븐-0, 스패로우-0을 발표하고 API를 공개했다. 미세 표정 동기화, 실시간 시각 인지, 대화 턴 타이밍 제어를 결합해 대화 지연을 줄이고 자연스러운 디지털 휴먼 상호작용을 지원한다.
타버스가 보고 듣고 말하는 디지털 트윈을 구축할 수 있는 개발자용 대화형 비디오 인터페이스를 공개했습니다. 1초 미만의 초저지연을 지원하며, 화이트라벨링은 물론 LLM과 음성 합성 모듈을 자유롭게 커스텀할 수 있어 서비스에 실시간 AI 아바타를 쉽게 붙일 수 있습니다.