알리바바, 실시간 통역 AI 'Qwen3.8-LiveTranslate' 공개…지연시간 2.3초
알리바바가 차세대 실시간 동시통역 모델 'Qwen3.8-LiveTranslate'를 공개했다. 60개 언어를 지원하며 글자당 지연시간을 2.3초로 단축했다. 화자 분리와 원본 음색 복제 기능을 탑재해 발화자의 목소리로 번역을 출력하며, 현재 API와 온라인 데모가 열려 있다.
알리바바가 차세대 실시간 동시통역 모델 'Qwen3.8-LiveTranslate'를 공개했다. 60개 언어를 지원하며 글자당 지연시간을 2.3초로 단축했다. 화자 분리와 원본 음색 복제 기능을 탑재해 발화자의 목소리로 번역을 출력하며, 현재 API와 온라인 데모가 열려 있다.
알리바바 Wan 팀이 음악에 맞춰 롱폼 댄스 비디오를 생성하는 'Wan-Dancer-14B'를 공개했다. 기존 방식처럼 참조 동작 영상이 필요 없이 음악과 이미지 한 장만으로 박자에 맞춘 분 단위 춤을 생성한다. 힙합, 클래식 무용 등 다양한 스타일에 대응한다.
알리바바 연구팀이 캐릭터 음성과 영상을 실시간으로 동시 생성하는 프레임워크 StreamChar를 공개했습니다. 긴 호흡의 오케스트레이션과 짧은 구간의 노이즈 제거를 분리해 음성 불일치와 외형 왜곡을 억제하며, 단일 H100 GPU에서 실시간 스트리밍 구동을 달성했습니다.
알리바바는 확산 모델의 생성 과정을 4스텝으로 줄여주는 가속 기술 'CDM'을 발표했다. 20~50단계가 걸리던 추론을 약 5배 단축하면서도, 기존 DMD2의 플라스틱 같은 뭉개짐 없이 선명한 디테일을 유지한다. 현재 SD3와 LongCat에 적용돼 일반 GPU에서도 준실시간 생성이 가능하다.