메타, 소리 분리 AI 'SAM Audio' 공개: 영상 클릭과 텍스트로 원하는 소리 추출
메타가 영상 속 물체를 누끼 따듯 소리를 분리해내는 멀티모달 모델 'SAM Audio'를 발표했다. 복잡한 오디오 환경에서 텍스트 프롬프트나 영상 화면 클릭(예: 악기 선택), 시간 구간 지정을 통해 원하는 소리만 정확히 분리할 수 있다. Segment Anything Playground에서 바로 체험 가능하다.
Segment Anything Playground
메타, SAM 3 및 SAM 3D 공개: 텍스트로 객체 분할하고 단일 이미지 3D 복원
메타가 비전 모델 SAM 3와 SAM 3D를 공개했습니다. SAM 3는 자연어 프롬프트를 통해 이미지와 영상 속 객체를 정밀하게 감지하고 추적하며, SAM 3D는 평면 2D 사진 속 인물과 사물을 사실적인 3D로 재구성합니다. 두 모델 모두 신규 플레이그라운드에서 체험 가능하며, SAM 3의 가중치와 코드는 오픈소스로 공개되었습니다.