엔비디아 브로드캐스트 1.4 출시: 딴 곳 봐도 카메라 쳐다보게 AI 시선 보정

화상 회의를 하거나 발표 영상을 찍을 때 슬쩍 대본을 훔쳐보면, 카메라 너머의 상대방은 시선이 빗나갔다는 사실을 단박에 알아챕니다.

Nvidia가 1월 12일 배포한 방송용 유틸리티 소프트웨어 Nvidia Broadcast 1.4 버전은 이 문제를 다소 충격적인 방식으로 해결했습니다. AI를 활용해 실제 시선이 어디를 향하든 상관없이 화면 속 눈동자를 실시간으로 합성해 카메라를 똑바로 응시하도록 만드는 '아이 콘택트(Eye Contact)' 기능을 추가한 것입니다.

카메라만 바라보는 인공 눈동자

이번 기능은 대본이나 메모를 읽으며 영상을 녹화해야 하는 크리에이터들을 겨냥해 베타 버전으로 공개되었습니다.

원리는 사용자의 실제 눈 색상과 조명 환경에 맞춰 AI가 시뮬레이션된 가상의 눈동자를 생성한 뒤 렌더링하는 방식입니다. 시선을 너무 멀리 돌려 얼굴 각도가 크게 틀어질 때를 대비해, 자동으로 합성을 끄고 원래 눈으로 돌아오는 연결 해제 장치도 들어갔습니다.

하지만 실제 테스트 결과에서는 불쾌한 골짜기를 완전히 피하지 못했습니다. 가만히 있을 때는 소름 돋을 만큼 자연스럽지만, 시선이 흔들리는 순간 눈동자가 초자연적인 속도로 순간이동하듯 튀거나 화면 깜빡임이 생기는 현상이 보고되었습니다. Nvidia 역시 수백만 가지의 눈동자 색상과 조명 조합이 존재하는 만큼 개선이 필요하다며, 사용자들에게 테스트 영상을 보내달라고 요청하고 나섰습니다.

Broadcast 1.4 업데이트에는 이 기능 외에도 인스타그램 스타일의 비네트 효과가 추가되었고, 가상 배경 흐림 및 제거 기능의 품질도 개선되었습니다. RTX 그래픽 카드를 장착한 PC 이용자라면 누구나 무료로 내려받아 쓸 수 있습니다.

화면 왜곡을 넘어 딥페이크 영역으로

시선 보정 기능 자체가 완전히 새로운 발상은 아닙니다.

Apple은 이미 2018년 FaceTime에 주의 집중 보정 기능을 도입해 현재 iOS 설정에 아이 콘택트라는 이름으로 유지하고 있습니다. Microsoft 역시 전용 NPU가 탑재된 Windows 11 기기에서 시선 맞춤 기능을 제공해 왔습니다.

그러나 기존 방식이 화면과 웹캠 렌즈 사이의 각도 차이를 소프트웨어적으로 살짝 비틀어 자연스럽게 맞추는 수준이었다면, Nvidia의 방식은 훨씬 노골적입니다. 게임 화면의 프레임을 통째로 생성해 끼워 넣는 DLSS 3처럼, 딥러닝 기술을 이용해 얼굴 위에 새로운 눈동자를 아예 새로 그려 넣는 식입니다.

왜 중요한가

혼자 영상을 기획하고 촬영하는 1인 크리에이터에게 이 기능은 수십만 원짜리 프롬프터 장비를 대체할 수 있는 매력적인 도구입니다. 화면 한구석에 띄워둔 대본을 읽으면서도 구독자와 완벽한 시선 교환을 연출할 수 있어, RTX 카드를 보유하고 있다면 충분히 테스트해 볼 가치가 있습니다. 다만 회사 화상 회의에서 딴짓을 숨기려는 용도로는 아직 쓰지 않는 편이 낫습니다. 알고리즘이 오작동해 눈동자가 튀는 순간, 딴짓을 들키는 것보다 훨씬 어색한 침묵이 흐를 테니까요.

산업적 관점에서 Nvidia의 행보는 영리합니다. 게이밍용으로 팔리던 고성능 하드웨어를 영상 창작자의 필수 업무 툴로 묶어둠으로써 경쟁사들이 쉽게 넘보지 못할 소프트웨어 락인 효과를 만들었습니다.

문제는 실시간 딥페이크가 일상 도구로 스며들면서 생기는 심리적 피로감입니다. 상대방이 정말 나를 보고 있는지, 아니면 AI가 그린 가짜 시선인지 의심해야 하는 비대면 소통 환경은 기술의 편리함 뒤에 남겨진 또 다른 숙제입니다.