윈도우 11에 온디바이스 에이전트 도입: 설정 변경부터 사진 조명 조절까지

원하는 윈도우 설정을 바꾸려고 제어판과 설정 창 구석구석을 헤매던 경험은 누구에게나 있습니다. 마이크로소프트가 이 귀찮은 과정을 온디바이스 AI 에이전트에게 맡기기로 했습니다.

마이크로소프트는 차세대 서피스 기기 공개와 함께 윈도우 11 및 코파일럿+ PC를 위한 새로운 기능들을 대거 선보였습니다.

설정 속으로 들어온 AI 에이전트와 기본 앱의 진화

가장 눈에 띄는 변화는 설정 앱에 온디바이스 AI 기반 에이전트가 도입된 점입니다.

사용자가 마우스 포인터가 너무 작다거나 음성으로 PC를 제어하고 싶다는 식으로 자연스럽게 설명하면, 에이전트가 해결 방법을 제시합니다. 사용자가 승인하면 사용자를 대신해 설정을 직접 변경해 주기도 합니다.

이 기능은 스냅드래곤 기반 코파일럿+ PC의 윈도우 인사이더에게 영어로 먼저 제공되며, 인텔과 AMD 기기에는 추후 적용될 예정입니다.

기본 내장 앱들도 똑똑해졌습니다. 캡처 도구에는 화면에서 가장 두드러진 콘텐츠 영역을 자동으로 인식해 여백 없이 맞춰주는 퍼펙트 스크린샷과 함께 스크린 색상 추출기, 텍스트 추출 기능이 더해졌습니다.

그림판에는 텍스트 프롬프트로 스티커를 바로 만드는 기능과 캔버스 내 개체를 자동으로 인식해 이동하거나 채울 수 있는 객체 선택 도구가 들어갑니다. 사진 앱에는 가상 광원을 최대 세 개까지 배치해 조명을 다시 연출할 수 있는 리라이트 기능이 생겼습니다.

업무 흐름을 잇는 클릭 투 두

화면 속 텍스트나 이미지를 인식해 바로 다음 동작을 제안하는 클릭 투 두 기능도 오피스 생태계와 한층 긴밀해졌습니다.

화면에 띄워진 표 데이터를 곧바로 엑셀로 보내거나, 확인한 이메일 내용을 바탕으로 팀즈 미팅을 잡고 메시지를 보낼 수 있습니다. 워드에서 코파일럿으로 초안을 작성하는 작업도 화면 전환 없이 이어집니다.

그림판과 사진 앱의 밑바탕이 되는 확산 모델도 개선되어, 이미지 생성 및 생성형 채우기 작업의 처리 속도와 결과물 품질이 향상되었습니다.

접근성 측면에서는 내레이터가 대체 텍스트가 없는 도표, 사진, 인터페이스 요소의 맥락을 상세하게 읽어주는 시각 정보 설명 기능이 보강되었습니다.

왜 중요한가

우리는 마이크로소프트가 데스크톱 AI의 방향을 올바른 실용성으로 돌렸다고 봅니다. 화면 한구석에서 말만 주고받는 챗봇보다, 복잡하기 짝이 없던 윈도우 설정을 자연어로 대리 제어해 주는 에이전트가 일반 사용자에게는 훨씬 직관적인 효용을 주기 때문입니다.

스크린샷 자동 보정, 색상 추출, 사진 조명 조절처럼 사용자들이 평소 유료 보조 프로그램을 설치해 해결하던 자잘한 기능들을 OS 기본 기능으로 흡수한 점도 업무 효율을 높이는 영리한 접근입니다.

하지만 하드웨어 간 격차는 여전히 아쉬운 대목입니다. 주요 기능들이 퀄컴 스냅드래곤 탑재 기기에 먼저 우선권을 얻고, 인텔과 AMD 기기는 연말까지 기다려야 하는 구조는 PC 생태계 내에서 피로감을 부를 수 있습니다.

아울러 운영체제의 핵심 제어권을 AI 에이전트에 넘기는 만큼, 사용자의 지시를 잘못 해석해 시스템 안정성을 해치지 않도록 통제권을 얼마나 투명하게 유지하느냐가 신뢰의 관건이 될 것으로 보입니다.