맥 앱 '탭킷' 출시, 클로드와 코덱스가 실제 아이폰 직접 제어한다

AI 에이전트가 PC 바탕화면을 조작하는 사례는 많아졌지만, 주머니 속 스마트폰을 대신 다루게 하는 일은 애플의 폐쇄적인 보안 정책 때문에 늘 까다로운 영역이었습니다.

이 문제를 아주 직관적인 방식으로 풀어낸 맥용 앱이 등장했습니다. 바로 실제 아이폰을 맥에 연결해 클로드와 코덱스 같은 AI가 화면을 직접 제어할 수 있게 돕는 탭킷입니다.

탈옥도 앱 설치도 필요 없는 단순한 물리 연결

탭킷의 가장 눈에 띄는 점은 아이폰 쪽에 아무것도 요구하지 않는다는 사실입니다.

아이폰에 별도의 앱을 설치할 필요가 없고, 탈옥이나 개발자 모드 활성화조차 필요하지 않습니다. 무거운 iOS 시뮬레이터를 띄울 필요도 없습니다. 유일한 조건은 탭킷이 실행 중인 맥 컴퓨터에 아이폰을 케이블로 직접 꽂아두는 것뿐입니다.

연결만 마치면 탭킷 자체 내장 에이전트는 물론이고 앤트로픽의 클로드, 오픈AI의 코덱스, 다양한 MCP 클라이언트, 그리고 REST API나 파이썬 SDK를 통해 아이폰을 조작할 수 있습니다. AI 입장에서 스마트폰이 하나의 모듈형 도구로 연결되는 셈입니다.

화면 보고 탭하고 입력, 언제든 수동 개입 가능

작동 원리는 사람의 사용 방식과 닮았습니다. 에이전트가 화면 스크린샷을 찍어 현재 상태를 파악한 뒤, 탭이나 스와이프, 텍스트 입력을 지시합니다. 한 동작이 끝나면 다시 화면을 캡처해 결과를 확인하고 다음 단계로 넘어갑니다.

가상 환경이 아닌 실제 아이폰에서 돌아가기 때문에, 이미 로그인된 계정과 앱, 알림, 사진 라이브러리를 그대로 활용할 수 있습니다. 공식 API를 제공하지 않는 앱 사이를 에이전트가 오가며 작업을 처리하는 것도 가능합니다.

사용자는 맥 화면을 통해 에이전트의 작업 과정을 실시간으로 지켜볼 수 있습니다. 세션 기록을 검토하다가 로그인이나 본인 인증처럼 사람의 손이 필요한 순간에는 언제든 직접 제어권을 넘겨받을 수 있습니다.

왜 중요한가

모바일 앱 개발자와 QA 엔지니어에게 탭킷은 꽤 유용한 테스트 자동화 도구가 될 수 있습니다. 복잡한 환경 설정 없이도 클로드 같은 최신 모델을 연결해 실제 기기 기반의 사용자 시나리오를 점검해 볼 수 있기 때문입니다.

우리가 보기에 탭킷의 가장 영리한 선택은 앱스토어 심사나 샌드박스 정책과 직접 충돌하지 않고 우회했다는 점입니다. 아이폰을 맥에 연결된 외부 장치처럼 다루면서, 최근 표준으로 떠오른 MCP를 통해 거대언어모델 생태계에 바로 얹어두었습니다.

다만 맥과 케이블로 묶여 있어야 한다는 물리적 제약은 명확합니다. 이동 중에 사용자를 보조하는 진정한 모바일 비서로 쓰기에는 한계가 있습니다. 화면 캡처와 시각 인식 기반으로 작동하는 만큼 화면 전환 지연이나 예상치 못한 팝업에 오작동할 가능성도 여전합니다. 애플이 자체 시스템 에이전트를 열어주기 전까지 과도기적 대안으로 기능할 가능성이 큽니다.