구글 딥마인드, 복합 시각 작업 평가하는 AI 에이전트 벤치마크 'MKA' 공개

기존 AI 에이전트 평가는 대부분 텍스트나 코드 작성 능력에 치우쳐 있었습니다. 하지만 실제 전문 업무 현장에서는 복잡한 시각 정보를 다뤄야 하는 일이 훨씬 많습니다.

도면 대조와 차트 분석 평가하는 MKA

구글 딥마인드가 분석 기관 아티피셜 애널리시스와 손잡고, 복잡한 시각 작업 수행 능력을 측정하는 벤치마크 MKA(Multimodal Knowledge Agent)를 공개했습니다.

설계 도면 교차 대조나 과학 연구 차트 판독 같은 고난도 시각 작업은 전문직 업무에서 흔히 쓰이지만, 기존 평가 체계에서는 제대로 다루지 못했습니다.

초기 평가 결과에서 구글의 제미나이 4 카본은 종합 2위를 차지했습니다. 1위에는 오르지 못했지만, 작업당 평균 비용은 1위 모델 대비 6분의 1 수준에 불과했습니다.

왜 중요한가

실제 산업 현장에 시각 에이전트를 도입하려는 기업 입장에서는 단순 정확도뿐 아니라 운용 비용이 핵심 기준이 됩니다.

딥마인드가 최고 순위 대신 압도적인 비용 효율을 전면에 내세운 것은 현실적이고 영리한 접근으로 보입니다. 모델 성능이 전반적으로 상향 평준화되는 상황에서, 결국 대규모 확산의 열쇠는 가성비가 쥐게 될 것입니다.