오픈AI 차세대 'o3' 모델 실행 비용, 문제당 3만 달러 육박 관측
외신에 따르면 ARC 프라이즈 재단은 오픈AI의 추론 모델 'o3'의 작업당 연산 비용 추정치를 기존 3천 달러에서 3만 달러로 대폭 수정했다. 최고 성능 모드인 o3 high는 ARC-AGI 벤치마크 문제 하나를 풀기 위해 최대 1024회 시도를 거쳤으며, 저비용 모드 대비 172배 많은 컴퓨팅 자원을 소모한 것으로 나타났다.
Arc Prize Foundation
ARC 프라이즈, 새 벤치마크 ARC-AGI-2 공개…사람은 쉬운데 LLM은 0%
ARC 프라이즈 재단이 추론 능력과 유동 지능을 측정하는 ARC-AGI-2 및 2025 대회를 공개했다. 인간은 2회 이내에 모두 푼 반면 순수 LLM은 0%, 공개 추론 모델도 한 자릿수 득점에 그쳤다. 스케일업만으로는 해결하기 힘든 역량 격차를 정조준했다.