구글 딥마인드, Game Arena에 '마피아'와 '포커' 벤치마크 추가
구글 딥마인드가 캐글 Game Arena 플랫폼에 마피아 게임과 포커 벤치마크를 추가했다고 발표했다. 완전 정보 게임인 체스를 넘어, 불완전 정보 환경에서 AI의 속임수 간파, 자연어 협상 및 위험 관리 능력을 평가한다. 체스 순위에서는 Gemini 3 Pro가 1위를 차지했다.
구글 딥마인드가 캐글 Game Arena 플랫폼에 마피아 게임과 포커 벤치마크를 추가했다고 발표했다. 완전 정보 게임인 체스를 넘어, 불완전 정보 환경에서 AI의 속임수 간파, 자연어 협상 및 위험 관리 능력을 평가한다. 체스 순위에서는 Gemini 3 Pro가 1위를 차지했다.
Google 산하 Kaggle과 DeepMind가 연 AI 체스 대회 1일 차에서 Grok 4, Gemini 2.5 Pro, o4-mini, o3가 나란히 4-0 완승을 거두며 준결승에 올랐습니다. Grok 4가 가장 뛰어난 기량을 보였으며 일론 머스크는 체스에 거의 품을 들이지 않았다고 밝혔습니다. 많은 모델이 오프닝 이후 불법 수를 두며 공간 추론의 한계를 드러냈습니다.
구글 산하 캐글은 새로운 평가 플랫폼 '게임 아레나'를 공개하고 8월 5일부터 7일까지 AI 체스 대회를 개최한다고 밝혔다. o3, 제미나이 2.5 프로, 딥시크-R1 등 8개 주요 모델이 외부 엔진 없이 텍스트 추론만으로 맞붙으며, 기존 정적 벤치마크를 넘어 모델의 전략적 기획과 논리적 사고력을 시험한다.
OpenAI는 캐글과 손잡고 아마존 열대우림의 미발견 고고학 유적지를 찾아내는 'OpenAI to Z Challenge'를 발표했다. 참가자는 o3/o4 mini 및 GPT-4.1 모델과 공개 위성·라이다 데이터를 결합해 분석해야 하며, 1위 상금은 25만 달러에 달한다.
보도에 따르면 위키미디어 재단은 4월 15일부터 캐글에 AI 학습 전용 위키백과 데이터셋을 공개했다. 영어와 프랑스어로 제공되는 이 데이터는 본문과 정보상자가 정제된 JSON 형식으로 담겨 있어, 개발자의 스크래핑 수고를 덜고 서버 부하를 줄이도록 설계됐다.