체스 맞대결서 ERNIE 4.5, GPT-4.5에 3대 0 완승

체스는 대형 언어 모델의 논리적 추론과 규칙 준수 역량을 점검하기에 가장 까다로운 무대 중 하나입니다.

X 이용자 Md Riyazuddin이 진행한 체스 맞대결에서 바이두의 ERNIE 4.5가 OpenAI의 GPT-4.5를 상대로 3전 전승을 거두며 완승했습니다.

10수 만의 체크메이트와 일방적인 실력 차

대국 내용에 따르면 ERNIE 4.5는 첫 수부터 경기 주도권을 잡았습니다. 중계진 사이에서는 이번 대결을 두고 어른과 아이의 싸움 같다는 평가가 나올 정도로 격차가 컸습니다.

ERNIE 4.5는 압박 속에서도 뛰어난 지시 준수와 정교한 판단력을 선보였으며, 마지막 경기에서는 단 10수 만에 깔끔한 체크메이트를 성공시켰습니다. 테스트를 진행한 측은 ERNIE 4.5가 GPT-4.5의 극히 일부에 불과한 비용으로 이러한 성능을 냈다고 전했습니다.

왜 중요한가

대규모 언어 모델은 체스 전용 엔진이 아니기 때문에 몇 수만 지나도 규칙을 벗어난 수를 두는 환각 현상을 자주 보입니다. 이번 대국에서 빈틈없이 상대를 압도했다는 것은 장기적인 상태 추적과 규칙 처리 능력이 크게 개선되었음을 보여줍니다.

세 판의 대국이라는 작은 표본이지만, 순수 논리 대결에서 ERNIE 4.5가 OpenAI의 최상위 플래그십 모델을 상대로 압도적인 경쟁력을 입증했다는 점에서 의미가 큽니다. 특히 훨씬 저렴한 비용으로 이 같은 성능을 냈다는 점은 개발자들에게 매력적인 대안이 될 수 있습니다.