LMSYS, 이미지 아레나 공개: FLUX·DALL-E 블라인드 맞대결
lmarena.ai가 이미지 생성 모델을 블라인드로 평가하는 'Image Arena'를 선보였다. 사용자가 프롬프트를 입력하면 FLUX, Stable Diffusion, DALL-E 등 익명의 두 모델이 이미지를 출력해 투표로 승자를 가리며, 순위표도 곧 공개된다.
LMSYS
최신 GPT-4o, LMSYS 벤치마크 1위 탈환: 코딩 성능 30점 상승
LMSYS는 OpenAI의 최신 GPT-4o(20240808)가 1,314점을 기록하며 구글 Gemini-1.5-Pro-Exp를 제치고 Chatbot Arena 종합 1위를 탈환했다고 밝혔다. 코딩과 고난도 프롬프트 등 여러 부문에서 선두를 차지했으며, API에서는 chatgpt-4o-latest로 제공된다.
챗봇 아레나 왕좌 바뀌었다…클로드 3 오퍼스, GPT-4 첫 추월
화요일, 앤트로픽의 '클로드 3 오퍼스'가 블라인드 평가 플랫폼 '챗봇 아레나'에서 오픈AI의 GPT-4를 제치고 사상 처음 1위에 올랐다. 2023년 5월 이후 이어진 GPT-4의 독주가 깨진 것으로, 경량 모델 하이쿠까지 선전하면서 오픈AI가 아닌 타사 모델이 벤치마크 정상을 차지하는 첫 기록을 세웠다.