OpenAI, 100만 달러 규모 실무 외주로 AI 평가하는 SWE-Lancer 공개
OpenAI는 Upwork의 실제 외주 개발 과제 1,400여 개(총 100만 달러 상당)로 구성된 SWE-Lancer 벤치마크를 공개했다. 50달러짜리 버그 수정부터 32,000달러 기능 구현까지 포함되며, 최신 모델도 대다수 작업을 해결하지 못했다.
OpenAI는 Upwork의 실제 외주 개발 과제 1,400여 개(총 100만 달러 상당)로 구성된 SWE-Lancer 벤치마크를 공개했다. 50달러짜리 버그 수정부터 32,000달러 기능 구현까지 포함되며, 최신 모델도 대다수 작업을 해결하지 못했다.