OpenAI 신형 추론 모델서 환각 급증: o3는 이전 2배, o4-mini는 48%
테크크런치에 따르면 OpenAI의 최신 추론 모델 o3와 o4-mini가 이전 세대보다 환각을 더 많이 일으키는 것으로 나타났다. 인물 지식 벤치마크에서 o3의 환각률은 o1의 약 2배인 33%였고, o4-mini는 48%에 달했다. OpenAI는 추론 능력 확장과 함께 전체 주장 수가 늘며 발생한 현상으로 보이나 정확한 원인은 규명하지 못했다고 밝혔다.
테크크런치에 따르면 OpenAI의 최신 추론 모델 o3와 o4-mini가 이전 세대보다 환각을 더 많이 일으키는 것으로 나타났다. 인물 지식 벤치마크에서 o3의 환각률은 o1의 약 2배인 33%였고, o4-mini는 48%에 달했다. OpenAI는 추론 능력 확장과 함께 전체 주장 수가 늘며 발생한 현상으로 보이나 정확한 원인은 규명하지 못했다고 밝혔다.