본문으로 건너뛰기
IFAI

o1-preview

제품소식 5개

  1. 연구확산 지수 35

    OpenAI, 사실성 벤치마크 'SimpleQA' 공개: GPT-4o 정답률 40% 미만

    OpenAI가 언어 모델의 환각 현상을 측정하는 새 벤치마크 'SimpleQA'를 오픈소스로 공개했다. 명확한 단일 정답이 있는 4326개 질문으로 구성됐으며 최신 모델인 GPT-4o도 정답률이 40% 미만에 그쳤다. 모델이 틀린 답을 내면서도 확신하는 '과신' 현상을 정량화한 것이 특징이다.

  2. AI 모델확산 지수 50

    OpenAI, 신규 모델 'o1' 사고 과정 파헤치는 사용자에 이용 정지 경고

    OpenAI가 지난주 추론 능력을 갖춘 o1 모델을 선보인 이후, 숨겨진 원시 사고 과정(Chain of Thought)을 캐내려 시도한 사용자들에게 경고 메일을 보내며 계정 차단을 경고하고 나섰다. o1은 필터링된 추론 요약만 보여주도록 설계되었으며, 프롬프트에 'reasoning trace' 같은 단어를 넣기만 해도 안전 정책 위반으로 감지된다.