ハルシネーションが最も少ないAIモデルは?智譜とGoogleが1.3%で首位
Vectaraがまとめたデータによると、智譜AIのGLM-4-9B-ChatとGoogleのGemini-2.0-Flash-Expが幻覚率1.3%で最も低い数値を記録した。続くOpenAIのo1-miniも1.4%と好成績で、小型や特化型モデルでも超大型モデルと同等以上の事実正確性を達成できることが示されている。
Vectaraがまとめたデータによると、智譜AIのGLM-4-9B-ChatとGoogleのGemini-2.0-Flash-Expが幻覚率1.3%で最も低い数値を記録した。続くOpenAIのo1-miniも1.4%と好成績で、小型や特化型モデルでも超大型モデルと同等以上の事実正確性を達成できることが示されている。
PerplexityはProユーザー向けにOpenAIのo1-miniを活用した「reasoning」フォーカス機能のベータ版を提供開始した。パズルや数学、プログラミング向けだが、現時点ではウェブ検索機能とは未連携で利用制限もある。
OpenAIはPlusおよびTeamユーザー向けに推論モデル「o1」の利用制限を引き上げたと発表した。軽量版のo1-miniは週50回から1日50回へと7倍に大幅緩和され、計算コストの高いo1-previewも週30回から週50回へと増加した。
OpenAIが先週公開した新モデル「o1」シリーズを巡り、内部の生データである思考チェーンを探ろうとしたユーザーに対し、規約違反の警告メールや利用停止の警告を送っていることが分かった。o1はフィルタリング後の思考要約のみを表示する仕様で、「reasoning trace」などの語句を入力するだけでも検知対象になるという。