スタンフォード大「AI Index」:従来テストで人間超え、評価基準の刷新急務
スタンフォード大学HAIは第7回「AI Index」レポートを公開した。画像分類や読解に続き、難関数学(MATH)の正答率も2年で6.9%から84.3%へ急伸し、多くの指標で人間に肉薄している。既存ベンチマークが急速に形骸化する一方、ハルシネーションなどの課題は依然として残されている。
スタンフォード大学HAIは第7回「AI Index」レポートを公開した。画像分類や読解に続き、難関数学(MATH)の正答率も2年で6.9%から84.3%へ急伸し、多くの指標で人間に肉薄している。既存ベンチマークが急速に形骸化する一方、ハルシネーションなどの課題は依然として残されている。