OpenAIが科学推論ベンチマーク「FrontierScience」公開、物理や化学の難問で評価
OpenAIは物理、化学、生物学の専門的推論力を測る新ベンチマーク「FrontierScience」を発表した。五輪レベルの難問と博士課程レベルの研究課題で構成され、160問をオープンソース化。構造化された推論には強い一方、自由度の高い研究課題には依然として課題が残ることを浮き彫りにした。
OpenAIは物理、化学、生物学の専門的推論力を測る新ベンチマーク「FrontierScience」を発表した。五輪レベルの難問と博士課程レベルの研究課題で構成され、160問をオープンソース化。構造化された推論には強い一方、自由度の高い研究課題には依然として課題が残ることを浮き彫りにした。