#Open Philanthropy

22:53研究拡散指数 34

Appleの「推論崩壊」論文に反論：LLMの限界ではなく評価手法の不備か

Open PhilanthropyのAlex Lawsen氏がAppleのAI推論崩壊論文に対する反論を発表した。モデルの失敗は推論の限界ではなく、トークン上限への到達や数学的に解けない問題の混入が原因だと指摘。手順の列挙ではなくコード生成形式でテストしたところ、Claudeやo3は15枚のハノイの塔を難なくクリアした。