LMArena 開源榜單核心庫 Arena-Rank:JAX 加速 30 倍,支援少樣本重加權
LMArena 宣佈開源其 AI 排行榜評分核心 Python 包 Arena-Rank。新版本改用 JAX 計算後端,相比原 FastChat 實現提速超 30 倍,並加入樣本重加權演算法以保證少對決模型的公平性。除大模型評估外,該工具還能直接複用於體育或電競對抗排名。
LMArena 宣佈開源其 AI 排行榜評分核心 Python 包 Arena-Rank。新版本改用 JAX 計算後端,相比原 FastChat 實現提速超 30 倍,並加入樣本重加權演算法以保證少對決模型的公平性。除大模型評估外,該工具還能直接複用於體育或電競對抗排名。