LMArena 开源榜单核心库 Arena-Rank:JAX 加速 30 倍,支持少样本重加权
LMArena 宣布开源其 AI 排行榜评分核心 Python 包 Arena-Rank。新版本改用 JAX 计算后端,相比原 FastChat 实现提速超 30 倍,并加入样本重加权算法以保证少对决模型的公平性。除大模型评估外,该工具还能直接复用于体育或电竞对抗排名。
LMArena 宣布开源其 AI 排行榜评分核心 Python 包 Arena-Rank。新版本改用 JAX 计算后端,相比原 FastChat 实现提速超 30 倍,并加入样本重加权算法以保证少对决模型的公平性。除大模型评估外,该工具还能直接复用于体育或电竞对抗排名。