LMArena, AI 벤치마크 핵심 라이브러리 'Arena-Rank' 오픈소스 공개
LMArena가 자사 AI 리더보드의 순위 산출을 담당하는 파이썬 패키지 'Arena-Rank'를 오픈소스로 공개했다. 계산 백엔드를 JAX로 교체해 기존 FastChat 대비 30배 이상 속도를 끌어올렸으며, 대결 횟수가 적은 모델의 편향을 보정하는 재가중치 기능을 추가했다.
LMArena가 자사 AI 리더보드의 순위 산출을 담당하는 파이썬 패키지 'Arena-Rank'를 오픈소스로 공개했다. 계산 백엔드를 JAX로 교체해 기존 FastChat 대비 30배 이상 속도를 끌어올렸으며, 대결 횟수가 적은 모델의 편향을 보정하는 재가중치 기능을 추가했다.