문샷 AI, 1조 파라미터 오픈소스 모델 'Kimi K2' 공개
금요일, 문샷 AI가 1조 개 파라미터(활성 320억 개) 규모의 MoE 모델 'Kimi K2'를 오픈소스로 공개했다. 코딩과 자율 에이전트 수행 능력에 최적화되었으며, LiveCodeBench에서 53.7%를 기록해 GPT-4.1을 앞섰다. 독자 개발한 MuonClip 옵티마이저를 적용해 학습 불안정 문제도 해결했다.
금요일, 문샷 AI가 1조 개 파라미터(활성 320억 개) 규모의 MoE 모델 'Kimi K2'를 오픈소스로 공개했다. 코딩과 자율 에이전트 수행 능력에 최적화되었으며, LiveCodeBench에서 53.7%를 기록해 GPT-4.1을 앞섰다. 독자 개발한 MuonClip 옵티마이저를 적용해 학습 불안정 문제도 해결했다.