오픈소스 모델 Qwen2 공개, 5가지 크기에 최대 128K 컨텍스트 지원
Qwen 팀이 차세대 오픈소스 모델 제품군 'Qwen2'를 공개했다. 0.5B부터 72B까지 5가지 크기로 제공되며 27개 추가 언어를 학습했다. 전 모델에 GQA를 적용해 추론 효율을 높였고, 7B와 72B 인스트럭트 모델은 최대 128K 토큰 컨텍스트를 지원한다. 72B를 제외한 하위 모델들은 Apache 2.0 라이선스로 배포된다.
Qwen 팀이 차세대 오픈소스 모델 제품군 'Qwen2'를 공개했다. 0.5B부터 72B까지 5가지 크기로 제공되며 27개 추가 언어를 학습했다. 전 모델에 GQA를 적용해 추론 효율을 높였고, 7B와 72B 인스트럭트 모델은 최대 128K 토큰 컨텍스트를 지원한다. 72B를 제외한 하위 모델들은 Apache 2.0 라이선스로 배포된다.