스태빌리티 AI, 첫 오픈소스 RLHF 챗봇 '스테이블비쿠냐' 공개
스태빌리티 AI가 인간 피드백 기반 강화학습(RLHF)을 적용한 최초의 대규모 오픈소스 챗봇 모델 'StableVicuna-13B'를 공개했다. Vicuna-13B 기반에 trlX와 Anthropic 등의 공개 선호도 데이터셋을 활용해 PPO 훈련을 마쳤다. 폐쇄형 모델의 전유물이던 RLHF 전 과정을 오픈소스 생태계로 끌고 온 점이 핵심이다. Hugging Face에서 가중치 델타를 내려받을 수 있다.