구글, 멀티모달·128K 지원 인코더-디코더 모델 'T5Gemma 2' 공개
구글이 젬마 3 기반의 신형 인코더-디코더 모델 'T5Gemma 2'를 공개했다. 해당 계열 최초로 멀티모달과 128K 콘텍스트를 지원하며, 어텐션 통합 및 임베딩 공유로 파라미터를 최소 약 3.7억 개 수준까지 줄여 온디바이스 환경에 최적화했다. 사전 학습 체크포인트 형태로 제공된다.
구글이 젬마 3 기반의 신형 인코더-디코더 모델 'T5Gemma 2'를 공개했다. 해당 계열 최초로 멀티모달과 128K 콘텍스트를 지원하며, 어텐션 통합 및 임베딩 공유로 파라미터를 최소 약 3.7억 개 수준까지 줄여 온디바이스 환경에 최적화했다. 사전 학습 체크포인트 형태로 제공된다.