그록 1.5 코드서 미드저니 흔적 발견... 이미지 생성 제휴 임박?
xAI의 독립형 그록(Grok) 코드베이스에서 미드저니(Midjourney) 관련 참조가 발견됐다. 이는 양사의 제휴 논의 소문을 뒷받침하며, 그록 1.5가 API를 통해 미드저니의 고품질 이미지 생성을 지원할 가능성을 시사한다. 이와 함께 이미지 업로드 및 비전 기능 탑재도 준비 중인 것으로 확인됐다.
xAI의 독립형 그록(Grok) 코드베이스에서 미드저니(Midjourney) 관련 참조가 발견됐다. 이는 양사의 제휴 논의 소문을 뒷받침하며, 그록 1.5가 API를 통해 미드저니의 고품질 이미지 생성을 지원할 가능성을 시사한다. 이와 함께 이미지 업로드 및 비전 기능 탑재도 준비 중인 것으로 확인됐다.
앤트로픽이 신형 모델 'Claude 3.5 Sonnet'을 출시했습니다. 이전 플래그십인 Opus를 뛰어넘는 코딩 및 추론 성능을 2배 빠른 속도와 Sonnet 가격에 제공하며, 코드와 디자인을 실시간 확인하고 편집할 수 있는 'Artifacts' 기능도 함께 선보였습니다. Claude.ai와 API를 통해 즉시 이용 가능합니다.
Anthropic이 Claude 3 전 모델 제품군에 도구 사용(Tool use) 기능을 정식 출시했습니다. 개발자가 정의한 외부 API를 호출해 비정형 데이터 추출과 다단계 작업 자동화를 수행할 수 있습니다. 스트리밍과 이미지 입력을 지원하며 Opus에는 디버깅용 추론 태그가 추가되었으나, 병렬 도구 호출은 아직 지원하지 않습니다.
미스트랄 AI가 첫 코드 생성 특화 AI '코드스트랄'을 공개했다. 22B 파라미터 크기에 32k 컨텍스트 창을 갖췄으며 80개 이상의 언어와 코드 중간 채우기 기능을 지원한다. 벤치마크 전반에서 뛰어난 성능을 보였으며, 연구용 오픈 가중치 배포와 함께 8주간 무료 API 베타가 진행된다.
메타가 초기 융합 기반의 네이티브 멀티모달 모델 '카멜레온'을 공개했다. 이미지와 텍스트를 동일한 토큰 공간에서 처리해 텍스트와 이미지가 섞인 문서를 자연스럽게 생성한다. 34B 버전은 VQA 등에서 최고 수준의 성능을 보였으며, 아직 모델 가중치는 미공개 상태다.
마이크로소프트가 경량 AI 모델 '파이-3(Phi-3)' 패밀리를 개발자에게 공식 공개하며 Azure AI에 Phi-3-mini를 추가했다. 도표와 이미지 추론이 가능한 42억 매개변수의 멀티모달 모델 'Phi-3-vision'도 함께 프리뷰로 선보이며 온디바이스 AI 시장 공략에 나섰다.
구글이 제미나이를 기반으로 교육학 원리를 접목해 미세조정한 모델 제품군 'LearnLM'을 발표했다. 즉각적인 정답 대신 문제 해결 과정을 안내하도록 설계되었으며, 검색 요약, 유튜브 동영상 문답, 제미나이의 맞춤형 학습 코치 기능 등에 순차 적용된다.
구글은 구글 I/O 2024 개막을 앞두고 안드로이드 폰에서 작동하는 미공개 멀티모달 AI 인터페이스의 티저 영상을 공개했다. 스마트폰 카메라를 통해 주변 환경을 실시간으로 인식하고 무대 준비 상황을 설명하는 모습으로, 방금 공개된 GPT-4o를 겨냥했다. 실제 완성도는 기조연설에서 드러날 예정이다.
OpenAI가 새 플래그십 모델 GPT-4o를 발표했다. 텍스트, 음성, 이미지를 하나의 신경망에서 엔드투엔드로 처리하며, 평균 320밀리초의 실시간 음성 대화를 지원한다. ChatGPT 무료 사용자와 API에도 제공된다.
더 인포메이션에 따르면 마이크로소프트가 매개변수 약 5000억 개의 대형 언어 모델 'MAI-1'을 자체 개발하고 있다. 3월 영입된 인플렉션 출신 무스타파 술레이만이 프로젝트를 이끈다. 오픈AI에 100억 달러 이상을 투자한 이후 처음 추진하는 거대 자체 모델로, 기술 의존도를 낮추려는 행보로 풀이된다.
센스타임은 대형 모델 '센스노바 5.0'과 온디바이스 제품군을 발표했다. 10TB 이상의 토큰으로 학습되어 약 20만 토큰의 컨텍스트를 지원하며, 멀티모달 벤치마크 MMBench에서 1위를 기록했다. 플래그십 기기에서 초당 78.3단어를 생성하는 온디바이스 모델도 함께 선보였다.
마이크로소프트가 경량 AI 모델 'Phi-3 Mini'를 공개했다. 38억 개 파라미터를 갖춘 이 모델은 합성 동화 데이터셋으로 학습되어 GPT-3.5 수준의 성능을 목표로 한다. 스마트폰과 노트북 같은 기기에서 구동하기 적합하며, 현재 Azure, Hugging Face, Ollama에서 사용할 수 있다.
메타가 차세대 오픈형 LLM '라마 3'를 공식 출시했다. 8B와 70B 두 가지 크기로 기본 및 인스트럭트 모델을 제공하며, 15조 개 이상의 토큰으로 사전 학습됐다. 8B 모델은 소비자용 GPU에서도 구동과 미세조정이 가능하다. 오픈소스 생태계의 성능 기준을 한 단계 끌어올렸다는 평가다.
첫 멀티모달 모델 Grok-1.5V의 프리뷰가 공개됐다. 텍스트뿐만 아니라 문서, 다이어그램, 사진 등을 처리할 수 있으며, 공간 이해도를 측정하는 RealWorldQA 벤치마크에서 68.7%를 기록해 경쟁 모델을 앞섰다. 기존 Grok 사용자와 초기 테스터에게 순차 제공될 예정이다.
오픈AI가 대폭 개선된 'GPT-4 터보'를 API로 정식 출시하고 챗GPT에도 순차 배포한다고 밝혔다. 비전 기능을 갖춘 GPT-4 터보가 정식 지원되면서, 이미지 입력 요청 시에도 JSON 모드와 함수 호출(Function Calling)을 함께 활용할 수 있게 됐다.
OpenAI는 계정 생성이나 로그인 없이 누구나 ChatGPT를 즉시 사용할 수 있도록 지원한다고 발표했다. 순차 적용 중이며, 비로그인 상태에서도 설정에서 학습 데이터 활용을 끌 수 있다. AI를 가볍게 써보고 싶었던 이용자의 진입 장벽이 대폭 낮아졌다.