구글 딥마인드, 전 소라 리드 영입해 '세계 모델' 전담팀 신설
전 오픈AI 소라 공동 책임자 팀 브룩스가 구글 딥마인드에서 물리 세계를 시뮬레이션하는 대규모 AI 모델 전담팀을 신설하고 채용을 시작했다. 제미나이, 베오, 지니 팀과 협력해 로봇 시뮬레이션 및 실시간 생성 환경을 구축하며 AGI 경로를 개척한다는 계획이다.
전 오픈AI 소라 공동 책임자 팀 브룩스가 구글 딥마인드에서 물리 세계를 시뮬레이션하는 대규모 AI 모델 전담팀을 신설하고 채용을 시작했다. 제미나이, 베오, 지니 팀과 협력해 로봇 시뮬레이션 및 실시간 생성 환경을 구축하며 AGI 경로를 개척한다는 계획이다.
메타 연구진이 생성형 검색을 활용해 사용자 의도를 정밀하게 예측하는 신규 연구 논문 2편을 공개했다. 기존 임베딩 검색 대신 시퀀스 예측 방식을 도입한 LIGER와 LLM으로 취향을 분석하는 Mender를 통해 대규모 추천 피드의 연산 비용을 줄이고 콜드 스타트 문제를 완화한다.
연구진이 새로운 모델 아키텍처 'Titans'를 arXiv에 공개했다. 어텐션을 단기 기억으로, 테스트 시점에 학습하는 신경망을 장기 기억으로 결합해 빠른 훈련과 추론 속도를 유지하면서 200만 토큰 이상의 컨텍스트를 지원한다.
전 OpenAI 최고과학자 Ilya Sutskever가 NeurIPS 무대에 올라 AI가 '데이터 정점'에 도달했다고 밝혔습니다. 그는 웹 데이터를 유한한 화석 연료에 비유하며 기존 방식의 사전 학습은 끝날 수밖에 없다고 지적했습니다. 앞으로의 돌파구는 방대한 데이터 수집이 아닌 심층 추론과 자율적 에이전트 능력에 달려 있다고 강조했습니다.
앤트로픽은 새로운 공동 연구 'Best-of-N Jailbreaking'을 발표했다. 연구진은 텍스트, 시각, 오디오 전반에 걸쳐 첨단 AI 모델의 안전장치를 우회할 수 있는 단순하고 범용적인 탈옥 기법을 발견했다고 밝혔다.
앤트로픽이 이용자 프라이버시를 침해하지 않고 실사용 대화를 분석하는 시스템 '클리오'를 발표했다. 클로드가 직접 대화에서 민감한 정보를 배제하고 주제별로 군집화해, 분석가는 익명화된 거시 트렌드만 확인한다. 개인정보를 들여다보지 않으면서도 조직적 악용을 탐지하고 안전성을 높이는 것이 핵심이다.
IBM이 데이터센터 내 구리 배선을 빛으로 대체하는 차세대 CPO(공동 패키징 광학) 기술 연구 성과를 공개했다. 최초로 공개된 폴리머 광도파로 프로토타입을 통해 대규모 언어 모델 훈련 속도를 최대 5배 높이고 전력 소모를 5분의 1로 줄일 수 있으며, 제조 스트레스 테스트도 통과했다.
사카나 AI는 인간의 기억 메커니즘을 모방해 불필요한 토큰을 능동적으로 잊는 '신경 주의집중 메모리 모델(NAMM)'을 발표했다. 진화 알고리즘으로 최적화되어 메모리 사용량을 줄이면서 장문 추론 성능을 높이며, 추가 학습 없이 비전과 강화학습 모델로도 제로샷 전이가 가능하다.
엔비디아 리서치와 메릴랜드 대학이 자유 시점 3D 비디오 스트리밍을 지원하는 AI 모델 'QUEEN'을 발표했다. 정적 영역을 재사용해 초당 약 350프레임 속도로 렌더링하며, 경기 중계나 로봇 원격 조작에 유용하다. 코드는 곧 오픈소스로 공개될 예정이다.
연구진이 트랜스포머 구조를 결합한 확장형 정규화 흐름 모델 'TARFlow'를 공개했다. 완전 가역적 구조와 엄밀한 최대우도 학습을 유지하면서, 고해상도 이미지와 비디오 생성에서 디퓨전 모델에 필적하는 품질을 달성했다.
구글이 차세대 양자 칩 윌로우(Willow)를 발표했다. 큐비트를 늘릴수록 오류율이 줄어드는 '임계값 이하' 양자 오류 정정을 달성해 30년 숙원을 풀었으며, 최신 슈퍼컴퓨터가 10의 25제곱년 걸릴 연산을 5분 이내에 처리했다. 대규모 상용 양자 컴퓨터 구현의 결정적 이정표다.
사카나 AI 연구진이 고비용 파인튜닝 없이 여러 전문 소형 모델의 능력을 통합하는 진화 알고리즘 기반 프레임워크 'CycleQD'를 공개했다. 모델 병합과 SVD 변이 기술을 활용해 라마 3 8B 모델 테스트에서 기존 파인튜닝 및 병합 방식보다 우수한 성능을 기록했다.
연구진이 단백질의 동적 평형 구조를 예측하는 생성형 AI 시스템 'BioEmu'를 발표했다. 확산 모델과 분자동역학 데이터를 결합해 단일 GPU에서 시간당 수천 개의 독립된 단백질 형태를 샘플링하며, 자유에너지 오차를 약 1 kcal/mol 수준으로 낮췄다. 막대한 슈퍼컴퓨터 자원이 들던 동역학 시뮬레이션의 문턱을 크게 낮췄다.
구글 딥마인드가 네이처 논문을 통해 기상 앙상블 AI 모델 'GenCast'를 발표하고 코드와 가중치를 오픈소스로 공개했습니다. 유럽중기예보센터 ENS 대비 97.2% 지표에서 더 높은 정확도를 기록했으며, 단일 TPU로 8분 만에 15일 예측을 완료합니다.
구글 딥마인드가 기초 세계 모델 'Genie 2'를 발표했습니다. 정지 이미지 한 장만 주어지면 마우스와 키보드로 직접 조작할 수 있는 3D 환경을 최대 1분 동안 일관되게 생성합니다. 물리 법칙과 상호작용까지 구현해, 구현형 AI 에이전트를 가상 공간에서 무제한으로 훈련시킬 새로운 길을 열었습니다.
앨런 AI 연구소와 UC 샌디에이고 연구진이 새로운 기후 모델 'Spherical DYffusion'을 공개했다. 구면 기하학 기반의 확산 모델을 적용해 10년 치 기후 시뮬레이션 시간을 기존 78시간에서 3시간 미만으로 25배 이상 단축했으나, 고고도와 극지방의 예측 오차는 여전히 과제로 남았다.
스타트업 Altera가 마인크래프트에서 진행한 대규모 AI 에이전트 실험 결과가 공개됐다. 최대 1000개의 LLM 에이전트들은 인간의 직접적인 개입 없이도 직업을 나누고 세금 정책에 투표하며 종교를 전파하는 등 자발적인 사회 구조를 형성했다. 인간의 사회적 행동을 정교하게 모방한 결과로 평가받는다.
MIT 연구진은 생성형 AI와 물리 기반 홍수 모델을 결합한 'Earth Intelligence Engine'을 공개했다. 폭풍이 오기 전 침수 후 위성 사진을 미리 생성하는 기술로, 일반 AI가 물리적으로 불가능한 고지대까지 침수시키는 환각 현상을 해결해 주민들의 직관적인 대피 결정을 돕는다.