희귀 개념도 척척…참조 이미지 검색해 그림 그리는 'ImageRAG' 공개
연구진이 확산 모델의 희귀 개념 생성 한계를 보완하기 위해 검색증강생성(RAG)을 접목한 'ImageRAG'를 발표했다. VLM이 초안에서 누락된 요소를 파악해 외부 참조 이미지를 검색한 뒤 생성을 유도하며, 별도 재학습이 필요 없다. SDXL과 옴니젠 실험에서 낯선 개념 묘사 정확도를 대폭 끌어올렸다.
연구진이 확산 모델의 희귀 개념 생성 한계를 보완하기 위해 검색증강생성(RAG)을 접목한 'ImageRAG'를 발표했다. VLM이 초안에서 누락된 요소를 파악해 외부 참조 이미지를 검색한 뒤 생성을 유도하며, 별도 재학습이 필요 없다. SDXL과 옴니젠 실험에서 낯선 개념 묘사 정확도를 대폭 끌어올렸다.