跳到正文
IFAI

AI工具

Google 搜索 AI Mode 升级:能看图搜图,向数百万 Labs 用户开放

首次发布 传播指数 52

Google 为搜索 AI Mode 增加多模态能力,用户拍照或上传图片即可获得带网页链接的详细解答。新功能融合了定制版 Gemini 和 Google Lens 技术,并采用多查询扇出机制深入理解画面细节。目前该体验已在移动端上线,并向美国数百万 Labs 用户扩大测试。

Google 搜索 AI Mode 升级:能看图搜图,向数百万 Labs 用户开放
图:theverge.com

以前在 Google 里搜图,Lens 顶多告诉你眼前这双鞋叫什么、哪家电商在卖。现在 Google 想让搜索不仅能认出单个物件,还能看懂一整幅画面里的复杂关系。

Google 宣布为搜索里的 AI Mode 增加多模态看图搜索能力,并在美国将这一功能的测试门槛大幅放宽,向 Labs 里的数百万普通用户开放。Android 和 iOS 端的 Google 移动应用即日起就能体验。

既靠 Lens 认东西,也靠扇出搜细节

这次更新在底层结合了两样东西:定制版的 Gemini 模型,以及 Google 已经打磨多年的 Lens 图像识别技术。用户拍一张照片或者传一张现成截图,AI Mode 就会给出一篇结构完整、附带网页参考来源的回答。

用 Google 搜索产品副总裁 Robby Stein 的话说,以前的视觉搜索大多停留在单点识别,而接入 Gemini 多模态能力后,AI Mode 可以理解整个画面的场景,包括画面里不同物体之间的关联、材质、颜色、形状以及排列方式。

为了让给出的回答不流于表面,Google 还引入了一种名为「扇出(fan-out)」的检索机制。简单来说,就是当系统看到一张图时,会自动拆解出好几个并行的搜索请求,同时针对图中的各个物体去查资料。

举个例子,如果你拍下一张摆着几本书的书架,它不仅能把这些书的书名认全,还会顺手帮你挑出高评分的同类书目,并支持你接着提问来筛选推荐。从 Google 官方在社交平台公布的使用反馈来看,用户正在用 AI Mode 处理更长、更开放的复杂任务,比如做产品横向对比或查询具体的操作指南。

走出付费墙,对标聊天式搜索对手

AI Mode 本质上是 Google 正面迎战 ChatGPT Search 和 Perplexity 的武器。它不再给用户列出一长串蓝色链接,而是直接从 Google 庞大的网页索引中抓取内容,由 AI 提炼成对话式的直接解答。

上个月刚上线时,这项功能还属于 Google One AI Premium 付费会员的专属特权。这次 Google 将它扩展给美国数百万 Labs 用户,不再要求掏订阅费,显然是想让更多真实用户把它用起来。

为什么重要

我们认为,Google 把多模态能力直接塞进 AI Mode,走了一步非常聪明且务实的棋。

对用户来说,用图搜索终于不再只是「找同款商品」的拍照比价工具。如果你在维修现场不知道手里的零件怎么装,或者在展厅看到复杂的展品说明想快速梳理脉络,直接拍张照提问会比绞尽脑汁想关键词直观得多。

从技术路线上看,单纯靠视觉大模型容易产生幻觉,而纯靠传统图片搜索又缺乏上下文理解。Google 把 Lens 多年的识别积累、Gemini 的全景理解和扇出搜索机制捆绑在一起,看起来既补齐了视觉短板,又守住了自己独步天下的网页索引护城河。

但它的隐患也显而易见。多路扇出查询加上多模态推理,意味着每一次搜索的算力成本都远高于传统搜索。而且目前这一波放宽依然局限在美国本土的 Labs 测试通道内,对全球绝大多数依赖 Google 搜索的普通人来说,要真正日常用上还得等上一阵子。

来源 (2)

  1. [1]
    theverge.com(在新标签页打开)原文theverge.com
  2. [2]
    x.com(在新标签页打开)讨论x.com

话题追踪Google AI Mode

这个话题的历次新闻,最新的在上面。

  1. Google 搜索 AI Mode 升级:能看图搜图,向数百万 Labs 用户开放本条
  2. Google 搜索推出 AI Mode:引入 Gemini 2.0,支持深度追问

每日 AI 内容精选