跳到正文
IFAI

行业动态

Google 前沿模型负责人谈产品方法:别只盯排行榜,用 60/20/20 押注 AI 能力

首次发布 传播指数 42

Google 前沿模型产品负责人 Tulsee Doshi 在播客中表示,AI 降低了实现门槛,但没降低选错方向的代价。她建议团队亲自跑 5 到 20 条提示词建立质量标准,并按 60/20/20 比例兼顾当前交付、近期能力和前瞻探索。

Google 前沿模型负责人谈产品方法:别只盯排行榜,用 60/20/20 押注 AI 能力
图:x.com

写代码和造功能的门槛越来越低,但做一个没人要的 AI 功能,选错方向的代价一点也没变小。Google 前沿模型产品负责人 Tulsee Doshi 最近在 Lenny's Podcast 播客里,聊到了 AI 时代产品经理应当如何调整工作方式。

亲自跑提示词,用 60/20/20 分配精力

Tulsee 认为,前沿模型开发不像传统软件那样能按规格确定交付,它经常在训练中冒出预期之外的能力。产品负责人只看跑分榜容易踩空,必须亲自上手使用模型,才能发现哪些新能力值得做成产品。

她建议在做评测时先别搞太复杂的自动化大工程,而是挑选 5 到 20 条自己最关心的核心提示词,亲自比对结果,明确什么是「好」的标准。模型升级后,过去为了弥补短板写的一堆系统提示或规则也要重新测试,因为旧补丁很可能反过来束缚了新模型的能力。

在资源投入上,她提出了 60/20/20 的配比思路:约 60% 押在今天就能稳定交付的能力上,20% 投入近期大概率能补齐的方向,剩下 20% 则用来探索那些刚露头、还不成熟的前瞻体验,避免过度押注未来或者死守现有局限。

为什么重要

我们认为,这套逻辑点出了 AI 产品团队目前最容易踩的两个坑:要么把所有希望押在「下一个模型版本一定会变聪明」,要么死守着现有缺陷到处打补丁。

虽然社交平台上也有挑剔的声音,有人甚至调侃 Gemini 的产品体验让这些心得看起来像反向指标,但亲自做轻量评测和动态调整资源分配的方法本身相当实在。对于独立开发者和 PM 来说,别迷信公开发布的排行榜,手里攥着十来个关键用例去人肉验证新模型,才是判断技术能不能落地的唯一靠谱方式。

来源 (1)

  1. [1]
    @dotey(在新标签页打开)原文x.com

每日 AI 内容精选