跳到正文
IFAI

產業動態

Google 前沿模型負責人談產品方法:別隻盯排行榜,用 60/20/20 押注 AI 能力

首次發布 傳播指數 42

Google 前沿模型產品負責人 Tulsee Doshi 在播客中表示,AI 降低了實現門檻,但沒降低選錯方向的代價。她建議團隊親自跑 5 到 20 條提示詞建立質量標準,並按 60/20/20 比例兼顧當前交付、近期能力和前瞻探索。

Google 前沿模型負責人談產品方法:別隻盯排行榜,用 60/20/20 押注 AI 能力
圖:x.com

寫程式碼和造功能的門檻越來越低,但做一個沒人要的 AI 功能,選錯方向的代價一點也沒變小。Google 前沿模型產品負責人 Tulsee Doshi 最近在 Lenny's Podcast 播客裡,聊到了 AI 時代產品經理應當如何調整工作方式。

親自跑提示詞,用 60/20/20 分配精力

Tulsee 認為,前沿模型開發不像傳統軟體那樣能按規格確定交付,它經常在訓練中冒出預期之外的能力。產品負責人只看跑分榜容易踩空,必須親自上手使用模型,才能發現哪些新能力值得做成產品。

她建議在做評測時先別搞太複雜的自動化大工程,而是挑選 5 到 20 條自己最關心的核心提示詞,親自比對結果,明確什麼是「好」的標準。模型升級後,過去為了彌補短板寫的一堆系統提示或規則也要重新測試,因為舊補丁很可能反過來束縛了新模型的能力。

在資源投入上,她提出了 60/20/20 的配比思路:約 60% 押在今天就能穩定交付的能力上,20% 投入近期大機率能補齊的方向,剩下 20% 則用來探索那些剛露頭、還不成熟的前瞻體驗,避免過度押注未來或者死守現有侷限。

為什麼重要

我們認為,這套邏輯點出了 AI 產品團隊目前最容易踩的兩個坑:要麼把所有希望押在「下一個模型版本一定會變聰明」,要麼死守著現有缺陷到處打補丁。

雖然社交平臺上也有挑剔的聲音,有人甚至調侃 Gemini 的產品體驗讓這些心得看起來像反向指標,但親自做輕量評測和動態調整資源分配的方法本身相當實在。對於獨立開發者和 PM 來說,別迷信公開發布的排行榜,手裡攥著十來個關鍵用例去人肉驗證新模型,才是判斷技術能不能落地的唯一靠譜方式。

來源 (1)

  1. [1]
    @dotey(在新分頁開啟)原文x.com

每日 AI 內容精選