跳到正文
IFAI

AI算力

行業標籤545 則新聞

  1. 產業動態傳播指數 42

    紅杉報告敲警鐘:AI 行業每年得賺 6000 億美元才能回本

    紅杉資本合夥人 David Cahn 近日測算,AI 行業每年需要產生約 6000 億美元收入,才能抵消資料中心和 GPU 等鉅額投入。即便各大巨頭 AI 收入全超預期,仍有約 5000 億美元的缺口。也就是說,基建投入嚴重超前,商業變現若跟不上,泡沫風險陡增。

  2. 開源專案傳播指數 44

    NVIDIA 全面加速 Llama 3:單張 H200 跑 70B 每秒吐 3000 token

    NVIDIA 宣佈對 Meta 新發布的 Llama 3 進行全平臺推理最佳化。測試顯示,單張 H200 執行 700 億引數版本時每秒生成約 3000 token,可同時服務約 300 名使用者;80 億引數版本也已適配 Jetson 和 RTX PC。開發者可直接通過 NIM 微服務在瀏覽器中試用。