索尼聯手樹莓派推出 AI 相機:搭載 IMX500 晶片,售價 70 美元
Sony 與樹莓派聯合釋出 Raspberry Pi AI Camera,售價 70 美元。它搭載索尼 IMX500 感測器,支援直接在晶片內執行視覺神經網路,相容全系樹莓派主機板。開發者無需額外加裝 GPU,開箱即可配合經典庫執行物體識別模型。
想在樹莓派上做視覺識別,以往不是要外接發熱巨大的專用加速棒,就是得眼睜睜看著那顆小 CPU 被神經網路榨乾跑慢。
現在索尼和樹莓派打算把這件事改寫。9 月 30 日,雙方正式推出了 Raspberry Pi AI Camera,售價 70 美元,當天開售。
這款相機的特別之處在於,影像識別的運算根本不需要交給樹莓派主機板來扛,視覺資料在感光晶片上就被處理完了。
把模型直接塞進感光晶片
新相機核心採用的是索尼半導體的 IMX500 智慧視覺感測器。它擁有 1230 萬畫素,根據拍攝模式不同,可以輸出每秒 10 幀或 40 幀的高解析度影像。
最核心的突破是片上 AI 處理。傳統的機器視覺方案裡,攝像頭只管收圖,然後把龐大的影像資料灌給 GPU 或加速器去算。IMX500 則直接在感測器內部整合神經處理引擎,直接省掉了額外的加速硬體。
相機板子上還帶了一顆樹莓派自家的 RP2040 微控制器,專門用來管理神經網路韌體。出廠時它就已經預裝了 MobileNetSSD 目標檢測模型,買回來通電就能直接識別人和物體。
相容性也給得很足。它通吃樹莓派旗下的所有單板計算機,包括最新的樹莓派 5。軟體上無縫接入開發者非常熟悉的 libcamera 和 Picamera2 庫,老專案的程式碼稍微改改就能跑起來。
索尼投資一年半後的交卷之作
這次產品的落地其實早有伏筆。2023 年 4 月,索尼半導體對樹莓派進行了少數股權投資,當時雙方就宣佈要給樹莓派社群搭建邊緣 AI 平臺。
索尼系統解決方案部門總經理 Eita Yanagisawa 表示,這是雙方戰略合作的第一批果實,很高興能把邊緣 AI 感測技術帶給全球最大的開發者社群。
樹莓派執行長 Eben Upton 也提到,雙方將索尼多年積累的影像感測器專長融進了這款硬體,非常期待社群開發者能用它做出什麼新玩意。
為什麼重要
對創作者和硬體開發者來說,70 美元的門檻相當誘人。以前想做一個能識別人臉的智慧門鈴或分揀小車,你要麼花大幾十美元買專用 NPU 擴充套件卡,要麼忍受樹莓派主機板發燙降頻。現在一塊小攝像頭不僅把影像採了,還把後設資料算好打包送出來,主機板 CPU 幾乎可以空出來全力跑核心業務邏輯。
在行業層面,這標誌著邊緣視覺硬體正在從「集中計算」走向真正的「感算一體」。當感測器自身就能輸出檢測框和分類標籤時,系統傳輸的資料量和功耗會呈現斷崖式下跌,這極有可能倒逼其他邊緣計算玩家跟進感測器整合方案。
我們認為,樹莓派和索尼這一步走得相當巧妙。他們沒有去堆昂貴的大算力主機板,而是用 IMX500 搭配低成本的 RP2040,把 AI 變成了一個像普通攝像頭一樣即插即用的低門檻外設。不過隱患也同樣存在,片上有限的硬體資源註定它不能跑太複雜的超大模型,目前出廠預裝的依然是相對經典的輕量網路。開發者想要把自定義的新模型塞進 IMX500,其編譯工具鏈的成熟度與模型體積限制,看起來會是下一個需要檢驗的關卡。
來源 (1)
- betanews.com(在新分頁開啟)原文betanews.com