索尼联手树莓派推出 AI 相机:搭载 IMX500 芯片,售价 70 美元
Sony 与树莓派联合发布 Raspberry Pi AI Camera,售价 70 美元。它搭载索尼 IMX500 传感器,支持直接在芯片内运行视觉神经网络,兼容全系树莓派主板。开发者无需额外加装 GPU,开箱即可配合经典库运行物体识别模型。
想在树莓派上做视觉识别,以往不是要外接发热巨大的专用加速棒,就是得眼睁睁看着那颗小 CPU 被神经网络榨干跑慢。
现在索尼和树莓派打算把这件事改写。9 月 30 日,双方正式推出了 Raspberry Pi AI Camera,售价 70 美元,当天开售。
这款相机的特别之处在于,图像识别的运算根本不需要交给树莓派主板来扛,视觉数据在感光芯片上就被处理完了。
把模型直接塞进感光芯片
新相机核心采用的是索尼半导体的 IMX500 智能视觉传感器。它拥有 1230 万像素,根据拍摄模式不同,可以输出每秒 10 帧或 40 帧的高分辨率图像。
最核心的突破是片上 AI 处理。传统的机器视觉方案里,摄像头只管收图,然后把庞大的图像数据灌给 GPU 或加速器去算。IMX500 则直接在传感器内部集成神经处理引擎,直接省掉了额外的加速硬件。
相机板子上还带了一颗树莓派自家的 RP2040 微控制器,专门用来管理神经网络固件。出厂时它就已经预装了 MobileNetSSD 目标检测模型,买回来通电就能直接识别人和物体。
兼容性也给得很足。它通吃树莓派旗下的所有单板计算机,包括最新的树莓派 5。软件上无缝接入开发者非常熟悉的 libcamera 和 Picamera2 库,老项目的代码稍微改改就能跑起来。
索尼投资一年半后的交卷之作
这次产品的落地其实早有伏笔。2023 年 4 月,索尼半导体对树莓派进行了少数股权投资,当时双方就宣布要给树莓派社区搭建边缘 AI 平台。
索尼系统解决方案部门总经理 Eita Yanagisawa 表示,这是双方战略合作的第一批果实,很高兴能把边缘 AI 感测技术带给全球最大的开发者社区。
树莓派首席执行官 Eben Upton 也提到,双方将索尼多年积累的图像传感器专长融进了这款硬件,非常期待社区开发者能用它做出什么新玩意。
为什么重要
对创作者和硬件开发者来说,70 美元的门槛相当诱人。以前想做一个能识别人脸的智能门铃或分拣小车,你要么花大几十美元买专用 NPU 扩展卡,要么忍受树莓派主板发烫降频。现在一块小摄像头不仅把图像采了,还把元数据算好打包送出来,主板 CPU 几乎可以空出来全力跑核心业务逻辑。
在行业层面,这标志着边缘视觉硬件正在从「集中计算」走向真正的「感算一体」。当传感器自身就能输出检测框和分类标签时,系统传输的数据量和功耗会呈现断崖式下跌,这极有可能倒逼其他边缘计算玩家跟进传感器集成方案。
我们认为,树莓派和索尼这一步走得相当巧妙。他们没有去堆昂贵的大算力主板,而是用 IMX500 搭配低成本的 RP2040,把 AI 变成了一个像普通摄像头一样即插即用的低门槛外设。不过隐患也同样存在,片上有限的硬件资源注定它不能跑太复杂的超大模型,目前出厂预装的依然是相对经典的轻量网络。开发者想要把自定义的新模型塞进 IMX500,其编译工具链的成熟度与模型体积限制,看起来会是下一个需要检验的关卡。
来源 (1)
- betanews.com(在新标签页打开)原文betanews.com