图一 : Raspberry Pi AI Camera（图片来源：树莓派官网）

树莓派本来就有官方的摄影机（或称影像感测器image sensor）模组，已经推到第三代，但就在九月底树莓派官方再推出人工智慧摄影机Raspberry Pi AI Camera（事实上此前的三月份嵌入式世界Embedded World大会期间已略有展示），建议价70美元，RPi AI Camera与原有的摄影机有何不同？本文将对此推探。

减轻主晶片的运算负荷

RPi AI Camera第一重点是使用Sony的IMX500智慧视觉感测器（Intelligence Vision Sensor），感测器内除了有1,230万画素的影像感测器外还有专属的硬体加速电路（DSP）跟专属的8MB记忆体（SRAM）（注1），如此在进行AI相关电脑视觉（CV）运算上可大幅降低对主处理器、主控制器的倚赖。

注1：其实模组上还有一颗树莓派专属的控制器晶片RP2040，即Raspberry Pi Pico的主晶片，但该晶片在模组中是负责神经网路管理与模组韧体管理等工作。

图二 : Raspberry Pi AI Camera模组上的RP2040控制器晶片（图片来源：树莓派官网）

如果是第五代树莓派（RPi 5），其实可以透过在六月份发表的人工智慧套件RPi AI Kit来获得硬体加速，但如果是更早先的树莓派单板电脑，因为不具备PCIe介面，无法加装RPi AI Kit（注2），那就真的只能使用RPi AI Camera了。

注2：如果PCIe介面已经拿去连接其他装置，通常是固态硬碟SSD，那也是只能使用RPi AI Camera，除非再用上一些变通的分接技巧则另当别论。

事实上多数的Edge AI、TinyML应用都与电脑视觉有关，若是传统自然语言处理（NLP）应用，其所需的运算力通常不用太多，甚至可能不需要硬体加速器，至於资料科学（DS）应用则较少用於Edge AI、TinyML。

若是近一、二年开始走红的大型语言模型（LLM）、生成式人工智慧（GenAI）等，业界一般认定需要40TOPS以上的运算力才能务实地即时反应，如此即便用上RPi AI Kit也是效能不足，AI Kit约13TOPS。而RPi AI Camera更是针对CV应用为主，其硬体加速特性不易在LLM、GenAI发挥。

Sony让创客轻松转向产业实务应用

Sony不仅提供IMX500硬体还提供配套的开发软体与服务平台，开发软体为Brain Builder for AITRIOS（Local Studio），服务平台为AITRIOS。

开发软体安装在开发者端的电脑里，可以让开发者快速有效地进行图片资料标记、有效地训练AI模型，Sony官方强调不用写程式（No Code），只要四步骤就能让模型从新增到布署，步骤分别是1) 选择资料集 2) 开始训练 3) 检视训练成效 4) 模型输出。另外，开发软体可以把过往用TensorFlow或PyTorch等框架训练成的模组转换过来使用。

至於AITRIOS平台可以让管理者大规模地管理装置与模型、可以在平台上建立各项专案、设定专案成员角色与权限、在线上市集（Marketplace）购买现成可用的应用程式等。

尺寸厚度略要注意

与过往树莓派摄影机模组相同的，RPi AI Camera也是用CSI介面与树莓派连接，而且模组的长宽尺寸也跟过往的摄影机模组相同，这表示本来的专案理论上可以直接拆起原有的摄影机，改换装新的RPi AI Camera。

图三 : Raspberry Pi AI Camera用软板接上树莓派的CSI连接器介面（图片来源：树莓派官网）

不过，因为RPi AI Camera有AI加速设计，即前述的硬体加速电路、记忆体等，所以厚度是比过往的模组厚一些。所以，如果过往的专案若内部空间很紧凑，摄影模组背面真的没有太多的实体馀裕空间，也是无法换用RPi AI Camera的。

结语

归结而言，树莓派官方推出Raspberry Pi AI Kit、AI Camera，背後倚仗的是以色列Hailo公司Hailo-8L晶片及其配套软体，以及日本Sony公司IMX500感测器及其配套软体与平台，显示树莓派官方加速拥抱Edge AI、TinyML。

然而这也显示，虽然树莓派走向专属处理器、控制器路线（背後是Broadcom的技术支援），但现有专属处理器、控制器难以延伸到Edge AI、TinyML领域，快速接轨援引合用的软硬体才是上策，以免错失市场机会。

（本文由VMAKER授权转载；连结原文网址）