服务广泛电子应用领域之全球半导体领导厂商意法半导体(STMicroelectronics,简称 ST,纽约证券交易所代码:STM)与 Leopard Imaging 推出一款一体化多模态视觉模组,适用於人形机器人及其他先进机器人系统。该模组结合 ST 的影像技术、3D 场景建模与动作感测技术,利用NVIDIA Holoscan Sensor Bridge 技术,该模组与NVIDIA Jetson和NVIDIA Isaac开放式机器人开发平台可以原生整合,在满足人形机器人尺寸、重量与功耗(SWaP)限制的前提下,简化并加快视觉系统设计流程。
 |
| /news/2026/03/20/1654272670S.jpg |
意法半导体类比、电源与 MEMS 感测器事业部行销与应用??总裁 Marco Angelici 表示,「人形机器人正逐步从研究专案与展示阶段迈向实际应用,并可在制造与汽车工厂、物流与仓储,以及零售与顾客服务等多元领域中发挥价值。我们与 Leopard Imaging 的合作,将 ST 的感测器与致动器导入 NVIDIA 机器人生态系,透过紧密整合,加速具备类人感知能力的实体 AI 应用部署。」
Leopard Imaging 执行长 Bill Pu 指出,「在 NVIDIA 机器人生态系中可直接使用 ST 的感测器与致动器,使资料撷取与记录流程得以透过 HSB(Holoscan Sensor Bridge,高速感测资料传输介面)进行标准化并加以简化,支援人形机器人视觉应用。机器人开发者可运用该多感测视觉模组搭配 NVIDIA Isaac 工具,加快学习速度,并迅速缩短从模拟到实际应用(sim-to-real)的落差。」
该模组采用 NVIDIA Holoscan Sensor Bridge,透过乙太网路与 NVIDIA Jetson 平台无缝串接,可即时接收感测器资料,并支援 NVIDIA Isaac 开放式机器人开发平台,提供开发者开放的 AI 模型、模拟框架及开发函式库。此模组亦包含建置系统与应用程式介面(API)、适用於行动机器人的人工智慧(AI)演算法、范例应用程式、领域随机化技术,以及内含感测器模型的模拟环境。
ST 持续将其感测器、驱动器、致动器、控制器及开发工具纳入 NVIDIA 机器人生态系,并作为 NVIDIA 在机器人与边缘 AI 领域的重要合作夥伴,同步提供高拟真模型与概念验证模组。
技术资讯
Leopard Imaging Systems 视觉模组整合以下元件:
视觉感测采用 ST VB1940 车规等级 RGB-IR 510 万画素影像感测器,支援滚动式快门与全域快门模式。ST 亦推出适用於大众市场与工业应用的 V**943,同属 ST BrightSense 产品系列,提供单色或 RGB-IR 选项,并可采裸晶或封装形式出货。
动作感测搭载 LSM6DSV16X 六轴惯性量测单元(IMU),内建 ST 机器学习核心(MLC),支援边缘 AI、感测器融合低功耗(SFLP),以及 Qvar 静电感测技术,可用於使用者介面侦测。
3D 深度感测采用 VL53L9CX 直接飞时测距(dToF)一体式光达(LiDAR)模组,属於 ST FlightSense 产品系列,可提供最远达 9 公尺的精准测距能力。该模组具备 54 x 42 区域(约 2,300 区)解析度,搭配 54。 x 42。 广角视野(FoV)与 1。 角解析度,可支援短距与长距测量,以及小型物体侦测,最高更新率可达 100 fps(每秒影格数)。