你的位置:首页 > 新品 > 正文

从仿真到真机无缝衔接:新多模视觉模块助力人形机器人快速跨越“虚实鸿沟”

发布时间:2026-03-26 责任编辑:lily

【导读】2026年3月26日,意法半导体(STMicroelectronics)携手Leopard Imaging®公司,针对这一挑战重磅推出了一款专为先进机器人系统打造的一体化多模视觉模块。该创新方案不仅深度融合了意法半导体在图像、3D深度及运动感知领域的顶尖传感器技术,更通过英伟达Holoscan Sensor Bridge实现了与NVIDIA Jetson及Isaac平台的原生无缝集成,旨在为开发者提供一套兼顾高性能、低功耗与小尺寸的“即插即用”视觉解决方案,从而大幅缩短人形机器人的研发周期并加速物理AI的实际部署。


1774494162454295.png


意法半导体模拟、功率、MEMS和传感器产品部市场与应用副总裁Marco Angelici表示:“人形机器人技术正从研究项目和演示阶段走向实际应用,为设备制造厂、汽车工厂、物流仓储中心、零售和客户服务等众多行业带来强大的新型机器,在实际应用中扮演各种不同的角色。通过与Leopard Imaging合作,我们正在将市场领先的ST传感器和执行器无缝集成到英伟达机器人生态系统,加快具有类人感知能力的物理AI应用的部署。”


Leopard Imaging首席执行官Bill Pu表示: “通过在英伟达生态内直接使用ST传感器和执行器,我们可以对HSB接口上的人形机器人视觉数据进行标准化采集记录,并简化整个过程。多模视觉感知模块与Isaac工具配合使用,可以加快模型的学习速度,并快速弥合仿真到真机的差异。”


通过整合车规级VB1940影像传感器、带机器学习核心的LSM6DSV16X IMU以及高精度VL53L9CX dToF激光雷达,新模块在单一紧凑架构内实现了卓越的二维成像、三维建模与动态捕捉能力。更重要的是,其深度融入NVIDIA Isaac开发平台与仿真环境,有效解决了从虚拟训练到真机部署的“虚实鸿沟”难题。


1774494189491406 (1).png


技术资料


Leopard Imaging Systems 的视觉模块包含:


关于视觉感知, ST VB1940 车规级510万像素RGB-IR影像传感器具有卷帘快门和全局快门两种模式。意法半导体还发布了面向大众市场和工业市场的Vx5943/Vx1943影像传感器,这款产品属于意法半导体BrightSense系列,提供单色和 RGB-IR两类传感器,交付形式分为裸片和封装芯片。


关于运动感知,LSM6DSV16X六轴惯性测量单元 (IMU) 集成了意法半导体机器学习核心 (MLC),适用于边缘人工智能、低功耗传感器融合(SFLP)和用户界面Qvar静电感测功能。


关于3D 深度感知,VL53L9CX 是意法半导体FlightSense 产品系列中的最新一款dToF一体化激光雷达模块,3D深度感知精准,测距长达 9 米,能够测量54x42个区域(接近 2,300个测距区),视场角为54°x42°,角度分辨率为1°,在100 fps速率下,可以测量近/远距离的小目标物。




3-958x200_20251021044704_586.png

特别推荐
技术文章更多>>
技术白皮书下载更多>>
热门搜索

关闭

 

关闭