【导读】全球领先的半导体厂商意法半导体与算力巨头英伟达于2026年3月25日正式宣布达成深度战略融合。此次合作旨在打破虚拟仿真与真实部署之间的壁垒,通过将意法半导体完善的传感器、微控制器及电机控制解决方案全面接入英伟达的机器人生态系统,为开发者构建起从设计、训练到部署的高效闭环。作为首批合作成果,Leopard Imaging基于意法半导体技术打造的立体深度相机已实现与英伟达Holoscan Sensor Bridge技术的无缝对接,同时意法半导体的高保真IMU传感器模型也正式纳入NVIDIA Isaac Sim生态。
意法半导体负责美洲区及全球大客户销售与市场部的执行副总裁Rino Peruzzi表示:“ST积极参与机器人行业的生态合作,为市场提供强有力的支持和完善的生态系统。我们与英伟达的合作目标是在尖端机器人领域掀起新一波创新浪潮,从人工智能算法的创建开发,到传感器和执行器的无缝集成,精简优化机器人研发流程的每一环节,加快复杂的物理AI平台的升级迭代。”
英伟达机器人与边缘人工智能部副总裁 Deepu Talla 表示“加快开发下一代自主系统需要高保真仿真和硬件无缝集成,弥合虚拟训练和真机部署之间的差异。ST传感器和执行器技术与 NVIDIA Isaac Sim、Holoscan Sensor Bridge 和 Jetson 平台的深度集成,为开发者构建、仿真和大规模部署物理AI提供了一个统一的底层平台。”
通过Holoscan Sensor Bridge简化传感器和执行器与机器人平台的无缝集成
通过NVIDIA HSB技术,开发者可以统一、标准化、同步和精简从多个意法半导体传感器和执行器采集记录数据的过程,为构建高保真 NVIDIA Isaac 模型、加快学习和最大限度缩小仿真与真机之间的差异奠定了基础。
双方合作目标是通过人形机器人预集成解决方案,整合STM32 MCU、高级传感器(包括IMU惯性测量单元、成像传感器和ToF测距芯片)和电机控制解决方案,简化意法半导体传感器和执行器与NVIDIA Jetson平台的集成过程。Leopard Imaging的机器人立体深度相机就是一个完美例子。该相机采用意法半导体的成像传感器、深度测距和运动感测技术,有望助力支持物理人工智能OEM厂商、学术研究机构、工业机器人等各种机器人设计。
通过构建基于Omniverse Isaac的高保真模型,攻克产品成本和设计复杂性挑战
除了建模挑战外,高级机器人开发者还面临着高昂的开发成本。高保真仿真及广泛随机化需占用大量的GPU和CPU资源以及庞大的数据集。选择随机化哪些参数以及随机化范围需要深厚的域专业知识,而选择不当会导致场景不真实或训练效率低。最后,参数过度变化会导致模型混乱,减缓收敛速度,当随机化不再反映真实条件时,可能会降低真机性能。
意法半导体和英伟达的目标是让意法半导体丰富的产品组合具有准确的硬件校准模型,满足高级机器人技术的需求。在首个IMU模型发布后,意法半导体还为开发者提供ToF 传感器、执行器和其他芯片的基于实体硬件基准测试数据建立的模型。该解决方案使用意法半导体的工具捕捉准确参数和真实的硬件行为特性,然后针对英伟达的Isaac Sim生态系统对模型进行优化。NVIDIA HSB 正在通过合作方式融入意法半导体工具链。
通过Holoscan Sensor Bridge技术实现了传感器数据流的统一与标准化,更凭借基于实体硬件基准测试数据构建的高保真Isaac Sim模型,从根本上解决了机器人开发中仿真与真机行为不一致的痛点。这种从底层硬件到上层算法的全链路优化,显著降低了高级机器人研发的复杂性与高昂成本,使开发者能够在更真实的虚拟环境中高效训练技能,从而大幅缩短产品迭代周期。




