选型指南

索尼发布全球首款具备AI功能的传感器

发布时间:2020-05-15 00:00:00 责任编辑:lina

【导读】索尼公司今天宣布将发布两款智能视觉传感器,也是全球首款具备AI(人工智能)处理功能的图像传感器。*1图像传感器自带AI处理功能,可在实现高速的边缘AI处理的同时只提取必要数据,从而减少使用云端服务时的数据传输延迟,保证隐私安全,并降低功耗和通信成本。
 
 
 
业日本,东京——索尼公司(下称:索尼)今天宣布将发布两款智能视觉传感器,也是全球首款具备AI(人工智能)处理功能的图像传感器。*1图像传感器自带AI处理功能,可在实现高速的边缘AI处理的同时只提取必要数据,从而减少使用云端服务时的数据传输延迟,保证隐私安全,并降低功耗和通信成本。
 
新发布的图像传感器极大拓宽了AI摄像头的研发空间,将有望广泛应用于零售和工业设备行业,并有助于构建与云端连接的优化系统。
 
索尼发布全球首款具备AI功能的传感器
左:IMX500 右:IMX501
 
索尼发布全球首款具备AI功能的传感器
 
物联网的普及让所有类型的设备都能连接到云端,使得信息处理系统得到广泛应用,从这些设备获得的信息需通过云上的AI进行处理。另一方面,云端处理的信息量越来越大,也带来了各种问题:数据传输延迟的增加,阻碍了实时信息处理;在云端存储个人身份数据相关的用户隐私安全问题;云服务的使用功耗和通信成本的提高等其它问题。
 
新款传感器的特点是像素芯片和逻辑芯片组成的堆叠式结构,是全球首款在逻辑芯片上配备AI图像分析和处理功能的图像传感器。像素芯片获取的信号通过传感器上的AI进行处理,无需高性能处理器或外部存储,可助力边缘AI系统的开发。传感器输出元数据(属于图像数据的语义信息)而不是图像信息,从而减少了数据量并保证了隐私安全。此外,AI能够为广泛应用领域提供多样化的功能,例如高速AI处理下进行实时对象跟踪。也可以根据用户的需求或系统使用位置重新编写内存来选择不同的AI模型。
 
索尼智能视觉传感器介绍视频:
https://v.youku.com/v_show/id_XNDY3MjE1MDUwNA==.html
 
主要功能
 
全球首款具备AI处理功能的图像传感器
 
像素芯片是背照式进光的,有效像素约为1230万,可以捕捉广阔视角的图像信息。除了传统的图像传感器操作电路外,其逻辑芯片还配备了索尼原发的DSP(数字信号处理器),专门用于AI信号处理,并为AI模型存储。这种配置无需高性能处理器或外部存储,使其成为边缘AI系统的理想选择。
 
索尼发布全球首款具备AI功能的传感器
 
元数据输出
 
像素芯片采集的信号通过ISP(图像信号处理器)进行处理,并在逻辑芯片的处理层进行AI运算,将提取的信息作为元数据输出,可以减少需要处理的数据量。同时,不输出图像信息有助于降低安全风险和保证隐私安全。除了传统图像传感器捕捉的图像外,用户还可以根据自己的需要和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI(感兴趣区域)特定区域提取图像。
 
索尼发布全球首款具备AI功能的传感器
可选择数据输出格式,以满足各种需要
 
高速AI处理
 
当使用传统的图像传感器录制视频时,需要发送每一帧的视频数据进行AI处理,导致数据传输量大,难以实时呈现结果。索尼的新款传感器产品在逻辑芯片上进行ISP处理和高速AI运行(MobileNet V1*2 3.1毫秒处理),在一个视频帧内完成整个过程。这种设计可以在录制视频的同时保证高精度、实时的目标追踪。
 
*2 mobilenet V1:一种用于移动设备上目标识别的图像分析AI模型。
 
可自由选择AI模型
 
用户可以将自己选择的AI模型写入嵌入式内存中,并根据其需求或系统使用位置对其进行改写和更新。例如,当多个搭载新款传感器的摄像头被安装在零售场所时,某个单一类型的摄像头可以在不同的地点、环境、时间或目的下使用:当安装在场所入口时,可用于计算访客人数;当安装在商店的货架上时,可以用来检测库存短缺;当安装在天花板上时,它可以用来绘制商店客流的热力图(探测到许多人聚集的位置),等等。此外,指定相机中的AI模型可以被改写,从一个用于检测热力图的模型变成一个用于识别消费者行为的模型,等等。
 
索尼发布全球首款具备AI功能的传感器
摄像头在商场中使用的案例
 
 

为您推荐

索尼开发出利用电磁波噪声高效发电的能量收集模块 选型指南

索尼开发出利用电磁波噪声高效发电的能量收集模块

索尼半导体解决方案公司(下称“SSS”)宣布开发出一种利用电磁波噪声能量的能量收集*1模块。新模块应用了SSS在调谐器开发过程中积累的技术,可高效利用电磁波噪声发电。例如,这项技术可以利用工厂内的机器人、办公场所内的显示器和照明设备、商店和家庭中的显示器和电视机等产生的持续电磁波噪声,为低功耗的物联网传感器和通信设备提供运行所需的稳定电力。

通信广电 智能家居 电源管理 传感技术 传感器 Sony(索尼)

Innatera即将亮相MWC26上海并展示可加速物理AI走进生活的超低功耗AI技术 行业活动

Innatera即将亮相MWC26上海并展示可加速物理AI走进生活的超低功耗AI技术

6月22日——传感器边缘神经形态处理器领域领导厂商Innatera(注:Innatera中文注册商标为“利塔纳”)今日宣布:公司将参加2026上海世界移动通信大会(MWC26上海),并将在展会上展示其新一代计算范式如何赋能物理AI(Physical AI)。随着中国加速投资于智能设备、智慧空间、AI可穿戴设备、机器人以及端侧智能等领域,下一阶段的竞争焦点已不再局限于更大规模的AI模型,而是转向在感知物理世界时实现更高效的智能处理。

通信广电 医疗穿戴 电源管理 传感技术 传感器

意法半导体推出全新超低功耗图像传感器,赋能新一代消费电子产品 全天候视觉感知能力 选型指南

意法半导体推出全新超低功耗图像传感器,赋能新一代消费电子产品 全天候视觉感知能力

2026年5月9日,中国 – 服务多重电子应用领域、全球排名前列的半导体公司意法半导体 (STMicroelectronics,简称ST) (纽约证券交易所代码:STM) 推出新一代超低功耗的全局快门图像传感器,让依靠电池或能量采集技术供电的尺寸紧凑的设备同样具有高品质的全天候视觉感知能力。新产品VD55G4(单色)和VD65G4(彩色)图像传感器属于 ST BrightSense产品组合,现已向早期用户开放供应,助力厂商即刻启动新一代超低功耗智能视觉设备的研发设计。

通信广电 能源电路 电源管理 传感技术 传感器 ST(意法半导体)

汽车IC分类一张图,国际大厂与中国步伐有差异 技术应用

汽车IC分类一张图,国际大厂与中国步伐有差异

汽车IC就是车规级产品,满足汽车质量管理体系,符合可靠性和功能安全要求的集成电路。中国汽车芯片产业创新战略联盟(以下简称“联盟”)在2020年发布了《纯电动乘用车车规级芯片一般要求》团体标准,将汽车半导体分为10个大类和60个小类,10个大类分别包括控制芯片、存储芯片、计算芯片、信息安全芯片、驱动芯片、通信芯片、功率芯片、电源芯片、模拟芯片以及传感器。

通信广电 汽车电子 电源管理 传感技术 传感器

特别推荐

更多

行业动态

更多

技术应用

更多

选型替代

更多

产品信息

更多

热门搜索

更多

欢迎登录

没有账号,

账号注册

注册成功!

3S后自动为你跳转登陆