您的位置:首页 >创新 >

索尼智能视觉传感器是第一个在船上拥有AI加工硬件的智能视觉传感器

时间:2022-01-12 11:26:19 来源:

几年前索尼创建了一个带有片上RAM的第一款图像传感器,这使能在非常高的帧速率下使慢动作视频捕获。现在公司已经创建了具有车载AI硬件的第一个传感器,可以进行高速图像识别。

IMX500智能视觉传感器IMX500具有堆叠设计,包括像素芯片(1 / 2.3“,12.3MP分辨率,1.55μm像素)和逻辑芯片,具有索尼开发的DSP和AI型号的内存。

传感器可以在60fps捕获4K视频,但更重要的是,它仅需要3.1毫秒来分析图像(使用Google的MobileNet V1模型)。它甚至不需要输出图像,它可以发送要处理的元数据。

正如索尼所说,这是一个福林,因为图像数据永远不会离开芯片(并且当然不需要在互联网上发送到云)。而且,由于AI模型可以是CONPD,因此可以使用相同的硬件来用于各种任务。

一个简单的例子是将IMX500放在汽车中并将其指向驱动程序。如果传感器检测到驾驶员分散注意力或睡着,则可以向汽车发出警告。即使外部处理器可以执行相同的任务,只使用图像传感器更简单(更可靠)和更便宜。

商店可以使用智能视觉传感器进行许多任务。例如,人们可以在门口,计算有多少人进去了。另一个人可以留在架子上,在股票运行低时发送通知。另一个可以确定大多数人去的地区以及他们拿起的产品。

该传感器在收银机上有可能的应用

IMX500不太可能在智能手机中找到它的方式。但它可以作为智能扬声器的一部分进入您的家 - 例如,它可以看到谁在提出问题,这将有助于系统提供更相关的答案。而且,再次,由于图像传感器可以输出“汤姆正在说”,因此隐私问题降低,而不是捕获照片并发送处理。

它不仅仅是隐私,使用该传感器的设计将具有更低的延迟,需要很少的带宽,它会降低电源使用来启动。

3.1毫秒分析图像比传统方法快得多,使需要需要闪电快速反应时间(例如工业机器人)。此外,与4K / 60FPS相比,元数据与4K / 60FPS相比它是基于的,因此数百个摄像机可以共享相对较慢的数据连接。

IMX500(只需传感器)和IMX501(LGA包中的传感器)将很快抽取,索尼认为第一个使用它们将于明年出来。目前,这两项分别为10,000日元,分别为20,000日元(即94美元和187美元)。


郑重声明:文章仅代表原作者观点,不代表本站立场;如有侵权、违规,可直接反馈本站,我们将会作修改或删除处理。
猜你喜欢