搜索新闻

索尼发布两款具备AI处理功能的智能视觉传感器

来源:投影时代 更新日期:2020-05-19 作者:pjtime资讯组

    2020年5月14日,日本,东京——索尼公司(下称:索尼)宣布将发布两款具备AI(人工智能)处理功能的智能视觉传感器。图像传感器自带AI处理功能,可在实现高速的边缘AI处理的同时只提取必要数据,从而减少使用云端服务时的数据传输延迟,保证隐私安全,并降低功耗和通信成本。新发布的图像传感器极大拓宽了AI摄像头的研发空间,将有望广泛应用于零售和工业设备行业,并有助于构建与云端连接的优化系统。

智能视觉传感器左:IMX500 右:IMX501    

索尼发布两款具备AI处理功能的智能视觉传感器

    物联网的普及让所有类型的设备都能连接到云端,使得信息处理系统得到广泛应用,从这些设备获得的信息需通过云上的AI进行处理。

    另一方面,云端处理的信息量越来越大,也带来了各种问题:

    数据传输延迟的增加,阻碍了实时信息处理;

    在云端存储个人身份数据相关的用户隐私安全问题;

    云服务的使用功耗和通信成本的提高等其它问题。

    而新款传感器的主要功能可以很好地解决以上行业痛点

    1 具备AI处理功能的图像传感器

    像素芯片是背照式进光的,有效像素约为1230万,可以捕捉广阔视角的图像信息。

    除了传统的图像传感器操作电路外,其逻辑芯片还配备了索尼原发的DSP(数字信号处理器),专门用于AI信号处理,并为AI模型存储。这种配置无需高性能处理器或外部存储,使其成为边缘AI系统的理想选择。

2 元数据输出

    像素芯片采集的信号通过ISP(图像信号处理器)进行处理,并在逻辑芯片的处理层进行AI运算,将提取的信息作为元数据输出,可以减少需要处理的数据量。同时,不输出图像信息有助于降低安全风险和保证隐私安全。

    除了传统图像传感器捕捉的图像外,用户还可以根据自己的需要和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI(感兴趣区域)特定区域提取图像。

    3 高速AI处理

    当使用传统的图像传感器录制视频时,需要发送每一帧的视频数据进行AI处理,导致数据传输量大,难以实时呈现结果。

    索尼的新款传感器产品在逻辑芯片上进行ISP处理和高速AI运行(MobileNet V1*¹ 3.1毫秒处理),在一个视频帧内完成整个过程。这种设计可以在录制视频的同时保证高精度、实时的目标追踪。

    mobilenet V1:一种用于移动设备上目标识别的图像分析AI模型。

    用户可以将自己选择的AI模型写入嵌入式内存中,并根据其需求或系统使用位置对其进行改写和更新。

    例如,当多个搭载新款传感器的摄像头被安装在零售场所时,某个单一类型的摄像头可以在不同的地点、环境、时间或目的下使用:当安装在场所入口时,可用于计算访客人数;当安装在商店的货架上时,可以用来检测库存短缺;当安装在天花板上时,它可以用来绘制商店客流的热力图(探测到许多人聚集的位置),等等。

    此外,指定相机中的AI模型可以被改写,从一个用于检测热力图的模型变成一个用于识别消费者行为的模型,等等。

广告联系:010-82755684 | 010-82755685 手机版:m.pjtime.com官方微博:weibo.com/pjtime官方微信:pjtime
Copyright (C) 2007 by PjTime.com,投影时代网 版权所有 关于投影时代 | 联系我们 | 欢迎来稿 | 网站地图
返回首页 网友评论 返回顶部 建议反馈
快速评论
验证码: 看不清?点一下
发表评论