索尼已经揭示了第一个组合AI芯片和图像传感器,该传感器将使相机更聪明。根据来自边缘,据宣布,索尼已经开发了世界上第一个具有集成AI Smarts的图像传感器。
新的IMX500传感器将具有内存和处理能力,该传感器将使相机具有机器学习驱动的计算机视觉任务性能,而无需任何额外的硬件。
另请阅读:苹果新闻更新:Apple购买NextVr;增强现实眼镜和耳机即将到来

索尼说,创新的结果将产生更便宜,更快,更安全的AI摄像机。在过去几年中,人工智能已在从监视摄像机到智能手机的许多设备中使用。
但是,提高照片的质量并不是机器学习的唯一目标。它还专注于将视频理解为人类,例如识别框架中的对象和人员。机器学习技术负责开发自动监视和自动驾驶汽车。
但是,该技术的应用极大地依赖于将视频和图像发送到云中,然后进行分析。该过程可能会很慢且不安全,因为它可以将数据暴露于黑客和网络攻击。为了避免这些情况,制造商必须在设备上安装专门的处理核心,例如在Apple,Huawei和Google的高端手机中,以处理额外的计算需求。
索尼将首次拥有AI芯片和图像传感器,以改善其相机分辨率并提供更智能的服务
根据边缘与其他技术方法相比,索尼的新图像传感器将提供更简化的解决方案。索尼商业创新副总裁马克·汉森(Mark Hanson)澄清说,还有其他一些实施此类解决方案的方法。他说的是边缘计算技术,该技术使用了未直接连接到图像传感器的专用AI芯片。

第一代AI图像传感器可能不会集成到平板电脑和智能手机等消费设备中。汉森说,这项技术将有可能在亚马逊的无收银员Go商店中应用。
索尼将针对零售商和工业客户。零售商使用了亚马逊Go商店中的AI启用摄像机来跟踪购物者,并向他们收取他们从相机捕获的货架上抢购的物品。
AI图像传感器不仅可以节省成本,而且还可以提供隐私益处。如果将芯片直接输入图像传感器的背面,则可以在设备上进行对象检测。
图像传感器本身将提供必需的AI分析,并简单地产生元数据,而不是将数据发送到云或附近的处理器进行分析。 IMX500将仅3.1毫秒的视频框架应用于单个视频框架的标准图像识别算法(Mobilenet V1)的能力使其比许多其他AI摄像机更快。