技术

iCatch和Prophesee合作开发AI视觉处理器

盖世汽车刘丽婷 2022-04-18 15:49

盖世汽车讯据外媒报道，图像信号处理（ISP）技术和摄像头SOC公司iCatch Technology（iCatch）与先进神经形态视觉系统开发商Prophesee就基于事件的Metavision传感项目达成合作。

该项目将iCatch的V57 AI视觉处理器与新的索尼半导体解决方案（Sony Semiconductor Solutions，SSS）堆叠的基于事件的视觉传感器（Event-based Vision Sensor）IMX636集成在一起，实现SSS和Prophesee间的合作。

图片来源：iCatch

iCatch为所有算法合作伙伴和ODM客户构建了OpenMVCam开发平台，可在监控、智能医疗、车内监控系统、智能家居、工业自动化、智慧城市等多个细分市场设计各种AI产品、系统和应用程序。

iCatch还可提供高度定制化的服务和卓越的图像质量系统，以应用于未来所有机器视觉设备和智能设备。

SSS的基于事件的视觉传感器可以作为iCatch AI视觉处理器的输入源，基于iCatch内置的NPU加速引擎和专有的CV处理硬件引擎。它可以集成Prophesee 的Metavision Intelligence SDK和其他第三方的机器视觉算法，以支持终端客户的AI视觉应用，例如汽车驾驶舱中的DMS和OMS、家庭医疗保健和医院中的患者/老人跌倒检测、家庭监控的入侵检测、工业自动化中的异常检测、智能家电中的手势控制，以及AR/VR中的眼动追踪等。

Prophesee为计算机视觉应用开发出突破性的基于事件的视觉方法。受人类视网膜的启发，基于事件的视觉传感器具有像素，且每个像素都由自己的嵌入式智能处理驱动，因此当检测到照明强度的相对变化（即运动）时，像素可以独立激活。这种新方法显著降低了功耗和处理的数据量，同时提供了超高速采集、强弱光和HDR性能。

内置硬件事件解码器的iCatch AI视觉处理器可以原生支持SSS的基于事件的视觉传感器IMX636，无需外部FPGA或接口芯片作为事件解码器，以降低系统成本。该处理器内置NPU加速引擎和CV处理引擎，可提供机器视觉算法所需的加速和优化。除了能够获得iCatch在人类视觉和机器视觉应用的低功耗设计和优化方面的高灵活性关键优势外，iCatch AI视觉处理器还可获益于基于事件的视觉传感器和第三方合作伙伴的机器视觉算法，可以满足各种机器视觉应用和边缘计算生态系统。