Prophesee展示事件视觉传感技术:让AI运算与超高清拍摄效率成倍提升

热点科技 2024-07-04 17:18:08

传统影像能够记录的东西十分地丰富,主要是为人眼而生,有很多的细节,一般来说以24帧或者30帧为限,能够组成连贯的影像。然而如今随着AI的兴起,AI对于算力的需求达到了前所未有的程度,需要快速、快捷且数据量庞大的运算,并且AI运算的精度就不用人眼这么高,因此对于传感器提出了新的需求,而在2024MWC上海上,Prophesee就展示了他们的事件视觉传感技术,以及基于该技术打造的事件视觉传感器,能够充分利用最新的科技来让AI处理以及高分辨率拍摄得到进一步的提升。

Prophesee事件视觉传感技术的灵感来源于人眼视觉,能够快速捕捉场景的运动信息,从而让拍摄更加清晰。例如RGB传感器在拍摄运动的物体的时候会变得十分地模糊,而如果采用边缘信号的话,那么将会十分地清晰,这是因为传统RGB传感器拍摄的图像是一帧一帧的,而事件视觉传感器则是抓拍到连贯的、时间上面稠密的影像,通过融合可以将原来30帧的画面插帧到120帧,甚至还可以达到上千帧的表现。不过对于手机用户来说,上千帧的速度显然太过于浪费,因此这种插帧的技术最大的作用就是降低了手机拍摄超高清视频所需要的数据量,例如拍摄一段60帧的8K视频,原来需要旗舰级的CMOS以及处理器,而现在有了事件视觉传感器,可以拍摄10-15帧的影像,随后用空间稀疏的技术补到30-60帧,进而大量节省CMOS的算力。除此之外Prophesee事件视觉传感器还可以帮助手机更好地识别光源的情况,从而给出对应的策略,例如提升快门曝光时间等,以解决十分让人头疼的频闪问题,达到提升手机影像效果的作用。

另外,事件视觉传感技术已经在老人跌倒检测领域得到应用。该技术涉及家居隐私保护和AI智能影像管理方面。与传统的毫米波雷达相比,事件传感在复杂环境中表现出很强的鲁棒性,解决了误报率高的问题,并且即使在洗手间湿度大的环境下也能保证超高准确度和极低误报率。此外雷鸟以及Ultraleap与Prophesee也有合作,共同研发低功耗的手势识别技术,借助事件视觉传感器事实地记录各种各样的数据,让AR眼镜作出最后的决策,相比较传统传感器,事件视觉传感器的优点在于更低的功耗,工作功耗在3-4毫瓦之间,与其他产品的待机功耗几乎相同,能够让AR眼镜大幅减少功耗,从而增加续航。可以说事件视觉传感器的普及也让手机、AR/VR等设备拥有更大的发挥空间,从而为消费者带来高效便捷的生活。

0 阅读:5

热点科技

简介:科技新媒体,关注科技热点