5月30日,据清华大学消息,其类脑计算研究中心施路平教授团队成功研制出世界首款类脑互补视觉芯片“天眸芯”。
这一创新技术提出了一种基于视觉原语的互补双通路类脑视觉感知新范式,基于该研究成果的论文《面向开放世界感知具有互补通路的视觉芯片》作为封面文章发表在最新的《自然》(Nature)杂志上。这是继异构融合类脑计算“天机芯”后,该团队第二次登上Nature杂志封面,标志着中国在类脑计算和类脑感知方向取得重要突破。
视觉感知是智能无人系统获取信息的核心方式,对于系统稳定性和安全性至关重要。然而,传统视觉感知芯片受限于功耗和带宽,面对极端场景时往往会出现失真、失效或高延迟问题。
为了解决这些挑战,施路平教授带领的类脑计算研究团队专注于类脑视觉感知芯片技术的开发,并提出了一种创新的互补双通路类脑视觉感知范式。该范式借鉴并模仿人类视觉系统的基本原理和特征,创建了两条优势互补且信息完备的视觉感知路径。
于这一新范式,团队研发的“天眸芯”在极低带宽和功耗条件下,实现了每秒10000帧的高速视觉信息采集,具备10bit的高精度和130dB的高动态范围。此外,团队还自主研发了配套的高性能软件和算法,通过在开放环境车载平台上的性能验证,展示了在多种极端场景下该系统能够实现低延迟、高性能的实时感知推理,彰显了在智能无人系统领域的巨大应用潜力。