最新突破!我國科學家研制出世界首款類腦互補視覺芯片“天眸芯”
作者:張心怡 夏冬陽 來源:中國電子報、電子信息產業網
近日,清華大學精密儀器系類腦計算研究中心團隊研制出了世界首款類腦互補視覺芯片“天眸芯”,基于該研究成果的論文《面向開放世界感知具有互補通路的視覺芯片》作為封面文章,登上5月30日的《自然》(Nature)雜志,標志著我國在類腦計算和類腦感知方向上取得突破。
據悉,該芯片可在極低的帶寬和功耗代價下,實現每秒10000幀的高速、10bit的高精度、130dB的高動態范圍的視覺信息采集,不僅為智能革命的發展提供了強大技術支持,還為自動駕駛、具身智能等重要應用開辟了新的道路。
視覺感知,作為智能無人系統獲取信息的核心途徑發揮著至關重要的作用。但在面對駕駛中的突發危險、隧道口的劇烈光線變化和夜間強閃光干擾等極端場景時,傳統視覺感知芯片由于受到“功耗墻”“帶寬墻”的限制,往往出現失真、失效或高延遲的問題,嚴重影響了系統的穩定性和安全性。
為更好應對上述問題,精儀系類腦計算研究團隊聚焦類腦視覺感知芯片技術,提出了一種基于視覺原語的互補雙通路類腦視覺感知新范式。論文通訊作者、清華大學精密儀器系教授施路平介紹:“該范式借鑒了人類視覺系統的基本原理,將開放世界的視覺信息拆解為基于視覺原語的信息表示,并通過有機組合這些原語,模仿人視覺系統的特征,形成兩條優勢互補、信息完備的視覺感知通路?!?/span>
同時,基于“天眸芯”,團隊還自主研發了高性能軟件和算法,并在開放環境車載平臺上進行了性能驗證。在多種極端場景下,該系統實現了低延遲、高性能的實時感知推理,展現了其在智能無人系統領域的巨大應用潛力。