最新突破！我國(guó)科學(xué)家研制出世界首款類(lèi)腦互補(bǔ)視覺(jué)芯片“天眸芯”
最新突破！我國(guó)科學(xué)家研制出世界首款類(lèi)腦互補(bǔ)視覺(jué)芯片“天眸芯”
作者：張心怡 夏冬陽(yáng) 來(lái)源：中國(guó)電子報(bào)、電子信息產(chǎn)業(yè)網(wǎng)
近日，清華大學(xué)精密儀器系類(lèi)腦計(jì)算研究中心團(tuán)隊(duì)研制出了世界首款類(lèi)腦互補(bǔ)視覺(jué)芯片“天眸芯”，基于該研究成果的論文《面向開(kāi)放世界感知具有互補(bǔ)通路的視覺(jué)芯片》作為封面文章，登上5月30日的《自然》(Nature)雜志，標(biāo)志著我國(guó)在類(lèi)腦計(jì)算和類(lèi)腦感知方向上取得突破。
據(jù)悉，該芯片可在極低的帶寬和功耗代價(jià)下，實(shí)現(xiàn)每秒10000幀的高速、10bit的高精度、130dB的高動(dòng)態(tài)范圍的視覺(jué)信息采集，不僅為智能革命的發(fā)展提供了強(qiáng)大技術(shù)支持，還為自動(dòng)駕駛、具身智能等重要應(yīng)用開(kāi)辟了新的道路。
視覺(jué)感知，作為智能無(wú)人系統(tǒng)獲取信息的核心途徑發(fā)揮著至關(guān)重要的作用。但在面對(duì)駕駛中的突發(fā)危險(xiǎn)、隧道口的劇烈光線變化和夜間強(qiáng)閃光干擾等極端場(chǎng)景時(shí)，傳統(tǒng)視覺(jué)感知芯片由于受到“功耗墻”“帶寬墻”的限制，往往出現(xiàn)失真、失效或高延遲的問(wèn)題，嚴(yán)重影響了系統(tǒng)的穩(wěn)定性和安全性。
為更好應(yīng)對(duì)上述問(wèn)題，精儀系類(lèi)腦計(jì)算研究團(tuán)隊(duì)聚焦類(lèi)腦視覺(jué)感知芯片技術(shù)，提出了一種基于視覺(jué)原語(yǔ)的互補(bǔ)雙通路類(lèi)腦視覺(jué)感知新范式。論文通訊作者、清華大學(xué)精密儀器系教授施路平介紹：“該范式借鑒了人類(lèi)視覺(jué)系統(tǒng)的基本原理，將開(kāi)放世界的視覺(jué)信息拆解為基于視覺(jué)原語(yǔ)的信息表示，并通過(guò)有機(jī)組合這些原語(yǔ)，模仿人視覺(jué)系統(tǒng)的特征，形成兩條優(yōu)勢(shì)互補(bǔ)、信息完備的視覺(jué)感知通路。”
同時(shí)，基于“天眸芯”，團(tuán)隊(duì)還自主研發(fā)了高性能軟件和算法，并在開(kāi)放環(huán)境車(chē)載平臺(tái)上進(jìn)行了性能驗(yàn)證。在多種極端場(chǎng)景下，該系統(tǒng)實(shí)現(xiàn)了低延遲、高性能的實(shí)時(shí)感知推理，展現(xiàn)了其在智能無(wú)人系統(tǒng)領(lǐng)域的巨大應(yīng)用潛力。
