清華大學(xué)類腦計(jì)算研究中心團(tuán)隊(duì)近日研製出了世界首款類腦互補(bǔ)視覺(jué)晶片「天眸芯」，相關(guān)成果5月30日作為封面文章，發(fā)表於國(guó)際學(xué)術(shù)期刊《自然》。
論文通訊作者、清華大學(xué)精密儀器系教授施路平介紹，在開(kāi)放世界中，智能系統(tǒng)不僅要應(yīng)對(duì)龐大的數(shù)據(jù)量，還需要應(yīng)對(duì)如駕駛場(chǎng)景中的突發(fā)危險(xiǎn)、隧道口的劇烈光線變化和夜間強(qiáng)閃光干擾等極端事件。而傳統(tǒng)視覺(jué)感知晶片面對(duì)此類場(chǎng)景往往出現(xiàn)失真、失效或高延遲，限制系統(tǒng)的穩(wěn)定性和安全性。
為更好應(yīng)對(duì)上述問(wèn)題，清華大學(xué)類腦計(jì)算研究中心團(tuán)隊(duì)聚焦類腦視覺(jué)感知晶片技術(shù)，提出了一種基於視覺(jué)原語(yǔ)的互補(bǔ)雙通路類腦視覺(jué)感知新範(fàn)式。
「該範(fàn)式借鑑了人類視覺(jué)系統(tǒng)的基本原理，將開(kāi)放世界的視覺(jué)信息拆解為基於視覺(jué)原語(yǔ)的信息表示，並通過(guò)有機(jī)組合這些原語(yǔ)，模仿人視覺(jué)系統(tǒng)的特徵，形成兩條優(yōu)勢(shì)互補(bǔ)、信息完備的視覺(jué)感知通路。」施路平說(shuō)。
基於這一新範(fàn)式，團(tuán)隊(duì)進(jìn)一步研製出了世界首款類腦互補(bǔ)視覺(jué)晶片「天眸芯」，在極低的帶寬和功耗代價(jià)下，實(shí)現(xiàn)了高速、高精度、高動(dòng)態(tài)範(fàn)圍的視覺(jué)信息採(cǎi)集，能夠高效應(yīng)對(duì)各種極端場(chǎng)景，確保系統(tǒng)的穩(wěn)定性和安全性。
同時(shí)，基於「天眸芯」，團(tuán)隊(duì)還自主研發(fā)了高性能軟件和算法，並在開(kāi)放環(huán)境車載平臺(tái)上進(jìn)行了性能驗(yàn)證。在多種極端場(chǎng)景下，該系統(tǒng)實(shí)現(xiàn)了低延遲、高性能的實(shí)時(shí)感知推理，展現(xiàn)了其在智能無(wú)人系統(tǒng)領(lǐng)域的應(yīng)用潛力。
論文通訊作者、清華大學(xué)精密儀器系教授趙蓉表示，「天眸芯」為自動(dòng)駕駛、具身智能等重要應(yīng)用開(kāi)闢了新的道路。結(jié)合團(tuán)隊(duì)在類腦計(jì)算晶片「天機(jī)芯」、類腦軟件工具鏈和類腦機(jī)械人方面的應(yīng)用落地的技術(shù)積累，「天眸芯」的加入將能夠進(jìn)一步完善類腦智能生態(tài)，有力推動(dòng)人工通用智能的發(fā)展。
據(jù)介紹，這是該團(tuán)隊(duì)繼異構(gòu)融合類腦計(jì)算「天機(jī)芯」後，第二次登上《自然》封面，標(biāo)誌著在類腦計(jì)算和類腦感知兩個(gè)方向上均取得了基礎(chǔ)性突破。
頂圖圖説：圖為「天眸芯」。(清華大學(xué)精密儀器系供圖)
電話：（香港）852-2564 0768
（深圳）86-755-83518792 83518734 83518291
地址：香港九龍觀塘道332號(hào)香港商報(bào)大廈
