當(dāng)面對動態(tài)、多變且不可預(yù)測的環(huán)境時,傳統(tǒng)圖像傳感器往往力不從心,面臨諸多挑戰(zhàn)。這些挑戰(zhàn)主要包括動態(tài)范圍有限、數(shù)據(jù)冗余、感知延遲等幾個主要的方面。
動態(tài)范圍指在圖像或視頻中能夠捕捉到的最暗到最亮的可見范圍內(nèi)的所有像素范圍。動態(tài)范圍越大,設(shè)備可以捕捉到更多的像素變化,從深黑到明亮的細(xì)節(jié)都可以更清晰地展示出來。然而傳統(tǒng)傳感器的動態(tài)范圍非常有限,難以在強光和弱光環(huán)境下同時捕捉到清晰的圖像。
數(shù)據(jù)冗余則是指高分辨率和高速傳感器會產(chǎn)生大量數(shù)據(jù),增加了處理和傳輸?shù)呢?fù)擔(dān)。感知延遲是指由于處理速度的限制,傳感器在快速變化的環(huán)境中容易出現(xiàn)感知延遲,影響決策的及時性。
在自動駕駛、機器人和人工智能等領(lǐng)域,這些問題尤為明顯。例如,在自動駕駛中,傳感器必須能夠迅速而準(zhǔn)確地識別路況和潛在危險,但傳統(tǒng)傳感器在處理復(fù)雜場景(如突然出現(xiàn)的行人或車輛)時常常表現(xiàn)不佳。
這些技術(shù)障礙限制了圖像傳感器在復(fù)雜環(huán)境下的應(yīng)用,也催生了對更先進(jìn)的視覺感知技術(shù)的迫切需求?;趯θ祟愐曈X系統(tǒng)的模仿,清華大學(xué)的研究團(tuán)隊研發(fā)出了世界首款類腦互補視覺芯片——天眸芯片,突破了傳統(tǒng)視覺感知芯片的缺點,提供了前所未有的高效、精準(zhǔn)的視覺感知解決方案。
并行異構(gòu)讀出架構(gòu)是天眸芯片的核心部分。它的作用是將來自不同像素(如錐體和桿狀像素)的電信號以高速度和高精度轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)。這種架構(gòu)的優(yōu)勢在于能夠同時處理高動態(tài)范圍和高速度的感知需求,有效減少數(shù)據(jù)冗余,并在復(fù)雜光照條件下保持高性能。
通過這些新技術(shù)的應(yīng)用,天眸芯片同時具備了高速感知能力、寬動態(tài)范圍和帶寬優(yōu)化這三個特點,解決了傳統(tǒng)傳感器的缺點。
高速感知能力:天眸芯片能夠?qū)崿F(xiàn)每秒高達(dá)10,000幀的速度,確保在快速變化的環(huán)境中依然能夠捕捉到清晰的圖。這種高幀率感知能力對于自動駕駛和機器人等需要實時感知和反應(yīng)的應(yīng)用場景至關(guān)重要。
寬動態(tài)范圍:動態(tài)范圍的計算單位是dB(分貝),傳統(tǒng)傳感器的動態(tài)范圍通常在60至80dB之間,而人眼的動態(tài)范圍約為120dB。天眸芯片擁有高達(dá)130dB的動態(tài)范圍,能夠在強光和弱光環(huán)境下同時提供清晰的圖像。這意味著即使在陽光直射和陰影并存的復(fù)雜光照環(huán)境下,天眸芯片也能提供細(xì)膩的畫面細(xì)節(jié)。
帶寬優(yōu)化:通過自適應(yīng)技術(shù),天眸芯片能夠減少90%的帶寬需求,有效降低了數(shù)據(jù)傳輸和處理的負(fù)擔(dān)。這種帶寬優(yōu)化技術(shù)不僅提高了數(shù)據(jù)傳輸效率,還降低了能耗,使得天眸芯片更適合移動設(shè)備和物聯(lián)網(wǎng)應(yīng)用。
天眸芯片在自動駕駛系統(tǒng)中的應(yīng)用是其強大性能的一個重要展示。它能夠在復(fù)雜的道路環(huán)境中提供準(zhǔn)確、快速和穩(wěn)健的感知,即使在角落情況下也能做出迅速反應(yīng)。例如,天眸芯片在自動駕駛測試中展示了其在應(yīng)對突然出現(xiàn)的行人和車輛時的優(yōu)越性能,顯著降低了事故發(fā)生的概率。這對于提高自動駕駛系統(tǒng)的安全性和可靠性具有重要意義。
除了自動駕駛,天眸芯片還可以廣泛應(yīng)用于無人機、安防監(jiān)控等領(lǐng)域。例如,在安防監(jiān)控中,天眸芯片能夠在光線變化劇烈的環(huán)境下提供高質(zhì)量的視頻圖像,有助于及時發(fā)現(xiàn)潛在的安全威脅。在無人機應(yīng)用中,天眸芯片的高動態(tài)范圍和高速感知能力使得無人機能夠在復(fù)雜地形和光照條件下進(jìn)行高效的導(dǎo)航和監(jiān)控。
未來,當(dāng)天眸芯片與人工智能技術(shù)深度融合,會為智能城市建設(shè)、醫(yī)療影像分析、工業(yè)自動化等領(lǐng)域帶來哪些顛覆性的變革?它將如何引領(lǐng)我們進(jìn)入一個更加智能和互聯(lián)的世界?懸念依舊,我們拭目以待。