作為一年一度的AI行業(yè)頂級(jí)盛會(huì),2022世界人工智能大會(huì)(WAIC)于9月1日至3日在上海成功舉辦,帶來(lái)了眾多關(guān)于AI技術(shù)創(chuàng)新、產(chǎn)業(yè)應(yīng)用與價(jià)值創(chuàng)造的新思路、新實(shí)踐。作為當(dāng)下最具增長(zhǎng)潛力的人工智能應(yīng)用賽道之一,AI視覺(jué)感知的相關(guān)技術(shù)與企業(yè)在會(huì)上受到廣泛關(guān)注,人工智能視覺(jué)感知芯片研發(fā)及基礎(chǔ)算力平臺(tái)公司愛(ài)芯元智的展臺(tái)前也人頭攢動(dòng),其自研核心技術(shù)AI-ISP的中文名“愛(ài)芯智眸?”正式公布,基于愛(ài)芯智眸?AI-ISP打造的暗箱實(shí)驗(yàn)室在現(xiàn)場(chǎng)格外吸睛。
大幅提升暗光場(chǎng)景成像性能,愛(ài)芯智眸?AI-ISP的“獨(dú)門絕技”
當(dāng)影像成為記錄生活的重要方式,人們對(duì)圖片和視頻畫質(zhì)的追求越來(lái)越高,這也對(duì)ISP芯片提出了更高的要求。
如同人類視覺(jué)和成像設(shè)備之間的“翻譯”,ISP(圖像信號(hào)處理器)負(fù)責(zé)對(duì)前端圖像傳感器的輸出信號(hào)進(jìn)行優(yōu)化處理,讓最終的數(shù)字圖像盡可能接近人眼看到的實(shí)景,甚至呈現(xiàn)出更好的效果。由于與其配套使用的鏡頭和傳感器在物理學(xué)上已接近極限,傳統(tǒng)ISP整體技術(shù)觸及“天花板”,尤其在暗光和高動(dòng)態(tài)場(chǎng)景下,圖像失真和信息損失不可避免。
在此背景下,愛(ài)芯元智創(chuàng)新性地將AI引入ISP,利用愛(ài)芯智眸?AI-ISP技術(shù)在多種視覺(jué)處理場(chǎng)景下帶來(lái)了成像畫質(zhì)的顯著提升。據(jù)悉,愛(ài)芯智眸?AI-ISP顛覆了傳統(tǒng)ISP純硬件通路的設(shè)計(jì)方式,通過(guò)將ISP中的幾個(gè)關(guān)鍵硬件模塊抽離并用AI算法取而代之,例如對(duì)去噪的3DNR、demosaic等功能進(jìn)行AI化,將有限的算力集中在了最關(guān)鍵、人眼最可知的功能中,實(shí)現(xiàn)整個(gè)AI ISP的最佳效果。而通過(guò)迭代AI模型,在芯片已經(jīng)回片、硬件無(wú)法提升和優(yōu)化的情況下,愛(ài)芯智眸?AI-ISP也依然可以訓(xùn)練AI的降噪模型和高動(dòng)態(tài)模型,由此不斷提升圖像處理質(zhì)量。
當(dāng)前,暗光場(chǎng)景是AI-ISP與傳統(tǒng)ISP最大的區(qū)別場(chǎng)景,愛(ài)芯元智也在此次WAIC2022展臺(tái)現(xiàn)場(chǎng)設(shè)置暗箱實(shí)驗(yàn)室,通過(guò)實(shí)時(shí)對(duì)比測(cè)試,展現(xiàn)愛(ài)芯智眸?AI-ISP在極低照度環(huán)境下的優(yōu)異成像表現(xiàn)??梢钥吹?在極低照度環(huán)境下,植入愛(ài)芯智眸?AI-ISP的暗光相機(jī)依然可以清晰拍攝暗箱中的玩偶,且在色彩還原、暗光降噪等方面表現(xiàn)突出。而在優(yōu)秀的暗光處理能力之外,愛(ài)芯智眸?AI-ISP也在高光抑制、解析力提升、偽紋偽色處理等方面都比傳統(tǒng)ISP更具優(yōu)勢(shì)。
值得一提的是,不同于芯片行業(yè)中單一的算法研究,愛(ài)芯元智對(duì)AI-ISP的研究還包括提供算法、大算力和復(fù)合精度的NPU,聯(lián)合設(shè)計(jì)下的內(nèi)存使用及模塊間通信,以及AI-ISP在實(shí)踐中所需要的完整工具鏈和交付方案,而這些都是決定AI-ISP能否真正投入商用的關(guān)鍵。目前,愛(ài)芯元智作為第一個(gè)將AI-ISP技術(shù)在芯片上實(shí)現(xiàn)商業(yè)化落地并規(guī)模量產(chǎn)的公司,已實(shí)現(xiàn)兩代端側(cè)邊緣側(cè)AI芯片成功量產(chǎn)。
深入端側(cè)邊緣側(cè)場(chǎng)景,愛(ài)芯智眸?AI-ISP持續(xù)拓寬視界
近年來(lái),AI算力逐漸在端側(cè)和邊緣側(cè)得到釋放,AI視覺(jué)技術(shù)也在物聯(lián)網(wǎng)端側(cè)邊緣側(cè)有了越來(lái)越多的應(yīng)用場(chǎng)景,包括智慧城市、智能交通,以及智能手機(jī)、運(yùn)動(dòng)攝像頭等消費(fèi)側(cè)產(chǎn)品等等。從廣闊的應(yīng)用場(chǎng)景出發(fā),愛(ài)芯元智自成立起便重點(diǎn)布局端側(cè)邊緣側(cè)AI芯片的設(shè)計(jì)研發(fā),愛(ài)芯智眸?AI-ISP核心技術(shù)也基于芯片產(chǎn)品的量產(chǎn)在眾多端側(cè)邊緣側(cè)圖像處理與應(yīng)用中展露價(jià)值,助力全面提升成像性能。
其中,隨著廣大手機(jī)用戶對(duì)高質(zhì)量移動(dòng)影像需求的提升,智能手機(jī)成為AI- ISP優(yōu)先落地的場(chǎng)景之一, 愛(ài)芯元智打造的影像專用芯片AX170A即在今年初通過(guò)某頭部手機(jī)客戶驗(yàn)收并進(jìn)入商用階段,標(biāo)志著愛(ài)芯元智系列產(chǎn)品在消費(fèi)領(lǐng)域的成功落地?,F(xiàn)場(chǎng),愛(ài)芯元智也展示了該款手機(jī)基于AX170A的“夜景增強(qiáng)”拍攝效果,通過(guò)直觀對(duì)比可發(fā)現(xiàn),即使在夜晚低照度下,該款手機(jī)也能呈現(xiàn)細(xì)膩的高清影像,擁有了比人眼更好的夜視能力。
除了智能手機(jī)等終端消費(fèi)電子設(shè)備,愛(ài)芯智眸?AI-ISP也正在智慧城市、智能交通等領(lǐng)域提高相關(guān)場(chǎng)景的成像質(zhì)量。如在智慧城市領(lǐng)域,愛(ài)芯元智在展會(huì)現(xiàn)場(chǎng)帶來(lái)了業(yè)界首款A(yù)I-ISP雙光融合產(chǎn)品實(shí)測(cè)效果展示,其可以實(shí)現(xiàn)高色彩保真,在0.01lux極低照度下重現(xiàn)原生自然細(xì)節(jié);智能交通領(lǐng)域,愛(ài)芯元智展出的黑光BSD智能攝像機(jī)則可以在夜晚暗光場(chǎng)景下智能檢測(cè)車輛盲區(qū)的人、車、騎行者、路沿、欄桿等障礙物,通過(guò)預(yù)警及報(bào)警助力行車安全。
在用AI大幅提升端側(cè)邊緣側(cè)智能設(shè)備的感知成像能力的同時(shí),愛(ài)芯智眸?AI-ISP也在應(yīng)用成本上更具優(yōu)勢(shì)?;贏I模型的靈活性,愛(ài)芯智眸?AI-ISP的技術(shù)覆蓋場(chǎng)景相對(duì)廣泛,如可用一顆芯片實(shí)現(xiàn)對(duì)智慧城市和智能手機(jī)這兩個(gè)完全不同領(lǐng)域的市場(chǎng)覆蓋,大大降低用戶端的AI綜合應(yīng)用成本。
“愛(ài)芯智眸?”,意在發(fā)揮視覺(jué)感知技術(shù)優(yōu)勢(shì),讓AI-ISP賦能不同智能終端,帶來(lái)突破傳統(tǒng)瓶頸的優(yōu)異畫質(zhì)。此次于WAIC2022正式發(fā)布AI-ISP中文名并帶來(lái)系列應(yīng)用場(chǎng)景展示,愛(ài)芯元智表達(dá)了于AI視覺(jué)感知領(lǐng)域繼續(xù)發(fā)展超越的決心。面對(duì)AI-ISP這一成像領(lǐng)域未來(lái)最重要的風(fēng)口之一,愛(ài)芯元智也將探索技術(shù)創(chuàng)新并注重提升產(chǎn)業(yè)賦能價(jià)值,積極開(kāi)拓更廣闊的市場(chǎng)發(fā)展空間,用視界改變世界。