對(duì)著鏡頭貼一張個(gè)人照片,或戴上面具,眼前的人臉識(shí)別儀器都會(huì)顯示無法識(shí)別到人臉;而戴上口罩、以手遮臉、或做大表情,人臉則會(huì)被檢測出來。
依托馬利莊團(tuán)隊(duì)關(guān)于復(fù)雜場景下人臉識(shí)別的研究成果,基于光線活體的遠(yuǎn)程身份核實(shí)技術(shù)得以實(shí)現(xiàn),這項(xiàng)技術(shù)被應(yīng)用到一個(gè)更為大眾熟知的應(yīng)用上——健康碼。
5月25日,2020年度上海市科學(xué)技術(shù)獎(jiǎng)?lì)C布,由上海交通大學(xué)特聘教授馬利莊主持的《面向復(fù)雜場景的任務(wù)視覺理解技術(shù)及應(yīng)用》項(xiàng)目獲上海市科技進(jìn)步特等獎(jiǎng)。
項(xiàng)目創(chuàng)新性地提出了面向人物的圖像視頻結(jié)構(gòu)化分析創(chuàng)新理論方法,實(shí)現(xiàn)了高安全遠(yuǎn)程核身份、超精準(zhǔn)人臉識(shí)別。疫情期間,為響應(yīng)防控需求,馬利莊團(tuán)隊(duì)聯(lián)合騰訊、華東師范大學(xué)、上海計(jì)算機(jī)軟件技術(shù)開發(fā)中心,開展了《面向復(fù)雜場景的人物視覺理解技術(shù)及應(yīng)用》相關(guān)研究,依托其創(chuàng)新理論,形成了跨時(shí)空多模態(tài)的全流程人物特征理解技術(shù)體系,構(gòu)建了復(fù)雜場景下的人物視覺理解創(chuàng)新應(yīng)用平臺(tái)。
回溯團(tuán)隊(duì)的發(fā)展,早在2013年,項(xiàng)目組就已開始開展一系列關(guān)于人臉識(shí)別等人工智能技術(shù)的研究。馬利莊教授帶領(lǐng)團(tuán)隊(duì)圍繞人臉識(shí)別、人體姿態(tài)估計(jì)、復(fù)雜場景理解等技術(shù)展開研究。項(xiàng)目組在健康碼、復(fù)工復(fù)產(chǎn)、AI尋人、互聯(lián)網(wǎng)金融等多方面構(gòu)建重大應(yīng)用,具體落地場景包括:
場景一:疫情期,為健康碼的生成及助力復(fù)工復(fù)產(chǎn)提供核心技術(shù)
馬利莊項(xiàng)目組依托國際領(lǐng)先的人臉識(shí)別與安全技術(shù)打造全場景多模態(tài)人臉核身解決方案。疫情期間,核心技術(shù)應(yīng)用于騰訊健康碼,民眾登錄驗(yàn)證時(shí),需進(jìn)行光線活體檢測和人臉比對(duì),通過后才能獲得健康碼,以此保障用戶身份真實(shí)性。
基于光線活體的遠(yuǎn)程身份核實(shí)是健康碼的核心技術(shù)。2020年2月9日,深圳成為全國首個(gè)推出騰訊健康碼的城市,上海、北京、廣州、武漢等超過100個(gè)城市也逐步落地健康碼。截至2020年12月18日,健康碼累計(jì)亮碼超200億人次,覆蓋10億人口,累計(jì)訪問量破500億。
線上線下虛實(shí)協(xié)同,人物視覺理解技術(shù)助力復(fù)工復(fù)產(chǎn)。技術(shù)應(yīng)用于“國家政務(wù)服務(wù)平臺(tái)”,助力大量企業(yè)主和個(gè)體工商戶在線辦理緩交社保、租金減免等民生事項(xiàng)。線上遠(yuǎn)程核身為140多個(gè)行業(yè)、4千多家機(jī)構(gòu)提供便民服務(wù),為疫情防控工作貢獻(xiàn)力量。
場景二:智能金融領(lǐng)域,實(shí)現(xiàn)銀行遠(yuǎn)程開戶
馬利莊項(xiàng)目組與騰訊優(yōu)圖聯(lián)合構(gòu)建了國際首個(gè)在銀行系統(tǒng)商用的人臉遠(yuǎn)程核身系統(tǒng),在國內(nèi)首次將人臉核身技術(shù)應(yīng)用于銀行的遠(yuǎn)程開戶中。人臉遠(yuǎn)程核身技術(shù)達(dá)到金融級(jí)安全要求,該技術(shù)并已廣泛應(yīng)用于微信支付、微眾銀行等眾多應(yīng)用場景,金融支付級(jí)可信身份驗(yàn)證,錯(cuò)誤接受率在萬億分之一,精度目前屬國際最高。
場景三:尋人場景,依托人工智能尋親
跨年齡人臉識(shí)別技術(shù),是尋回失蹤人員與被拐賣人口的關(guān)鍵技術(shù)。尤其嬰幼兒臉型隨著年齡增長變化顯著,特別是十多年后面容發(fā)生劇變,對(duì)跨年齡人臉識(shí)別提出了重大挑戰(zhàn)。
馬利莊項(xiàng)目組構(gòu)建的跨時(shí)域人臉檢索與分析系統(tǒng),尋回各類失蹤或被拐賣人口共1706人,拯救數(shù)千家庭。針對(duì)尋人場景中嬰幼兒被拐,在僅有幾張嬰幼兒階段的模糊照片情況下,項(xiàng)目組利用首創(chuàng)的跨年齡人臉識(shí)別技術(shù),協(xié)助尋回15名被拐10年以上兒童。
據(jù)了解,這些項(xiàng)目成果已在防疫健康碼、國家政務(wù)服務(wù)平臺(tái)、微信等場景、天天P圖等人臉社交娛樂軟件、進(jìn)博會(huì)等重大活動(dòng)中展開應(yīng)用,累計(jì)產(chǎn)生逾八十億的經(jīng)濟(jì)效益及不可估量的社會(huì)效益。此外,項(xiàng)目組獲得授權(quán)發(fā)明專利165項(xiàng)、軟件著作權(quán)15項(xiàng),IEEE國際標(biāo)準(zhǔn)1項(xiàng)、國家標(biāo)準(zhǔn)8項(xiàng),發(fā)表高水平論文290篇(CCF-A收錄70篇)。
馬利莊告訴記者,2010年世博會(huì)的一句“城市,讓生活更美好。”讓他琢磨許久,后決定將自己的研究方向放到人的本體上,也自此開始了人工智能的研究。2011年,團(tuán)隊(duì)開始著手布局相關(guān)研究,初創(chuàng)期,國內(nèi)在這條“賽道”上的隊(duì)伍并不多,他們需要從搭平臺(tái)開始,自行編寫小程序提高生產(chǎn)力。
“走過了一個(gè)階段,但未來的困難可能還會(huì)更多,探索領(lǐng)域也還很大?!瘪R利莊說,比如如何讓機(jī)器理解人臉細(xì)膩的表情、看懂人類的動(dòng)作,這是在團(tuán)隊(duì)既有的研究成果上可以進(jìn)一步展開的工作。
馬利莊表示,面向復(fù)雜場景的人物視覺理解技術(shù)對(duì)于未來推動(dòng)人工智能行業(yè)的發(fā)展、進(jìn)一步加快我市智慧城市建設(shè),尤為重要,特別是服務(wù)機(jī)器人、融合人工智能的虛擬現(xiàn)實(shí)與增強(qiáng)現(xiàn)實(shí)技術(shù)將得到加速發(fā)展,成為萬億級(jí)新興產(chǎn)業(yè)。