近日,F(xiàn)orrester咨詢公司對中國計算機視覺及智能影像市場進(jìn)行了調(diào)查,訪問了包括研究機構(gòu)、科研院校、投資機構(gòu)以及部分互聯(lián)網(wǎng)企業(yè),視頻行業(yè)企業(yè),針對以視頻行業(yè)為代表的文娛產(chǎn)業(yè)中人工智能的應(yīng)用趨勢、面臨的挑戰(zhàn)進(jìn)行了分析,并提出相應(yīng)的戰(zhàn)略建議。網(wǎng)易智能節(jié)選整理如下:
近年來,在互聯(lián)網(wǎng)、大數(shù)據(jù)、超級計算、傳感網(wǎng)、腦科學(xué)等新理論、新技術(shù)以及經(jīng)濟(jì)社會發(fā)展強烈需求的共同驅(qū)動下,人工智能呈現(xiàn)出飛躍式的進(jìn)步,進(jìn)入新的發(fā)展階段。無論是企業(yè)還是政府在人工智能方面的關(guān)注和投入,都在不同層面推動著人工智能技術(shù)和應(yīng)用的蓬勃發(fā)展。各種創(chuàng)新的AI應(yīng)用逐步開始進(jìn)入社會生活的各個場景。同時,我們也看到,新興科技正在推動新一輪全球產(chǎn)業(yè)變革,而人工智能毫無疑問成為了釋放產(chǎn)業(yè)變革潛能的重要力量。作為人工智能技術(shù)的重要分支,計算機視覺技術(shù)在算法、數(shù)據(jù)及算力的加持下,更是得到了飛速的發(fā)展,已經(jīng)具備大規(guī)模應(yīng)用的可行性。特別是在文娛產(chǎn)業(yè)得到了廣泛應(yīng)用的智能影像技術(shù)已經(jīng)成為行業(yè)變革的核心驅(qū)動力,將進(jìn)一步催生新應(yīng)用、新產(chǎn)品、新產(chǎn)業(yè)、新業(yè)態(tài)、新模式的出現(xiàn),推動智能影像產(chǎn)業(yè)生態(tài)的繁榮。
調(diào)查結(jié)果摘要
人工智能為影像分析技術(shù)帶來變革。人工智能在影像行業(yè)的綜合應(yīng)用, 特別是通過對動態(tài)視覺內(nèi)容的理解和重構(gòu),是計算機視覺技術(shù)及計算機動畫技術(shù)的交叉和融合,給智能影像產(chǎn)業(yè)帶來了充滿想象力的廣闊舞臺和空間。
智能影像技術(shù)為產(chǎn)業(yè)變革帶來強勁動力。過去幾年文娛產(chǎn)業(yè)經(jīng)歷了快速的發(fā)展,以內(nèi)容制作方、視頻平臺方為代表行業(yè)參與者正面臨著諸多的挑戰(zhàn),各方仍在行業(yè)變局中摸索前行,期望不斷通過運用新興技術(shù)和應(yīng)用的創(chuàng)新提升自身的核心競爭力。智能影像技術(shù)在行業(yè)的應(yīng)用日漸深入,成為新一輪行業(yè)變革的核心驅(qū)動力。
把握數(shù)字化轉(zhuǎn)型新契機,智能影像技術(shù)加速業(yè)務(wù)變革。智能影像技術(shù)不僅成為文娛產(chǎn)業(yè)商業(yè)價值變現(xiàn)的核心引擎,也在逐漸進(jìn)入更多的內(nèi)容原創(chuàng)領(lǐng)域,通過自動化影像加工、生產(chǎn)技術(shù)為產(chǎn)業(yè)升級提供動力。而且, 智能影像技術(shù)也通過全面賦能推動應(yīng)用在教育、零售等更多領(lǐng)域落地, 成為行業(yè)價值創(chuàng)新的基石。
深耕行業(yè)場景,聚焦價值創(chuàng)造,拓展行業(yè)生態(tài)。智能影像技術(shù)企業(yè)需要聚焦行業(yè)實踐、商業(yè)價值閉環(huán),以及開放性平臺技術(shù),推動智能影像行業(yè)的協(xié)同發(fā)展和生態(tài)的進(jìn)一步繁榮。
智能影像技術(shù)的發(fā)展歷程
2006年以來,隨著深度學(xué)習(xí)技術(shù)的進(jìn)展,人工智能再次獲得了廣泛關(guān)注。特別在圖像領(lǐng)域,深度學(xué)習(xí)帶來的突破性效果在很多領(lǐng)域已經(jīng)超過人類水平,各種類型的神經(jīng)網(wǎng)絡(luò)不斷涌現(xiàn),伴隨著計算力的提升以及海量數(shù)據(jù)的積累,人工智能為廣闊的圖像分析領(lǐng)域帶來深刻變革。資本市場對與計算機視覺的熱度空前高漲。根據(jù)Forrester統(tǒng)計,全球在計算機視覺領(lǐng)域的投資持續(xù)增長,截止到2018年11月末投資較2017年增長113%,在過去的五年中復(fù)合增長率高達(dá)135%,在本次訪談?wù){(diào)研中了解到,未來五年內(nèi)全球計算機視覺軟件及服務(wù)市場規(guī)模將超過200億美金。
影像相關(guān)的市場規(guī)模相當(dāng)可觀,人工智能技術(shù)的賦能將會催生更多商業(yè)場景,進(jìn)一步推動整體市場繁榮。在眾多細(xì)分領(lǐng)域中,智能影像生產(chǎn)技術(shù)直接從源頭上提高了視頻影像的生產(chǎn)能力。除了與影像源頭密切相關(guān)的文娛產(chǎn)業(yè),智能影像還將賦能廣告營銷、教育、游戲、零售乃至制造等相關(guān)行業(yè)。
影像生產(chǎn)技術(shù)以計算機視覺 (Computer Vision) 與計算機圖形學(xué)為基礎(chǔ)。計算機視覺誕生于上世紀(jì)六十年代,是指能夠賦予機器自然視覺能力的學(xué)科,關(guān)注圖像的識別和分割。在初步興起的二十年時間里,“識 別”領(lǐng)域進(jìn)展有限,而分割領(lǐng)域取得了一定的進(jìn)展。進(jìn)入本世紀(jì),隨著互 聯(lián)網(wǎng)的不斷發(fā)展,圖片的來源日趨豐富,各類圖像數(shù)據(jù)庫開始出現(xiàn),標(biāo)注數(shù)據(jù)進(jìn)一步促進(jìn)計算機視覺的發(fā)展。在深度學(xué)習(xí)廣泛應(yīng)用之前,視覺算法一般分為:特征感知、圖像預(yù)處理、特征提取、特征篩選、推理與識別。手工設(shè)計特征需要對相關(guān)領(lǐng)域具有足夠的積累和經(jīng)驗,對于提取的特征還需要進(jìn)行大量調(diào)試工作。不同的特征對應(yīng)的后端機器學(xué)習(xí)算法也有所不同。二者組合起來,通用性差而且需要投入大量工程性工作,進(jìn)展緩慢且效果不佳,與人類水平有很大差距,遲遲難以大規(guī)模商用,對于圖像之外的多模態(tài)感知識別更是困難重重。
計算機圖形學(xué)(Computer Graphics)是指在計算機上用專門的軟件和硬件用來表現(xiàn)和控制圖像數(shù)據(jù),它同樣誕生于上世紀(jì)六十年代。自誕生之初開始即開始踴躍發(fā)展,分形理論、曲面造型技術(shù)、光柵圖形學(xué)算法、光照模型、光線追蹤算法、輻射度算法等技術(shù)手段陸續(xù)被提出。80年代中期,皮克斯使用SGI計算機創(chuàng)作了第一段完全用計算機生成的短片。1995 年首部計算機生成的動畫影片《玩具總動員》全球上映,1996年最早的全三維游戲《雷神之錘》發(fā)售。一些事實標(biāo)準(zhǔn)的出現(xiàn),如SGI公司開發(fā)的OpenGL開放式三維圖形標(biāo)準(zhǔn),微軟公司的標(biāo)準(zhǔn)接口DirectX,Adobe公司的Postscript等,進(jìn)一步加速了影像生產(chǎn)的產(chǎn)業(yè)化進(jìn)程。但是,影像生產(chǎn)中大量人工仍然不可避免,具體到面向大眾的個性化影像生產(chǎn)而言,重復(fù)性的人力勞動已經(jīng)嚴(yán)重制約了產(chǎn)能,亟需智能化、自動化的影像生產(chǎn)技術(shù)推動產(chǎn)業(yè)的升級。
智能影像生產(chǎn)技術(shù)的發(fā)展現(xiàn)狀
Forrester對人工智能技術(shù)進(jìn)行分類研究時采用了Sense、Act、Think 的框架。類比來看,在感知(Sense)層面,人工智能技術(shù)為靜態(tài)圖片識別乃至多模態(tài)影像識別帶來了突破;在思考(Think)層面,基于多模態(tài)識別結(jié)合商業(yè)需求可以形成深入的影像智能化理解。以感知、思考為基礎(chǔ),在行動(Act)層面,人工智能技術(shù)為自動化影像生產(chǎn)帶來了強勁動力。為此,我們將智能影像生產(chǎn)技術(shù)分為兩部分:影像智能化理解(Sense和Think) 和影像自動化生成(Act)。
傳統(tǒng)的計算機視覺技術(shù)大量聚焦在特征生成和選擇。端到端深度學(xué)習(xí)帶來了自動特征學(xué)習(xí)能力,從而極大促進(jìn)了計算機視覺的發(fā)展。深度學(xué)習(xí)所需的大量訓(xùn)練數(shù)據(jù)以及運算能力在當(dāng)下也得到了良好的供應(yīng)。對于“識別”這種人類無需思考即可在極短時間內(nèi)作出判斷的任務(wù)目前是人工智能最擅長的領(lǐng)域。從包括圖像、語音、文字的多模態(tài)識別,人工智能對于影 像感知和理解能力不斷提升,推動了智能影像產(chǎn)業(yè)的快速發(fā)展。
此外,各種神經(jīng)網(wǎng)絡(luò)的組合為靜態(tài)圖像識別提供了有力武器。憑借著AlexNet在ILSVRC競賽的一戰(zhàn)成名,卷積神經(jīng)網(wǎng)絡(luò)(CNN)因其良好的泛化能力以及優(yōu)秀的實際效果已經(jīng)替代了眾多傳統(tǒng)計算機視覺算法,成為當(dāng)前圖像識別領(lǐng)域的主流。在此基礎(chǔ)上,ResNet、Inception、Xception、DenseNet、ShuffleNet等多種改良結(jié)構(gòu)也不斷涌現(xiàn),推動了識別效果的進(jìn)一步提高,在大規(guī)模人臉與人體識別、物體檢測與追蹤、3D視覺等領(lǐng)域都獲得了廣泛應(yīng)用,已經(jīng)達(dá)到了可以廣泛實際落地的程度,甚至有的受訪者表示這類任務(wù)的性能一定程度上已經(jīng)達(dá)到飽和。
圖像、語音、文本等多模態(tài)識別進(jìn)一步豐富了影像識別能力。深度學(xué)習(xí)不僅賦能了計算機視覺領(lǐng)域,還為語音識別、文本分析領(lǐng)域帶來突破。循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)及其變種LSTM在這些領(lǐng)域取得令人矚目的進(jìn)展而成為主流。以此為基礎(chǔ),各種增強技術(shù)如雙向LSTM、Attention model等也開始得以廣泛應(yīng)用。深度學(xué)習(xí)的理論基礎(chǔ)在“去黑盒化”的道路上已經(jīng)取得進(jìn)展,各種技術(shù)的組合為也不斷刷新著各類任務(wù)的效果新高。多模態(tài)識別已成為計算機視覺和AI 最令人激動的領(lǐng)域之一,現(xiàn)有感知能力甚至已經(jīng)超出商業(yè)變現(xiàn)的步伐。尋找應(yīng)用場景、促進(jìn)技術(shù)落地的難度開始大于技術(shù)本身。
影像語義理解增加了商業(yè)模式的可能性。通過視頻結(jié)構(gòu)化分析、目標(biāo)檢測跟蹤、動作態(tài)勢感知、人物識別以及情感分析等多模態(tài)感知技術(shù),人類已經(jīng)可以從動態(tài)影像中獲取淺層信息。但是要做到商業(yè)模式變現(xiàn),仍需進(jìn)一步從語義的層面深入理解影像內(nèi)容。在這一領(lǐng)域,需要有大量的行業(yè)積累,例如對綜藝類視頻節(jié)目中人物、物體等的識別標(biāo)注,需要專業(yè)的經(jīng)驗,基于編劇、布景、拍攝等角度,對視頻進(jìn)行結(jié)構(gòu)化建模進(jìn)行分析和學(xué)習(xí),把特征空間提升到語義空間。在此基礎(chǔ)上對影像數(shù)據(jù)生成語義標(biāo)簽、業(yè)務(wù)分類乃至文字描述以供后續(xù)業(yè)務(wù)場景使用。常識的建立可以極大提升機器性能,既有經(jīng)驗與多種深度網(wǎng)絡(luò)的融合將會形成企業(yè)差異化的競爭優(yōu)勢。