得益于IT信息技術(shù)的快速進步,人類可以隨時隨地記錄下產(chǎn)生的各類數(shù)據(jù),而同時數(shù)據(jù)存儲的成本也正以前所未有的速度下降,一個大數(shù)據(jù)的時代在悄然來臨。根據(jù)IDC預測,全球在2010年正式進入ZB時代,全球數(shù)據(jù)量大約每兩年翻一番,意味著人類在最近兩年產(chǎn)生的數(shù)據(jù)量相當于之前產(chǎn)生的全部數(shù)據(jù)量。爆炸式增長的數(shù)據(jù),正推動人類進入大數(shù)據(jù)的時代。
飛速增長的視頻監(jiān)控數(shù)據(jù),使得傳統(tǒng)視頻監(jiān)控體系架構(gòu)、數(shù)據(jù)的管理方式、數(shù)據(jù)分析應用等面臨新的困境。
困境一,數(shù)據(jù)量的急劇擴大和IT投資之間的矛盾。按照IT產(chǎn)業(yè)的法則:在滿足客戶需求的前提之下,往往技術(shù)成本越低,其生命力往往越強。由于數(shù)據(jù)量的急速擴大,以及隨之而來的大規(guī)模計算的需求越來越多,一味采用高配硬件,使得硬件投資成為客戶不可承受之重,客戶越來越希望在滿足需求的前提下,用中低端的硬件來替換高配硬件。
困境二,海量數(shù)據(jù)和有效數(shù)據(jù)之間的矛盾。攝像頭7X24小時工作,如實記錄鏡頭覆蓋范圍發(fā)生的一切,僅僅記錄信息是不夠的,因為對于客戶來講可能大部分信息是無效,有效信息可能只分布在一個較短的時間段內(nèi),按照數(shù)學統(tǒng)計的說法,信息是呈現(xiàn)冪律分布的,也稱之為信息的密度,往往越高密度的信息對客戶價值越大。
困境三,資源利用和效率之間的矛盾,串行計算和并行計算的矛盾。視頻監(jiān)控業(yè)務網(wǎng)絡化、大聯(lián)網(wǎng)后,網(wǎng)絡內(nèi)的設備越來越多,利用閑置的計算資源,實現(xiàn)資源的最大化利用,關(guān)乎運算的效率。在視頻監(jiān)控領域,往往視頻分析的效率決定價值,更低的延遲、更準確的分析往往是平安城市這類客戶的普遍需求。隨著數(shù)據(jù)量的增加,哪怕對TB級別的數(shù)據(jù)進行對視頻內(nèi)容的數(shù)據(jù)分析和檢索,采用串行計算的模式都可能需要花費數(shù)小時的計算,已遠遠不能勝任時效性的需求。視頻的分析和檢索,不能依賴于傳統(tǒng)的手段,巨量數(shù)據(jù)的效率優(yōu)化,并行計算是視頻智能分析的唯一出路。