行業(yè)大數(shù)據(jù)帶來的變革與機遇

　　公共安全一直以來都是國家的重要根基，是國家發(fā)展的前提。隨著國家對公共安全的重視、公共安全領域項目的不斷增多和系統(tǒng)的持續(xù)運行，積累的各種數(shù)據(jù)日益增多（比如音頻數(shù)據(jù)、視頻數(shù)據(jù)、卡口系統(tǒng)數(shù)據(jù)、DNA、指紋、人像模型、空間位置(GPS)數(shù)據(jù)、報警數(shù)據(jù)、社交網(wǎng)絡及移動互聯(lián)網(wǎng)數(shù)據(jù)、射頻（RFID）數(shù)據(jù)，以及其他傳感器數(shù)據(jù)）。如何將這些數(shù)據(jù)資源充分利用，使數(shù)據(jù)能夠更好地服務于公安的情報分析、公共交通、輿情分析等業(yè)務工作，并更好的驅(qū)動業(yè)務創(chuàng)新，特別是成為應急、維穩(wěn)、偵查破案的核心競爭力，成為行業(yè)步入大數(shù)據(jù)時代公安實戰(zhàn)信息化的首要目標。

　　大數(shù)據(jù)帶來的變革

　　首先，犯罪環(huán)境正變得日益復雜，由案件本身獲取到的數(shù)據(jù)，越來越難以支撐起嚴密的邏輯推論。辦案人員不得不去想方設法獲取更多“場外”數(shù)據(jù)以補充證據(jù)鏈條。原本依靠于人腦記憶和檔案搜索的狀態(tài)，每一個線索的提取都需要依靠記憶提取，對于無法直接確認的線索信息又需要翻查相應的檔案，不僅容易出錯，而且效率極低。大數(shù)據(jù)的匯聚已是必然。

　　其次，隨著社會形勢的發(fā)展變化,傳統(tǒng)“從案到人”偵查模式明顯被動滯后。 “由人到案”一直都是“大情報”建設的重大課題，也是難題。實踐證明，“由人到案”是迫切需求，而大數(shù)據(jù)的技術也使得這種新模式成為可能。

　　大數(shù)據(jù)與應急

　　大數(shù)據(jù)在進入人們視野之初，便是一個一個神奇的案例，沃爾瑪超市“啤酒與尿不濕”的故事、天貓商城“雙11”對于銷量額的精準預測、京東商城通過數(shù)據(jù)預測銷售，提早通過物流運送到附近倉庫、美國大數(shù)據(jù)公司Palantir憑借其大數(shù)據(jù)分析系統(tǒng)，在抓捕本拉登的行動中，通過數(shù)據(jù)分析得出本拉登的藏匿點線索信息。

　　大數(shù)據(jù)的背后，蘊藏著一套“規(guī)則”，也許由于數(shù)據(jù)深度與數(shù)據(jù)廣度超出人類的認知能力，我們并無法推論為什么，但結(jié)果就放在那里不由分說。因此，借助大數(shù)據(jù)，既可以預測某一區(qū)域乃至全國的某種類型的犯罪趨勢，也可以預測某一時間某一具體地點某種類型的犯罪，還可以預測某一個體的犯罪概率。根據(jù)預測，我們可以制訂計劃，優(yōu)化警力配置，提升行動效率。

　　大數(shù)據(jù)之與社會維穩(wěn)

　　互聯(lián)網(wǎng)成為人們?nèi)粘＝涣?、表達思想和宣泄情緒的重要平臺，也是相關內(nèi)容安全保障的重要平臺。網(wǎng)絡輿論已成為社會輿論的重要組成部分，越來越多地引起全社會的高度重視。

　　搜索引擎、微博、微信、論壇、貼吧等互聯(lián)網(wǎng)輿論集中的區(qū)域，搜集這些數(shù)據(jù)便獲取到了以往無法掌握的社會輿論動向，熱度輿論、以及輿論領袖。一些群體性事件、突發(fā)事件和熱點、敏感問題在網(wǎng)上被惡意炒作，如“表哥”事件、渭河污染事件等與環(huán)境相關的輿論形成強大的網(wǎng)上輿論氣候，各種負面信息通過互聯(lián)網(wǎng)的各種服務方式快速、廣泛傳播，嚴重影響社會穩(wěn)定和政府單位形象?；ヂ?lián)網(wǎng)不僅是現(xiàn)實社會的虛擬映像，還是現(xiàn)實問題的聚焦鏡和放大器。

　　通過輿情機制，一方面可以加強互聯(lián)網(wǎng)信息監(jiān)管，另一方面，對于及時應對網(wǎng)絡突發(fā)的公共事件和全面掌握社情民意，并對于及時發(fā)現(xiàn)社會蘊藏的潛在不穩(wěn)定因素，提早預防起著重要作用。

　　問題和挑戰(zhàn)

　　新形勢下的公安工作離不開大數(shù)據(jù)的支撐，公安基礎信息化更是大數(shù)據(jù)的挖掘和深度應用。然而，越來越多的公安科技部門發(fā)現(xiàn)，基于新的大數(shù)據(jù)形態(tài)，技術瓶頸逐步顯現(xiàn)。一方面，這些海量數(shù)據(jù)需要強大的存儲和計算平臺來進行實時處理；另一方面，當前數(shù)據(jù)呈現(xiàn)出數(shù)據(jù)量大、數(shù)據(jù)種類多、數(shù)據(jù)增長快的特點，該如何通過大數(shù)據(jù)挖掘分析改進公共安全管理能力,提高政府決策服務能力，為人民生活提供有價值的信息服務。如何在數(shù)據(jù)資源整合的基礎上建立數(shù)據(jù)共享應用機制，利用全警及社會面資源，形成信息化研判平臺支撐公安實戰(zhàn)工作引領大數(shù)據(jù)時代的公安信息化管理發(fā)展，服務于人民群眾生活和國家經(jīng)濟社會建設顯得尤為重要。

　　數(shù)據(jù)處理

　　在信息化社會中，信息可劃分為兩大類，其中能夠用數(shù)字或統(tǒng)一的結(jié)構(gòu)加以表示的為結(jié)構(gòu)化數(shù)據(jù)，如數(shù)字，符號；而另一類信息無法用統(tǒng)一結(jié)構(gòu)表示的則為非結(jié)構(gòu)化數(shù)據(jù)；在數(shù)據(jù)的應用過程中，最常見到，也是使用最方便的當然就是結(jié)構(gòu)化數(shù)據(jù)了，結(jié)構(gòu)化數(shù)據(jù)可以更好的做數(shù)據(jù)統(tǒng)一和檢索查詢從而更好的進行數(shù)據(jù)碰撞和挖掘分析等操作。相對的非結(jié)構(gòu)化數(shù)據(jù)在檢索和應用上就困難很多。

　　在公安信息化建設和平安/智慧城市建設中各類結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)，摻雜其中（如系統(tǒng)數(shù)據(jù)庫數(shù)據(jù)、日志數(shù)據(jù)、監(jiān)控視頻數(shù)據(jù)、卡口圖片數(shù)據(jù)、測量、圖表等數(shù)據(jù)）?，F(xiàn)有的公安系統(tǒng)在數(shù)據(jù)應用中往往只能將結(jié)構(gòu)化數(shù)據(jù)做簡單應用，雖在借助標準的開源大數(shù)據(jù)技術后，基本可實現(xiàn)絕大部分對于大數(shù)據(jù)的應用需求。然而，多數(shù)非結(jié)構(gòu)化數(shù)據(jù)則并沒有發(fā)揮該有的作用。

　　另外，公安大數(shù)據(jù)是由眾多不同用途，不同結(jié)構(gòu)的系統(tǒng)數(shù)據(jù)匯聚而來的。在數(shù)據(jù)的匯集管理工作中，如何高效穩(wěn)定的轉(zhuǎn)換數(shù)據(jù)，并且建立可視化的數(shù)據(jù)集成系統(tǒng)，實現(xiàn)對數(shù)據(jù)整合過程的輕松管理，定將是大數(shù)據(jù)應用最為重要的基礎。

　　數(shù)據(jù)統(tǒng)一

　　受到信息化建設階段性特點制約，以前制定的標準大多是從單一業(yè)務出發(fā)，解決局部問題，這樣就造成了數(shù)據(jù)缺少統(tǒng)一規(guī)范，數(shù)據(jù)關聯(lián)性不夠，相互孤立。比如，現(xiàn)場勘查信息與案件信息不關聯(lián)、案件信息與圖片信息不關聯(lián)、案件信息與被盜搶車輛信息不關聯(lián)。無法實現(xiàn)案件、人員、現(xiàn)場勘查、痕跡、物品等信息關聯(lián)查詢。

　　公安數(shù)據(jù)雖然龐大，但卻分散在不同的部門手中，各組織機構(gòu)間缺少數(shù)據(jù)的有效管理和打通，造成數(shù)據(jù)不能有效利用。雖然目前隨著政策和觀念的放開，情況有所改善，但缺少統(tǒng)一的系統(tǒng)，信息難以共享，“信息孤島”仍然存在。公安要談大數(shù)據(jù)實戰(zhàn)，需要在機制和技術上打通壁壘，統(tǒng)一資源，只有將數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)字段（包含數(shù)據(jù)庫字段、結(jié)構(gòu)化后的描述字段等）、用戶等資源做好統(tǒng)一，才能真正形成大數(shù)據(jù)資源，為以后的數(shù)據(jù)挖掘、研判分析做出更有效的數(shù)據(jù)支撐。

　　數(shù)據(jù)分析

　　目前公安信息化數(shù)據(jù)庫中匯集有大量的信息數(shù)據(jù)，但由于以往的數(shù)據(jù)價值的忽視和處理手段的欠缺導致數(shù)據(jù)應用簡單，僅僅是對數(shù)據(jù)的單方面進行解讀應用，沒有對數(shù)據(jù)進行多種數(shù)據(jù)源、多途徑以及多維度的串并分析，無法發(fā)揮出數(shù)據(jù)的潛在價值。

　　在公安眾多應用場景中，往往需要對反饋時間有很強大要求（比如首次入城分析、實時熱力分布情況等），這些應用場景如果超出要求時間，不僅無法提供幫助，反而有可能造成誤導。這就要求對于上億條記錄的檢索、上千張表的碰撞、幾百個小時的視頻分析、以及大量的移動互聯(lián)網(wǎng)和社交媒體數(shù)據(jù)處理等應用，無不對大數(shù)據(jù)系統(tǒng)的數(shù)據(jù)分析能力提出更高的要求。所以，不盲目的采用熱門技術，通過針對不同場景，采用不同的數(shù)據(jù)分析模型和算法，才能更好的解決實戰(zhàn)面臨的數(shù)據(jù)分析要求。

　　數(shù)據(jù)展現(xiàn)

　　圖像是視覺媒體中一種非常重要的表現(xiàn)形式。在人類能夠直接感知的眾多媒體信息中，視覺媒體是人類最豐富的信息來源。統(tǒng)計表明，人類在感知外界信息的過程中，視覺獲取的信息高達65%。數(shù)據(jù)信息是一種具有深層次內(nèi)涵、更易被理解吸收的跨越語種障礙的語言。

　　在公安的應用場景中，需要在城市數(shù)千萬人中發(fā)現(xiàn)異常，挖掘關系，呈現(xiàn)規(guī)律。要在處理海量的數(shù)據(jù)時，原本的文字和數(shù)字無法呈現(xiàn)的規(guī)律，通過圖形的方式展現(xiàn)的方式明顯比其它展現(xiàn)方式更直接，更清晰。所以更加美觀、簡潔、清晰的數(shù)據(jù)展現(xiàn)方式往往比更大量的數(shù)據(jù)堆疊要有意義。

　　數(shù)據(jù)安全

　　公安系統(tǒng)中很多數(shù)據(jù)關系著國家安全和人民生命財產(chǎn)安全，大數(shù)據(jù)系統(tǒng)作為整合分析者，匯聚有更大體量的敏感數(shù)據(jù)，所以信息泄露帶來的問題將會是十分嚴重的。因此，大數(shù)據(jù)在管理上要求要更加嚴格，從單點登錄、PKI認證、數(shù)據(jù)水印、日志審計等，不論是從底層技術層面、上層認證方式、還是安全管理機制，都要有相對應的提升，才能保證數(shù)據(jù)安全。

　　大數(shù)據(jù)公安業(yè)務應用現(xiàn)狀和思路

　　可以看出大數(shù)據(jù)在公共安全方面的潛力巨大，同時問題也同樣嚴峻。依靠互聯(lián)網(wǎng)、通訊行業(yè)這些數(shù)據(jù)大戶的“委培”，大數(shù)據(jù)已經(jīng)日益成熟。它能承載數(shù)以千億計的數(shù)據(jù)量，快速反饋分析結(jié)果。能挖掘PB計的數(shù)據(jù)，發(fā)現(xiàn)潛在的規(guī)則。我們有HADOOP、SPARK、機器學習等的巨人為基礎，但還必須站在它的肩膀上遠眺。

　　公安有自己的實際情況，它沒有互聯(lián)網(wǎng)數(shù)據(jù)如此的數(shù)據(jù)量，也沒有金融、電商行業(yè)如此大的峰值吞吐量，但卻有極為復雜的數(shù)據(jù)維度、數(shù)據(jù)源和業(yè)務應用場景。所以，公安對于大數(shù)據(jù)應用的需求，并不是要建設一套世界最快的平臺，而是根據(jù)數(shù)據(jù)類型選擇最合適的處理工具，根據(jù)用戶業(yè)務應用選擇最實用的分析和展示幫助研判人員理清思路，挖掘重點。所以公安大數(shù)據(jù)具有其特殊性，理應應該是一個“混搭”型模式，不應是從標準的開源社區(qū)拿來一套標準架構(gòu)就可以直接套用的。無論是從數(shù)據(jù)源的結(jié)構(gòu)化、數(shù)據(jù)統(tǒng)一化，到核心的大數(shù)據(jù)運算模型，存儲結(jié)構(gòu)。還是應用層面的數(shù)據(jù)挖掘、碰撞模型建立、數(shù)據(jù)展示、數(shù)據(jù)安審機制。每一個環(huán)節(jié)都需要從公安的核心業(yè)務出發(fā)，只有這樣的大數(shù)據(jù)系統(tǒng)才是公安需要的，能真正幫助公安業(yè)務發(fā)展的。

　　正是秉持這一思路，企業(yè)一方面投入大量人力深度研究公安業(yè)務員和大數(shù)據(jù)技術，力求公安用戶對于大數(shù)據(jù)應用的急迫需求，充分結(jié)合公安數(shù)據(jù)特性，從工具的選擇，開源架構(gòu)的優(yōu)化，應用的分析模型為核心秉承“最合適的才是最好的”原則，為公安用戶的大數(shù)據(jù)應用量身定做。另一方面，基于自身對于公安業(yè)務的充分理解，國家政策的支持和對市場需求的前瞻，推出公安大數(shù)據(jù)平臺。

　　警務實戰(zhàn)的發(fā)展必然走向大數(shù)據(jù)，但大數(shù)據(jù)并非是完美的終點。大數(shù)據(jù)不是無所不能，更不能替代干警精英。大數(shù)據(jù)是我們的耳目、觸手，我們希望的是將大數(shù)據(jù)與我們的業(yè)務直覺完美融合，借助大數(shù)據(jù)在海量數(shù)據(jù)間任意遨游，使數(shù)據(jù)為我們所用，對社會的安定和繁榮發(fā)揮其更大的作用。

　?。?strong>司楷/作者現(xiàn)任東方網(wǎng)力科技股份有限公司產(chǎn)品經(jīng)理）