通過(guò)提供對(duì)更廣泛信息集的訪(fǎng)問(wèn)，大數(shù)據(jù)就可以為數(shù)據(jù)分析師和業(yè)務(wù)用戶(hù)產(chǎn)生分析見(jiàn)解提供一臂之力。成功的大數(shù)據(jù)分析應(yīng)用程序會(huì)揭示某些趨勢(shì)和模式，以此來(lái)為決策制定提供更好的服務(wù)，并會(huì)指出新的創(chuàng)收機(jī)會(huì)和讓企業(yè)領(lǐng)先于他們的商業(yè)競(jìng)爭(zhēng)對(duì)手的方法。但首先，企業(yè)往往需要增強(qiáng)他們現(xiàn)有的IT基礎(chǔ)設(shè)施建設(shè)以及數(shù)據(jù)管理流程以支持大數(shù)據(jù)架構(gòu)的規(guī)模和復(fù)雜性。
Hadoop系統(tǒng)和NoSQL數(shù)據(jù)庫(kù)已經(jīng)成為管理大數(shù)據(jù)環(huán)境的重要工具。不過(guò)，在很多情況下，企業(yè)利用他們現(xiàn)有的數(shù)據(jù)倉(cāng)庫(kù)設(shè)施，或是一個(gè)新老混合的技術(shù)來(lái)對(duì)大數(shù)據(jù)流入他們的系統(tǒng)進(jìn)行管理。
無(wú)論一個(gè)公司部署什么類(lèi)型的大數(shù)據(jù)技術(shù)棧，有一些共通的因素必須加以考量，以保證為大數(shù)據(jù)分析工作提供一個(gè)有效的框架。在開(kāi)始一個(gè)大數(shù)據(jù)項(xiàng)目之前，去審視項(xiàng)目所要承擔(dān)的新數(shù)據(jù)需求的更大圖景顯得尤為關(guān)鍵。下面來(lái)讓我們檢視四個(gè)需要加以考量的因素。
數(shù)據(jù)準(zhǔn)確性
數(shù)據(jù)質(zhì)量問(wèn)題對(duì)于BI和數(shù)據(jù)管理專(zhuān)業(yè)人士來(lái)說(shuō)一定不陌生。很多BI和分析團(tuán)隊(duì)努力保證數(shù)據(jù)的有效性并說(shuō)服業(yè)務(wù)使用人員去信任信息資產(chǎn)的準(zhǔn)確性和可靠性。作為個(gè)性化分析庫(kù)而得以廣泛使用的電子表格或電子報(bào)表軟件可以對(duì)數(shù)據(jù)中信任缺乏的問(wèn)題加以彌補(bǔ)：在Excel中存儲(chǔ)和操作分析數(shù)據(jù)的功能為支持自助分析能力創(chuàng)造了環(huán)境，但可能不會(huì)激發(fā)其他用戶(hù)對(duì)結(jié)果的自信心。數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)集成和數(shù)據(jù)質(zhì)量工具一起，能夠通過(guò)為管理BI和分析數(shù)據(jù)提供標(biāo)準(zhǔn)化流程來(lái)幫助樹(shù)立信心。但是，由于不斷增加的數(shù)據(jù)容量和更廣泛多樣的數(shù)據(jù)類(lèi)型，特別是當(dāng)涉及結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)混合時(shí)，就會(huì)對(duì)一個(gè)大數(shù)據(jù)的實(shí)施增加難度系數(shù)。建立評(píng)估數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)以及對(duì)它們進(jìn)行升級(jí)以處理那些更大、更多樣數(shù)據(jù)集，對(duì)于大數(shù)據(jù)實(shí)施的成功和分析框架的使用是至關(guān)重要的。
存儲(chǔ)適用
數(shù)據(jù)倉(cāng)儲(chǔ)的一個(gè)核心要求是處理和存儲(chǔ)大數(shù)據(jù)集的能力。但并不是所有數(shù)據(jù)倉(cāng)庫(kù)在這方面都滿(mǎn)足要求。一些是針對(duì)復(fù)雜查詢(xún)處理進(jìn)行優(yōu)化，而其他的則并非如此。并且在許多大數(shù)據(jù)應(yīng)用程序中，相較于事務(wù)系統(tǒng)，由于添加了非結(jié)構(gòu)化數(shù)據(jù)還有數(shù)據(jù)的創(chuàng)建和收集增速迅猛，用Hadoop和NoSQL技術(shù)增強(qiáng)數(shù)據(jù)倉(cāng)庫(kù)就成為必要。對(duì)于一個(gè)希望獲取并分析大數(shù)據(jù)的組織來(lái)說(shuō)，光有存儲(chǔ)容量是不夠的;而重要的部分在于將數(shù)據(jù)置于何處才是最佳的，這樣數(shù)據(jù)就可以轉(zhuǎn)化為有用信息并為數(shù)據(jù)科學(xué)家和其他用戶(hù)所利用。
查詢(xún)性能
大數(shù)據(jù)分析依賴(lài)于及時(shí)處理和查詢(xún)復(fù)雜數(shù)據(jù)的能力。一個(gè)很好地例子就是：一家公司開(kāi)發(fā)了一個(gè)數(shù)據(jù)倉(cāng)庫(kù)用來(lái)維護(hù)從能源使用計(jì)收集到的數(shù)據(jù)。在產(chǎn)品評(píng)估過(guò)程中，某供應(yīng)商的系統(tǒng)有能力在15分鐘內(nèi)處理七百萬(wàn)條記錄，而另一家則在相同時(shí)間內(nèi)可以處理最高三十萬(wàn)條記錄。能否識(shí)別正確的基礎(chǔ)設(shè)施來(lái)支持快速的數(shù)據(jù)可用性和高性能查詢(xún)就意味著成功還是失敗。
穩(wěn)定性
隨著許多組織中數(shù)據(jù)量和數(shù)據(jù)種類(lèi)的增長(zhǎng)，大數(shù)據(jù)平臺(tái)的建立需要有對(duì)未來(lái)的考量。必須提前考慮和求證正在進(jìn)行評(píng)估的大數(shù)據(jù)技術(shù)是否能夠進(jìn)行擴(kuò)展，以達(dá)到不斷向前發(fā)展的需求所要求的級(jí)別。這便超出了存儲(chǔ)容量的范疇，將性能也包含了進(jìn)來(lái)，對(duì)那些從社交網(wǎng)絡(luò)，傳感器，系統(tǒng)日志文件以及其他非事務(wù)源獲取數(shù)據(jù)作為其業(yè)務(wù)數(shù)據(jù)擴(kuò)展的公司來(lái)說(shuō)尤為如此。
分析多樣而復(fù)雜的數(shù)據(jù)集需要一個(gè)健壯且富有彈性的大數(shù)據(jù)架構(gòu)。在籌劃項(xiàng)目時(shí)通過(guò)對(duì)這四個(gè)因素進(jìn)行考量，組織可以確定他們是否已經(jīng)擁有能夠處理如此嚴(yán)苛大數(shù)據(jù)的分析程序亦或是需要額外的軟硬件以及數(shù)據(jù)管理流程來(lái)達(dá)到他們的大數(shù)據(jù)目標(biāo)。
a&s傳媒是全球知名展覽公司法蘭克福展覽集團(tuán)旗下的專(zhuān)業(yè)媒體平臺(tái)，自1994年品牌成立以來(lái)，一直專(zhuān)注于安全&自動(dòng)化產(chǎn)業(yè)前沿產(chǎn)品、技術(shù)及市場(chǎng)趨勢(shì)的專(zhuān)業(yè)媒體傳播和品牌服務(wù)。從安全管理到產(chǎn)業(yè)數(shù)字化，a&s傳媒擁有首屈一指的國(guó)際行業(yè)展覽會(huì)資源以及豐富的媒體經(jīng)驗(yàn)，提供媒體、活動(dòng)、展會(huì)等整合營(yíng)銷(xiāo)服務(wù)。
粵公網(wǎng)安備 44030402000264號(hào)
