我們都知道,大數(shù)據(jù)通常與數(shù)據(jù)中心不斷增長(zhǎng)的結(jié)構(gòu)和非結(jié)構(gòu)化工作負(fù)載相關(guān)。而網(wǎng)絡(luò)負(fù)責(zé)處理傳輸?shù)椒?wù)器、存儲(chǔ)陣列和云服務(wù)的數(shù)據(jù)流量。服務(wù)器之間的密集型I/O吞吐量常常發(fā)生在數(shù)據(jù)中心或者廣域網(wǎng)之間。伴隨著大數(shù)據(jù)的來(lái)臨和應(yīng)用的不斷增長(zhǎng),新的問(wèn)題將會(huì)出現(xiàn)。由于傳統(tǒng)的IT設(shè)施在當(dāng)初設(shè)計(jì)的時(shí)候,沒(méi)有考慮到大數(shù)據(jù)的情形,瓶頸問(wèn)題將變得更加普遍,尤其是在存儲(chǔ)一端,問(wèn)題更加明顯。
這樣一來(lái),IT業(yè)務(wù)中就會(huì)出現(xiàn)一種新的分支:面向新一代數(shù)據(jù)中心的數(shù)據(jù)管理。下面,我們就給大家介紹大流量阻礙數(shù)據(jù)中心發(fā)展的幾大緣由:
一、大流量是一種新型工作負(fù)載
大流量是指橫跨廣域網(wǎng)連接的數(shù)據(jù)中心內(nèi)服務(wù)器間的通信流量,它不同于通常情況下的大數(shù)據(jù)工作負(fù)載——也就是用戶對(duì)機(jī)器或者機(jī)器之間的通信流量。
二、傳統(tǒng)IT不能勝任大流量要求
導(dǎo)致大流量出現(xiàn)的主要原因是IT過(guò)去幾年所形成的優(yōu)勢(shì):虛擬化的廣泛部署和擴(kuò)展系統(tǒng);遠(yuǎn)程實(shí)時(shí)遷移;數(shù)據(jù)復(fù)制和備份;專(zhuān)門(mén)針對(duì)基于WAN分布式系統(tǒng)而編寫(xiě)的尖端應(yīng)用,比如Hadoop, MapReduce, MongoDB和Cassandra。
三、大流量增長(zhǎng)沒(méi)有止境
大流量增長(zhǎng)沒(méi)有具體的指標(biāo)可供參考,它的增長(zhǎng)將永無(wú)止境。Forrester Research預(yù)測(cè)說(shuō),在未來(lái)幾年,由機(jī)器運(yùn)行產(chǎn)生的應(yīng)用數(shù)據(jù)將達(dá)到50%的年增長(zhǎng)。而且,存儲(chǔ)巨頭EMC官方發(fā)布過(guò)一份報(bào)告,認(rèn)為在2009至2020年間,將實(shí)現(xiàn)44倍數(shù)據(jù)擴(kuò)容,這意味著數(shù)據(jù)帶來(lái)的流量增長(zhǎng)將是一個(gè)巨大挑戰(zhàn)。
四、大流量對(duì)IT人員影響巨大
不斷增長(zhǎng)的大流量將對(duì)大型組織機(jī)構(gòu)的影響最為深遠(yuǎn),而在其中,尤以生產(chǎn)一線的工人、CIO、CTO、存儲(chǔ)管理員、災(zāi)備和服務(wù)器工作人員、網(wǎng)絡(luò)管理員和數(shù)據(jù)中心管理員等受影響最大。
五、數(shù)據(jù)中心和管理面臨考驗(yàn)
日益增長(zhǎng)的大流量將會(huì)給企業(yè)的數(shù)據(jù)中心及其管理帶來(lái)嚴(yán)峻考驗(yàn),因?yàn)樗鼈冃枰鉀Q傳統(tǒng)和當(dāng)前二者不同情形的數(shù)據(jù)傳輸過(guò)程中的問(wèn)題。而且,還需要確保系統(tǒng)中基本的數(shù)據(jù)存儲(chǔ)和訪問(wèn)功能正常運(yùn)行。這些,將直接影響到業(yè)務(wù)的連續(xù)性、災(zāi)備和關(guān)鍵業(yè)務(wù)運(yùn)行。
六、如何優(yōu)化現(xiàn)有的系統(tǒng)
可能的解決辦法包括擴(kuò)充現(xiàn)有網(wǎng)絡(luò)帶寬、重復(fù)數(shù)據(jù)刪除、壓縮和精簡(jiǎn)配置軟件。數(shù)據(jù)中心也考驗(yàn)使用傳統(tǒng)的WAN優(yōu)化軟件,使用應(yīng)用加速解決方案,或者針對(duì)這種新型的大流量特點(diǎn)開(kāi)發(fā)新技術(shù)。
七、解決方案面臨的現(xiàn)實(shí)問(wèn)題
某些解決方案在某些情況下不可能得以執(zhí)行。比如,如果數(shù)據(jù)中心彼此相隔遙遠(yuǎn),有效的優(yōu)化方案實(shí)際效果可能并不明顯;或者,服務(wù)商不能為站點(diǎn)之間提供足夠的帶寬。
八、網(wǎng)絡(luò)優(yōu)化的相關(guān)問(wèn)題
當(dāng)企業(yè)對(duì)其網(wǎng)絡(luò)的帶寬和安全性進(jìn)行優(yōu)化,CIO和CTO需要事先知道對(duì)網(wǎng)絡(luò)和數(shù)據(jù)中心帶來(lái)何種影響。比如,在舊有系統(tǒng)中引人新軟件,可能會(huì)出現(xiàn)不能與其他舊軟件或者上一代版本軟件實(shí)現(xiàn)兼容的問(wèn)題,而這容易引發(fā)系統(tǒng)崩潰。
九、優(yōu)化的常規(guī)指南
企業(yè)該對(duì)如何界定數(shù)據(jù),以確保優(yōu)化方案能在IT運(yùn)營(yíng)中無(wú)縫執(zhí)行??紤]的因素應(yīng)該包括:部署的難易程度、完全透明的網(wǎng)絡(luò)滲透、與現(xiàn)有系統(tǒng)的兼容以及低功耗。
十、大數(shù)據(jù)未來(lái)情形
未來(lái)數(shù)據(jù)將不斷增長(zhǎng),數(shù)據(jù)中心靜態(tài)運(yùn)算和存儲(chǔ)資源將被傳送到統(tǒng)一的資源池中,以省時(shí)省力的經(jīng)濟(jì)方式充分利用虛擬化和云服務(wù),從而減輕內(nèi)部數(shù)據(jù)中心的工作負(fù)載。