網(wǎng)絡每時每刻都在處理數(shù)據(jù)，但如果把“大”這個詞放在“數(shù)據(jù)”前面，網(wǎng)絡管理員和首席信息官就必須面對很多全新的挑戰(zhàn)。

(資料圖片僅供參考)

大數(shù)據(jù)將給企業(yè)使用的網(wǎng)絡帶來什么樣的挑戰(zhàn)?

人們想象一下這樣一個世界：電視臺可以在電視劇第一集播放結(jié)束之前就準確預測其表現(xiàn);公用事業(yè)公司可以通過分析家用電器的傳感器的數(shù)據(jù)，幫助居民減少能源支出;或者，運輸公司可以通過實時跟蹤包裹來優(yōu)化運輸路線和燃料消耗。

這種情形是不是太超前了?事實上，如今差不多可以實現(xiàn)。

移動應用、全IP無線網(wǎng)絡、在線商務、銷售點系統(tǒng)、社交媒體的興起，以及從交通監(jiān)控到庫存管理等各方面的傳感器的使用，都會產(chǎn)生數(shù)據(jù)，如果管理得當，這些數(shù)據(jù)可以為推動商業(yè)決策提供關(guān)鍵的信息和情報。這些數(shù)據(jù)大多是動態(tài)收集的，如果能迅速采取行動，就能為企業(yè)提供獨特的競爭優(yōu)勢，提供更多的業(yè)務機會，并解決出現(xiàn)的問題。

但是，由于數(shù)據(jù)量巨大，速度不斷提高，也推動了網(wǎng)絡需求的極限。網(wǎng)絡每時每刻都在處理數(shù)據(jù)。但如果把“大”這個詞放在“數(shù)據(jù)”前面，網(wǎng)絡管理員和首席信息官就必須面對很多全新的挑戰(zhàn)。

改變數(shù)據(jù)流

如今的數(shù)據(jù)無疑正在發(fā)生變化，數(shù)據(jù)量也正在呈指數(shù)級增長。數(shù)據(jù)關(guān)系已經(jīng)從簡單和已知走向復雜和未知，數(shù)據(jù)模型已經(jīng)從固定模式類型轉(zhuǎn)移到無模式類型。數(shù)據(jù)來源已經(jīng)從簡單的數(shù)據(jù)輸入變成了來自各種來源的實時流，包括手持設(shè)備和機器傳感器。

大數(shù)據(jù)的形式尤其多樣。例如在網(wǎng)絡中，通話記錄看起來與信用卡交易不同。與傳統(tǒng)應用中的結(jié)構(gòu)化數(shù)據(jù)不同，大數(shù)據(jù)包括半結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)，如文本、音頻、視頻、點擊流、日志文件，以及測量和傳輸?shù)乩砗铜h(huán)境信息的傳感器的輸出。

大數(shù)據(jù)環(huán)境改變了數(shù)據(jù)在網(wǎng)絡中的流動方式。大數(shù)據(jù)產(chǎn)生的東西方向流量或服務器之間的流量遠遠大于南北或服務器到客戶端的流量，而且對于每一次客戶端交互，可能會有成百上千的服務器和數(shù)據(jù)節(jié)點交互。應用程序架構(gòu)也相應地從集中式模型發(fā)展到分布式模型。這與過去20年建立的傳統(tǒng)客戶機/服務器網(wǎng)絡架構(gòu)背道而馳。

大數(shù)據(jù)對網(wǎng)絡的影響

大數(shù)據(jù)系統(tǒng)從各種來源提取數(shù)據(jù)，運行在分布在多個網(wǎng)絡節(jié)點上的服務器集群上。這些集群以并行的向外擴展方式運行任務。流量模式可以從1對1(電話)、1對多(電視節(jié)目)、多對1(音樂會觀眾)和多對多(CB無線電)，這是并行運行的多個節(jié)點之間的單播和多播流的組合。網(wǎng)絡管理員需要處理這種流量模式的組合，其中一些模式創(chuàng)建一個流，一些模式創(chuàng)建多個流。

此外，當數(shù)據(jù)被提供給計算節(jié)點時，它會產(chǎn)生大量的網(wǎng)絡流量。分布式節(jié)點之間的數(shù)據(jù)洗牌和排序操作需要快速和可預測的傳輸。雖然分析系統(tǒng)使用直接附加的存儲進行處理，但中間存儲階段的數(shù)據(jù)。

在分析過程中，數(shù)據(jù)需要在網(wǎng)絡中移動和有效地操作。隨著新的數(shù)據(jù)集的增長和源的添加，工作負載也會增長?？焖僭黾赢a(chǎn)能的需求也是如此。因此，在網(wǎng)絡架構(gòu)中優(yōu)先考慮本地、高性能、水平可擴展性和直接服務器節(jié)點到服務器節(jié)點的連通性非常重要。

對新的網(wǎng)絡模式的需求

一種設(shè)計模型包括構(gòu)建在低端硬件上，并讓分析軟件對網(wǎng)絡問題做出反應，例如重新啟動由于擁塞而超時的作業(yè)。該模型用于非實時處理，即完成時間不重要，數(shù)據(jù)主要來自一個來源。

另一個設(shè)計模型涉及構(gòu)建基于硬件的系統(tǒng)，該系統(tǒng)提供確定性性能，以確保連續(xù)處理。該模型用于對來自多個來源的數(shù)據(jù)進行近實時分析。

與此同時，實時大數(shù)據(jù)系統(tǒng)受益于網(wǎng)絡節(jié)點以任意對任意模型相互連接的拓撲結(jié)構(gòu)，節(jié)點之間只進行單一跳躍，為處理多個大數(shù)據(jù)流提供了一個專用系統(tǒng)，具有低損耗和確定性性能。交換結(jié)構(gòu)可以提供這種模型。

交換結(jié)構(gòu)提供了整體系統(tǒng)帶寬和性能的優(yōu)勢，特別是減少延遲。位置獨立性允許集群和數(shù)據(jù)從架構(gòu)中的任何位置獲得最佳性能。這種架構(gòu)還可以無縫地將新數(shù)據(jù)源合并到集群中，而無需重新連接，并極大地簡化了系統(tǒng)的擴展。它提供了收斂性，允許服務器集群和存儲區(qū)域網(wǎng)絡跨一個網(wǎng)絡進行通信。資源作為一個實體進行管理，策略可以很容易地跨整個交換基礎(chǔ)設(shè)施應用。

實施大數(shù)據(jù)解決方案

大數(shù)據(jù)為企業(yè)提供了前所未有的獲取和分析數(shù)據(jù)的巨大機會。當IT組織開始測試和開發(fā)他們的解決方案時，網(wǎng)絡管理員必須考慮這些技術(shù)對他們的服務器、存儲、網(wǎng)絡和操作基礎(chǔ)設(shè)施的影響。企業(yè)如何才能最好地開發(fā)新的基礎(chǔ)設(shè)施來利用和分析不斷增長的大數(shù)據(jù)流?在開發(fā)網(wǎng)絡拓撲結(jié)構(gòu)時考慮以下問題：

●數(shù)據(jù)流的分析是實時進行的嗎?

●是否有多個數(shù)據(jù)源，它們是靜態(tài)的還是流動的?

●如果試點成功，集群需要有多大?

●增加更多的產(chǎn)能有多容易和快速?

●大數(shù)據(jù)應用需要與其他應用集成嗎?

回答這些問題將有助于構(gòu)建討論框架，它們將說明基礎(chǔ)設(shè)施將如何影響數(shù)據(jù)中心架構(gòu)和互連需求。

大數(shù)據(jù)使企業(yè)能夠制定新的戰(zhàn)略，提供實時業(yè)務分析和新的業(yè)務洞察，從而推動業(yè)務的發(fā)展。然而，隨著企業(yè)看到的快速變化，有必要考慮為未來的業(yè)務需求提供規(guī)模、性能和空間的關(guān)鍵技術(shù)，以滿足最高級別的投資保護、業(yè)務敏捷性和上市時間。