時間:2019年02月15日 分類:電子論文 次數:
下面文章首先介紹了大數據的發展狀況,論述了網絡工程和大數據的有關概念,并且重點從綜合布線、設備調試、網絡安全和網絡優化等方面進行研究,分析了網絡工程對大數據的發展所起到的作用以及大數據發展對網絡工程的帶動作用,最后對網絡工程在大數據中的應用前景加以展望。
【關鍵詞】大數據,網絡工程,網絡安全,網絡優化
1大數據的定義與發展現狀
大數據(bigdata),是基于云計算的數據處理與應用模式,通過數據的整合共享,交叉復用,形成的智力資源和知識服務能力。近年來,大數據逐漸被人們尤其是信息技術和產業界所看重,這表明大數據已經成為信息與科學技術的領域中一個重要的前沿課題。在互聯網的商業界中,如今的大數據已成為了熱門的產業,許多人都已意識到大數據時代中數據的重要性。
2網絡工程的定義及劃分
網絡工程是將計算機網與通信網(包括有線、無線網絡)相結合,以工程化思想進行網絡系統和計算機通信系統研究、教學、設計、開發等。網絡工程主要劃分為硬件工程和布線工程。硬件工程:指的是計算機網絡所使用的設備,工程包括網絡的需求分析、網絡拓撲結構設計、網絡設備選擇、施工技術要求等。布線工程:也叫做綜合布線,是為了保證正常的通訊而使用銅纜、光纜將網絡設備進行連接。工程中包括橋架設計、線纜路由選擇、線纜及接插件的選型等。
3網絡工程在大數據中的應用
3.1綜合布線應用于大數據
數據中心布線系統在大數據時代,人們不僅關注10G/40G/100G/1000G的傳輸通道,管理也同樣是數據綜合布線的不可或缺的功能。大數據的更新讓我們的中心數據處理區域負責運算和處理的壓力增大,這使得虛擬化技術得以在數據中心發揮出自己的特長和優勢,但另一方面,在提高效率的同時,虛擬化技術同樣使得網絡的物理層信息的交換量加劇,這一問題的解決是迫在眉睫的。因此可以使用智能基礎設施管理系統,這能在未來的數據中心的信息交換過程中發揮出特有的優勢。
本文所使用的是基于數據中心330機架*4的網絡模型,在服務器機柜接入交換機,下行服務器機柜是采用獨立柜內布線這一形式,由網絡拓撲圖分析得知,這樣管理的側重點是它的轉發核心區域,擁有數據聚集轉發和管理的特點,如果在布置的過程當中不能對這一分布式區域進行系統的管理維護,就會很容易發生網絡混亂。因此,我們如果采用之前所提到的智能基礎設施管理系統,主動地管理其物理層路由鏈路,會為網絡的實施提供相應的保證。
3.2設備調試應用于大數據
根據之前所述,大數據技術的意義其實并非在于掌握數據信息,而是對這些數據進行相對專業化的歸納和處理。因此,在調試路由器、交換機及防火墻等網絡設備時,可將其與大數據相結合,在對這些數據進行相對專業化的歸納和處理過程后,根據所歸納的數據,得出最優的匹配方式,并且便于歸納調試過程中所出現的各種問題,加快不同型號不同品牌的產品的更新速度。
3.3網絡安全應用于大數據
在大數據環境中,Internet網上大量敏感信息持續不斷的產生,這時網絡安全就成為了保障數據安全的保證。大數據在網絡安全方面的分析體現在以下幾個方面:物理安全分析、信息傳播安全分析、信息內容安全分析和管理安全分析。因此,全面對安全威脅與安全漏洞進行分析、檢測,是網絡安全防御系統的必要條件。
主要的技術有:訪問控制,數據加密,入侵檢測,病毒防治,漏洞掃描,數據備份等。下面詳細介紹:訪問控制。是網絡安全保護主要的策略。目的是對訪問資源權限進行嚴格認證與控制,保證了網絡資源不被非法訪問。它是以用戶認證為前提,實施訪問控制來規范用戶的行為,達到保護網絡資源的目的。數據加密。加密是一種保護數據安全的重要的方式。采用加密算法和加密密鑰,可以將明文數據轉換成密文,將數據隱藏后,在傳送。即使被截獲,對方也沒法得知數據內容,保證了傳送時的安全性,入侵檢測。
通過對Internet網和主機系統的信息施行采集分析,檢測是否有非法用戶入侵的行為,最后做出相對的措施。病毒防治。其主要包含了病毒預防、檢測和排除,阻止了病毒的入侵。具體形式為:安裝殺毒軟件,進行數據通信時進行實時監測防護。網絡隔離。采用數據存儲系統上安裝防火墻,它能將網絡分成內外網,內網是安全的,外網有威脅。防火墻規定訪問的限制。并通過對內網和外網間的數據流量進行檢測分析,保護內網不受外部病毒的入侵。數據備份。它是數據保護的最后防線,為了在數據丟失后方便對原來的數據進行修復與恢復。數據備份可以直接將文件進行復制,或者利用GHOST備份工具將其封裝成鏡像文件,需要恢復時可利用虛擬光驅解開。
3.4網絡優化對大數據技術的作用
在大數據技術中,我們可以采用數據的獲取、數據的存儲、數據的分析這3個階段來進行網絡優化。數據的獲取:可以利用各式各樣的終端設備來獲取工程師想要獲取的網絡優化資料。數據的存儲:網絡優化會獲得大量的數據,只有有效的完整的存儲這些數據,才能通過分析總結得出結果,體現價值,這就需要借助云計算的運用,這樣可以緩解數據存儲的巨大壓力。
數據分析:數據采集后,最終目的是發現數據所包含的價值,而能夠體現價值的方式就是數據的分析和歸納,這一階段也是這三個階段中最為重要的一個階段,如果這一階段無法獲得有用的實際價值,則前面兩個階段就無法實現它們的價值。
4總結
大數據依靠互聯網這一平臺,才能有效的發揮其巨大的作用,它需要不斷的發展與完善。因此,網絡工程中的技術,可以成為其發展的催化劑,更好更快的帶動大數據技術前進。大據的發展離不開網絡工程,同樣網絡工程的技術革新也需要借助大數據這一強大的技術來支持,兩者是相互促進共同發展的。
參考文獻:
[1]孟小峰,慈祥.數據管理:概念、技術與挑戰[J].計算機研究與發展,2013,50(1):146-149.
[2]楊燕,周濤譯.大數據時代[M].杭州:浙江人民出版社,2013.
[3]王之元.并行計算可擴展性分析與優化[D].湖南:國防科技大學,2011.
[4]王元卓,靳小龍,程學旗.網絡大數據:現狀與展望[J].計算機學報,2013,36(6):1125-1138.
相關期刊推薦:計算機學報(月刊)創刊于1978年,由中國計算機學會與中國科學院計算技術研究所主辦、科學出版社出版,以中文編輯形式與讀者見面,同時以英文摘要形式向國際各大檢索系統提供基本內容介紹。