移動通信網(wǎng)絡中大數(shù)據(jù)處理關鍵技術研究論文
摘要：社會的發(fā)展以及人們生活水平的提升使得移動通信網(wǎng)絡的應用范圍得以大范圍推廣，并且伴隨著社會對移動通信網(wǎng)絡需求的增強，大數(shù)據(jù)處理技術的應用就應運而生了，本文就此展開論述。
關鍵詞：移動通信網(wǎng)絡；大數(shù)據(jù)處理；技術分析
伴隨著我國綜合國力的增強，科技水平也得到了進一步增強。計算機技術作為新時代的重要基礎技術，其應用范圍的擴大，在一定程度上促進了信息技術的騰飛發(fā)展。伴隨著日漸龐雜的數(shù)據(jù)規(guī)模，使得大數(shù)據(jù)處理技術應時代而生。同時移動通信網(wǎng)絡技術的發(fā)展，極大的方便了人們的工作和生活。為了滿足人們?nèi)找嬖鲩L的通信需求，移動通信網(wǎng)絡也需要具備更加有力的數(shù)據(jù)處理能力和處理速度。
1大數(shù)據(jù)技術概述
現(xiàn)階段，我國數(shù)據(jù)的發(fā)展主要包括以下幾個階段：第一，被動產(chǎn)生階段。伴隨著數(shù)據(jù)庫的出現(xiàn)，其在規(guī)范社會數(shù)據(jù)方面意義深遠。不過該階段數(shù)據(jù)庫的作用相對較為被動，其服務的對象主要為政府、大型企業(yè)等，諸如銀行以及超市等主要進行經(jīng)營活動而產(chǎn)生的數(shù)據(jù)交易記錄；第二，主動產(chǎn)生階段。伴隨著互聯(lián)網(wǎng)技術的騰飛發(fā)展，社會經(jīng)濟活動日漸頻繁，相應的也會產(chǎn)生大量的數(shù)據(jù)信息。同時在這大量的數(shù)據(jù)信息中包含著大量的用戶原創(chuàng)性信息內(nèi)容，其主要借助QQ日志、微博、博客以及微信等方式發(fā)布到網(wǎng)絡上。此外智能化電子產(chǎn)品的`誕生，為人們發(fā)布這些原創(chuàng)信息提供了便利。因此，該階段所產(chǎn)生的數(shù)據(jù)信息量不僅數(shù)量巨大，且多是主動產(chǎn)生的。第三，自動產(chǎn)生階段。隨著大數(shù)據(jù)時代的到來，使得數(shù)據(jù)開始進行自動產(chǎn)生。主要原因在于移動通信網(wǎng)絡和物聯(lián)網(wǎng)之間得到了有效融合，從而推動數(shù)據(jù)自動產(chǎn)生，并直接推動者大數(shù)據(jù)時代的到來。大數(shù)據(jù)技術主要具備如下幾個特點：第一，需要處理規(guī)模相對較大的數(shù)據(jù)。大數(shù)據(jù)技術通常需要處理PB級甚至是EB級的數(shù)據(jù)量。第二，數(shù)據(jù)非結構化。在大數(shù)據(jù)時代，非結構化的數(shù)據(jù)迅速增加，高達數(shù)據(jù)總量的80%左右。第三，多源異構。由于基于物聯(lián)網(wǎng)環(huán)境下，大數(shù)據(jù)多運用傳感器、移動設備等異構終端來進行數(shù)據(jù)的采集，這樣很容易導致數(shù)據(jù)出現(xiàn)多源異構特點。第四，數(shù)據(jù)處理的實時性。生活節(jié)奏的變快使得人們需要快速處理各種信息數(shù)據(jù)，因此在線實時處理數(shù)據(jù)則是大數(shù)據(jù)時代的另一重要特點。
2大數(shù)據(jù)處理的關鍵技術
在移動通信網(wǎng)絡中，尤其是物聯(lián)網(wǎng)中，很多終端設備都是處在無人監(jiān)控狀態(tài)下，加之這些終端設備所處環(huán)境大多較為惡劣，因此在物聯(lián)網(wǎng)進行數(shù)據(jù)采集時，往往會出現(xiàn)很多錯誤，因而收集到的原始數(shù)據(jù)就缺乏可靠性，譬如采集的一些數(shù)據(jù)會和實際產(chǎn)生一定誤差，一些數(shù)據(jù)收集不完整，又或者是一些數(shù)據(jù)是無關多余的。因此，這就需要通過各種方式來提取所需的數(shù)據(jù)。就當前來看，有許多數(shù)據(jù)清洗技術，然而這些數(shù)據(jù)只適用于較強結構化的數(shù)據(jù)，大數(shù)據(jù)又是非結構性，因而并不能起到很好的作用。
而且利用該技術也無法處理大量數(shù)據(jù)，這就難以體現(xiàn)大數(shù)據(jù)的實時性。因此，在大數(shù)據(jù)清洗技術的研究方面還需要進一步研究。大數(shù)據(jù)有非常多的來源，將收集到的各方數(shù)據(jù)融合在一起對于數(shù)據(jù)分析相當重要。數(shù)據(jù)融合就是收集到的數(shù)據(jù)源是不一樣的，這些數(shù)據(jù)要通過不同表象來表達實體，這就需要將數(shù)據(jù)轉(zhuǎn)換成為對同一個表象的表達，減少相關數(shù)據(jù)產(chǎn)生沖突的過程。在移動通信網(wǎng)絡當中，數(shù)據(jù)的多源性比較普遍，因而對數(shù)據(jù)進行統(tǒng)一十分必要，讓各數(shù)據(jù)之間產(chǎn)生關聯(lián)。這就要使結構化和非結構化數(shù)據(jù)發(fā)生關聯(lián)，再以數(shù)據(jù)融合來提取關鍵數(shù)據(jù)。經(jīng)過一系列處理之后，就要分析所獲得的大數(shù)據(jù)，并挖掘出新的數(shù)據(jù)。要將移動通信網(wǎng)絡中的大數(shù)據(jù)分析和挖掘出來就要從數(shù)據(jù)表示和存儲兩個方面給予充分考慮
。其中，要借助先進的挖掘工具，并改善數(shù)據(jù)開發(fā)環(huán)境。另外一項大數(shù)據(jù)處理關鍵技術是利用可視化來進行數(shù)據(jù)分析。眾所周知，移動通信網(wǎng)絡有著十分龐大的數(shù)據(jù)量，其挖掘結果也是大數(shù)據(jù)，通過可視化分析這些大數(shù)據(jù)可以讓人們對這些數(shù)據(jù)更加容易的理解，進而更深入來分析這些數(shù)據(jù)；并且對數(shù)據(jù)進行可視化分析，能夠促進人機交互的開展，利用人機交互來處理大數(shù)據(jù)可極大的提升數(shù)據(jù)處理能力和工作效率。當然，移動通信網(wǎng)絡當中大數(shù)據(jù)的處理不僅僅局限于上述挑戰(zhàn)，安全問題也是大數(shù)據(jù)處理所面臨的重要問題，因此需加強數(shù)據(jù)管理，不斷提升數(shù)據(jù)處理技術水平，最終實現(xiàn)大數(shù)據(jù)有效管理。
3云計算
經(jīng)分析可以看出，移動通信網(wǎng)絡大數(shù)據(jù)處理有兩大趨勢，主要是數(shù)據(jù)量驟增以及分析深度加劇。這對于移動通信網(wǎng)絡大數(shù)據(jù)的處理來講無疑是一大挑戰(zhàn)。而云計算的出現(xiàn)則讓移動通信網(wǎng)絡大數(shù)據(jù)處理有了新的思路。2004年，Google就提出了MapReduce技術來作為處理大數(shù)據(jù)分析和處理的計算模型，此舉一出立刻引起了廣泛關注。MapReduce技術包含了三個層面，即分布式文件系統(tǒng)、并行編程模型以及并行執(zhí)行引擎。MapReduce技術的出現(xiàn)引起了各方面關注，而在運行中，慢慢發(fā)現(xiàn)其很多不足之處，譬如不支持Schema、沒有存取優(yōu)化以及依靠蠻力來處理數(shù)據(jù)等等。針對MapReduce當中的不足，研究人員進行了深入研究，對其性能進行了相應提升，并對易用性進行了一定的改進，經(jīng)過實踐證明，MapReduce是分析和處理大數(shù)據(jù)的一種有效工具，但是在進行大數(shù)據(jù)處理過程中，MapReduce依舊有著缺陷和不足。就大數(shù)據(jù)處理模式角度而言，流處理和批處理是其中最為重要的模式。MapReduce只可以運用批處理模式來處理大數(shù)據(jù)。然而實際狀況是，眾多的社交網(wǎng)站和電子商務均需要進行在線處理，而MapRe-duce卻只能愛莫能助。綜上，移動通信網(wǎng)絡所產(chǎn)生的數(shù)據(jù)量不斷增多，這些數(shù)據(jù)為社會帶來了便利，然而也面臨著大量數(shù)據(jù)要處理的現(xiàn)實問題。對此應用大數(shù)據(jù)處理關鍵技術來解決越來越多的數(shù)據(jù)難題，盡管還存在一些不足，但相信在科技的發(fā)展下這種情況會得到有效改善。
參考文獻：
[1]冷宇,張小麗.基于云計算的移動通信4G網(wǎng)絡優(yōu)化探討[J].電腦迷,2016（4）:166
[2]鄭彤,崔景伍,鄭夢婷.D2D通信中大數(shù)據(jù)處理關鍵技術分析與展望[J].移動通信,2016（7）:37-40
[3]蔣曉鵬.移動通信網(wǎng)絡優(yōu)化中大數(shù)據(jù)技術的運用分析[J].電子技術與軟件工程,2016（12）:170
【移動通信網(wǎng)絡中大數(shù)據(jù)處理關鍵技術研究論文】相關文章：
綠色移動信息通信技術研究論文01-23
數(shù)字城管數(shù)據(jù)處理的關鍵技術研究07-08
移動通信網(wǎng)絡虛擬化探析論文01-22
4G移動通信關鍵技術探析論文01-22
5G移動通信關鍵技術分析論文01-23