大資料背景下計算機資訊處理技術探析論文

才智咖 人氣:1.5W

摘 要:近年來,大資料技術被廣泛應用於搜尋引擎、雲查殺等方面,大資料時代的到來,在給計算機技術發展帶來機遇的同時也帶來新的挑戰。基於此,對網路大資料環境下的計算機資訊處理技術展開探討。

大資料背景下計算機資訊處理技術探析論文

關鍵詞:網路;大資料;計算機;資訊處理

資訊化時代,計算機技術被廣泛應用於各行業,大資料時代的到來,使得處於網路系統終端的人們需要對海量資料執行儲存、整理等任務。這對於傳統的資訊處理技術來說是個巨大的挑戰。所以,如何使計算機資訊處理技術適用於大資料時代,如何向雲端計算網路方向發展,成為當前研究的熱點。

1 計算機資訊處理技術

計算機資訊處理的過程就是資料傳輸、獲取、分析和處理的過程。這是個非常麻煩的過程,需要運用到的技術有微電子技術、網路技術、計算機通訊技術等。計算機處理技術的主要型別有資訊系統技術、檢索技術、資料庫技術、通訊網路技術,人們在進行資料分析、整理時,主要依賴於資料庫技術。

2 大資料時代資料資訊處理的挑戰

大資料在本質上具有以下2個特點:①海量的資料,其儲存、整理是個巨大的工程,以人力和傳統的計算機技術是難以解決的;②人們可以通過有效的途徑,從中獲取對決策等有參考價值的資訊。適應大資料環境是計算機資訊處理技術的必然結果,雖然它給計算機技術帶來了挑戰,但也是計算機資訊處理技術得以發展的契機。相關的企業如果能抓住機會,加大對大資料環境下計算機資訊處理技術的研究力度,優先掌握新技術的核心技能,則會使其在業界內的競爭力大大提高,給企業帶來巨大的經濟效益和社會效益。

大資料時代的資料資訊處理技術挑戰主要有3方面:①資料儲存壓力。傳統的資料庫是無法儲存海量資料的,這些資料還要經過資料管理機制的壓縮、備份管理等,這都是新技術要解決的。②資料查詢問題。新技術需要做到對海量資料的查詢,並且能從中提取有價值的資訊。傳統的計算機資訊處理技術儲存量是以“GB”計算的,在查詢海量資料時需要花費很長的時間,且還不一定能得到準確的資訊,浪費了時間。③資料安全問題。在各種系統的傳輸、儲存過程中,由於系統的.安全性得不到保證,因此海量資料容易受到病毒攻擊,使得大資料中有參考價值的資訊不能準確地被提取出來。這也是新技術需要解決的。

3 大資料環境下的計算機資訊處理技術

3.1 分佈型資料儲存及網路深層空間技術

分佈型資料儲存技術是一種新型的計算機資訊處理技術,已被廣泛應用於像IBM這樣的公司,它主要採用的是列儲存技術,以列為基本單位,能對資料及進行有效的壓縮,還能進行快速的迴圈。這是行儲存技術沒有的特性。由於行、列儲存技術有各自的侷限性,目前應用比較廣泛的是將兩者結合,即行列混合型儲存結構。此種結構比較適用於大資料環境,能對海量資料進行儲存、整理、分析,高效運用磁碟空間,方便人們及時搜尋並提取資訊,不會浪費時間,節約搜尋成本。網路深層空間技術在對資料進行高效整合處理時,因其特殊的訪問途徑和資訊規模大的特性,方便人們利用此技術對資料進行整理。

3.2 資料高效索引與遺傳演算法

資料高效索引有很多種方式的索引,被廣泛應用的有2種:①互補型聚簇索引,其建立互補的索引表,以多個副本作為索引列;②聚簇索引,其儲存資料時需要依據索引的順序。

遺傳演算法在機器學習、訊號處理等方面得到了廣泛的應用,這主要得益於其本身的隨機性及調整搜尋方向時的自動化。

3.3 在內容資訊的基礎上進行資料探勘

大資料時代,需要對海量資料進行資料探勘。資料探勘技術是在內容資料的基礎上,主要致力於實體關聯研究技術與網路搜尋。針對網路搜尋的演算法主要是排序學習演算法,媒體在整理以短文形式存在的大量資料時,非常麻煩,排序學習演算法應運而生,逐列、逐點及逐對的演算法得到了廣泛應用。

3.4 資料分析技術和視覺化技術

資料分析技術包括很多種分析,比如網路分析、空間分析、情感分析等。基於網路特徵進行分析的是網路分析,拓撲的收集、地理編碼和統計幾何等分析工作就是空間分析,對自然語言進行非客觀的分析是情感分析。

視覺化技術使人們直觀地通過此技術建立的圖物品等來了解資料集的每個單一資料分配到叢集中的途徑。

3.5 分類、聚類分析技術和關聯規則技術

分類分析技術是通過歸納原來的資料,對其進行分析,找出規律,從而衍生出新的資料點。這種技術運用在大資料時代,能通過客戶目前的需求預測出客戶潛在的需求,預測結果是合理的。聚類分析技術指的是受限於不明確的因素,為了使結果合理化、準確度高,對集合處理進行分類,分成多個物件組,然後再對物件組進行科學的分析與處理。

以上2種技術對資料探勘方面有很大的幫助,因此得到了廣泛的應用。資料探勘還可以通過關聯規則技術和機械學習方法實現。顧名思義,“關聯規則技術”就是通過資料之間的關聯規律來進行資料的挖掘。機械學習方法主要被運用於計算機在人工智慧方面的發展中。

4 結束語

大資料時代,計算機資訊處理技術面臨著嚴峻的挑戰,通過研究,使得計算機技術能與時俱進,適用於大資料環境,為人們處理海量資料,得到有參考價值的資訊提供高質量的服務。目前,我國正處於起步階段,計算機資訊處理技術向雲端計算網路方向發展是必然趨勢,研究人員要加大對大資料環境下計算機資訊處理技術的研究力度,以使它更加完善,為人們提供更多的方便。

參考文獻

[1]鄭高峰.基於“大資料”環境下的計算機資訊處理技術探討[J].資訊通訊,2015(02):98.

[2]劉越.大資料時代下的計算機資訊處理技術研究[J].計算機光碟軟體與應用,2014(23):108-109.

[3]李春輝.“大資料”背景下的計算機資訊處理技術分析[J].電子技術與軟體工程,2014(09):33-34.

[4]趙春雷,喬治·納漢.“大資料”時代的計算機資訊處理技術[J].世界科學,2012(02):30-31.