物聯(lián)網數據管理研究論文(2)
物聯(lián)網數據管理研究論文篇二
《研究物聯(lián)網海量數據處理下的數據庫技術研究》
摘要:隨著社會不斷進步,科學技術飛速發(fā)展,對數據處理技術的要求也越來越高,在這種時代背景下,物聯(lián)網數據庫技術開始受到人們廣泛關注,它集海量處理和快速處理等優(yōu)點于一身,能有效滿足人們日益多層次、多元化的數據處理需要。本文從物聯(lián)網基本概念入手,簡要介紹其發(fā)展過程,結合目前數據處理技術,重點研究、闡述物聯(lián)網海量數據處理下的數據庫技術。
關鍵詞:物聯(lián)網海量數據數據庫技術內存數據庫
計算機、電腦等移動終端逐漸普及,再加上互聯(lián)網技術的發(fā)展,每天都會產生大量原始數據,傳統(tǒng)數據處理技術已經不能很好地滿足人們需要,如果想要在日益競爭激烈的市場中獲取競爭力,必須不斷更新數據處理系統(tǒng),借助物聯(lián)網海量數據處理下的數據庫技術,實時動態(tài)收集、搜索和分析數據變化,為科學化決策提供保障。
1物聯(lián)網概念和發(fā)展過程分析
物聯(lián)網(Internet of things)是信息化時代產物,屬于信息技術組成部分[1]。從字面含義來說,它是指以“物”為基礎而連接的互聯(lián)網,是對互聯(lián)網的延伸和拓展,直接實現了物品與物品之間的通信、信息交換。物聯(lián)網主要以通信技術為基礎,如局部網絡等,能有效將人員、控制器和機器等聯(lián)系在一起,實現真正意義上的遠程管理和自動化,其屬于新興產業(yè),具有很寬廣的市場前景[2]。
隨著物聯(lián)網技術的飛速發(fā)展,其涵蓋的領域越來越廣泛,如交通、環(huán)保等,它最初產生于1999年,其真正概念直到2005年才被確定。我國物聯(lián)網數據處理技術引進時間不長,但它推動了我國產業(yè)結構優(yōu)化,對我國經濟水平的增長做出了一定貢獻,特別是在通信領域。
2物聯(lián)網海量數據處理技術分析
物聯(lián)網海量數據處理技術中包含的設備種類、網絡類型較為復雜,因此,在數據處理過程中,必須能夠融合數據源、不同網絡和各類設備,并且需要快速篩選有效信息,對處理技術的要求較高,目前,應用得較廣泛的主要有以下兩種:
2.1多源數據融合處理技術
不同區(qū)域物聯(lián)網中存在的數據類型、數量、特點都會有所不同,加大了數據融合的需求,基于此,多源數據融合處理技術誕生,它規(guī)定了統(tǒng)一的數據本體標準,較好地實現了多層次數據結構[3],能將多種來源、不同結構的信息收集在一起,并以通信技術為基礎,對數據進行有效整合,轉化為其他技術能夠融合的模式,將時空轉換、聚類技術等有機結合,提高了海量數據的利用效率和質量。
多源數據融合處理技術為不同類型的數據結合提供了溝通平臺,能較好地實現物與物之間的交流,對建立數據處理標準具有一定的參考價值,從數據庫技術的層面分析,增加了海量數據的數量和來源,促進了數據一體化進程。
2.2數據查詢處理技術
物聯(lián)網設備應用較為廣泛,數據產生速度、數量比傳統(tǒng)互聯(lián)網技術多,其數據具有不同來源、不同維度等方面的特征[4],且數據規(guī)模較大,因此對物聯(lián)網儲存、搜索和查找等技術的要求特別高。從物聯(lián)網儲存技術的角度分析,需要遵循就近存儲,為數據建立統(tǒng)一摘要節(jié)點,降低過度存儲的機率,為有效查詢提供條件,同時,在儲存過程中,要合理設計儲存空間和容量,不斷更新數據庫信息,以最新數據代替原始數據,提高數據的實時性;從物聯(lián)網搜索技術的角度分析,數據處理主要包括空間流和時態(tài)流兩種形式,設計搜索引擎時,可以根據“索引算法”,合理對數據種類進行科學歸檔;從物聯(lián)網查詢技術的角度分析,如果能夠確保儲存技術和搜索技術,就能很好地為查詢技術提供基礎,因此,不能將三種技術分開設計,而應該結合物聯(lián)網具體特征,綜合考慮數據數量、類型等方面的因素,統(tǒng)籌規(guī)范處理技術,提升數據處理的可靠性和準確性。
3物聯(lián)網海量數據處理下的數據庫技術研究
物聯(lián)網數據具有實時性、多維性、不同結構性和海量性等基本特征,對數據庫儲存空間、搜索技術等要求較高,研究物聯(lián)網海量數據處理下的數據庫技術的具體數據處理方式和技術類型,對數據處理具有很大意義,本文主要從以下三部分進行闡述。
3.1通過云技術,實現分布式數據庫技術
云技術在目前網絡服務中已經被廣泛運用,如網絡郵件等,它能將網絡中資源有效統(tǒng)一,對數據的存儲、計算具有一定幫助,在物聯(lián)網的領域中,云技術也發(fā)揮著相應的效果,它與海量數據處理技術重新融合,組成新的“分布式數據庫”技術,將中心服務器和數據服務器聯(lián)合在一起,建立多個不同地方的實時數據庫[5],對于數據庫規(guī)模來說,增加了規(guī)模的靈活性,可以根據數量的大小,伸縮或擴大規(guī)模;對于管理系統(tǒng)來說,實時數據庫能夠降低管理過程中出現問題的概率,如果出現問題,也能及時維護。分布式數據庫技術給物聯(lián)網提供了虛擬平臺,為數據儲存、發(fā)布信息等創(chuàng)造了更快捷的途徑。此外,其還具備調動事物、處理沖突等基本功能。
3.2融合網絡技術,實現內存數據庫技術
傳統(tǒng)網絡技術中仍然存在很多值得學習的數據處理方法,內存數據庫技術以網絡技術和物聯(lián)網技術為基礎,結合兩者優(yōu)點,將數據處理過程變得更加透明化、數據獨立化,主要有以下三個特征:一是內存數據庫獨立于網絡節(jié)點,通過水平切分、讀寫分離等存儲方式,實現數據庫集群化[6];二是數據庫之間相互融合,能將海量數據集合在一起,滿足其他終端需求;三是內存數據庫技術的持久性,它以磁盤為基礎,將數據內容變化復制,實現更科學的保管數據。海量數據的復雜性,需要借助內存數據庫技術,將網絡局部功能和空間聯(lián)系在一起,為同步更新信息提供基礎。
3.3聯(lián)合數據收集、存儲方式,實現檢索服務
綜合分布式實時數據庫技術和內存數據庫技術,將海量數據通過統(tǒng)一平臺連接,實現數據收集、存儲過程,從而實現對海量數據的高效檢索和應用,保障整個過程的合理性和科學性。通過使用數據服務器或收集器,對相關查詢數據服務進行申請,并借助網絡節(jié)點,更好地進行準確搜索。海量數據的收集過程是否完善、高效直接影響著檢索的準確性,因此必須保障數據接收過程的安全性。
4結語
綜上所述,研究物聯(lián)網海量數據處理下的數據庫技術,其工程量復雜而艱巨,在這個過程中,只有進一步挖掘海量處理數據技術,才能更好地分析數據庫技術的應用范圍和優(yōu)勢。從分布式實時數據庫技術和分布式內存數據庫技術角度分析,它們以云技術為基礎,能較好地解決數據收集、儲存方式,并不斷拓展數據系統(tǒng)規(guī)模,為形成統(tǒng)一數據服務創(chuàng)造了更好的條件。但目前數據庫技術處理過程中仍然存在很多需要注意的問題,相關人員必須引起重視,并結合物聯(lián)網海量處理的特點和優(yōu)勢,創(chuàng)新物聯(lián)網數據庫技術,提高數據處理過程中的準確性和可靠性。
參考文獻
[1]石愛軍,馬娟,齊安文,薛躍明,黃�矗�張斌.物聯(lián)網技術在突發(fā)地質災害應急響應中的應用研究[J].水文地質工程地質,2014,05:148-152.
[2]劉持標,李賢燦,孫麗麗,吳美瑜,邱錦明.基于SOS技術的物聯(lián)網實時數據管理系統(tǒng)開發(fā)[J].物聯(lián)網技術,2014,09:58-65.
[3]謝伍瑛.2000-2014年中國物聯(lián)網研究綜述――基于“珞珈學術搜索”數據庫的文獻分析[J].新聞傳播,2015,15:4-9.
[4]王瑩.基于WebService的物聯(lián)網信息數據庫系統(tǒng)設計與分析[J].電腦編程技巧與維護,2015,16:59-60+69.
[5]馬文娟,金偉祖,許文俊,劉堅.基于物聯(lián)網的地震監(jiān)測臺網應急調度平臺設計與應用[J].地震工程與工程振動,2013,01:204-211.
[6]陳宇,蔣文濤,熊艷,李小龍,晏菲.基于NoSQL技術的心電數據庫存儲研究[J].生物醫(yī)學工程研究,2015,04:235-237+251.
作者簡介:宋小芹(1983―),女,河南開封人,本科,講師,研究方向:計算機應用
看過“物聯(lián)網數據管理研究論文”的人還看了:
1.淺談物聯(lián)網固定資產管理系統(tǒng)的研究與開發(fā)論文