試述基于云計算的電力大數據分析技術與應用
來源:用戶上傳
作者:
摘 要 21世紀的到來,使得電能發展進入全新時代,智能電網隨之而生。但隨著智能電網爆發式的增長,各類監測數據不斷擴大,種類不斷增多,價值不斷提高,現有的傳統電力數據處理系統無法滿足這種需求。而云計算的出現,如同第三次革命浪潮一般,徹底改變了我們的生活方式和生產方式,也給電力數據的分析與處理帶來了全新的理念和思路。
關鍵詞 云計算;電力大數據分析技術;應用
引言
計算機網絡科技不斷發展,使得各個領域也逐漸開始重視如何才能更高效的利用計算機技術,進而促進其快速發展。其中,電力企業通過利用云計算技術,有效提高了對電力大數據進行分析的效率,并通過利用其將以往煩瑣的分析模式加以取代,提升了大數據分析的質量,有效推進了電力領域的發展進程。
1 云計算概念
云計算作為數據處理系統,主要負責數據信息存儲,云計算能提高電網運行的穩定性,充分發揮電網技術應用優勢。云計算具有適用性、伸縮性、優質性能等特點。云計算的適當應用,能夠實現資源合理配置這一目標,避免出現資源限制、資源使用矛盾等現象,這對業務承載力有推動作用?,F如今,云計算技術應用行業較廣泛,常用行業主要有零售業、電力企業等[1]。
2 基于云計算的電力大數據分析技術
2.1 多維索引技術
傳統Hive系統索引功能過于單一,無法實現電力大數據搜索的具體化與細致化,造成CPU資源的浪費,降低了電力大數據分析效率。電力大數據具備多維區間查詢特征,各個維度查詢較為固定。例如浙江省電力系統,是一種以單位代碼與時間代碼為標準的索引方式,結合實際情況,采用各個維度輔助的形式開展電力大數據多維索引,自動過濾干擾數據和無用數據,有效提高了大數據索引效率與利用效率。當前,多維索引技術應用范圍較廣,形成以多維索引技術為核心的分布式多維索引系統,依托于Hive命令,通過HQL解析器,實現代碼解析,使得可索引的維度區間更加豐富,還可以根據實際需求,把索引數據放置到Hadoop分析系統中綜合處理。
2.2 混合存儲技術
在傳統Hive系統運行中,無法為數據更新與刪除提供支持,只能依靠重寫來實現間接性數據更新。由于現代電力大數據分析中,智能電網每天需要處理的數據容量較大,無論是數據更新還是數據刪除,都需要快速處理,效率要求較高,而且每個操作數據比例小,若繼續使用重新方式進行數據更新,會造成大量數據資源的占用,降低系統的整體運行效率。對此,應用混合儲存技術,借助主表與附表的輔助與支持,記錄實時更新數據與不需要實時更新的數據,根據運行要求進行數據處理,進而提高數據分析處理的有效性,保證資源利用效率的最大化。
2.3 分層次處理技術
在云計算技術的支持下,引入分層次數據技術進行綜合數據分析處理,在智能電網中,形成電力信息搜集、儲存、應用等功能為一體的結構化管理系統,結合電力供應情況,建設大數據管理系統分支化管理體系,加強電力供應系統間的關聯性和獨立性,保證電力系統資源在各個電力供應系統中的流轉和共享,提高資源利用效率。同時,借助云計算SQL系統,保證電力大數據分析計算的同步性,有效提高電力大數據分析處理效果和效率,實現智能電網的電力大數據層次化分析管理。
2.4 翻譯工具
傳統Hive系統運行中,利用HQL索引語言進行數據分析,HQL索引語言屬于SQL的分支,但二者間的語法差異較大?,F代化電力大數據中含有很多SQL語言儲存信息,這就是傳統Hive系統無法滿足數據分析要求,在數據存儲和數據分析上效率較低。在基于云計算的環境下,電力數據的SQL語言會直接翻譯為HQL語言,但是這一手動翻譯方式由于處理內容較大,會消耗大量的時間,人工翻譯的錯誤率也很高。對此,為了提高翻譯效率,要應用自動化翻譯工具,自動分析SQL語句中的語言數據,一旦滿足設定的翻譯條件,就會形成多個HQL語段,對這一語段進行分析和處理,不僅避免了人工翻譯的錯漏,還降低時間消耗量,提高翻譯效率和系統分析效率[2]。
3 電力大數據分析技術的應用
隨著計算機技術的發展,云計算的電力大數據分析技術已經開始陸續應用到現實生活中了,推動了電力企業的發展。其中的在浙江電力系統中應用的云計算電力大數據分析已經取得了很大的成功,借助于云計算的力量,加快了浙江電力系統的智能電力化發展。通過云計算,電力系統中的數據都被集中到一起,并且通過計算機對這些數據進行分析,得出準確的數據結果。根據這個數據結果,電力工作人員可以不斷完善電力系統中各種問題,提高電力系統運行過程中的相關服務器的穩定性。再者,基于云計算的電力大數據分析。可以在很大程度上滿足于客戶的需求對數據進行分析處理,在這個計算過程中,電流的傳輸靠的主要是電力平臺。重要的是,進行分析處理的數據等信息都會儲存在檔案庫中。檔案庫的信息會跟隨著數據的改變而實時進行改變,可以自動更新。在以前的探究設置中,檔案庫的信息儲存是建立在兩臺小型機上,儲存信息需要借助于高速網絡。而在目前的實際操作中,檔案庫的信息儲存由多個服務器連接,其運行速度較之前加快不少。此外,這種連接方式經濟實惠,可以節省很多建設費用[3]。
4 結束語
計算機技術的不斷發展,也預示其將會在日后進入更多地生活領域和經濟領域中去。云計算的電力大數據分析和應用,也將會在日后的電力企業中得到更大的普及和發展。在以后的電力企業發展中,電力企業首先要重視云計算的電力大數據分析技術,認識到其對電力發展具有重要的推動作用。其次還要不斷地研究云計算的電力大數據分析技術,將其更好地應用到現代電力企業發展中,提高電力對國民的服務質量,推動我國的電力企業步入一個新的發展階段。
參考文獻
[1] 董華彪.基于云計算的電力大數據分析技術與應用[J].南方農機,2017,48(23):103,105.
[2] 黃蕾,陶銳.基于云計算的電力大數據分析技術與應用[J].數字技術與應用,2017,(02):117.
[3] 王維,趙明穎.基于云計算的電力大數據分析技術與應用[J].黑龍江科技信息,2016,(12):180.
轉載注明來源:http://www.hailuomaifang.com/1/view-14900803.htm