智能電網中電力大數(shù)據(jù)關鍵技術的運用詳解
電力系統(tǒng)在運行中會產生龐大的數(shù)據(jù)信息,數(shù)據(jù)增長速度很快并且類型較多,這和大數(shù)據(jù)的特征相符合。隨著電網的不斷發(fā)展和推進,系統(tǒng)內的數(shù)據(jù)源會不斷增多,甚至會出現(xiàn)極強的增長趨勢。
電力系統(tǒng)在運行中會產生龐大的數(shù)據(jù)信息,數(shù)據(jù)增長速度很快并且類型較多,這和大數(shù)據(jù)的特征相符合。隨著電網的不斷發(fā)展和推進,系統(tǒng)內的數(shù)據(jù)源會不斷增多,甚至會出現(xiàn)極強的增長趨勢。以往的數(shù)據(jù)處理技術已經不能滿足當前發(fā)展需求。
智能電網大數(shù)據(jù)特征
智能電網在運行的過程中會不斷產生龐大的數(shù)據(jù),對數(shù)據(jù)按照來源進行劃分,可以分為電力企業(yè)內部和外部數(shù)據(jù),其中內部數(shù)據(jù)包括數(shù)據(jù)采集與監(jiān)控系統(tǒng)、生產管理系統(tǒng)、配電管理系統(tǒng)、客戶服務系統(tǒng)等,數(shù)據(jù)大多來源于關鍵應用系統(tǒng);外部數(shù)據(jù)則一般來自于互聯(lián)網、氣象信息系統(tǒng)、地理信息系統(tǒng)等,外部的數(shù)據(jù)較為分散,數(shù)據(jù)管理單位也各不相同??梢钥闯鲋悄茈娋W數(shù)據(jù)具有多樣性、來源多樣的特征,半結構化、非結構化的數(shù)據(jù)數(shù)量在不斷增加,比如:客戶服務系統(tǒng)中的語音數(shù)據(jù)、在線監(jiān)測系統(tǒng)中的視頻、圖像數(shù)據(jù),這些都屬于非結構化數(shù)據(jù),這些數(shù)據(jù)價值密度不高,每種數(shù)據(jù)在采樣、生命周期、頻率方面都各不相同。
智能電網、云計算以及大數(shù)據(jù)技術之間的聯(lián)系
當前電網中基礎設施還不完善,不能有效的對相應信息資源進行搜集、分析和存儲,要解決當前現(xiàn)狀,就需要在電力系統(tǒng)中加入智能電網應用。
要對電網中的數(shù)據(jù)信息資源進行合理的使用,為決策提供有效的依據(jù),就需要構建大數(shù)據(jù)平臺,實現(xiàn)科學決策。在構建的過程中,還需要加入云計算技術,將云計算技術和大數(shù)據(jù)技術進行有機結合,實現(xiàn)企業(yè)對智能電網下各類數(shù)據(jù)信息的有效分析、計算與存儲,為更好的控制智能電網提供技術支撐。
智能電網、大數(shù)據(jù)技術、云計算之間具有緊密聯(lián)系,云計算技術具備很大的信息存儲功能,在構建大數(shù)據(jù)平臺時,將其加入,靠其功能對智能電網下各項數(shù)據(jù)信息進行計算以及分析,而電網運行又會不斷產生龐大的數(shù)據(jù),因此在搭建平臺時,可以利用這一功能,來滿足智能電網運行的實際需求,為實現(xiàn)智能電網數(shù)據(jù)在線分析功能提供技術支撐。另外,應用這一技術,還可以加強對智能電網的實時監(jiān)控與管理,為其經濟合理的運行提供支持。
智能電網中電力大數(shù)據(jù)關鍵技術的運用
1 ETL 關鍵技術
電力領域智能電網在數(shù)據(jù)分布上具有分散的特點,數(shù)據(jù)數(shù)量很多,數(shù)據(jù)類型也較多,這些都為數(shù)據(jù)處理工作帶來了一定的困難。在這種情況下,進行數(shù)據(jù)處理工作應該要按照標準流程進行規(guī)范操作,即“數(shù)據(jù)集成-抽取-轉換-剔除-修止“。電力企業(yè)通常將數(shù)據(jù)倉庫技術應用到數(shù)據(jù)集成上,ETL 是“Extract-Transform-Load”的縮寫,從中可以看出其包括三個部分,即 Extract、Transform 和 Load,首先是 Extract,被叫做數(shù)據(jù)抽取,就是要將目的數(shù)據(jù)源系統(tǒng)需要的有關數(shù)據(jù)從數(shù)據(jù)源系統(tǒng)中抽取出來;Transform 被叫做數(shù)據(jù)轉換技術,用數(shù)據(jù)抽取技術抽取出的數(shù)據(jù)根據(jù)相關的要求進行轉換,將數(shù)據(jù)變?yōu)榱硪环N形式,在這個過程中要對數(shù)據(jù)源中出現(xiàn)的偏差和錯誤數(shù)據(jù)進行處理,要清洗或者加工數(shù)據(jù);Load是數(shù)據(jù)加載技術,就是將上一環(huán)節(jié)處理好轉換好的數(shù)據(jù)進行加載,之后保存到目的數(shù)據(jù)源系統(tǒng)內。