智能電網(wǎng)中電力大數(shù)據(jù)關(guān)鍵技術(shù)的運(yùn)用詳解
電力系統(tǒng)在運(yùn)行中會(huì)產(chǎn)生龐大的數(shù)據(jù)信息,數(shù)據(jù)增長(zhǎng)速度很快并且類型較多,這和大數(shù)據(jù)的特征相符合。隨著電網(wǎng)的不斷發(fā)展和推進(jìn),系統(tǒng)內(nèi)的數(shù)據(jù)源會(huì)不斷增多,甚至?xí)霈F(xiàn)極強(qiáng)的增長(zhǎng)趨勢(shì)。
電力系統(tǒng)在運(yùn)行中會(huì)產(chǎn)生龐大的數(shù)據(jù)信息,數(shù)據(jù)增長(zhǎng)速度很快并且類型較多,這和大數(shù)據(jù)的特征相符合。隨著電網(wǎng)的不斷發(fā)展和推進(jìn),系統(tǒng)內(nèi)的數(shù)據(jù)源會(huì)不斷增多,甚至?xí)霈F(xiàn)極強(qiáng)的增長(zhǎng)趨勢(shì)。以往的數(shù)據(jù)處理技術(shù)已經(jīng)不能滿足當(dāng)前發(fā)展需求。
智能電網(wǎng)大數(shù)據(jù)特征
智能電網(wǎng)在運(yùn)行的過(guò)程中會(huì)不斷產(chǎn)生龐大的數(shù)據(jù),對(duì)數(shù)據(jù)按照來(lái)源進(jìn)行劃分,可以分為電力企業(yè)內(nèi)部和外部數(shù)據(jù),其中內(nèi)部數(shù)據(jù)包括數(shù)據(jù)采集與監(jiān)控系統(tǒng)、生產(chǎn)管理系統(tǒng)、配電管理系統(tǒng)、客戶服務(wù)系統(tǒng)等,數(shù)據(jù)大多來(lái)源于關(guān)鍵應(yīng)用系統(tǒng);外部數(shù)據(jù)則一般來(lái)自于互聯(lián)網(wǎng)、氣象信息系統(tǒng)、地理信息系統(tǒng)等,外部的數(shù)據(jù)較為分散,數(shù)據(jù)管理單位也各不相同??梢钥闯鲋悄茈娋W(wǎng)數(shù)據(jù)具有多樣性、來(lái)源多樣的特征,半結(jié)構(gòu)化、非結(jié)構(gòu)化的數(shù)據(jù)數(shù)量在不斷增加,比如:客戶服務(wù)系統(tǒng)中的語(yǔ)音數(shù)據(jù)、在線監(jiān)測(cè)系統(tǒng)中的視頻、圖像數(shù)據(jù),這些都屬于非結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)價(jià)值密度不高,每種數(shù)據(jù)在采樣、生命周期、頻率方面都各不相同。
智能電網(wǎng)、云計(jì)算以及大數(shù)據(jù)技術(shù)之間的聯(lián)系
當(dāng)前電網(wǎng)中基礎(chǔ)設(shè)施還不完善,不能有效的對(duì)相應(yīng)信息資源進(jìn)行搜集、分析和存儲(chǔ),要解決當(dāng)前現(xiàn)狀,就需要在電力系統(tǒng)中加入智能電網(wǎng)應(yīng)用。
要對(duì)電網(wǎng)中的數(shù)據(jù)信息資源進(jìn)行合理的使用,為決策提供有效的依據(jù),就需要構(gòu)建大數(shù)據(jù)平臺(tái),實(shí)現(xiàn)科學(xué)決策。在構(gòu)建的過(guò)程中,還需要加入云計(jì)算技術(shù),將云計(jì)算技術(shù)和大數(shù)據(jù)技術(shù)進(jìn)行有機(jī)結(jié)合,實(shí)現(xiàn)企業(yè)對(duì)智能電網(wǎng)下各類數(shù)據(jù)信息的有效分析、計(jì)算與存儲(chǔ),為更好的控制智能電網(wǎng)提供技術(shù)支撐。
智能電網(wǎng)、大數(shù)據(jù)技術(shù)、云計(jì)算之間具有緊密聯(lián)系,云計(jì)算技術(shù)具備很大的信息存儲(chǔ)功能,在構(gòu)建大數(shù)據(jù)平臺(tái)時(shí),將其加入,靠其功能對(duì)智能電網(wǎng)下各項(xiàng)數(shù)據(jù)信息進(jìn)行計(jì)算以及分析,而電網(wǎng)運(yùn)行又會(huì)不斷產(chǎn)生龐大的數(shù)據(jù),因此在搭建平臺(tái)時(shí),可以利用這一功能,來(lái)滿足智能電網(wǎng)運(yùn)行的實(shí)際需求,為實(shí)現(xiàn)智能電網(wǎng)數(shù)據(jù)在線分析功能提供技術(shù)支撐。另外,應(yīng)用這一技術(shù),還可以加強(qiáng)對(duì)智能電網(wǎng)的實(shí)時(shí)監(jiān)控與管理,為其經(jīng)濟(jì)合理的運(yùn)行提供支持。
智能電網(wǎng)中電力大數(shù)據(jù)關(guān)鍵技術(shù)的運(yùn)用
1 ETL 關(guān)鍵技術(shù)
電力領(lǐng)域智能電網(wǎng)在數(shù)據(jù)分布上具有分散的特點(diǎn),數(shù)據(jù)數(shù)量很多,數(shù)據(jù)類型也較多,這些都為數(shù)據(jù)處理工作帶來(lái)了一定的困難。在這種情況下,進(jìn)行數(shù)據(jù)處理工作應(yīng)該要按照標(biāo)準(zhǔn)流程進(jìn)行規(guī)范操作,即“數(shù)據(jù)集成-抽取-轉(zhuǎn)換-剔除-修止“。電力企業(yè)通常將數(shù)據(jù)倉(cāng)庫(kù)技術(shù)應(yīng)用到數(shù)據(jù)集成上,ETL 是“Extract-Transform-Load”的縮寫(xiě),從中可以看出其包括三個(gè)部分,即 Extract、Transform 和 Load,首先是 Extract,被叫做數(shù)據(jù)抽取,就是要將目的數(shù)據(jù)源系統(tǒng)需要的有關(guān)數(shù)據(jù)從數(shù)據(jù)源系統(tǒng)中抽取出來(lái);Transform 被叫做數(shù)據(jù)轉(zhuǎn)換技術(shù),用數(shù)據(jù)抽取技術(shù)抽取出的數(shù)據(jù)根據(jù)相關(guān)的要求進(jìn)行轉(zhuǎn)換,將數(shù)據(jù)變?yōu)榱硪环N形式,在這個(gè)過(guò)程中要對(duì)數(shù)據(jù)源中出現(xiàn)的偏差和錯(cuò)誤數(shù)據(jù)進(jìn)行處理,要清洗或者加工數(shù)據(jù);Load是數(shù)據(jù)加載技術(shù),就是將上一環(huán)節(jié)處理好轉(zhuǎn)換好的數(shù)據(jù)進(jìn)行加載,之后保存到目的數(shù)據(jù)源系統(tǒng)內(nèi)。