隨著全球進(jìn)入“大數(shù)據(jù)時代”，大數(shù)據(jù)的價值已經(jīng)受到廣泛關(guān)注，部分國家甚至將大數(shù)據(jù)提升到了國家戰(zhàn)略層面。近幾年，電網(wǎng)企業(yè)信息化建設(shè)得到大規(guī)模的發(fā)展，IT技術(shù)在電網(wǎng)企業(yè)中的得到廣泛應(yīng)用，隨著電力行業(yè)數(shù)據(jù)總量的持續(xù)增長和急速膨脹，電網(wǎng)企業(yè)的大數(shù)據(jù)時代已經(jīng)來臨。對于電網(wǎng)企業(yè)來說，大數(shù)據(jù)應(yīng)用建設(shè)的必要性主要體現(xiàn)在以下幾點：

1)      宏觀政策層面的要求

2014年5月16日國家發(fā)改委與中科院正在啟動“基礎(chǔ)研究大數(shù)據(jù)服務(wù)平臺應(yīng)用示范項目”，意在大數(shù)據(jù)上做頂層設(shè)計；為推動云計算和大數(shù)據(jù)等戰(zhàn)略性新興產(chǎn)業(yè)在云南的布局，提升云計算和大數(shù)據(jù)服務(wù)、運營、管理創(chuàng)新能力，云南省工業(yè)和信息化委員會發(fā)布《云南省促進(jìn)云計算和大數(shù)據(jù)產(chǎn)業(yè)發(fā)展的若干政策》，鼓勵和支持大數(shù)據(jù)的研究探索。

2)      電力行業(yè)發(fā)展所帶來的必然性

電力大數(shù)據(jù)將貫穿未來電力工業(yè)生產(chǎn)及管理等各個環(huán)節(jié)，起到獨特而巨大的作用，是中國電力工業(yè)在打造下一代電力工業(yè)系統(tǒng)過程中有效應(yīng)對資源有限、環(huán)境壓力等問題，實現(xiàn)厚積厚發(fā)、綠色可持續(xù)性發(fā)展的關(guān)鍵。

3)      電網(wǎng)企業(yè)經(jīng)營決策快速響應(yīng)用電需求的需要

為了緩解目前電力供需矛盾的問題，使電網(wǎng)企業(yè)快速響應(yīng)用電需求，合理安排經(jīng)營計劃，減少供電成本，避免不合理的投資建設(shè)，提高供電質(zhì)量，提升企業(yè)經(jīng)營效益和客戶服務(wù)水平，需要對傳統(tǒng)的決策分析技術(shù)進(jìn)行改進(jìn)，為營銷管理能力和客戶服務(wù)滿意度的提升提供更加準(zhǔn)確、實時的決策數(shù)據(jù)。

4)      電網(wǎng)企業(yè)數(shù)據(jù)有效管理的需要

隨著電網(wǎng)企業(yè)越來越多信息系統(tǒng)投入運行，企業(yè)所有日常業(yè)務(wù)都在信息系統(tǒng)中進(jìn)行處理，業(yè)務(wù)數(shù)據(jù)實時性越來越高、增長越來越快，數(shù)據(jù)規(guī)模向PB級發(fā)展，由于這些業(yè)務(wù)數(shù)據(jù)結(jié)構(gòu)多樣、關(guān)系復(fù)雜，如果對這些數(shù)據(jù)進(jìn)行統(tǒng)一有效的管理，來保障數(shù)據(jù)的標(biāo)準(zhǔn)性、準(zhǔn)確性、可訪問性和安全性，將可用于企業(yè)發(fā)現(xiàn)新知識、創(chuàng)造新價值，否則歷史數(shù)據(jù)將成為信息系統(tǒng)運行的“累贅”。

5)      電網(wǎng)企業(yè)數(shù)據(jù)存儲技術(shù)改進(jìn)的需要

目前，在電網(wǎng)企業(yè)大型信息系統(tǒng)建設(shè)中，數(shù)據(jù)存儲主要基于小型機搭建，存在成本高、伸縮性差的問題，關(guān)系型數(shù)據(jù)庫一般僅支持到TB級，且數(shù)據(jù)倉庫不支持實時計算，傳統(tǒng)的數(shù)據(jù)存儲模式難以管理多種復(fù)雜的數(shù)據(jù)格式。

6)      電網(wǎng)企業(yè)數(shù)據(jù)應(yīng)用的需要

目前存在大量與電網(wǎng)企業(yè)相關(guān)的非結(jié)構(gòu)化數(shù)據(jù)，這些非結(jié)構(gòu)化數(shù)據(jù)基本沒有得到分析和挖掘，專項分析功能也分散在不同的系統(tǒng)中，數(shù)據(jù)交互成網(wǎng)狀結(jié)構(gòu)，投資重復(fù)，且以傳統(tǒng)的因果分析為主，不同結(jié)構(gòu)的數(shù)據(jù)之間缺少關(guān)聯(lián)。

 

目前，在電網(wǎng)企業(yè)，大數(shù)據(jù)技術(shù)的應(yīng)用和探索還處于起步階段，它的應(yīng)用價值雖然已經(jīng)得到了普遍的認(rèn)可，但如何建設(shè)適合電力行業(yè)的大數(shù)據(jù)應(yīng)用仍然需要我們進(jìn)一步的探討。對此，首先要掌握現(xiàn)狀，分析自身的優(yōu)勢和劣勢；二是要提高認(rèn)識，理解大數(shù)據(jù)技術(shù)與傳統(tǒng)數(shù)據(jù)分析技術(shù)的區(qū)別和聯(lián)系；三是要結(jié)合現(xiàn)狀，規(guī)劃適合電網(wǎng)企業(yè)的大數(shù)據(jù)應(yīng)用架構(gòu)。

下面以云南電網(wǎng)公司為例進(jìn)行探討。在10多年的信息化建設(shè)和探索過程中，云南電網(wǎng)公司一直保持著對新技術(shù)研究的熱情，如在SOA、云計算、信息安全等領(lǐng)域的研究建設(shè)保持著國內(nèi)領(lǐng)先水平，這些領(lǐng)域的建設(shè)將為大數(shù)據(jù)應(yīng)用提供良好的基礎(chǔ)。而在信息分類編碼方面，由于信息化建設(shè)早于標(biāo)準(zhǔn)規(guī)范發(fā)布的現(xiàn)狀，出現(xiàn)了部分系統(tǒng)間信息分類編碼不一致的問題，使數(shù)據(jù)的歸集和共享變得困難，這將是云南電網(wǎng)公司在未來建設(shè)大數(shù)據(jù)應(yīng)用的一個劣勢。在應(yīng)用系統(tǒng)建設(shè)方面，云南電網(wǎng)公司還建設(shè)了營銷管理系統(tǒng)、安全生產(chǎn)管理系統(tǒng)、調(diào)度管理系統(tǒng)等業(yè)務(wù)系統(tǒng)，以及計量自動化系統(tǒng)、調(diào)度自動化系統(tǒng)等專業(yè)系統(tǒng)，這些系統(tǒng)經(jīng)過10來年的運行，已經(jīng)產(chǎn)生了海量的業(yè)務(wù)數(shù)據(jù)，將為大數(shù)據(jù)應(yīng)用提供豐富的數(shù)據(jù)資源。另外，云南電網(wǎng)公司還建設(shè)了一些決策分析系統(tǒng)，這些決策分析系統(tǒng)采用了傳統(tǒng)的數(shù)據(jù)分析技術(shù)實現(xiàn)，與大數(shù)據(jù)技術(shù)的差別主要體現(xiàn)在：

傳統(tǒng)的數(shù)據(jù)分析所使用的數(shù)據(jù)來源單一，如營銷綜合分析系統(tǒng)的數(shù)據(jù)僅來源于營銷管理系統(tǒng)，而大數(shù)據(jù)應(yīng)用所使用的數(shù)據(jù)將來自很多系統(tǒng)，甚至要獲取跨企業(yè)的數(shù)據(jù)。

傳統(tǒng)的數(shù)據(jù)分析預(yù)測使用的是邏輯模型，而大數(shù)據(jù)應(yīng)用使用的是數(shù)據(jù)關(guān)聯(lián)模型進(jìn)行分析預(yù)測。

傳統(tǒng)的數(shù)據(jù)分析技術(shù)，采用集中式的數(shù)據(jù)處理和存儲方式，計算周期在幾個小時到幾天不等，而大數(shù)據(jù)應(yīng)用的處理速度將達(dá)到秒級，極大的提高了數(shù)據(jù)分析處理的能力。

因此，云南電網(wǎng)公司大數(shù)據(jù)應(yīng)用的建設(shè)可以依托于目前信息化建設(shè)的成果，通過SOA企業(yè)信息集成平臺從各類業(yè)務(wù)系統(tǒng)、專業(yè)系統(tǒng)和企業(yè)外部系統(tǒng)采集數(shù)據(jù)，基于云計算平臺搭建大數(shù)據(jù)分布式計算平臺，并完善現(xiàn)有信息安全保障體系，構(gòu)建深入挖掘企業(yè)數(shù)據(jù)價值的大數(shù)據(jù)應(yīng)用。

基于上述認(rèn)識，對云南電網(wǎng)公司大數(shù)據(jù)應(yīng)用的整體架構(gòu)進(jìn)行了初步的規(guī)劃，如下圖所示：

         云南電網(wǎng)公司大數(shù)據(jù)應(yīng)用按照五層結(jié)構(gòu)進(jìn)行規(guī)劃，包括：數(shù)據(jù)源、數(shù)據(jù)存儲、數(shù)據(jù)融合、數(shù)據(jù)計算、分析應(yīng)用等。其中，數(shù)據(jù)源主要包括現(xiàn)有的應(yīng)用系統(tǒng)、專業(yè)系統(tǒng)和外部跨企業(yè)系統(tǒng)等三大類，這些數(shù)據(jù)經(jīng)過采集匯集后，存放在數(shù)據(jù)存儲層，該層可以支持結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、準(zhǔn)實時數(shù)據(jù)等多種類型的數(shù)據(jù)存儲，然后通過數(shù)據(jù)融合層實現(xiàn)不同來源系統(tǒng)數(shù)據(jù)的歸集和關(guān)聯(lián)關(guān)系的建立，在數(shù)據(jù)計算層實現(xiàn)了不同種數(shù)據(jù)的處理，最后在分析應(yīng)用層實現(xiàn)反竊電分析、用電預(yù)測、節(jié)能降損、用戶行為分析和輿情分析等不同領(lǐng)域的主題分析。

         對電網(wǎng)企業(yè)來說，大數(shù)據(jù)是電網(wǎng)企業(yè)深化應(yīng)用、提升應(yīng)用層次、強化集團企業(yè)管控的有力技術(shù)手段。隨著電網(wǎng)企業(yè)各類IT系統(tǒng)對業(yè)務(wù)流程的基本覆蓋，采集到的數(shù)據(jù)量迅速增長。電網(wǎng)企業(yè)面臨的問題不僅僅是收集和存儲數(shù)據(jù)，而是圍繞數(shù)據(jù)采用相應(yīng)的定量和統(tǒng)計信息，挖掘更加有價值的信息。利用大數(shù)據(jù)可對業(yè)務(wù)進(jìn)行分析，加工成有用的數(shù)據(jù)，進(jìn)而全面掌控企業(yè)業(yè)務(wù)。