電力大數(shù)據(jù)分析技術，從根本上講，屬于傳統(tǒng)數(shù)據(jù)挖掘技術在海量數(shù)據(jù)挖掘下的新發(fā)展，但由于大數(shù)據(jù)海量、高速增長、多樣性的特點，并且不僅包含結構化數(shù)據(jù)，還含半結構化和非機構化數(shù)據(jù)，因此傳統(tǒng)的很多處理小數(shù)據(jù)的數(shù)據(jù)挖掘方法已經不再實用。

　　大數(shù)據(jù)環(huán)境下的數(shù)據(jù)挖掘與機器學習算法，可以從3個方面著手：1)從大數(shù)據(jù)的治理與抽樣、特征選擇的角度入手，將大數(shù)據(jù)小數(shù)據(jù)化；2)開展大數(shù)據(jù)下的聚類、分類算法研究，例如基于共軛度的最小二乘支持向量機(least squares support vector machine，LS-SVM)]，隨機可擴展FuzzyC-Means (FCM)等；3)開展大數(shù)據(jù)的并行算法，將傳統(tǒng)的數(shù)據(jù)挖掘方法通過并行化，應用到大數(shù)據(jù)的知識挖掘中，例如基于MapReduce的機器學習與知識挖掘。

　　3.3 電力大數(shù)據(jù)的數(shù)據(jù)處理技術

　　電力大數(shù)據(jù)的數(shù)據(jù)處理技術包括分布式計算技術，內存計算技術，流處理技術等。分布式計算技術是為了解決大規(guī)模數(shù)據(jù)的分布式存儲與處理。內存計算技術是為了解決數(shù)據(jù)的高效讀取和處理在線的實時計算。流處理技術則是為了處理實時到達的、速度和規(guī)模不受控制的數(shù)據(jù)。

　　分布式計算是一種新的計算方式，研究如何將一個需要強大計算能力才能解決的問題分解為許多小的部分，然后再將這些部分分給多個計算機處理，最后把結果綜合起來得到最終結果。

　　分布式計算的一個典型代表是Google公司提出的MapReduce編程模型，該模型先將待處理的數(shù)據(jù)進行分塊，交給不同的Map任務區(qū)處理，并按鍵值存儲到本地硬盤，再用Reduce任務按照鍵值將結果匯總并輸出最終結果。分布式技術適用于電力系統(tǒng)信息采集領域的大規(guī)模分散數(shù)據(jù)源。

　    內存計算技術是將數(shù)據(jù)全部放在內層中進行操作的計算技術，該技術克服了對磁盤讀寫操作時的大量時間消耗，計算速度得到幾個數(shù)量級的大幅提升。內層計算技術伴隨著大數(shù)據(jù)浪潮的來臨和內存價格的下降得到快速的發(fā)展和廣泛的應用，EMC、甲骨文、SAT都推出了內存計算的解決方案，將客戶以前需要以天作為時間計算單位的業(yè)務降低為以秒作為時間計算單位，解決了大數(shù)據(jù)實時分析和知識挖掘的難題。

　　流處理的處理模型是將源源不斷的數(shù)據(jù)組視為流，當新的數(shù)據(jù)到來時就立即處理并返回結果，其基本理念是數(shù)據(jù)的價值會隨著時間的流逝而不斷減少，因此盡可能快地對最新的數(shù)據(jù)做出分析并給出結果，其應用場景主要有網頁點擊的實時統(tǒng)計、傳感器網絡、金融中的高頻交易等[8]。

　　隨著電力事業(yè)的發(fā)展，電力系統(tǒng)數(shù)據(jù)量不斷增長，對實時性的要求也越來越高，將數(shù)據(jù)流技術應用于電力系統(tǒng)可以為決策者提供即時依據(jù)，滿足實時在線分析需求。

　　3.4 電力大數(shù)據(jù)的數(shù)據(jù)展現(xiàn)技術

　　電力大數(shù)據(jù)的數(shù)據(jù)展現(xiàn)技術包括可視化技術、空間信息流展示技術、歷史流展示技術等?？梢暬夹g、空間信息流展示技術、歷史流展示技術從3個不同的方面詮釋了電力大數(shù)據(jù)展現(xiàn)技術的豐富內涵。借助電力大數(shù)據(jù)的數(shù)據(jù)展現(xiàn)技術可幫助管理人員更直觀、準確地理解電力系統(tǒng)數(shù)據(jù)表達的意義，了解電力系統(tǒng)的運行狀態(tài)。

　　可視化技術廣泛應用于電網狀態(tài)的實時監(jiān)控，顯著提高了電力系統(tǒng)的自動化水平。未來電力系統(tǒng)可視化還可結合復雜網絡中的相關理論在電網自動分層分區(qū)、自動布點等方面展開深入研究，發(fā)掘電網更深層次的規(guī)律和聯(lián)系。

　　空間信息流展示技術主要體現(xiàn)在電網參數(shù)與已有地理信息系統(tǒng)的結合上，包含變電站三維展示、虛擬現(xiàn)實等技術。將電力配電設備管理與地理信息系統(tǒng)緊密結合起來，有利于電網管理人員直觀地了解設備情況，從而為其決策提供最新的地理信息。在變電站工程設計中用空間信息流展示技術可以節(jié)約時間、資源、成本，為電力企業(yè)帶來巨大的效益。

　　歷史流展示技術體現(xiàn)在對電網歷史數(shù)據(jù)的管理與展示上。在電力系統(tǒng)中，深層次的應用分析往往以歷史數(shù)據(jù)為基礎。對生產現(xiàn)場的實時監(jiān)測數(shù)據(jù)、電網的規(guī)劃數(shù)據(jù)和負荷預測數(shù)據(jù)，通過歷史流展示技術，可以繪制出數(shù)據(jù)的發(fā)展趨勢并預測出未來的數(shù)據(jù)走勢；通過歷史流回放展示技術，可以模擬歷史重大事件發(fā)生、演變，挖掘歷史事件潛在的知識與規(guī)律。

　　4 大數(shù)據(jù)在智能電網中的應用

　　電力大數(shù)據(jù)的應用場合涵蓋發(fā)、輸、變、配、用、調等電力行業(yè)的各個環(huán)節(jié)，在風電場選址、降低網損、風電并網、電網安全監(jiān)測、大災難預警、電力企業(yè)精細化運營、電力設備狀態(tài)監(jiān)測等領域有非常強的可實現(xiàn)性。

　　5 結論與展望

　　本文探討了大數(shù)據(jù)、云計算、智能電網三者之間的相互關系，并給出電力大數(shù)據(jù)的總體可執(zhí)行框架，對電力企業(yè)大數(shù)據(jù)平臺的搭建具有參考價值。

　　本文闡述了電力大數(shù)據(jù)平臺中4個核心的關鍵技術，即集成管理技術、分析技術、處理技術、展現(xiàn)技術。大數(shù)據(jù)的集成管理技術應該考慮關系型和非關系型數(shù)據(jù)庫技術的綜合應用，并重點考慮NoSQL數(shù)據(jù)庫技術；大數(shù)據(jù)的分析技術應從大數(shù)據(jù)的治理與抽樣、大數(shù)據(jù)特征選擇、大數(shù)據(jù)小數(shù)據(jù)化、大數(shù)據(jù)的分類算法、大數(shù)據(jù)挖掘并行化等方面開展研究；大數(shù)據(jù)的處理技術應根據(jù)具體的應用需求考慮分布式計算、內存計算、流處理等技術；電力大數(shù)據(jù)的數(shù)據(jù)展現(xiàn)技術可考慮可視化技術、空間信息流展示技術、歷史流展示技術等。

　　大數(shù)據(jù)技術在商業(yè)領域已經獲得較為廣泛的應用并創(chuàng)造出巨大的商業(yè)價值，但是在電力系統(tǒng)中的應用才剛剛起步，因此結合大數(shù)據(jù)的技術優(yōu)勢和電力系統(tǒng)的應用需求，發(fā)揮電力大數(shù)據(jù)的價值，將為智能電網的建設帶來新的發(fā)展契機。

　　電力企業(yè)應該牢牢抓住這個契機，從數(shù)據(jù)政策、人才培養(yǎng)、關鍵技術研發(fā)等層面，全面促成電力大數(shù)據(jù)技術的發(fā)展。