電規(guī)總院北京洛斯達科技發(fā)展有限公司總經(jīng)理助理商浩亮：能源大數(shù)據(jù)平臺的架構設計思路

2017-11-08 19:38:00 電力頭條APP　點擊量：評論 (0)

2017年11月7日-9日，中國能源互聯(lián)網(wǎng)大會暨智慧能源產業(yè)博覽會（SmartEnergyChina簡稱：SEC）國內唯一的智慧能源全產業(yè)鏈的年度盛會在上海新國際博覽中心舉辦！8日下午，在E1館會議室M15舉辦論壇：能源大數(shù)據(jù)論壇

2017年11月7日-9日，中國能源互聯(lián)網(wǎng)大會暨智慧能源產業(yè)博覽會（SmartEnergyChina簡稱：SEC）國內唯一的智慧能源全產業(yè)鏈的年度盛會在上海新國際博覽中心舉辦！8日下午，在E1館會議室M15舉辦論壇：“能源大數(shù)據(jù)論壇”，大會由泰豪貴州黔信數(shù)據(jù)有限公司副總經(jīng)理梁洪源先生主持。電規(guī)總院北京洛斯達科技發(fā)展有限公司總經(jīng)理助理商浩亮先生發(fā)表演講，主題是能源大數(shù)據(jù)平臺的架構設計思路。

下面為您帶來商浩亮的精彩演講：

商浩亮：

各位專家、同仁好，剛才劉教授講的時候也說了，我們單位的情況就是國有企業(yè)，我們單位電規(guī)總院，包括我們公司是給國家能源局做支撐機構的，我們單位主要在能源信息化和大數(shù)據(jù)行業(yè)給國家能源十三五和電力十三五規(guī)劃做信息化和支撐的。電力總院都是國家能源局授牌的，我們也是國家電力信息研究所。我今天講的能源大數(shù)據(jù)平臺的架構設計思路是跟我們跟各個省實施，包括國家能源局實施的，一些能源數(shù)據(jù)平臺經(jīng)驗的積累基礎上面設計出來的，本身這個點跟剛才各位專家講的東西面比較廣，有點不同，我這個點比較小，然后可能更加技術化一些。

首先我們定義什么是能源大數(shù)據(jù)，上面這段話實際上是我們在幫助國家能源局起草能源大數(shù)據(jù)三年行動綱要里面總結出來的一句話：能源大數(shù)據(jù)是綜合利用云計算能力，通過互聯(lián)網(wǎng)等渠道，部門信息共享，向社會購買的方式，收集各個行業(yè)多種類型，海量的數(shù)據(jù)，并通過計算機借助這些模型，來形成和挖掘各個行業(yè)價值規(guī)律和背后的方法體系結合。我們認為能源大數(shù)據(jù)不是一種，大家認為的很多數(shù)據(jù)放在那，也不是否定了傳統(tǒng)大家通常認為的，人工上報的數(shù)據(jù)不是大數(shù)據(jù)，只有從傳感器、實時監(jiān)測的數(shù)據(jù)，互聯(lián)網(wǎng)渠道獲取的數(shù)據(jù)才是大數(shù)據(jù)，我們認為所有這些東西都是為能源大數(shù)據(jù)方法來提供支撐的，我們認為能源大數(shù)據(jù)是一種方法體系的結合。

它的特點，這也是當時國家能源局提出的幾個，我總結了一下，第一個就是計算能力強，因為有云平臺的支持，第二是多樣性的數(shù)據(jù)，除了傳統(tǒng)的統(tǒng)計數(shù)據(jù)是結構化，現(xiàn)在互聯(lián)網(wǎng)的渠道，包括圖像、圖形是非結構化的。跨行業(yè)的數(shù)據(jù)，國家能源行業(yè)煤電油氣這些行業(yè)，能源行業(yè)還重點收集了經(jīng)濟交通人口資源的信息，輔助整個能源形式的研判。

電規(guī)總院是一個咨詢機構，有很多專家，這些專家的經(jīng)驗和方法，把我們單位為國家做支撐支撐起來。將來經(jīng)驗方法我們希望通過計算機模型，用專家的經(jīng)驗和方法沉淀為計算機可用的知識模型，就是我們把這些東西變成計算機知識。最后通過計算機知識進行數(shù)據(jù)的挖掘，挖掘數(shù)據(jù)背后的價值規(guī)律，這是我們定義的能源大數(shù)據(jù)是什么東西。

從應用上看，我們分兩個層次，第一在政府層面它更加注重，通過大數(shù)據(jù)的價值為政府形成一些決策建議，在企業(yè)層面我們認為是企業(yè)通過大數(shù)據(jù)注重提高它的生產和經(jīng)營的效率。在政府層面，這塊我們單位給國家能源局做支撐的時候，現(xiàn)在我們已經(jīng)連續(xù)從十二五時期開始，現(xiàn)在第六年了，給國家能源局出版《能源手冊》，我們在手冊里面根據(jù)我們數(shù)據(jù)匯集，結合一些智囊機構的研究觀點給企業(yè)做決策支撐。我們跟一些大型央企有接觸，中石油、中石化，原油轉化為成品油里面汽油、柴油多少，通過分析之后，得出比例得出催化劑的比例。

現(xiàn)在我們覺得大數(shù)據(jù)發(fā)展的現(xiàn)狀，特別是能源大數(shù)據(jù)，第一個數(shù)據(jù)來源不多，以統(tǒng)計上報為主，我覺得大家也有同感，統(tǒng)計數(shù)據(jù)確實是現(xiàn)在比較卡脖子的問題。應用比較單一，沒有全面的，多行業(yè)融合的應用，市場化的程度也不高，大多數(shù)是企業(yè)自主的行為，最后一個是行業(yè)壁壘很多，每個行業(yè)都不想把自己的數(shù)據(jù)共享給其他行業(yè)。

對大數(shù)據(jù)的發(fā)展趨勢判斷，我個人做的一個判斷，第一個是逐漸成為與計算機傳統(tǒng)統(tǒng)計渠道互為補充，互相印證的一個渠道。我們傳統(tǒng)的統(tǒng)計，大家可能對統(tǒng)計沒有太多比較清晰的概念。我原來是干能源統(tǒng)計數(shù)據(jù)兩年多，我們國家能源的數(shù)據(jù)，現(xiàn)在主要的官方來源是兩個，一個是國家統(tǒng)計局公布的能源統(tǒng)計數(shù)據(jù)，是來源于國家能源統(tǒng)計局的統(tǒng)計司，另外一個渠道來源于國家能源局的供給預測處，稱為部門統(tǒng)計，官方的數(shù)據(jù)都來源于這兩個渠道。將來大數(shù)據(jù)也許數(shù)據(jù)不對，將來會成為跟傳統(tǒng)的統(tǒng)計數(shù)據(jù)互相印證、互為補充的渠道。第二逐漸成為各級政府決策建議的主要依據(jù)，現(xiàn)行的決策建議主要是依賴統(tǒng)計數(shù)據(jù)。將來一旦統(tǒng)計數(shù)據(jù)受到來自于大數(shù)據(jù)的融合和補充，也會逐漸成為政府決策建立的主要依據(jù)。第三逐漸成為各能源企業(yè)提高生產經(jīng)營效益的有效保障。第四成為能源行業(yè)業(yè)務應用的基礎設施，將來大數(shù)據(jù)是各個企業(yè)都能用。

這個給大家匯報一下我們在能源大數(shù)據(jù)架構設計里面，技術積累的過程。電規(guī)總院是國家能源局授牌的咨詢機構，我們在做電力、能源十三五規(guī)劃的同時，跟各個省級的發(fā)改委能源局都有對接，我們在實施各地的能源系統(tǒng)和能源大數(shù)據(jù)平臺，和承擔國家發(fā)改委能源課題的時候，通過這些項目逐漸積累數(shù)據(jù)，積累數(shù)據(jù)資源、技術資源，形成了后面描述的我們在能源大數(shù)據(jù)架構設計的思路，也是通過很多項目，包括很多科研課題積累出來的，這個不一定對，拋磚引玉，供大家探討。

我們初步把它設計成四個層，搞軟件工程的就喜歡比較技術化一些，第一個就是基礎設施層，我們把它稱為IAS，就是跟以前的服務器不一樣，現(xiàn)在我們用租用和自建的云集成基礎設施層。第二是含量基礎應用層，平臺服務層。第三個是軟件及服務，我們把一些應用提出來，就是IAAS層，我們把集成一個DAAS層，從各個渠道采集的數(shù)據(jù)應該能夠直接為終端的用戶提供數(shù)據(jù)服務。

首先基礎設施層，大家都知道我們可以去租用中國聯(lián)通、中國電信、阿里的云建立自己的基礎設施。在應用知識層可以分能源統(tǒng)計、運行、規(guī)劃、智慧能源，從產業(yè)鏈上覆蓋生產加工消費、價格、貿易全產業(yè)鏈。能源統(tǒng)計這個就是準確的描述能源的昨天就是我們如果要做任何事情，是要對歷史規(guī)律有一個準確的把握，我們把能源統(tǒng)計稱之為對昨天的描述，弄清楚能源的歷史，特別我們想研究，想做工作的當前地區(qū)，當前省份的歷史。

能源運行就是對今天的描述，監(jiān)測當前能源工業(yè)的運行狀況，開展能源的監(jiān)管，國家能源局這塊做的比較好，國家能源局現(xiàn)在每天可以自動生成前一天的能源工業(yè)運行的快報，這個快報數(shù)據(jù)來源于兩大電瓦公司、三大油公司，能源協(xié)會，他們每天拿數(shù)據(jù)，通過快包的數(shù)據(jù)，這個數(shù)據(jù)不準，全社會用的量是重要指標，用的量在下個月20幾號才可以看到。在國家能源局每個月的30、31號就能看到每天的用量電累計起來同比和環(huán)比，跟后面公布的全社會用量電是一致的，提前能知道它的發(fā)展趨勢和運行規(guī)律，這是對國家的決策也是比較重要的。

預測這塊，就是對明天的描述，利用能源的經(jīng)濟模型，預測短期和中長期的能源經(jīng)濟的發(fā)展趨勢。能源規(guī)劃，就是對未來的描述，它會調用統(tǒng)計、運行和預測的結果，因為我們做規(guī)劃，第一個是要有現(xiàn)實的統(tǒng)計數(shù)據(jù)，有對當前的描述、未來的預測，在這個基礎上我們形成規(guī)劃的項目庫，能源十三五規(guī)劃也形成了比較龐大的項目庫，同時實施對規(guī)劃執(zhí)行情況的監(jiān)管。

最后一些就是智慧能源，這個不多說了，剛才各位專家對各個領域也做了比較好的解讀。基礎支撐更加細化一些，必須把公共的部分提取出來，這些公共的部分不但為平臺服務，而且是雙耦合的性質，能夠為任何一個其他單位的業(yè)務應用提供公共的服務，比如數(shù)據(jù)訪問引擎提取出來，不單是對現(xiàn)在結構化的數(shù)據(jù)庫，對以后大數(shù)據(jù)庫都能形成統(tǒng)一的訪問，還有報表、BI的引擎，還有ETL的引擎，針對這么多源的數(shù)據(jù)庫需要有一個ETL的過程，清洗它成為你需要的數(shù)據(jù)。這是GIS的引擎，看到的截圖是國家能源局監(jiān)控的平臺，監(jiān)控各個能源項目。還有網(wǎng)絡爬取的引擎，國際的能源數(shù)據(jù)，包括國家的能源數(shù)據(jù)。一些分析的引擎。

最后講兩個案例，一個是政府的案例，能源雙控，能源消費總量和單位GDP能耗的控制，國家提出了十一五初期到末期能源煤不超過51噸標煤，最后這個數(shù)分解到各個省，也分解到各個市，2015年能源消費總量是5600萬噸標煤，到2020年要提出能源消費總量增速控制在2.1%以內，到不超過6280萬噸標煤，單位GDP能耗下降19.3%。它以中低速能源消費的增長支撐了較高速的GDP的發(fā)展，能源消費彈性系數(shù)0.28%遠低于十三五期間全國的能源水平0.46%。我們就建立一個模型，我們把能源消費總量控制的各個因子，包括它二產的占比，工業(yè)的占比，代表它控制的難度，人均GDP，一般性產生的收入，固定資產的投資，把這些因子賦權，形成了一個歸一化的綜合指數(shù)，這個歸一化的綜合指數(shù)我們稱之為把專家的模型沉淀為計算機的模型。這是我們給他賦權，對各區(qū)重點行業(yè)和重點企業(yè)的控制流程，利用統(tǒng)計渠道，企業(yè)監(jiān)測的渠道數(shù)據(jù)相互印證，形成能源消費總量控制的制度，把它分解下去。最后就是一個考核和評定，十三五末期能源消費總量是什么樣子，有11個行政區(qū)，十二五末期到十三五末期給他一個增速，實時監(jiān)控這些重點企業(yè)的情況，通過我們的模型實時調整模型計算出來歸一化的指數(shù)，去實時動態(tài)調整每年的目標，最后形成一個結果。

另外一個案例是企業(yè)側的，電力需求預測，做十三五規(guī)劃用到的。借助一些負荷預測的方法，彈性系數(shù)、回歸分析法。火電的電源是考慮規(guī)劃還是核準的，還有考慮輸出電的協(xié)議，對于每個省來說，我們可以計算出在全國總盤子下面2020年電力是盈余還是虧損，未來的時期電源結構是什么樣子。除了每個省除了預測電力和電量的平衡之外，我們還應該給出這個省12個月每個典型日電站工作位置圖，他如果有核電，帶基荷還是風荷，這東西通過大數(shù)據(jù)和模型的方法，利用我們掌握的數(shù)據(jù)給它做出來的，整個全國電力的十三五規(guī)劃，我們院做的時候利用這個模型算出的結果，一遍一遍的算，最后做到各個省的平衡，直至整個國家的平衡，把平衡的結果寫到十三五規(guī)劃里面去。因為企業(yè)要投資一個電廠，或者在哪里建個電源內的項目，一定要了解當?shù)氐呢摵伞㈦妰r，測算這些情況，他一定要對未來做一個預測，能不能盈利？利用這個模型，利用這個方法，對未來做一個負荷預測，需求做一個預測之后，企業(yè)能夠正確的看待投資的行為。謝謝大家！

（發(fā)言為現(xiàn)場速記整理，未經(jīng)本人審核）