向大數(shù)據(jù)要質(zhì)效———吉林電力搭建全業(yè)務統(tǒng)一數(shù)據(jù)中心推進數(shù)據(jù)共享與業(yè)務融合

2018-04-09 10:45:08 中國電力新聞網(wǎng) 　點擊量：評論 (0)

4月2日，國網(wǎng)吉林省電力有限公司信通公司員工張凱打開輸配電標準作業(yè)成本分析場景，吉林電力各地市公司作業(yè)成本、成本區(qū)間以及偏差率清晰可

4月2日，國網(wǎng)吉林省電力有限公司信通公司員工張凱打開輸配電標準作業(yè)成本分析場景，吉林電力各地市公司作業(yè)成本、成本區(qū)間以及偏差率清晰可見，通過GIS地圖可直觀看到對應單位的設備缺陷、故障和檢修數(shù)量，發(fā)現(xiàn)各單位之間成本差異原因和具體設備類別，為優(yōu)化作業(yè)成本提供依據(jù)。

吉林電力是國家電網(wǎng)公司第二批全業(yè)務統(tǒng)一數(shù)據(jù)中心推廣單位，2017年7月啟動建設工作。目前，該公司已完成19套二級部署系統(tǒng)全量數(shù)據(jù)接入工作，歷史數(shù)據(jù)全部從生產(chǎn)環(huán)境接入，其中主要系統(tǒng)涵蓋5年以上歷史數(shù)據(jù)，大數(shù)據(jù)平臺量測類數(shù)據(jù)涵蓋3年以上歷史數(shù)據(jù)。

通過開展全業(yè)務統(tǒng)一數(shù)據(jù)中心建設，吉林電力進一步推進數(shù)據(jù)共享與業(yè)務融合，海量數(shù)據(jù)為該公司各類分析應用提供統(tǒng)一的運行環(huán)境、完備的數(shù)據(jù)資源、高效的分析計算能力，企業(yè)管理模式創(chuàng)新和精益化水平持續(xù)提升。

數(shù)倉模型匹配數(shù)據(jù)與業(yè)務對應無誤

全業(yè)務統(tǒng)一數(shù)據(jù)中心建設，需要吉林電力將19套核心業(yè)務系統(tǒng)全量數(shù)據(jù)統(tǒng)一納管，統(tǒng)一設計數(shù)倉模型，省公司端與之進行匹配，支撐業(yè)務場景建設和運營管理。

項目前期，吉林電力采用傳統(tǒng)方式建立數(shù)據(jù)倉庫，依據(jù)業(yè)務需求采用人工方式匹配對應的系統(tǒng)數(shù)據(jù)庫表和屬性字段。由于各業(yè)務系統(tǒng)是在不同時期建設的，經(jīng)歷過多年的版本更新和數(shù)據(jù)治理，系統(tǒng)表多、屬性字段量大，造成系統(tǒng)間缺少統(tǒng)一的數(shù)據(jù)屬性字段標準，系統(tǒng)間屬性一致性較差。此外，各系統(tǒng)間的業(yè)務規(guī)則存在差異，同一屬性數(shù)據(jù)在不同系統(tǒng)中對應的屬性字段名稱不同，難以給出全局統(tǒng)一的數(shù)據(jù)屬性字段集合。采用人工核對方式工作量大，效率低下，無法保證匹配準確性，匹配工作面臨巨大挑戰(zhàn)。

為解決這一難題，吉林電力組織技術人員深入剖析業(yè)務本質(zhì)，總結(jié)數(shù)倉匹配核心要點，即數(shù)據(jù)是業(yè)務體現(xiàn)，從業(yè)務系統(tǒng)的數(shù)據(jù)內(nèi)容出發(fā)進行匹配，只要數(shù)據(jù)內(nèi)容和業(yè)務一致，不管表和屬性字段是否與數(shù)倉模型一致，都認為是一致的。確定解決思路后，針對時間效率問題，工作人員利用大數(shù)據(jù)平臺并行內(nèi)存計算技術開發(fā)數(shù)倉模型匹配工具，基于結(jié)構化業(yè)務數(shù)據(jù)進行數(shù)倉模型匹配，確保數(shù)據(jù)與業(yè)務對應無誤。

清洗轉(zhuǎn)換模型提高數(shù)據(jù)清洗質(zhì)效

由于接入的各業(yè)務系統(tǒng)數(shù)據(jù)規(guī)范不統(tǒng)一，部分數(shù)據(jù)不符合場景分析要求，出現(xiàn)重復數(shù)據(jù)、空字段、格式不規(guī)范、數(shù)據(jù)缺項等現(xiàn)象，需要有針對性開展數(shù)據(jù)清洗轉(zhuǎn)換工作。

吉林電力于2017年10月開展全業(yè)務統(tǒng)一數(shù)據(jù)中心19套核心業(yè)務系統(tǒng)全量數(shù)據(jù)清洗轉(zhuǎn)換，在清洗轉(zhuǎn)換工作中，工作人員根據(jù)收集、梳理業(yè)務數(shù)據(jù)質(zhì)量規(guī)則，對于不符合規(guī)則的數(shù)據(jù)，開展數(shù)據(jù)清洗。

同時，根據(jù)該公司統(tǒng)一數(shù)據(jù)模型，分析源業(yè)務數(shù)據(jù)與目標數(shù)據(jù)模型的映射關系，梳理業(yè)務數(shù)據(jù)編碼轉(zhuǎn)換、字段拆分、字段合并、字段運算、行列轉(zhuǎn)換的轉(zhuǎn)換需求，開展業(yè)務數(shù)據(jù)轉(zhuǎn)換。

為保證全系統(tǒng)數(shù)據(jù)清洗轉(zhuǎn)換的進度，與國家電網(wǎng)公司企業(yè)數(shù)據(jù)模型SG—CIM保持一致，該公司決定創(chuàng)新研究數(shù)據(jù)清洗轉(zhuǎn)換模型。該公司獨立開發(fā)數(shù)倉模型匹配工具，并創(chuàng)新研究數(shù)據(jù)清洗轉(zhuǎn)換模型，甄別有效數(shù)據(jù)與垃圾數(shù)據(jù)，并將有效數(shù)據(jù)進行類型轉(zhuǎn)換，大幅提高了數(shù)據(jù)清洗轉(zhuǎn)換的效率和質(zhì)量。

張凱介紹說，在數(shù)據(jù)清洗轉(zhuǎn)換過程中，工作人員使用文本挖掘算法進行業(yè)務識別和標簽化，自動確定10個一級主題域業(yè)務主數(shù)據(jù)所在的表和屬性字段。通過在數(shù)據(jù)庫中屬性字段拆分、合并、運算和行列轉(zhuǎn)換，完善數(shù)據(jù)之間計算關系，工作人員同時還原數(shù)據(jù)流程，便于與實際業(yè)務進行比對。輔助相關人員則按業(yè)務、按主數(shù)據(jù)逐條開展進行數(shù)據(jù)清洗轉(zhuǎn)換，大幅提高了數(shù)據(jù)清洗轉(zhuǎn)換的質(zhì)量和效率。

清洗轉(zhuǎn)換成果有效提升工作質(zhì)效

大數(shù)據(jù)是基礎，場景模擬是過程，提升電網(wǎng)安全運行質(zhì)量是目的。為挖掘電網(wǎng)運行規(guī)律，進一步解決準確定位問題，吉林電力基于全業(yè)務統(tǒng)一數(shù)據(jù)中心明細數(shù)據(jù)，將數(shù)據(jù)清洗轉(zhuǎn)換成果應用于實際工作，成功開展了公配臺區(qū)電壓分析和輸配電標準作業(yè)成本分析場景建設及應用，有效地提升了工作質(zhì)效。

為精準定位電壓臺區(qū)異常原因，提升治理工作質(zhì)效，吉林電力基于全業(yè)務統(tǒng)一數(shù)據(jù)中心明細數(shù)據(jù)，開展配電臺區(qū)電壓大數(shù)據(jù)挖掘工作。主要從公配臺區(qū)電壓異常監(jiān)測和治理入手，關聯(lián)負載、三相不平衡和功率因數(shù)等內(nèi)容，通過進行數(shù)據(jù)分析，分析出各主要因素對異常電壓的影響強度及關聯(lián)關系，準確判定臺區(qū)電壓異常原因，并將結(jié)果直接呈現(xiàn)在GIS地圖上，幫助業(yè)務人員直觀定位電壓異常臺區(qū)和主要影響因素，有效解決臺區(qū)異動數(shù)據(jù)量大、分類甄別時間緊的難題，減輕巡查人員現(xiàn)場工作量，節(jié)約臺區(qū)運行維護的人力、物力和資金投入。據(jù)統(tǒng)計，該公司利用全業(yè)務數(shù)據(jù)中心，2017年監(jiān)測發(fā)現(xiàn)651個電壓異常臺區(qū)，應用大數(shù)據(jù)分析技術得出異動形成原因，經(jīng)抽查核實300個臺區(qū)電壓異常原因，其原因與計算分析得出的原因相符率達到89.77%。

合理的輸配電成本是電網(wǎng)企業(yè)正常生產(chǎn)經(jīng)營的重要保證，也是監(jiān)管部門未來核定公司輸配電價的重要基礎。為進一步優(yōu)化完善成本定額及輸配電成本結(jié)構，更好地適應未來改革發(fā)展需要，吉林電力開展了基于全業(yè)務數(shù)據(jù)中心的輸配電標準作業(yè)成本分析場景構建。該公司主要開發(fā)了變電、架空線路、電纜線路三類設備8個方面檢修成本定額分析功能，實時反映作業(yè)成本，促進企業(yè)精益化管理，優(yōu)化資源配置，最終通過輸配電標準作業(yè)電壓運行情況為戰(zhàn)略管理及決策提供支撐。

全業(yè)務統(tǒng)一數(shù)據(jù)中心的建立，使吉林電力與國家電網(wǎng)公司各項數(shù)據(jù)實現(xiàn)了有效對接，實現(xiàn)了“用數(shù)據(jù)管理企業(yè)、用信息驅(qū)動業(yè)務”的目標，實現(xiàn)了由“搬數(shù)據(jù)”向“搬計算”的轉(zhuǎn)變，推動業(yè)務創(chuàng)新，推進該公司信息化建設邁上新臺階，為全面建設具有卓越競爭力的世界一流能源互聯(lián)網(wǎng)企業(yè)提供有力的數(shù)據(jù)支撐。

原標題:向大數(shù)據(jù)要質(zhì)效———吉林電力搭建全業(yè)務統(tǒng)一數(shù)據(jù)中心推進數(shù)據(jù)共享與業(yè)務融合