向大數據要質效———吉林電力搭建全業務統一數據中心推進數據共享與業務融合

2018-04-09 10:45:08 中國電力新聞網　點擊量：評論 (0)

4月2日，國網吉林省電力有限公司信通公司員工張凱打開輸配電標準作業成本分析場景，吉林電力各地市公司作業成本、成本區間以及偏差率清晰可

4月2日，國網吉林省電力有限公司信通公司員工張凱打開輸配電標準作業成本分析場景，吉林電力各地市公司作業成本、成本區間以及偏差率清晰可見，通過GIS地圖可直觀看到對應單位的設備缺陷、故障和檢修數量，發現各單位之間成本差異原因和具體設備類別，為優化作業成本提供依據。

吉林電力是國家電網公司第二批全業務統一數據中心推廣單位，2017年7月啟動建設工作。目前，該公司已完成19套二級部署系統全量數據接入工作，歷史數據全部從生產環境接入，其中主要系統涵蓋5年以上歷史數據，大數據平臺量測類數據涵蓋3年以上歷史數據。

通過開展全業務統一數據中心建設，吉林電力進一步推進數據共享與業務融合，海量數據為該公司各類分析應用提供統一的運行環境、完備的數據資源、高效的分析計算能力，企業管理模式創新和精益化水平持續提升。

數倉模型匹配數據與業務對應無誤

全業務統一數據中心建設，需要吉林電力將19套核心業務系統全量數據統一納管，統一設計數倉模型，省公司端與之進行匹配，支撐業務場景建設和運營管理。

項目前期，吉林電力采用傳統方式建立數據倉庫，依據業務需求采用人工方式匹配對應的系統數據庫表和屬性字段。由于各業務系統是在不同時期建設的，經歷過多年的版本更新和數據治理，系統表多、屬性字段量大，造成系統間缺少統一的數據屬性字段標準，系統間屬性一致性較差。此外，各系統間的業務規則存在差異，同一屬性數據在不同系統中對應的屬性字段名稱不同，難以給出全局統一的數據屬性字段集合。采用人工核對方式工作量大，效率低下，無法保證匹配準確性，匹配工作面臨巨大挑戰。

為解決這一難題，吉林電力組織技術人員深入剖析業務本質，總結數倉匹配核心要點，即數據是業務體現，從業務系統的數據內容出發進行匹配，只要數據內容和業務一致，不管表和屬性字段是否與數倉模型一致，都認為是一致的。確定解決思路后，針對時間效率問題，工作人員利用大數據平臺并行內存計算技術開發數倉模型匹配工具，基于結構化業務數據進行數倉模型匹配，確保數據與業務對應無誤。

清洗轉換模型提高數據清洗質效

由于接入的各業務系統數據規范不統一，部分數據不符合場景分析要求，出現重復數據、空字段、格式不規范、數據缺項等現象，需要有針對性開展數據清洗轉換工作。

吉林電力于2017年10月開展全業務統一數據中心19套核心業務系統全量數據清洗轉換，在清洗轉換工作中，工作人員根據收集、梳理業務數據質量規則，對于不符合規則的數據，開展數據清洗。

同時，根據該公司統一數據模型，分析源業務數據與目標數據模型的映射關系，梳理業務數據編碼轉換、字段拆分、字段合并、字段運算、行列轉換的轉換需求，開展業務數據轉換。

為保證全系統數據清洗轉換的進度，與國家電網公司企業數據模型SG—CIM保持一致，該公司決定創新研究數據清洗轉換模型。該公司獨立開發數倉模型匹配工具，并創新研究數據清洗轉換模型，甄別有效數據與垃圾數據，并將有效數據進行類型轉換，大幅提高了數據清洗轉換的效率和質量。

張凱介紹說，在數據清洗轉換過程中，工作人員使用文本挖掘算法進行業務識別和標簽化，自動確定10個一級主題域業務主數據所在的表和屬性字段。通過在數據庫中屬性字段拆分、合并、運算和行列轉換，完善數據之間計算關系，工作人員同時還原數據流程，便于與實際業務進行比對。輔助相關人員則按業務、按主數據逐條開展進行數據清洗轉換，大幅提高了數據清洗轉換的質量和效率。

清洗轉換成果有效提升工作質效

大數據是基礎，場景模擬是過程，提升電網安全運行質量是目的。為挖掘電網運行規律，進一步解決準確定位問題，吉林電力基于全業務統一數據中心明細數據，將數據清洗轉換成果應用于實際工作，成功開展了公配臺區電壓分析和輸配電標準作業成本分析場景建設及應用，有效地提升了工作質效。

為精準定位電壓臺區異常原因，提升治理工作質效，吉林電力基于全業務統一數據中心明細數據，開展配電臺區電壓大數據挖掘工作。主要從公配臺區電壓異常監測和治理入手，關聯負載、三相不平衡和功率因數等內容，通過進行數據分析，分析出各主要因素對異常電壓的影響強度及關聯關系，準確判定臺區電壓異常原因，并將結果直接呈現在GIS地圖上，幫助業務人員直觀定位電壓異常臺區和主要影響因素，有效解決臺區異動數據量大、分類甄別時間緊的難題，減輕巡查人員現場工作量，節約臺區運行維護的人力、物力和資金投入。據統計，該公司利用全業務數據中心，2017年監測發現651個電壓異常臺區，應用大數據分析技術得出異動形成原因，經抽查核實300個臺區電壓異常原因，其原因與計算分析得出的原因相符率達到89.77%。

合理的輸配電成本是電網企業正常生產經營的重要保證，也是監管部門未來核定公司輸配電價的重要基礎。為進一步優化完善成本定額及輸配電成本結構，更好地適應未來改革發展需要，吉林電力開展了基于全業務數據中心的輸配電標準作業成本分析場景構建。該公司主要開發了變電、架空線路、電纜線路三類設備8個方面檢修成本定額分析功能，實時反映作業成本，促進企業精益化管理，優化資源配置，最終通過輸配電標準作業電壓運行情況為戰略管理及決策提供支撐。

全業務統一數據中心的建立，使吉林電力與國家電網公司各項數據實現了有效對接，實現了“用數據管理企業、用信息驅動業務”的目標，實現了由“搬數據”向“搬計算”的轉變，推動業務創新，推進該公司信息化建設邁上新臺階，為全面建設具有卓越競爭力的世界一流能源互聯網企業提供有力的數據支撐。

原標題:向大數據要質效———吉林電力搭建全業務統一數據中心推進數據共享與業務融合