《電子技術應用》
您所在的位置:首頁 > 通信與網(wǎng)絡 > 設計應用 > 基于數(shù)據(jù)地圖的大型電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理體系構建與實現(xiàn)
基于數(shù)據(jù)地圖的大型電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理體系構建與實現(xiàn)
2018智能電網(wǎng)增刊
孟祥君1,李 劍2,張偉昌1
1. 國網(wǎng)山東省電力公司運監(jiān)中心,,山東 濟南 250001,; 2. 山東魯能軟件技術有限公司,山東 濟南 250001
摘要: 企業(yè)級數(shù)據(jù)地圖是對數(shù)據(jù)資產(chǎn)體系化,、結構化的管控視圖,,提供一個完整統(tǒng)一的視角,清晰明確展示公司級數(shù)據(jù)資產(chǎn)的分布,、存儲和流動情況,,動態(tài)反映數(shù)據(jù)流與業(yè)務流的交錯支撐關聯(lián),從而有效幫助管理者總覽數(shù)據(jù)資產(chǎn)全局,?;谄髽I(yè)級數(shù)據(jù)地圖,構建大型電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理體系,,加強數(shù)據(jù)資產(chǎn)質(zhì)量監(jiān)督,,推進數(shù)據(jù)全局共享,實現(xiàn)數(shù)據(jù)資產(chǎn)的統(tǒng)一管理,為數(shù)據(jù)資產(chǎn)的增值利用提供良好生態(tài)環(huán)境,,促進數(shù)據(jù)資產(chǎn)的利用變現(xiàn),,為企業(yè)運營管理提供有效的決策支撐。
中圖分類號: TM73
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.2018.S1.063
Abstract:
Key words :

0  引言

    電力數(shù)據(jù)與經(jīng)濟發(fā)展緊密聯(lián)系,,其變化態(tài)勢能反映國民經(jīng)濟的發(fā)展走向,,支撐政府部門科學決策。對電網(wǎng)企業(yè)數(shù)據(jù)的有效分析和價值挖掘,,是有效應對資源有限,、環(huán)境壓力,實現(xiàn)綠色可持續(xù)性發(fā)展的關鍵,,更是經(jīng)濟發(fā)展及社會進步的強大推動力,。大型電網(wǎng)企業(yè)在管理運營中已積累了海量的數(shù)據(jù),但是大量數(shù)據(jù)應用不足,、釋放能量有限,,因此,喚醒沉睡數(shù)據(jù),,從海量數(shù)據(jù)中挖掘高價值的信息,,實現(xiàn)數(shù)據(jù)與公司運營管理的深度融合,就成為電網(wǎng)企業(yè)優(yōu)化運營管理,建設最好的電網(wǎng)的迫切需要,。

1  數(shù)據(jù)資產(chǎn)管理體系的構建

1.1  定義電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)

    數(shù)據(jù)資源是電網(wǎng)企業(yè)的戰(zhàn)略資產(chǎn),,為解決當前存在的數(shù)據(jù)管理問題,有效發(fā)揮數(shù)據(jù)資產(chǎn)價值,,建立企業(yè)級數(shù)據(jù)標準及業(yè)務流程標準,,構建面向服務的系統(tǒng)架構,以構建公司運營數(shù)據(jù)資產(chǎn)管理體系為目標,,以業(yè)務部門各單位為責任主體,,以信息系統(tǒng)深化應用為基礎,建立業(yè)務系統(tǒng)應用監(jiān)控工作機制,,開展運營監(jiān)測數(shù)據(jù)核查與溯源工作,,夯實數(shù)據(jù)基礎,提升數(shù)據(jù)質(zhì)量,,實現(xiàn)能用,、好用的目標。 

    電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)是指在電網(wǎng)企業(yè)主要運營活動過程中自主產(chǎn)生和外部獲取的,,能夠客觀,、真實描述企業(yè)運營管理活動,并能為電網(wǎng)企業(yè)帶來價值的數(shù)據(jù)資源,。這些數(shù)據(jù)資源無論是結構化的形式還是非結構化,,都能夠通過各種途徑,、各種關聯(lián)進行分析解讀,轉(zhuǎn)化為高價值的信息,,為電網(wǎng)企業(yè)運營管理提供有效支撐,。

    有別于傳統(tǒng)的數(shù)據(jù)管理,數(shù)據(jù)資產(chǎn)不再將數(shù)據(jù)局限于單一的業(yè)務部門或領域,,而是從總體視角重新構建數(shù)據(jù)與數(shù)據(jù)之間的綜合關聯(lián)和潛在聯(lián)系,,修補以往基于單個數(shù)據(jù)領域而導致的數(shù)據(jù)斷層。

1.2  構建企業(yè)級數(shù)據(jù)地圖

    企業(yè)級數(shù)據(jù)地圖是對數(shù)據(jù)資產(chǎn)體系化,、結構化的管控視圖,,提供一個完整統(tǒng)一的視角,,清晰明確展示公司級數(shù)據(jù)資產(chǎn)的分布、存儲和流動情況,,動態(tài)反映數(shù)據(jù)流與業(yè)務流的交錯支撐關聯(lián),,從而有效幫助管理者總覽數(shù)據(jù)資產(chǎn)全局,,實現(xiàn)數(shù)據(jù)資產(chǎn)的統(tǒng)一檢索、監(jiān)測和維護等全方位管理,。

    數(shù)據(jù)地圖從業(yè)務信息、技術信息,、管理信息3個層面明晰指標數(shù)據(jù)與源業(yè)務系統(tǒng)明細數(shù)據(jù)間對應的概念實體,、物理實體,、取數(shù)字段及屬性,、數(shù)據(jù)實體間的流轉(zhuǎn)關系,。并且基于數(shù)據(jù)中心側(cè)和業(yè)務系統(tǒng)側(cè)的運營數(shù)據(jù)梳理的工作成果,構建出數(shù)據(jù)資源地圖,,以拓撲圖的形式對運營數(shù)據(jù)的實體,、數(shù)據(jù)處理過程進行分層次的圖形化展現(xiàn),,支撐數(shù)據(jù)的業(yè)務溯源、數(shù)據(jù)溯源,、系統(tǒng)溯源。同時,,通過定義數(shù)據(jù)的管控角色,明晰各個運營數(shù)據(jù)責任人之間關系,,定義相應的職責、明確任務,,制定相應的運營數(shù)據(jù)管理流程和規(guī)范,,規(guī)范運營數(shù)據(jù)創(chuàng)建,、使用,、變更等管理流程,。

1.3  基于數(shù)據(jù)地圖,,數(shù)據(jù)資產(chǎn)管控模型

    根據(jù)公司總體部署,,運營監(jiān)控中心是公司數(shù)據(jù)資產(chǎn)的管理者,,將基于企業(yè)級數(shù)據(jù)地圖,,加強數(shù)據(jù)資產(chǎn)質(zhì)量監(jiān)督,,推進數(shù)據(jù)全局共享,從而為數(shù)據(jù)資產(chǎn)的增值利用提供良好生態(tài)環(huán)境,。促進數(shù)據(jù)資產(chǎn)的利用變現(xiàn),,為企業(yè)運營管理提供有效的決策支撐。在這個目標的指引下,,設計出了電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理模型,,如圖1所示。

mxj-t1.gif

    數(shù)據(jù)資產(chǎn)管理模型的核心是企業(yè)級數(shù)據(jù)地圖,,運監(jiān)中心基于數(shù)據(jù)地圖能夠總覽公司數(shù)據(jù)資產(chǎn)的產(chǎn)生,、分布與使用情況,為數(shù)據(jù)資產(chǎn)管理行為提供依據(jù),。

    質(zhì)量管理,、共享管理是運監(jiān)中心在開展數(shù)據(jù)資產(chǎn)管理工作的“二個抓手”。

    數(shù)據(jù)資產(chǎn)質(zhì)量監(jiān)督:由業(yè)務部門提供數(shù)據(jù)質(zhì)量校驗規(guī)則,,運監(jiān)中心負責建立數(shù)據(jù)質(zhì)量監(jiān)督計劃,,對業(yè)務源頭數(shù)據(jù)與業(yè)務實際的匹配和及時情況進行稽查,及時發(fā)現(xiàn)問題,,提出數(shù)據(jù)治理的要求,,督促業(yè)務部門按要求進行整改。

    數(shù)據(jù)資產(chǎn)共享管理:業(yè)務部門提出數(shù)據(jù)資產(chǎn)共享需求,,運監(jiān)中心負責整合需求,,協(xié)調(diào)和推進數(shù)據(jù)資產(chǎn)共享,,使用數(shù)據(jù)地圖共享平臺確保實現(xiàn)共享,,最后運監(jiān)中心對共享效果給予評價,推動數(shù)據(jù)資產(chǎn)共享,。

     “一項保障”是指數(shù)據(jù)資產(chǎn)質(zhì)量評價考核機制,,主要通過對數(shù)據(jù)資產(chǎn)質(zhì)量的評價考核保障數(shù)據(jù)資產(chǎn)管理工作規(guī)范、常態(tài)化開展,。主要工作內(nèi)容包括:

    (1)評價與考核設計:圍繞電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理目標,,由運監(jiān)中心設計數(shù)據(jù)資產(chǎn)質(zhì)量管理考核指標、辦法,、標準,。

    (2)評價與考核執(zhí)行:基于考核指標,、辦法與標準,,由運監(jiān)中心定期對各業(yè)務部門數(shù)據(jù)資產(chǎn)質(zhì)量進行綜合評價。

2  主要做法

    以實現(xiàn)企業(yè)級數(shù)據(jù)資產(chǎn)規(guī)范,、集中,、有序管理為目標,以完善的組織架構為支撐,,以數(shù)據(jù)價值密度提升為導向,,通過“全員參與、明確定義,、有序識別,、全景透視、規(guī)范管控,、探索變現(xiàn)”的方式,,清晰識別出公司數(shù)據(jù)資產(chǎn),全景透視管控數(shù)據(jù)資產(chǎn),,建立統(tǒng)一規(guī)范管理體系,,創(chuàng)新探索未來數(shù)據(jù)資產(chǎn)價值變現(xiàn)模式,打造了數(shù)據(jù)資產(chǎn)價值應用的良好生態(tài)環(huán)境,對公司優(yōu)化管理運營起到關鍵支撐,。主要做法如下,。

2.1  成立全覆蓋的組織機構

    目前,公司已經(jīng)對數(shù)據(jù)資產(chǎn)管理職能在公司的戰(zhàn)略,、管理和執(zhí)行層面進行了重新布局,,通過對各級職能的清晰設置和重新定義,,構建了符合自身特點,、層級分明的金字塔式三級數(shù)據(jù)資產(chǎn)管理組織架構。

    在戰(zhàn)略層,,構建了數(shù)據(jù)資產(chǎn)管理委員會,,成員包括公司領導,主要負責公司數(shù)據(jù)資產(chǎn)管理工作的整體規(guī)劃,、戰(zhàn)略部署以及宏觀目標的制定等工作,。

    在管理層,構建了數(shù)據(jù)資產(chǎn)管理組,,成員包括運監(jiān)中心和科信部,。運監(jiān)中心是數(shù)據(jù)資產(chǎn)管理歸口管理部門,負責設置數(shù)據(jù)資產(chǎn)管理流程,、制度和評價考核機制,、協(xié)調(diào)和推進數(shù)據(jù)資產(chǎn)管理工作執(zhí)行、解決數(shù)據(jù)資產(chǎn)管理相關問題,、評估數(shù)據(jù)資產(chǎn)管理效果等工作,;科信部是數(shù)據(jù)資產(chǎn)管理的技術支撐和保障部門,負責數(shù)據(jù)資產(chǎn)安全管理,、數(shù)據(jù)資產(chǎn)管理技術支撐與保障等工作,。

    執(zhí)行層,構建了數(shù)據(jù)資產(chǎn)管理工作組,,成員包括各業(yè)務部門和信通公司,,其中業(yè)務部門負責執(zhí)行數(shù)據(jù)資產(chǎn)管理工作、反饋數(shù)據(jù)資產(chǎn)管理活動信息,、提交數(shù)據(jù)資產(chǎn)管理改進建議等工作,;信通公司負責具體技術平臺的搭建和技術保障的實施等工作。

2.2  建立全業(yè)務的數(shù)據(jù)臺賬

    通過對公司數(shù)據(jù)指標關聯(lián)的三元素(業(yè)務,、系統(tǒng),、數(shù)據(jù))進行梳理分析,明晰指標數(shù)據(jù)源自的權威業(yè)務系統(tǒng),、關鍵業(yè)務節(jié)點,、對應的概念實體、物理實體、取數(shù)的字段及屬性,、數(shù)據(jù)實體間的流轉(zhuǎn)關系,、指標數(shù)據(jù)計算邏輯及過程等信息,構建完整詳盡的運營監(jiān)測數(shù)據(jù)臺賬,,從業(yè)務層面,、系統(tǒng)層面、數(shù)據(jù)層面對運營監(jiān)測數(shù)據(jù)進行管理,,如圖2所示,。

mxj-t2.gif

    業(yè)務信息主要反映數(shù)據(jù)資產(chǎn)的業(yè)務內(nèi)涵,具體包括基本信息,、監(jiān)測信息和關聯(lián)信息,,如圖3所示。

mxj-t3.gif

    技術信息主要反映數(shù)據(jù)資產(chǎn)的存儲,、分布和流轉(zhuǎn)等技術參數(shù),,具體包括數(shù)據(jù)字典和數(shù)據(jù)溯源等,其中數(shù)據(jù)溯源可關聯(lián)至數(shù)據(jù)資產(chǎn)地圖,,如圖4所示,。

mxj-t4.gif

    管理信息主要反映數(shù)據(jù)資產(chǎn)運營過程中所發(fā)生的變化和使用情況,具體包括數(shù)據(jù)質(zhì)量概況,、數(shù)據(jù)使用情況和數(shù)據(jù)變更情況,,其中數(shù)據(jù)質(zhì)量概況可關聯(lián)至詳細的數(shù)據(jù)質(zhì)量報告,如圖5所示,。

mxj-t5.gif

2.3  開展全過程的溯源管理

    通過定義數(shù)據(jù)資源框架,、構建指標臺賬,進行業(yè)務溯源系統(tǒng)溯源,,形成數(shù)據(jù)資產(chǎn)地圖,,體現(xiàn)運營數(shù)據(jù)的業(yè)務背景、業(yè)務關聯(lián)關系,、計算邏輯,、數(shù)據(jù)產(chǎn)生源頭及更新周期等整個運營數(shù)據(jù)流程詳細信息,形成一套結構清晰,、全面覆蓋的數(shù)據(jù)資源統(tǒng)一視圖,,直觀、詳盡地展示數(shù)據(jù)資源在其流程各環(huán)節(jié)的狀態(tài),,強化運營數(shù)據(jù)流程管理能力,,并為后續(xù)的數(shù)據(jù)監(jiān)控、評估與改進等工作奠定基礎,。

    按照指標關聯(lián)的三元素(業(yè)務,、系統(tǒng),、數(shù)據(jù))的拓撲關系構建出數(shù)據(jù)地圖,并可視化地對拓撲關系進行維護調(diào)整,,保持數(shù)據(jù)地圖與實際情況相符,。以地圖中“點、線,、面”作為繪制數(shù)據(jù)地圖的基礎,,“點”中包含系統(tǒng)信息、數(shù)據(jù)庫信息,、區(qū)域信息,、文件信息、報表信息,、表信息,、字段信息、維度信息,、指標信息,“線”中包含系統(tǒng)間關系信息,、數(shù)據(jù)庫間關系,、 ETL加工關系(表間關系、字段間關系),、基礎指標和復雜指標的關系,、指標和指標主題的關系,“面”主要基于數(shù)據(jù)關系的系統(tǒng)組織信息,。

    業(yè)務溯源主要是從運監(jiān)監(jiān)測指標體系中選取指標進行梳理,。基于業(yè)務分類和業(yè)務主題對指標進行分析拆解,,厘清各級指標間的業(yè)務關聯(lián)關系,,明確指標計算和匯總過程涉及的關鍵業(yè)務定義和業(yè)務節(jié)點,形成指標的業(yè)務溯源視圖,,如圖6所示,。基于業(yè)務溯源視圖可了解指標數(shù)據(jù)的來龍去脈,,并可自底向上進行指標數(shù)據(jù)情況跟蹤,。

mxj-t6.gif

    系統(tǒng)溯源主要是收集數(shù)據(jù)流轉(zhuǎn)于各個系統(tǒng)的記錄,并且將現(xiàn)有成果進行分析整理,,盡量自動化收集數(shù)據(jù)系統(tǒng)流轉(zhuǎn)類信息,。通過系統(tǒng)溯源,明晰指標數(shù)據(jù)源所屬業(yè)務系統(tǒng),,厘清其系統(tǒng)內(nèi)和系統(tǒng)間的數(shù)據(jù)分布和數(shù)據(jù)流轉(zhuǎn)關系以及指標在其歸屬系統(tǒng)上的核心應用場景和展示環(huán)節(jié),,構建完整詳盡的指標數(shù)據(jù)系統(tǒng)溯源過程,如圖7所示。

mxj-t7.gif

    在業(yè)務溯源和系統(tǒng)溯源的基礎上,,進一步明確指標數(shù)據(jù)流轉(zhuǎn)全過程和記錄與各個層次的系統(tǒng)物理存儲對應的映射關系,,梳理數(shù)據(jù)流轉(zhuǎn)過程中所涉及的概念實體、物理表,、物理字段,、指標計算過程等關鍵信息,如圖8所示,。

mxj-t8.gif

    整合以上3項溯源工作的梳理成果,,應用可視化技術,設計效果直觀,、詳盡實用的數(shù)據(jù)地圖展示界面,,如圖9所示,體現(xiàn)出運營數(shù)據(jù)的業(yè)務背景,、業(yè)務關聯(lián)關系,、計算邏輯、數(shù)據(jù)產(chǎn)生源頭及更新周期等整個運營數(shù)據(jù)全壽命詳細信息,。數(shù)據(jù)資產(chǎn)地圖作為運營數(shù)據(jù)資產(chǎn)管理的基礎平臺,,促進后續(xù)的運營數(shù)據(jù)接入與整合、數(shù)據(jù)監(jiān)控,、評估與改進等工作,。

mxj-t9.gif

2.4  進行全角度的數(shù)據(jù)監(jiān)控

    基于數(shù)據(jù)地圖,對數(shù)據(jù)資產(chǎn)全鏈條各環(huán)節(jié)設置監(jiān)控規(guī)則和監(jiān)控指標,,便于及時定位數(shù)據(jù)質(zhì)量問題至具體環(huán)節(jié),,如圖10所示。一方面,,對于數(shù)據(jù)從產(chǎn)生到使用的各個過程環(huán)節(jié)設置監(jiān)控規(guī)則,,建立核查模板,對數(shù)據(jù)資產(chǎn)進行全過程監(jiān)控,,及時定位數(shù)據(jù)問題并整改,,保障數(shù)據(jù)資產(chǎn)及時可靠地流轉(zhuǎn)和使用;另一方面,,通過建立閉環(huán)的數(shù)據(jù)問題跟蹤管理流程,,對于無法立即解決,需由相關各方協(xié)同解決的問題,,由專人負責提交,、溝通、跟蹤和關閉,,從而確保數(shù)據(jù)資產(chǎn)的質(zhì)量和效率,。

mxj-t10.gif

3  實施效果

3.1  建立了完整的電網(wǎng)企業(yè)數(shù)據(jù)資產(chǎn)管理體系

    目前,,公司已建立了完整的數(shù)據(jù)資產(chǎn)管理體系,從組織,、職能,、流程、標準,、制度等方面全面規(guī)范了數(shù)據(jù)資產(chǎn)管理行為,,成立了數(shù)據(jù)資產(chǎn)管理委員會,下設推進組和執(zhí)行組共16人,。在數(shù)據(jù)資產(chǎn)管理體系運行過程中,,已發(fā)布《數(shù)據(jù)質(zhì)量報告》8份,實現(xiàn)了對175億條數(shù)據(jù)的監(jiān)測,,監(jiān)測到153個業(yè)務場景的數(shù)據(jù)質(zhì)量異動,,治理數(shù)據(jù)474 350條,整改完成率達98.34%,;推進數(shù)據(jù)共享,,實現(xiàn)多部門協(xié)同共享143 361條數(shù)據(jù),共享完成率達91.27%,。

    通過從企業(yè)級視角對數(shù)據(jù)資產(chǎn)統(tǒng)一規(guī)劃,、建設、運維管理,,提升了數(shù)據(jù)資產(chǎn)質(zhì)量,促進了數(shù)據(jù)資產(chǎn)跨部門的流動,,引導各部門對數(shù)據(jù)資產(chǎn)的深化應用,,為數(shù)據(jù)資產(chǎn)的價值釋放提供了良好的生態(tài)環(huán)境。同時,,電力數(shù)據(jù)同國民經(jīng)濟緊密耦合,,是社會經(jīng)濟發(fā)展的基礎性數(shù)據(jù),高效的電力數(shù)據(jù)資產(chǎn)管理體系,,為政府社會經(jīng)濟規(guī)劃提供基礎數(shù)據(jù)支撐,,有力提升政府決策的科學化水平。

3.2  構建了層層級聯(lián)的數(shù)據(jù)地圖

    通過深入剖析公司業(yè)務流和數(shù)據(jù)流的交互關系,,基于電網(wǎng)企業(yè)通用的業(yè)務結構,,梳理出10個數(shù)據(jù)領域、8個數(shù)據(jù)應用場景,,設計了“指數(shù)層-指標層-明細數(shù)據(jù)層”三層級的數(shù)據(jù)地圖,。

    目前公司可基于數(shù)據(jù)地圖,從完整統(tǒng)一的視角透視數(shù)據(jù)資產(chǎn)全貌,,洞察數(shù)據(jù)資產(chǎn)分布與流動狀況,,實時監(jiān)控數(shù)據(jù)質(zhì)量,,發(fā)現(xiàn)數(shù)據(jù)異動,實現(xiàn)對數(shù)據(jù)資產(chǎn)的動態(tài)巡航監(jiān)控,;同時,,還能通過比對業(yè)務流與數(shù)據(jù)流的流向,甄別共享需求,,不斷促進數(shù)據(jù)的共享,,推進業(yè)務的融合。

3.3  消除運營診斷盲點

    通過對數(shù)據(jù)資產(chǎn)的全盤掌握和有效管理,,串聯(lián)起數(shù)據(jù)孤島,,利用跨部門數(shù)據(jù)多視角還原業(yè)務過程,消除了因數(shù)據(jù)匱乏導致的運營診斷盲點,,實現(xiàn)了企業(yè)級的運營深度分析,,有力支撐了公司運營管理決策。

3.4  創(chuàng)新探索公用事業(yè)數(shù)據(jù)資產(chǎn)管理模式

    成功構建出一套可量化,、可被復用,、可持續(xù)發(fā)展的數(shù)據(jù)資產(chǎn)管理模式,并進行了充分驗證,,為總部部署,、推廣數(shù)據(jù)資產(chǎn)管理起到了積極的借鑒與支撐?;诠檬聵I(yè)業(yè)務模式的相似性以及數(shù)據(jù)管理的通用性和延展性,,這套管理模式不僅適用于電網(wǎng)企業(yè),也適用于其他公用事業(yè)企業(yè),,通過這套管理模式的復用,,可以引領公用事業(yè)共同營造數(shù)據(jù)資產(chǎn)發(fā)展的良性生態(tài)環(huán)境。由于電力系統(tǒng)是中國社會的基礎能源設施,,通過數(shù)據(jù)資產(chǎn)管理帶來的行業(yè)理念的提升和創(chuàng)新效果,,經(jīng)過社會的反饋和發(fā)酵,其倍增效應將極大地推動國家大數(shù)據(jù)戰(zhàn)略的跨越式發(fā)展,。



作者信息:

孟祥君1,,李  劍2,張偉昌1

(1. 國網(wǎng)山東省電力公司運監(jiān)中心,,山東 濟南 250001,;

2. 山東魯能軟件技術有限公司,山東 濟南 250001)

此內(nèi)容為AET網(wǎng)站原創(chuàng),,未經(jīng)授權禁止轉(zhuǎn)載,。