項(xiàng)目概述
工業(yè)互聯(lián)網(wǎng)激起能源領(lǐng)域一池春水,新一代信息技術(shù)則是其不斷發(fā)展的加速器。山東能源集團(tuán)某下屬集團(tuán)率先在煤炭行業(yè)實(shí)踐大數(shù)據(jù)建設(shè),響應(yīng)山東省號(hào)召積極開展新舊動(dòng)能轉(zhuǎn)換,將大數(shù)據(jù)、云計(jì)算、人工智能、工業(yè)互聯(lián)網(wǎng)等技術(shù)與企業(yè)融合創(chuàng)新,促進(jìn)企業(yè)的精細(xì)管理、精準(zhǔn)決策、精益運(yùn)營(yíng)。
項(xiàng)目背景
在具體推進(jìn)中,集團(tuán)很快遇到了瓶頸——發(fā)現(xiàn)內(nèi)部雖有海量數(shù)據(jù),卻無法發(fā)揮出數(shù)據(jù)價(jià)值,想做數(shù)據(jù)分析挖掘,卻沒有高質(zhì)量的數(shù)據(jù)支撐,只能做一些淺層的數(shù)據(jù)分析應(yīng)用。在多方考察和比較下,該集團(tuán)最終選擇億信睿治智能數(shù)據(jù)治理平臺(tái),希望能攜手實(shí)現(xiàn)新舊動(dòng)能轉(zhuǎn)換,管理升級(jí),數(shù)據(jù)化運(yùn)營(yíng),在多個(gè)場(chǎng)景實(shí)現(xiàn)經(jīng)營(yíng)管理效率的提升。經(jīng)多方考察分析,當(dāng)前集團(tuán)要實(shí)現(xiàn)此次項(xiàng)目目標(biāo)面臨著諸多問題:
1、歷史原因:遺留數(shù)據(jù)孤島
集團(tuán)大量的信息化自動(dòng)化系統(tǒng),產(chǎn)生了海量多源異構(gòu)數(shù)據(jù),這些系統(tǒng)數(shù)據(jù)的數(shù)據(jù)標(biāo)準(zhǔn)不一,形成了一個(gè)個(gè)數(shù)據(jù)煙囪,無法實(shí)現(xiàn)數(shù)據(jù)融合、關(guān)聯(lián)分析。
2、客觀存在:信息海量臟數(shù)據(jù)多
該集團(tuán)整體信息化能力較強(qiáng),業(yè)務(wù)部門對(duì)信息系統(tǒng)的使用率較高,但由于數(shù)據(jù)質(zhì)量管理體系沒有來得及建立,容易出現(xiàn)數(shù)據(jù)錄入錯(cuò)誤,錄入數(shù)據(jù)格式不規(guī)范、多頭報(bào)數(shù)等數(shù)據(jù)質(zhì)量問題。
3、部門獨(dú)立:無數(shù)據(jù)資產(chǎn)編目
每個(gè)部門業(yè)務(wù)人員只知道自己工作中接觸到的數(shù)據(jù),不知道全集團(tuán)有些什么數(shù)據(jù),有哪些和自己工作相關(guān)的數(shù)據(jù)可以利用,使大量數(shù)據(jù)變成沉睡數(shù)據(jù)。集團(tuán)數(shù)據(jù)治理體系尚在建設(shè)中,發(fā)現(xiàn)問題但也無法及時(shí)糾正過來。
建設(shè)內(nèi)容
針對(duì)該集團(tuán)的實(shí)際數(shù)據(jù)問題,充分考慮到國(guó)家大數(shù)據(jù)戰(zhàn)略規(guī)劃的前提下,我們實(shí)行數(shù)據(jù)治理、建設(shè)數(shù)據(jù)倉(cāng)庫(kù)、逐步按需推進(jìn)數(shù)據(jù)應(yīng)用落地。
通過數(shù)據(jù)治理、數(shù)據(jù)賦能、數(shù)據(jù)化運(yùn)營(yíng)核心要素建設(shè)集團(tuán)數(shù)據(jù)治理平臺(tái)。最終采用標(biāo)本兼治、持續(xù)發(fā)展的設(shè)計(jì)理念,制定“三步走”計(jì)劃。
1、 治本:自上而下建立數(shù)據(jù)治理體系
首先從管理層面幫助集團(tuán)建設(shè)數(shù)據(jù)治理體系,制定數(shù)據(jù)質(zhì)量管理辦法,確定數(shù)據(jù)質(zhì)量主體責(zé)任在業(yè)務(wù)部門,建立數(shù)據(jù)質(zhì)量績(jī)效考核制度,從源頭上解決數(shù)據(jù)質(zhì)量問題。
同時(shí)在技術(shù)層面對(duì)集團(tuán)進(jìn)行涵蓋數(shù)據(jù)全生命周期數(shù)據(jù)治理,通過元數(shù)據(jù)管理,掌握數(shù)據(jù)來龍去脈;通過數(shù)據(jù)標(biāo)準(zhǔn)管理,統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn);通過數(shù)據(jù)質(zhì)量管理,發(fā)現(xiàn)數(shù)據(jù)質(zhì)量原因,從源頭循序漸進(jìn)提升數(shù)據(jù)質(zhì)量;通過數(shù)據(jù)資產(chǎn)編目,讓各業(yè)務(wù)部門了解集團(tuán)數(shù)據(jù)及其含義,申請(qǐng)取數(shù)加工分析,最終實(shí)現(xiàn)人力、財(cái)務(wù)、安全生產(chǎn)、設(shè)備、ERP、OA、黨建、檔案八大系統(tǒng)的數(shù)據(jù)治理。
2、 治標(biāo):建設(shè)集團(tuán)級(jí)大數(shù)據(jù)資產(chǎn)平臺(tái)
在集團(tuán)搭建基于hadoop架構(gòu)的大數(shù)據(jù)平臺(tái),通過Kafka,F(xiàn)lume等技術(shù)手段,實(shí)現(xiàn)礦端安全監(jiān)測(cè)、人員定位、設(shè)備、應(yīng)力、水文等感知數(shù)據(jù)的實(shí)時(shí)采集、清洗和存儲(chǔ)。并結(jié)合各系統(tǒng)治理之后的數(shù)據(jù),進(jìn)行數(shù)據(jù)整合,建立人力、財(cái)務(wù)、安全生產(chǎn)、設(shè)備、辦公五大主題域的數(shù)據(jù)倉(cāng)庫(kù)。最終針對(duì)各類數(shù)據(jù)資產(chǎn)進(jìn)行編目,形成整個(gè)集團(tuán)的大數(shù)據(jù)資產(chǎn)平臺(tái),同時(shí)通過權(quán)限管理、流程審批、數(shù)據(jù)加密脫敏等一系列手段保障數(shù)據(jù)安全,實(shí)現(xiàn)數(shù)據(jù)共享。
3、 治崗:業(yè)務(wù)人員快速實(shí)現(xiàn)數(shù)據(jù)賦能
該集團(tuán)意識(shí)到數(shù)據(jù)化運(yùn)營(yíng),最終必須讓一線業(yè)務(wù)人員具有數(shù)據(jù)思維,掌握數(shù)據(jù)分析能力。所以本期項(xiàng)目由實(shí)施工程師拋磚引玉,制作了一批數(shù)據(jù)自助式分析模板,業(yè)務(wù)人員不但可以利用模板現(xiàn)有的分析模型分析取數(shù),更可通過簡(jiǎn)單的拖拽方式做探索性分析,嘗試新的數(shù)據(jù)分析模型,學(xué)習(xí)數(shù)據(jù)分析思路,逐漸掌握數(shù)據(jù)分析能力,實(shí)現(xiàn)數(shù)據(jù)賦能。
項(xiàng)目?jī)r(jià)值
通過一期項(xiàng)目的數(shù)據(jù)治理,我們?yōu)榭蛻艚⒘思瘓F(tuán)級(jí)大數(shù)據(jù)資產(chǎn)平臺(tái),運(yùn)用大數(shù)據(jù)技術(shù)實(shí)現(xiàn)數(shù)據(jù)采集、清洗、分析建模,實(shí)現(xiàn)了集團(tuán)全量多源異構(gòu)數(shù)據(jù)采集,并對(duì)核心的人力、財(cái)務(wù)、設(shè)備、煤質(zhì)、生產(chǎn)安全數(shù)據(jù)進(jìn)行數(shù)據(jù)治理,形成高質(zhì)量的數(shù)據(jù)資產(chǎn)。
通過數(shù)據(jù)資產(chǎn)目錄對(duì)全集團(tuán)發(fā)布,并用業(yè)務(wù)元數(shù)據(jù)解釋數(shù)據(jù)含義,便于業(yè)務(wù)人員尋找自己所需的數(shù)據(jù)。業(yè)務(wù)人員可以對(duì)自己所需數(shù)據(jù)提出申請(qǐng),數(shù)據(jù)管理員審批通過后,業(yè)務(wù)人員可以利用零代碼敏捷分析工具自助分析取數(shù),實(shí)現(xiàn)數(shù)據(jù)賦能,支持日常生產(chǎn)經(jīng)營(yíng)管理。
由于采用標(biāo)本兼治,數(shù)據(jù)賦能的建設(shè)策略,解決數(shù)據(jù)質(zhì)量,數(shù)據(jù)融合等企業(yè)痛點(diǎn)難題,也通過數(shù)據(jù)賦能讓客戶看到了數(shù)據(jù)治理的成果,建立了信心,集團(tuán)領(lǐng)導(dǎo)表示:“未來我們會(huì)積極擁抱工業(yè)互聯(lián)網(wǎng),推行5+N平臺(tái)化管理模式,把數(shù)據(jù)作為企業(yè)創(chuàng)新發(fā)展的核心資產(chǎn)。希望在現(xiàn)有成果基礎(chǔ)上,我們能通過后續(xù)項(xiàng)目實(shí)現(xiàn)集團(tuán)所有核心數(shù)據(jù)的數(shù)據(jù)治理,并針對(duì)集團(tuán)核心的人、財(cái)、物、產(chǎn)、供、銷、環(huán),生產(chǎn)安全全要素業(yè)務(wù)場(chǎng)景,利用數(shù)據(jù)分析挖掘技術(shù)建設(shè)分析模型,從而實(shí)現(xiàn)全集團(tuán)數(shù)據(jù)化運(yùn)營(yíng)智慧管控?!?