引言
帆軟作為全球數(shù)據(jù)分析和商業(yè)智能平臺(tái)提供商,這幾年深刻的感受到了全球數(shù)據(jù)應(yīng)用的熱潮,但是隨著越來(lái)越多的客戶開始實(shí)施并廣泛應(yīng)用BI系統(tǒng),數(shù)據(jù)治理的話題也在最近被越來(lái)越多地提及和討論。
過去的十年,銀行的IT系統(tǒng)經(jīng)歷了數(shù)據(jù)量高速膨脹的時(shí)期,這些海量的、分散在不同角落的異構(gòu)數(shù)據(jù)導(dǎo)致了數(shù)據(jù)資源的價(jià)值低、應(yīng)用難度大等問題。同時(shí),銀行內(nèi)部的業(yè)務(wù)條線或行政分化也在不斷地制造著銀行數(shù)據(jù)交互的斷層,而銀行與外部業(yè)務(wù)交互所產(chǎn)生的“體外循環(huán)”數(shù)據(jù)與企業(yè)的核心數(shù)據(jù)體系并不能自然地融合,這個(gè)時(shí)候數(shù)據(jù)治理體系建設(shè)可能不是銀行的一個(gè)選擇,而是唯一的出路。
數(shù)據(jù)治理規(guī)劃
在長(zhǎng)期對(duì)客戶的FineBI商業(yè)智能項(xiàng)目的跟蹤過程中我們發(fā)現(xiàn),往往只有那些建立了一定的數(shù)據(jù)治理體系的客戶,才能真正的將商業(yè)智能用起來(lái),用戶才能真正進(jìn)入商業(yè)智能時(shí)代。這個(gè)問題在銀行等金融機(jī)構(gòu)內(nèi)顯得尤為突出,銀行數(shù)據(jù)向來(lái)以量大質(zhì)優(yōu)而著稱,但是實(shí)際情況是它比其他行業(yè)好一些,但是長(zhǎng)期以來(lái)也缺乏數(shù)據(jù)治理的體系化建設(shè),導(dǎo)致商業(yè)智能價(jià)值鏈?zhǔn)茏?。要想在?shù)字化轉(zhuǎn)型中抓住機(jī)遇,銀行的數(shù)據(jù)治理體系建設(shè)勢(shì)在必行。
數(shù)據(jù)治理是一個(gè)系統(tǒng)工程,是一個(gè)從上至下指導(dǎo),從下而上推進(jìn)的工作。因此,在指導(dǎo)方面必須得到大家的共識(shí),要有一個(gè)強(qiáng)有力的組織、合理的章程、明確的流程、健壯的系統(tǒng),這樣才能使數(shù)據(jù)治理工作得到有效的保障。
要素一:發(fā)展戰(zhàn)略目標(biāo)
戰(zhàn)略是選擇和決策的集合,共同繪制出一個(gè)高層次的行動(dòng)方案,以實(shí)現(xiàn)更高層次目標(biāo)。數(shù)據(jù)戰(zhàn)略是企業(yè)發(fā)展戰(zhàn)略中的重要組成部分,是數(shù)據(jù)管理計(jì)劃的戰(zhàn)略,是保持和提高數(shù)據(jù)質(zhì)量、完整性、安全性和存取的計(jì)劃,是指導(dǎo)數(shù)據(jù)治理的最高原則。
數(shù)據(jù)治理是否與企業(yè)發(fā)展戰(zhàn)略相吻合也是衡量數(shù)據(jù)治理體系實(shí)施是否成熟、是否成功的重要標(biāo)準(zhǔn)。要在企業(yè)發(fā)展戰(zhàn)略框架下,建立數(shù)據(jù)治理的戰(zhàn)略文化,包括企業(yè)高層領(lǐng)導(dǎo)對(duì)數(shù)據(jù)治理的重視程度、所能提供的資源、重大問題的協(xié)調(diào)能力,以及對(duì)數(shù)據(jù)治理文化的宣傳推廣、培訓(xùn)教育等一系列措施。這種整體統(tǒng)一的思想,和我們生態(tài)學(xué)模型下的帆軟DA生態(tài)系統(tǒng)整體統(tǒng)一的特征如出一轍,充分證明了目標(biāo)統(tǒng)一的必要性。
☆ 數(shù)據(jù)治理文化。2018年5月21日,銀保監(jiān)會(huì)發(fā)布了《銀行業(yè)金融機(jī)構(gòu)數(shù)據(jù)治理指引》,從數(shù)據(jù)治理架構(gòu)、數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量控制、數(shù)據(jù)價(jià)值實(shí)現(xiàn)、監(jiān)督管理等方面規(guī)范了銀行業(yè)金融機(jī)構(gòu)的數(shù)據(jù)管理活動(dòng)。數(shù)據(jù)治理的戰(zhàn)略組成部分主要包括:數(shù)據(jù)治理的愿景、商業(yè)案例摘要(包括例子)、指導(dǎo)原則、長(zhǎng)遠(yuǎn)目標(biāo)分解、管理措施、實(shí)施線路等。
☆ 認(rèn)知與行動(dòng)。信息化領(lǐng)域有一個(gè)很有名的說法“Garbage in, garbage out”,翻譯為中文就是“垃圾進(jìn),垃圾出”,意指用臟亂的數(shù)據(jù)做樣本,產(chǎn)生的研究成果也是毫無(wú)價(jià)值的。數(shù)據(jù)的污染可能發(fā)生在數(shù)據(jù)產(chǎn)生、采集、傳輸、流轉(zhuǎn)、加工、存儲(chǔ)、提取、交換等各個(gè)環(huán)節(jié),因此要保證數(shù)據(jù)治理目標(biāo)的實(shí)現(xiàn),就必須對(duì)數(shù)據(jù)進(jìn)行全流程的管控,要在全行范圍內(nèi)形成統(tǒng)一的數(shù)據(jù)治理認(rèn)知,讓人人有責(zé)的理念深入人心。光有認(rèn)知還不行,必須要有相應(yīng)的制度和管理來(lái)保證從認(rèn)知到執(zhí)行的轉(zhuǎn)變,讓員工認(rèn)清責(zé)任與義務(wù),明確具體的工作要求。
要素二:數(shù)據(jù)治理組織
數(shù)據(jù)治理的組織包括制度組織和服務(wù)組織。制度組織主要負(fù)責(zé)數(shù)據(jù)治理和數(shù)據(jù)管理制度。這些組織是跨職能的,通常商業(yè)銀行會(huì)建立數(shù)據(jù)治理委員會(huì)、數(shù)據(jù)管理制度團(tuán)隊(duì)等組織,負(fù)責(zé)整體數(shù)據(jù)戰(zhàn)略、數(shù)據(jù)政策、數(shù)據(jù)管理度量指標(biāo)等數(shù)據(jù)治理規(guī)程問題。
比如大連銀行成立了“數(shù)據(jù)管理辦公室”,將其作為數(shù)據(jù)治理的執(zhí)行機(jī)構(gòu);巴克萊銀行還建立了數(shù)據(jù)管理的三層組織體系,包括決策層、管理層和執(zhí)行層。與政府部門和機(jī)構(gòu)一樣,制度組織執(zhí)行類似于行政部門的職責(zé)。數(shù)據(jù)服務(wù)組織主要是又?jǐn)?shù)據(jù)管理的專業(yè)人員組成,包括數(shù)據(jù)架構(gòu)師,數(shù)據(jù)質(zhì)量分析師,元數(shù)據(jù)管理員等,主要執(zhí)行數(shù)據(jù)治理各個(gè)領(lǐng)域的具體實(shí)施工作。
☆ 組織架構(gòu)。有效的組織機(jī)構(gòu)是項(xiàng)目成功的有力保證,為了達(dá)到項(xiàng)目預(yù)期目標(biāo),在項(xiàng)目開始之前對(duì)于組織及其責(zé)任分工做出規(guī)劃是非常必要的。數(shù)據(jù)治理設(shè)計(jì)的范圍很廣,牽涉到不同的業(yè)務(wù)部門和科技部門,是商業(yè)銀行的全局大事,如何成立和成立什么樣的組織應(yīng)該依據(jù)商業(yè)銀行本身的發(fā)展戰(zhàn)略和目標(biāo)來(lái)確定。
☆ 組織層次。建立有高層領(lǐng)導(dǎo)者組成的數(shù)據(jù)治理委員會(huì),組織跨業(yè)務(wù)部門和IT部門的協(xié)調(diào)工作,規(guī)劃數(shù)據(jù)治理的總體方向,并在其下設(shè)立工作組,執(zhí)行數(shù)據(jù)治理計(jì)劃和監(jiān)督數(shù)據(jù)管理工作。不同的組織層次應(yīng)該發(fā)揮不同的職責(zé)職能,建立合理的組織層次有利于快速推動(dòng)數(shù)據(jù)治理工作的開展。
☆ 組織職責(zé)。根據(jù)數(shù)據(jù)管理工作的實(shí)際需要,在業(yè)務(wù)部門、技術(shù)管理部門和業(yè)務(wù)應(yīng)用部門間要確定各個(gè)工作人員的職責(zé)。不同的組織負(fù)責(zé)的職責(zé)不盡相同,例如不同的業(yè)務(wù)部門應(yīng)該明確各自業(yè)務(wù)開展對(duì)數(shù)據(jù)的具體要求和相關(guān)規(guī)則,而技術(shù)部門則會(huì)根據(jù)業(yè)務(wù)部門的需求負(fù)責(zé)具體的實(shí)施工作,包括將業(yè)務(wù)部門提出的要求轉(zhuǎn)化成技術(shù)語(yǔ)言,用于事前的控制(如字段的約束)、事中的邏輯控制(例如控制不能為空)、事后的核查,以及具體的技術(shù)操作和編制定期的報(bào)告等。
要素三:制度章程
制度章程是確保對(duì)數(shù)據(jù)治理進(jìn)行有效實(shí)施的認(rèn)責(zé)制度,其中一些是數(shù)據(jù)治理職能的職責(zé),也包括其他數(shù)據(jù)管理職能的職責(zé)。數(shù)據(jù)治理是最高層次的、規(guī)劃性的數(shù)據(jù)管理制度活動(dòng)。換句話說,數(shù)據(jù)治理是主要由數(shù)據(jù)管理人員和協(xié)調(diào)人員共同制定的高層次的數(shù)據(jù)管理制度決策。這里只簡(jiǎn)單的介紹包括哪些制度章程。
銀行數(shù)據(jù)治理制度體系
☆ 規(guī)章制度。數(shù)據(jù)治理規(guī)章制度類似于企業(yè)的公司條例,他會(huì)闡明數(shù)據(jù)治理的主要目標(biāo)、相關(guān)工作人員、職責(zé)、決策權(quán)利和度量標(biāo)準(zhǔn)。
☆ 管控辦法。管控辦法是基于規(guī)章制度與工具的結(jié)合,是可落地、可操作的辦法。
☆ 考核機(jī)制。考核是保障制度落實(shí)的根本,建立明確的考核制度,實(shí)際操作中可根據(jù)不同銀行的具體情況,建立相應(yīng)的針對(duì)數(shù)據(jù)治理方面的考核辦法,并與個(gè)人績(jī)效掛鉤。
☆ 技術(shù)規(guī)范。技術(shù)規(guī)范是保障數(shù)據(jù)治理平臺(tái)可持續(xù)管理的基礎(chǔ),隨著數(shù)據(jù)量的增長(zhǎng)、技術(shù)水平的發(fā)展,為更好的、可持續(xù)的實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的管理與應(yīng)用,需要建立明確的技術(shù)規(guī)范。
制度或規(guī)范領(lǐng)域
主要內(nèi)容
數(shù)據(jù)治理工作
數(shù)據(jù)治理架構(gòu)與職責(zé)分工,對(duì)數(shù)據(jù)治理的各領(lǐng)域都有一個(gè)總體要求
數(shù)據(jù)標(biāo)準(zhǔn)
數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)的職責(zé)分工、標(biāo)準(zhǔn)管理和標(biāo)準(zhǔn)應(yīng)用
數(shù)據(jù)質(zhì)量
數(shù)據(jù)質(zhì)量術(shù)語(yǔ)定義、評(píng)估維度和規(guī)則、技術(shù)要求、管理的職責(zé)與流程
數(shù)據(jù)文件交換
數(shù)據(jù)交換文件的命名規(guī)范、交換原則、安全管理等
元數(shù)據(jù)
元數(shù)據(jù)管理原則、范圍和管理方法等
數(shù)據(jù)生命周期
數(shù)據(jù)生命周期管理的原則,包括清理、歸檔、銷毀等各個(gè)階段的要求
主輔數(shù)據(jù)源
主數(shù)據(jù)分布原則、輔數(shù)據(jù)分布原則
數(shù)據(jù)安全
數(shù)據(jù)安全性的原則、機(jī)制、算法等
數(shù)據(jù)認(rèn)責(zé)
責(zé)任劃分、明確各類數(shù)據(jù)的所有者、管理者和管理職責(zé)
典型的制度或規(guī)范領(lǐng)域
要素四:流程管理
流程管理包括流程目標(biāo)、流程任務(wù)、流程分級(jí)。根據(jù)數(shù)據(jù)治理的內(nèi)容,建立相應(yīng)的流程,且遵循本單位數(shù)據(jù)治理的規(guī)章制度。實(shí)際操作中可結(jié)合所使用的數(shù)據(jù)治理工具,與數(shù)據(jù)治理工具供應(yīng)商協(xié)商,建立符合商業(yè)銀行的流程管理。
☆ 做好事前預(yù)防。上述談到的戰(zhàn)略文化、規(guī)章制度的貫徹落實(shí),就是最好的事前預(yù)防措施。我國(guó)一些大型銀行已經(jīng)上線了一些專門的數(shù)據(jù)治理平臺(tái),比如企業(yè)級(jí)元數(shù)據(jù)管理系統(tǒng),數(shù)據(jù)質(zhì)量分析系統(tǒng),數(shù)據(jù)生命周期管理系統(tǒng)等,將相關(guān)的制度規(guī)范和職責(zé)要求在系統(tǒng)中進(jìn)行控制和約束,并在流轉(zhuǎn)的各個(gè)環(huán)節(jié)由相應(yīng)的組織和角色負(fù)責(zé),實(shí)施認(rèn)責(zé)機(jī)制。
☆ 加強(qiáng)事中監(jiān)測(cè)。應(yīng)組織分析各領(lǐng)域的數(shù)據(jù)質(zhì)量問題,監(jiān)測(cè)報(bào)告本系統(tǒng)的數(shù)據(jù)結(jié)構(gòu)變化情況,數(shù)據(jù)分布情況,數(shù)據(jù)對(duì)業(yè)務(wù)服務(wù)的滿足情況、在線數(shù)據(jù)增長(zhǎng)情況、數(shù)據(jù)空缺和質(zhì)量惡化情況等。這些事中監(jiān)測(cè)過程除了需要規(guī)章制度的保障之外,還需要有可靠的工具或平臺(tái)來(lái)進(jìn)行分析,避免憑空管理。
☆ 進(jìn)行事后評(píng)估和整改。定期對(duì)系統(tǒng)開展全面的數(shù)據(jù)治理狀況評(píng)估,從問題率、解決率、解決時(shí)效等方面建立評(píng)價(jià)指標(biāo),通過系統(tǒng)記錄并跟蹤需要整改的數(shù)據(jù)問題,要求按期整改優(yōu)化,必要時(shí)進(jìn)行一定的考核。一般時(shí)候評(píng)估與整改可以安排在項(xiàng)目投產(chǎn)一周后,并按年進(jìn)行回顧。
☆ 要綜合各種方式進(jìn)行數(shù)據(jù)治理。目前,我國(guó)商業(yè)銀行數(shù)據(jù)治理基本上通過系統(tǒng)或工具發(fā)現(xiàn)問題,然后技術(shù)人員進(jìn)行批量修改,或者由業(yè)務(wù)人員進(jìn)行修訂或補(bǔ)錄。其工作基本上由銀行內(nèi)部人員完成。對(duì)于涉及客戶的相關(guān)數(shù)據(jù),則很難進(jìn)行治理。從這點(diǎn)上,應(yīng)該充分借鑒互聯(lián)網(wǎng)企業(yè)的做法,發(fā)動(dòng)客戶積極參與到銀行的數(shù)據(jù)治理工作中。比如通過電話、短信、郵件通知客戶確認(rèn)相關(guān)信息;對(duì)重要的企業(yè)客戶,通過走訪確認(rèn)和補(bǔ)充缺失與錯(cuò)誤信息;通過活動(dòng)、游戲等形式,并給與一定的獎(jiǎng)勵(lì)讓客戶主動(dòng)完善相應(yīng)信息;通過提示客戶信息不完備不能辦理相關(guān)業(yè)務(wù)來(lái)引導(dǎo)客戶進(jìn)行信息完善和驗(yàn)證等。
要素五:技術(shù)應(yīng)用
技術(shù)應(yīng)用包括支撐核心領(lǐng)域的工具和平臺(tái),例如數(shù)據(jù)質(zhì)量管理系統(tǒng)、元數(shù)據(jù)管理系統(tǒng)等。他們是數(shù)據(jù)治理能夠順利開展的技術(shù)保障。只有建立豐富的數(shù)據(jù)治理工具和平臺(tái),才能從各個(gè)領(lǐng)域有效的進(jìn)行數(shù)據(jù)的管理和治理,才能有效提高銀行的數(shù)據(jù)價(jià)值。
☆ 數(shù)據(jù)資產(chǎn)管理系統(tǒng),統(tǒng)一管理全行的數(shù)據(jù)資產(chǎn),包括元數(shù)據(jù)、數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn),以及其他重要的數(shù)據(jù)資產(chǎn),并提供可視化的數(shù)據(jù)查詢和展示功能,支持通過功能嵌入等方式實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的快速與便捷查詢。
☆ 數(shù)據(jù)質(zhì)量管理系統(tǒng),落實(shí)數(shù)據(jù)質(zhì)量問題的治理工作,實(shí)現(xiàn)數(shù)據(jù)質(zhì)量問題的發(fā)現(xiàn)、跟蹤、治理、評(píng)價(jià)的全流程閉環(huán)管理。搭建數(shù)據(jù)生命周期管理平臺(tái),落實(shí)數(shù)據(jù)生命周期管理機(jī)制。
☆ 不斷豐富豐富前臺(tái)源系統(tǒng)的基礎(chǔ)數(shù)據(jù),持續(xù)加大數(shù)據(jù)積累和整合的廣度深度,建設(shè)統(tǒng)一的數(shù)據(jù)倉(cāng)庫(kù)平臺(tái),滿足前臺(tái)營(yíng)銷、統(tǒng)計(jì)分析、決策支持、風(fēng)險(xiǎn)管理和新資本協(xié)議等多種需求,持續(xù)提升對(duì)數(shù)據(jù)的挖掘、分析與深度應(yīng)用能力。
☆ 在建立上述配套支撐系統(tǒng)的基礎(chǔ)上,還需要實(shí)現(xiàn)各系統(tǒng)間的互聯(lián)互通,相互協(xié)同與驗(yàn)證,提供數(shù)據(jù)統(tǒng)一、形式多樣的數(shù)據(jù)服務(wù)。例如,中國(guó)工商銀行針對(duì)元數(shù)據(jù)管理開發(fā)了元數(shù)據(jù)及軟件資源管理系統(tǒng),針對(duì)數(shù)據(jù)標(biāo)準(zhǔn)建立了集團(tuán)信息標(biāo)準(zhǔn)服務(wù)系統(tǒng)等。
要素六:成熟度模型
CMMI協(xié)會(huì)在2014年發(fā)布了數(shù)據(jù)管理能力成熟度模型Data Management Maturity(DMM),可以用來(lái)評(píng)估和提升企業(yè)的數(shù)據(jù)管理水平,幫助企業(yè)跨越業(yè)務(wù)與IT之間的鴻溝。DMM模型可以幫助企業(yè)在管理數(shù)據(jù)資產(chǎn)上達(dá)成共識(shí)。它包括了5個(gè)連續(xù)能力和25個(gè)提升的過程域,可以反映所有數(shù)據(jù)管理的內(nèi)容,可以促進(jìn)企業(yè)建立自己的數(shù)據(jù)管理成熟度路線圖。
數(shù)據(jù)管理能力成熟度模型
總結(jié)
我國(guó)銀行的數(shù)據(jù)現(xiàn)狀普遍都是一個(gè)先污染、后治理的過程,數(shù)據(jù)治理必然帶來(lái)新的標(biāo)準(zhǔn)的確立和舊系統(tǒng)的改造,是一個(gè)有破有立、無(wú)破不立的過程。這一過程設(shè)計(jì)大量的跨部門、跨條線、跨系統(tǒng)的溝通協(xié)調(diào),同時(shí)也涉及不小的投資。為了不使投入的人力物力付之東流,在治理前期就應(yīng)該規(guī)劃好各項(xiàng)規(guī)章制度和管理架構(gòu),保障后續(xù)的各項(xiàng)治理工作能夠行之有效并且長(zhǎng)期堅(jiān)持。
— 帆軟數(shù)據(jù)應(yīng)用研究院 —
帆軟數(shù)據(jù)應(yīng)用研究院專注于企業(yè)的數(shù)據(jù)應(yīng)用研究,致力于讓數(shù)據(jù)成為生產(chǎn)力。本號(hào)主要分享行業(yè)趨勢(shì)、市場(chǎng)動(dòng)態(tài)、理論觀點(diǎn)以及企業(yè)的數(shù)據(jù)應(yīng)用實(shí)踐案例。