原文《數(shù)字政府智慧政務(wù)大數(shù)據(jù)治理平臺及大數(shù)據(jù)能力平臺建設(shè)方案》WORD格式,主要內(nèi)容為數(shù)字政府大數(shù)據(jù)治理平臺及大數(shù)據(jù)能力平臺。
更多參考
大數(shù)據(jù)治理工作從數(shù)據(jù)匯聚開始,到最終服務(wù)業(yè)務(wù),主要包括以下幾個階段:
第一階段:數(shù)據(jù)匯聚,融合管理
從政務(wù)辦公網(wǎng)、感知網(wǎng)、社會協(xié)同單位收集各類數(shù)據(jù),形成大數(shù)據(jù)中心的數(shù)據(jù)基礎(chǔ),并對匯集的原始數(shù)據(jù)開展基于數(shù)據(jù)管理和業(yè)務(wù)視角的治理及應(yīng)用工作。
基于數(shù)據(jù)管理視角,對業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)進行集中采集和管理,從站位全局服務(wù)XX市大數(shù)據(jù)創(chuàng)新應(yīng)用的角度梳理大數(shù)據(jù)資產(chǎn),構(gòu)建數(shù)據(jù)資源目錄和數(shù)據(jù)資產(chǎn)管理應(yīng)用,達到數(shù)據(jù)資源的規(guī)范化和可視化;匯聚后的原始數(shù)據(jù)仍處于零散、不可直接使用的狀態(tài),為數(shù)據(jù)使用者提供一站式的集成開發(fā)環(huán)境,從而滿足數(shù)據(jù)資源平臺下,數(shù)據(jù)開發(fā)者進行ETL開發(fā)、數(shù)據(jù)挖掘算法開發(fā)、數(shù)據(jù)主題庫建設(shè)等需求;對數(shù)據(jù)融合處理的全過程通過質(zhì)量管理工具進行管理監(jiān)測,保障數(shù)據(jù)質(zhì)量;因政府數(shù)據(jù)的機密性、高敏感性等特點,需對數(shù)據(jù)資源層中各數(shù)據(jù)項進行安全上的分類分級,確保數(shù)據(jù)使用合理、安全可控。
基于業(yè)務(wù)應(yīng)用視角,對匯聚的基礎(chǔ)數(shù)據(jù)開展模型治理,通過數(shù)據(jù)清洗加工、基于業(yè)務(wù)背景及要求的處理加工、以及面向應(yīng)用專題場景的開發(fā),依次構(gòu)建整合數(shù)據(jù)資源層、主題數(shù)據(jù)資源層、應(yīng)用數(shù)據(jù)資源層,形成指標口徑一致、統(tǒng)存統(tǒng)用的大數(shù)據(jù)資源層。
第二階段:基于數(shù)據(jù),提煉抽象信息,形成知識
因大數(shù)據(jù)涉及的來源廣泛、數(shù)據(jù)采集背景及方法多樣甚至特殊、復雜,導致因不同的匯集場景等因素,各個實體對象往往存在多個ID,需要對ID間關(guān)系做計算,通過IDMapping,建立ID和實體人/物間的關(guān)系,從而串聯(lián)起實體人/物的屬性/行為信息。
基于業(yè)務(wù)需求引導和對數(shù)據(jù)資源信息的價值梳理,對數(shù)據(jù)進行進一步提煉加工和算法計算,將數(shù)據(jù)標簽化,構(gòu)建基礎(chǔ)庫,支撐專題應(yīng)用庫建設(shè),并通過標簽中心產(chǎn)品對用戶及開發(fā)者開放。
第三階段:構(gòu)建應(yīng)用,服務(wù)業(yè)務(wù)
按照業(yè)務(wù)場景需求,將基礎(chǔ)庫、主題庫和專題庫等進一步組合利用,可構(gòu)建起各類業(yè)務(wù)創(chuàng)新應(yīng)用,如監(jiān)控大屏、全息畫像、預警中心等應(yīng)用。通過數(shù)據(jù)服務(wù)平臺,可以把數(shù)據(jù)和標簽在線服務(wù)化提供給開發(fā)者和用戶。
數(shù)據(jù)治理平臺會包含部分5大庫數(shù)據(jù)標準,行標、部門標準等需由實施人員從客戶處采集后錄入系統(tǒng)
由于數(shù)據(jù)治理過程需采集數(shù)據(jù)元并標準化,故需先將生產(chǎn)庫需橋接庫表的數(shù)據(jù)結(jié)構(gòu)錄入前置庫
將數(shù)據(jù)結(jié)構(gòu)采集入數(shù)據(jù)治理平臺
實施人員為采集來的元數(shù)據(jù)掛接數(shù)據(jù)標準,標準化其元數(shù)據(jù)格式屬性、值域等
部門管理員根據(jù)標準化的字段屬性,將生產(chǎn)庫數(shù)據(jù)橋接到前置庫
中心管理員對前置庫數(shù)據(jù)進行質(zhì)量檢查及整改
中心管理員將質(zhì)檢后數(shù)據(jù)集成到治理庫
中心管理員對治理庫的數(shù)據(jù)根據(jù)業(yè)務(wù)需求進行邏輯層質(zhì)量檢查
部門管理人員對已完成數(shù)據(jù)治理的治理庫數(shù)據(jù)進行資源掛載
通過數(shù)據(jù)治理工作后,形成的數(shù)據(jù)治理成果物。
本項目建設(shè)數(shù)據(jù)智能管理平臺適用于分析型系統(tǒng)數(shù)據(jù)處理的各個過程,負責數(shù)據(jù)的加工處理以及加工處理過程數(shù)據(jù)標準、元數(shù)據(jù)和數(shù)據(jù)質(zhì)量的管理。平臺可以提供數(shù)據(jù)輸入、數(shù)據(jù)加工、數(shù)據(jù)輸出和貫穿數(shù)據(jù)處理各個過程的全流程、全生命周期的數(shù)據(jù)處理、數(shù)據(jù)治理和數(shù)據(jù)管控的一體化建設(shè)。
數(shù)據(jù)治理平臺覆蓋了從標準、設(shè)計、采集、開發(fā)到使用,再到交付的全數(shù)據(jù)治理流程,為組織提供了一站式數(shù)據(jù)治理運營平臺,可滿足數(shù)據(jù)共享交換、數(shù)據(jù)開發(fā)、數(shù)據(jù)運營多種應(yīng)用場景,并通過構(gòu)建數(shù)據(jù)工廠,實現(xiàn)數(shù)據(jù)治理的標準化、流程化與組件化。
數(shù)據(jù)標準規(guī)范了業(yè)務(wù)術(shù)語,元數(shù)據(jù),參考數(shù)據(jù),基礎(chǔ)數(shù)據(jù),指標數(shù)據(jù)的規(guī)范定義、獲取原則、管理要求等。 包括設(shè)計基礎(chǔ)類和分析類數(shù)據(jù)標準,制定數(shù)據(jù)標準管理制度和流程,明確數(shù)據(jù)標準管理組織和職責,以明確的組織、職責、流程設(shè)計為前提,調(diào)動業(yè)務(wù)部門、技術(shù)部門和系統(tǒng)技術(shù)團隊共同參與數(shù)據(jù)標準設(shè)計,建立全局數(shù)據(jù)標準流程,制定總體落地計劃,推動數(shù)據(jù)標準落地執(zhí)行,增強內(nèi)部對數(shù)據(jù)標準的理解,指導信息化建設(shè)中對數(shù)據(jù)標準的參照。
數(shù)據(jù)標準管理體系主要包含數(shù)據(jù)標準管理、落地實施機制、及數(shù)據(jù)標準管理平臺維護三部分。
平臺通過對數(shù)據(jù)標準管理、落地實施機制、及數(shù)據(jù)標準管理平臺維護三部分進行數(shù)據(jù)資源管理,制定數(shù)據(jù)標準管理制度和流程,明確數(shù)據(jù)標準管理組織和職責,以明確的組織、職責、流程設(shè)計。落地實施機制從規(guī)范推廣、技術(shù)平臺支撐兩方面保障;數(shù)據(jù)標準平臺維護主要包括建設(shè)數(shù)據(jù)標準技術(shù)平臺,支撐數(shù)據(jù)標準日常管理工作兩方面。
設(shè)計基礎(chǔ)類和分析類數(shù)據(jù)標準,制定數(shù)據(jù)標準管理制度和流程,明確數(shù)據(jù)標準管理組織和職責,以明確的組織、職責、流程設(shè)計為前提,調(diào)動業(yè)務(wù)部門、技術(shù)部門和系統(tǒng)技術(shù)團隊共同參與數(shù)據(jù)標準設(shè)計,建立企業(yè)級數(shù)據(jù)標準流程,制定總體落地計劃,推動數(shù)據(jù)標準落地執(zhí)行,增強對數(shù)據(jù)標準的理解,指導信息化建設(shè)中對數(shù)據(jù)標準的參照。
數(shù)據(jù)標準是對數(shù)據(jù)的名稱、含義、結(jié)構(gòu)、取值等信息的統(tǒng)一定義,達成對數(shù)據(jù)的業(yè)務(wù)理解、技術(shù)實現(xiàn)的一致性。
基于數(shù)據(jù)模型理論將數(shù)據(jù)標準延伸至5個分類,涵蓋技術(shù)、業(yè)務(wù)多個視角。
業(yè)務(wù)術(shù)語:從一致性、通用性等方面統(tǒng)一業(yè)務(wù)術(shù)語定義。
數(shù)據(jù)項標準:用來描述實體的某種屬性,包含數(shù)據(jù)項的名稱、編號、別名、簡述、數(shù)據(jù)項的長度、類型、數(shù)據(jù)項的取值范圍。
參考數(shù)據(jù)標準:識別參考數(shù)據(jù),并建立參考數(shù)據(jù)的統(tǒng)一標準樣例,使參考數(shù)據(jù)可在不同系統(tǒng)中被使用而保持統(tǒng)一標準值。
主數(shù)據(jù)標準:主數(shù)據(jù)編碼是應(yīng)用系統(tǒng)中的重要數(shù)據(jù)類型之一,通常用來描述業(yè)務(wù)操作的具體對象及其特征,注重唯一性,特征一致性,穩(wěn)定性及有效性。
唯一性:在一個系統(tǒng),一個平臺甚至整個范圍內(nèi)同一主數(shù)據(jù)編碼要求具有唯一的識別標志(代碼,名稱,特征描述等),用以明確區(qū)分業(yè)務(wù)對象,業(yè)務(wù)范圍和業(yè)務(wù)的具體細節(jié)
特征一致性:主數(shù)據(jù)在不同系統(tǒng)中,均按統(tǒng)一標準出現(xiàn)
穩(wěn)定性:主數(shù)據(jù)相對穩(wěn)定,本身屬性不會隨交易過程而被修改
有效性:貫穿該業(yè)務(wù)對象的全生命周期過程,只要該業(yè)務(wù)對象存在,則此數(shù)據(jù)不會喪失有效性
指標數(shù)據(jù)標準:需要收集指標的管理信息、業(yè)務(wù)定義、以及維度定義,需要兼顧通用性和個性化,個性化方面支持各使用部門個性化定制
以分析型應(yīng)用建設(shè)和操作型應(yīng)用集成為導向,兩套方法結(jié)合,建立數(shù)據(jù)標準設(shè)計體系
分析型應(yīng)用建設(shè)導向:以分析應(yīng)用指標范圍為依據(jù),重點結(jié)合業(yè)務(wù)戰(zhàn)略及管理要求,自上而下追溯數(shù)據(jù)源,聚焦數(shù)據(jù)標準范圍。
操作型應(yīng)用集成導向:自上而下的原則,基于實際業(yè)務(wù)流程及操作,重點識別跨業(yè)務(wù)、跨流程的集成點及關(guān)鍵步驟,分析提煉共享數(shù)據(jù),完成業(yè)務(wù)流程和應(yīng)用共享的數(shù)據(jù)映射,刪除冗余、非重點數(shù)據(jù),精簡數(shù)據(jù)標準建設(shè)范圍。
在現(xiàn)有平臺基礎(chǔ)上,按照項目建設(shè)目標,完善整個XX市大數(shù)據(jù)平臺能力與功能建設(shè),讓平臺可以支撐整個XX市大數(shù)據(jù)管理與應(yīng)用。具體建設(shè)內(nèi)容包括:
建設(shè)大數(shù)據(jù)治理子平臺,提供數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理能力,實現(xiàn)對數(shù)據(jù)的規(guī)范治理與管理;提供數(shù)據(jù)工廠能力,實現(xiàn)對歸集的數(shù)據(jù)進行清洗、加工,支撐業(yè)務(wù)的數(shù)據(jù)應(yīng)用需求。
建設(shè)市級公共人工智能平臺,提供包含機器視覺、語音識別、自然語言處理等基礎(chǔ)模型為主的通用AI引擎以及滿足城市交通、路政治理、城市安全、市場監(jiān)管、智慧旅游、智慧農(nóng)業(yè)等智能場景應(yīng)用所需的算法庫,結(jié)合機器學習算法、深度學習算法、多維分析,在海量數(shù)據(jù)中計算、分析和建模來挖掘出數(shù)據(jù)價值,輸出統(tǒng)一的公共算法服務(wù)能力,統(tǒng)籌匹配各部門聚焦的業(yè)務(wù)需求,更高效的從數(shù)據(jù)中獲取應(yīng)用價值。
建設(shè)數(shù)據(jù)地理信息服務(wù)平臺,依托市級空間地理底圖和各類圖層信息臺,建立統(tǒng)一的地名地址標準和數(shù)據(jù)庫,疊加“一標多實”各類要素數(shù)據(jù),實現(xiàn)各類地理數(shù)據(jù)資源的有序關(guān)聯(lián),完善地圖更新和轉(zhuǎn)換聯(lián)動機制,支撐全市各部門對地圖的統(tǒng)一服務(wù)需求。
建設(shè)數(shù)據(jù)可視平臺,提供基于拖拽的強大格式定義、可視化報表與圖形化定義能力,支持用戶非常方便控制報表中內(nèi)容的精確布局,也可以很方便地制作各種不同維度的報表內(nèi)容,并將包括表格、地圖分布、文本內(nèi)容等有用、關(guān)鍵的信息集成在各種看板設(shè)備上(PC、Pad、手機、大屏等)。
在數(shù)據(jù)安全保障的大環(huán)境下,建設(shè)數(shù)據(jù)安全管理平臺支撐提升全市數(shù)據(jù)資源在數(shù)據(jù)加密、脫敏、分級分類、防泄漏、安全審計分析和權(quán)限管理等數(shù)據(jù)安全防護能力。
在大數(shù)據(jù)能力平臺的建設(shè)實施階段,要同步實施密碼應(yīng)用的實施,配合大數(shù)據(jù)能力平臺的應(yīng)用完成其密鑰應(yīng)用實施,最終達到實際的密鑰安全應(yīng)用需求,為大數(shù)據(jù)能力平臺提供底層安全保障,并達到符合密鑰應(yīng)用安全性測評要求。
建設(shè)統(tǒng)一運維管理平臺,提供統(tǒng)一監(jiān)控運維功能,保證整個XX市大數(shù)據(jù)能力平臺的穩(wěn)定與高效運行,并提升數(shù)據(jù)資源全生命周期的保障執(zhí)行力和運維效率。
建設(shè)可視化指揮大屏,基于全市公共數(shù)據(jù)歸集基礎(chǔ),以XX市高質(zhì)量發(fā)展實際需求為驅(qū)動,通過多源數(shù)據(jù)融合和多維全景分析,通過全局態(tài)勢可視,監(jiān)測預警洞察能力,輔助提升城市發(fā)展科學決策水平。
XX市大數(shù)據(jù)能力平臺的總體架構(gòu)由支撐體系(標準規(guī)范支撐體系、管理運行維護支撐體系、安全支撐體系)、網(wǎng)絡(luò)系統(tǒng)、信息資源平臺軟硬件系統(tǒng)環(huán)境、平臺應(yīng)用系統(tǒng)(數(shù)據(jù)支撐底座、數(shù)據(jù)交換平臺、數(shù)據(jù)整理治理平臺、數(shù)據(jù)目錄管理系統(tǒng)、AI能力平臺、GIS基礎(chǔ)能力平臺、可視化能力平臺、數(shù)據(jù)資源共享門戶、數(shù)據(jù)安全管理平臺、統(tǒng)一運維管理平臺、可視化運營指揮大屏),以及數(shù)據(jù)資源中心(數(shù)據(jù)湖、基礎(chǔ)庫、主題庫、部門數(shù)據(jù)庫、鄉(xiāng)鎮(zhèn)數(shù)據(jù)庫、鄉(xiāng)村振興數(shù)據(jù)庫)組成。具體,整個XX市大數(shù)據(jù)能力平臺的功能架構(gòu)如下:
聯(lián)系客服