近日，由B.P商業(yè)伙伴主辦的2019中國(guó)數(shù)字生態(tài)大會(huì)在北京國(guó)際會(huì)議中心盛大召開。東方金信數(shù)據(jù)研究院院長(zhǎng)付威在生態(tài)戰(zhàn)略分論壇上發(fā)表了題為“構(gòu)建企業(yè)數(shù)據(jù)中臺(tái)”的演講。
東方金信數(shù)據(jù)研究院院長(zhǎng) 付威
“數(shù)據(jù)中臺(tái)”釋義
“數(shù)據(jù)中臺(tái)”這一詞是由互聯(lián)網(wǎng)企業(yè)提出的，目的是快速滿足業(yè)務(wù)場(chǎng)景的需求，就像戰(zhàn)爭(zhēng)模式的變化，二戰(zhàn)時(shí)期打仗采取的是成千上萬(wàn)人作戰(zhàn)的模式，而現(xiàn)在采取的是幾十個(gè)人作戰(zhàn)的模式，但是作戰(zhàn)效能不變。在互聯(lián)網(wǎng)場(chǎng)景下，數(shù)據(jù)一定要快速、靈活地支持業(yè)務(wù)，效能也要不變，這就是整個(gè)數(shù)據(jù)中臺(tái)誕生的業(yè)務(wù)背景。這不單單只是業(yè)務(wù)，還需要技術(shù)做支撐，這意味著：所有誕生的新概念的背后都是技術(shù)概念，而不是純粹的業(yè)務(wù)概念。
至今，業(yè)界對(duì)“數(shù)據(jù)中臺(tái)”還沒(méi)有一個(gè)清晰明確的定義，不同領(lǐng)域人對(duì)“數(shù)據(jù)中臺(tái)”也有著不一樣的理解，不過(guò)，“數(shù)據(jù)中臺(tái)”涵蓋的范圍都是大同小異的。東方金信對(duì)“數(shù)據(jù)中臺(tái)”的理解是，“數(shù)據(jù)中臺(tái)”建立在標(biāo)準(zhǔn)大數(shù)據(jù)環(huán)境之下，為業(yè)務(wù)應(yīng)用提供數(shù)據(jù)解決方案的一系列服務(wù)和組建集合，同時(shí)，也要有與之相配合的組織架構(gòu)和流程。
“數(shù)據(jù)中臺(tái)”的組成成分
關(guān)于數(shù)據(jù)中臺(tái)的架構(gòu)，東方金信對(duì)大數(shù)據(jù)產(chǎn)品的體系架構(gòu)，是建立在安全容器基礎(chǔ)構(gòu)架之上，其次是數(shù)據(jù)存儲(chǔ)和擴(kuò)展式的數(shù)據(jù)存儲(chǔ)產(chǎn)品，往上是數(shù)據(jù)資產(chǎn)開發(fā)管理（包括，數(shù)據(jù)人工智能以及數(shù)據(jù)中臺(tái)應(yīng)用服務(wù)等）?，F(xiàn)在很多技術(shù)服務(wù)是層次化的，僅憑單一企業(yè)是無(wú)法涵蓋全部的數(shù)據(jù)中臺(tái)的產(chǎn)品的，所以，整個(gè)市場(chǎng)必須是生態(tài)的，合作需要貫穿整個(gè)項(xiàng)目。
對(duì)于最底層大數(shù)據(jù)平臺(tái)基礎(chǔ)而言，除了傳統(tǒng)的Hadoop，MPP的場(chǎng)景也越來(lái)越成熟和廣泛，同時(shí)，未來(lái)十年的發(fā)展方向是急劇上升的圖數(shù)據(jù)庫(kù)。東方金信為很多企業(yè)做風(fēng)控，也為公安部門做案例分析，而圖數(shù)據(jù)庫(kù)是其中非常重要的產(chǎn)品。同時(shí)，數(shù)據(jù)庫(kù)平臺(tái)一定要適應(yīng)企業(yè)，一定要來(lái)源于社區(qū)生態(tài)。
在數(shù)據(jù)開發(fā)階段，效率和易用性是關(guān)鍵。因?yàn)槟壳皷|方金信所面對(duì)的很多客戶（包括政府客戶）都是在大數(shù)據(jù)領(lǐng)域比較初級(jí)的用戶，他們往往傾向于可視化，可拖拽式的產(chǎn)品，但也不希望降低效率，而東方金信的這類產(chǎn)品完全可以滿足客戶需求。
數(shù)據(jù)資產(chǎn)管理在數(shù)據(jù)中臺(tái)中是非常重要的一部分，假如沒(méi)有數(shù)據(jù)資產(chǎn)管理，大數(shù)據(jù)的很難體現(xiàn)價(jià)值，一切有關(guān)數(shù)據(jù)的資產(chǎn)都是通過(guò)數(shù)據(jù)資產(chǎn)擴(kuò)展出來(lái)的?，F(xiàn)在的數(shù)據(jù)資產(chǎn)規(guī)劃了數(shù)據(jù)模型管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理、數(shù)據(jù)生命周期管理、主數(shù)據(jù)管理和數(shù)據(jù)產(chǎn)品工廠等，也就是快速將數(shù)據(jù)封裝起來(lái)，從而快速構(gòu)建產(chǎn)品，最后運(yùn)用到互聯(lián)網(wǎng)思路中。而產(chǎn)品目錄、銷售單元、銷售合約，以及如何扣減數(shù)據(jù)調(diào)用次數(shù)，這些都是數(shù)據(jù)資產(chǎn)管理的相關(guān)內(nèi)容，同時(shí)也是客戶所關(guān)心的內(nèi)容。所以，數(shù)據(jù)資產(chǎn)一定要對(duì)數(shù)據(jù)進(jìn)行價(jià)值定義，這在數(shù)據(jù)資產(chǎn)管理中是相當(dāng)重要的。
數(shù)據(jù)服務(wù)就是將數(shù)據(jù)存儲(chǔ)起來(lái)，然后進(jìn)行快速開發(fā)，最后對(duì)數(shù)據(jù)進(jìn)行管理，這也是整個(gè)數(shù)據(jù)中臺(tái)的核心，要快速對(duì)外提供數(shù)據(jù)服務(wù)，東方金信提供了有兩個(gè)重要的產(chǎn)品：數(shù)據(jù)服務(wù)和應(yīng)用構(gòu)建器。而在大數(shù)據(jù)環(huán)境下海量的數(shù)據(jù)通過(guò)服務(wù)接口對(duì)外提供服務(wù)，可以根據(jù)企業(yè)數(shù)據(jù)模型，構(gòu)建SchemaQL語(yǔ)言，比如構(gòu)建APP應(yīng)用，就能夠以天或者小時(shí)為單位，向業(yè)務(wù)提供輸出。
在該場(chǎng)景中，除了要提供數(shù)據(jù)API、前端服務(wù)組件和標(biāo)簽管理這些中臺(tái)服務(wù)外，還要構(gòu)建數(shù)據(jù)中臺(tái)，通過(guò)這種構(gòu)建方式，可以檢測(cè)組件的運(yùn)行狀況，除了公司內(nèi)部使用外，還服務(wù)于高階用戶，這就是數(shù)據(jù)中臺(tái)的相關(guān)應(yīng)用（包括，對(duì)話機(jī)器人和知識(shí)圖譜等），當(dāng)然，目前仍在不斷拓展數(shù)據(jù)中臺(tái)的應(yīng)用。
“數(shù)據(jù)中臺(tái)”應(yīng)對(duì)改變及其應(yīng)用場(chǎng)景
數(shù)據(jù)中臺(tái)一定要配合流程和組織架構(gòu)變化。第一點(diǎn)是組織架構(gòu)的改變，在傳統(tǒng)模式下，做大數(shù)據(jù)需要一兩百人，其中包括模型開發(fā)、數(shù)據(jù)開發(fā)、運(yùn)維開發(fā)，應(yīng)用開發(fā)等角色，團(tuán)隊(duì)之間協(xié)調(diào)人力和數(shù)據(jù)資源之間，需要不斷協(xié)商。所以，東方金信推薦客戶成立一個(gè)數(shù)據(jù)中臺(tái)小團(tuán)隊(duì)，來(lái)配合下游的應(yīng)用開發(fā)，并且，通過(guò)下游需求來(lái)豐富自己的組件和服務(wù)，這就是組織結(jié)構(gòu)的改變。
除了組織結(jié)構(gòu)的變化之外，流程也在發(fā)生著變化。傳統(tǒng)的大數(shù)據(jù)DevOps流程從應(yīng)用開發(fā)、立項(xiàng)、需求管理、ETL信息調(diào)研、發(fā)布和部署、系統(tǒng)測(cè)試，最后到部署投產(chǎn)，即使只是修改腳本上的一個(gè)注釋，最快也需要一到三個(gè)月的時(shí)間，這是非常痛苦的。然而，基于數(shù)據(jù)中臺(tái)的開發(fā)，快速應(yīng)用構(gòu)建器和應(yīng)用服務(wù)，直接完成建構(gòu)，灰度驗(yàn)證，可在線直接發(fā)布，這種模式讓中臺(tái)開發(fā)的速度提高了，由以前天級(jí)、月級(jí)到現(xiàn)在小時(shí)級(jí)的發(fā)布。
東方金信的數(shù)據(jù)中臺(tái)的應(yīng)用場(chǎng)景（即業(yè)務(wù)場(chǎng)景），以下有兩個(gè)案例：
第一個(gè)案例：某政府的12345市民熱線，在市民打進(jìn)熱線后，數(shù)據(jù)中臺(tái)可快速識(shí)別熱線信息，根據(jù)政府知識(shí)圖譜，快速將市民反饋的問(wèn)題分配到具體的委辦局甚至負(fù)責(zé)人，這樣一來(lái)，提高了整個(gè)市民滿意度，也為社會(huì)管理提供了很好的經(jīng)驗(yàn)。
第二個(gè)案例：某燃?xì)夤镜牟少?gòu)和銷售符合預(yù)測(cè)應(yīng)用。燃?xì)夤九c電網(wǎng)一樣，是采銷分離的，數(shù)據(jù)中臺(tái)可以根據(jù)銷售情況，包括城市模型和用氣模型，對(duì)整個(gè)燃?xì)怃N售進(jìn)行預(yù)測(cè)（目前，中級(jí)預(yù)測(cè)可達(dá)95%以上，甚至更高的預(yù)測(cè)準(zhǔn)確度），而基于數(shù)據(jù)中臺(tái)機(jī)器學(xué)習(xí)套件，做深度整合，包括數(shù)據(jù)服務(wù)、外部數(shù)據(jù)管理、標(biāo)簽管理和數(shù)據(jù)流程等模塊做的識(shí)別服務(wù)。
最后，簡(jiǎn)要介紹一下“東方金信”。“東方金信”成立于2013年，最初專注于大數(shù)據(jù)系列產(chǎn)品研發(fā)，是Hadoop國(guó)際主流發(fā)行商，同時(shí)也是中國(guó)大數(shù)據(jù)的主要方案商和提供商。除此之外，今年還獲得了騰訊的投資，目前，東方金信的數(shù)據(jù)中臺(tái)產(chǎn)品在數(shù)十家客戶中得到了廣泛應(yīng)用。
如果您想與東方金信溝通合作，請(qǐng)聯(lián)系【B.P商業(yè)伙伴】合作小助理，手機(jī)&微信17300102232，咨詢電話400-900-5636，我們會(huì)為您快速對(duì)接，為生態(tài)建設(shè)服務(wù)。
聯(lián)系客服
