中文字幕理论片,69视频免费在线观看,亚洲成人app,国产1级毛片,刘涛最大尺度戏视频,欧美亚洲美女视频,2021韩国美女仙女屋vip视频

打開APP
userphoto
未登錄

開通VIP,暢享免費(fèi)電子書等14項(xiàng)超值服

開通VIP
【SDCC講師專訪】王義林:雙十一海量數(shù)據(jù)下京東的分布式數(shù)據(jù)庫(kù)實(shí)踐

2016年11月18日-20日,由CSDN重磅打造的年終技術(shù)盛會(huì),SDCC 2016中國(guó)軟件開發(fā)者大會(huì)將在北京舉行,大會(huì)面向國(guó)內(nèi)外中高端技術(shù)人員,聚焦最前沿技術(shù)及一線的實(shí)踐經(jīng)驗(yàn),從而助力企業(yè)的技術(shù)升級(jí)和改造、全面提升技術(shù)人員的綜合實(shí)力。十二大專題鼎立,大咖薈萃,一觸即發(fā)。

大會(huì)將至之際,我們有幸采訪到高吞吐數(shù)據(jù)庫(kù)架構(gòu)專題的王義林老師,他將在本次大會(huì)上帶來(lái)主題為《分布式數(shù)據(jù)庫(kù)CDS-原理與實(shí)踐》的演講。采訪中,他圍繞一些大家關(guān)心的問題分享了自己的觀點(diǎn)。

京東金融杭州研發(fā)中心數(shù)據(jù)庫(kù)中間件研發(fā)高級(jí)技術(shù)經(jīng)理 王義林

王義林,任職于京東金融,負(fù)責(zé)數(shù)據(jù)庫(kù)中間件研發(fā)工作,在職期間帶領(lǐng)CDS研發(fā)團(tuán)隊(duì)推出了多項(xiàng)數(shù)據(jù)庫(kù)相關(guān)產(chǎn)品,包括:CDS分庫(kù)分表中間件、作業(yè)平臺(tái)、離線數(shù)據(jù)中心、數(shù)據(jù)管道平臺(tái)、分布式事務(wù)服務(wù)。

以下為采訪正文

CSDN:請(qǐng)先和大家介紹下您和目前所從事的工作,以及關(guān)注哪些技術(shù)領(lǐng)域?

王義林:京東金融數(shù)據(jù)庫(kù)中間件研發(fā)團(tuán)隊(duì)主要從事CDS(Completed Database Sharding)分布式數(shù)據(jù)庫(kù)的研發(fā) 。CDS具有高性能、高可靠的讀寫特性,在京東金融各業(yè)務(wù)線被廣泛使用,接受了雙11和6.18的峰值考驗(yàn)。實(shí)現(xiàn)的作業(yè)平臺(tái)、數(shù)據(jù)中心,解決了數(shù)據(jù)拆分后的運(yùn)維、擴(kuò)容問題,支持多維度查詢。 數(shù)據(jù)管道服務(wù)已經(jīng)發(fā)布了1.x和2.x版本,滿足了基本的數(shù)據(jù)準(zhǔn)實(shí)時(shí)復(fù)制需求,我們當(dāng)下正全力研發(fā)數(shù)據(jù)管道平臺(tái)3.0,它將滿足數(shù)據(jù)庫(kù)同城、異地復(fù)制、BI數(shù)據(jù)實(shí)時(shí)數(shù)據(jù)采集、數(shù)據(jù)監(jiān)控實(shí)時(shí)采集等需求場(chǎng)景,是多機(jī)房多活的關(guān)鍵部件。

CSDN:對(duì)您而言,加入京東金融團(tuán)隊(duì)是否有什么特殊的意義,這對(duì)您的技術(shù)人之路又有什么樣的影響?

王義林:我加入京東前,在一家行業(yè)軟件公司框架研發(fā)部門,已經(jīng)經(jīng)歷了多年平臺(tái)、基礎(chǔ)框架的研發(fā)磨練,具備了一定的戰(zhàn)略性和前瞻性思維能力,同時(shí)對(duì)架構(gòu)設(shè)計(jì)的理論有了比較透徹的理解。但是京東金融是互聯(lián)網(wǎng)金融行業(yè),公司多條業(yè)務(wù)線, 發(fā)展階段也各不一樣,但對(duì)數(shù)據(jù)存取的高可靠、高性能需求是一樣的。項(xiàng)目從無(wú)到有,必須高質(zhì)量持續(xù)交付,它是挑戰(zhàn)更是機(jī)遇。我們扛過(guò)了第一個(gè)項(xiàng)目的平穩(wěn)上線壓力,第一次在不中斷業(yè)務(wù)的情況下平滑上線了項(xiàng)目,扛過(guò)了6.18,雙11的峰值壓力。我們團(tuán)隊(duì)也隨之發(fā)展壯大,同時(shí)也肩負(fù)起更大的責(zé)任。

數(shù)據(jù)是業(yè)務(wù)的生命線,始終銘記于心。也告誡團(tuán)隊(duì)同仁:寫的每一行代碼都需要經(jīng)過(guò)深思熟慮,測(cè)試用例代碼量更是達(dá)到基本代碼量的4倍之多。數(shù)據(jù)存取沒有小事。

CSDN:作為京東金融自主研發(fā)的分布式數(shù)據(jù)庫(kù)件,CDS的產(chǎn)生背景是怎么樣的,團(tuán)隊(duì)研發(fā)這樣一個(gè)分布式數(shù)據(jù)庫(kù)的動(dòng)因是什么?

王義林:2014年,京東金融業(yè)務(wù)量的急劇增長(zhǎng)和線上產(chǎn)品的不斷豐富,就需要研發(fā)出符合互聯(lián)網(wǎng)金融特點(diǎn)的基礎(chǔ)中間件、基礎(chǔ)平臺(tái), 京東金融杭州研發(fā)中心為此而成立。為了滿足互聯(lián)網(wǎng)金融高可靠、高性能的數(shù)據(jù)存取需求,CDS孕育而生。

CSDN:目前京東金融主要在使用的數(shù)據(jù)庫(kù)有哪些,它們?cè)谡麄€(gè)系統(tǒng)中各自扮演著怎樣的角色?

王義林:在行業(yè)去IOE大環(huán)境下,公司業(yè)務(wù)模塊基本都是通過(guò)CDS分布式數(shù)據(jù)庫(kù)來(lái)存取數(shù)據(jù)的,數(shù)據(jù)庫(kù)服務(wù)實(shí)例主要是MySQL,也有幾個(gè)業(yè)務(wù)是Oracle數(shù)據(jù)庫(kù)。

CDS數(shù)據(jù)中心滿足了數(shù)據(jù)拆分后的多維度查詢需求,數(shù)據(jù)中心是基于對(duì)ES+HBase的代理封裝,所以HBase我們也在用。

CSDN:隨著交易量的逐步擴(kuò)大,對(duì)數(shù)據(jù)庫(kù)訪問及存儲(chǔ)的要求也越來(lái)越高,在這個(gè)過(guò)程中CDS研發(fā)團(tuán)隊(duì)是否遭遇過(guò)發(fā)展的瓶頸階段,相應(yīng)的實(shí)踐策略是什么?

王義林:CDS研發(fā)之初,就考慮到要滿足業(yè)務(wù)服務(wù)海量數(shù)據(jù)存取的需求,支持分庫(kù)分表、讀寫分離,具有水平擴(kuò)展能力,因此暫時(shí)沒有遇到發(fā)展瓶頸。

為了平滑實(shí)施CDS集群擴(kuò)容,不中斷業(yè)務(wù)服務(wù),我們相應(yīng)的研發(fā)了數(shù)據(jù)遷移工具、數(shù)據(jù)管道服務(wù)。 擴(kuò)容控制臺(tái)集成了存量數(shù)據(jù)遷移、增量數(shù)據(jù)同步,以及路由規(guī)則在線推送等擴(kuò)容實(shí)施步驟,也可以自動(dòng)化調(diào)度。

CSDN:在高并發(fā)場(chǎng)景下,CDS在功能特性方面有什么樣的優(yōu)勢(shì)?

王義林:經(jīng)過(guò)了幾次雙11峰值壓力的考驗(yàn),CDS的穩(wěn)定性、可靠性得到充分展現(xiàn)。CDS分布式數(shù)據(jù)庫(kù),主要優(yōu)勢(shì)是產(chǎn)品線功能全面,初步形成分布式數(shù)據(jù)庫(kù)生態(tài)圈。除了滿足線上業(yè)務(wù)高吞吐訪問需求;也有MyDB統(tǒng)一查詢工具滿足了業(yè)務(wù)開發(fā)人員查詢驗(yàn)證數(shù)據(jù)的需求;通過(guò)CDS數(shù)據(jù)中心,滿足了后臺(tái)運(yùn)營(yíng)系統(tǒng)多維度查詢,統(tǒng)計(jì)需求;為了滿足業(yè)務(wù)服務(wù)高可用性的需求,我們研發(fā)了平滑實(shí)施分庫(kù)分表、分片集群在線擴(kuò)容的實(shí)施方案。異地多活是我們下一步需要攻克的難關(guān)。

CSDN:您目前還會(huì)關(guān)注那些新技術(shù)?和大家分享一些學(xué)習(xí)建議吧。

王義林:數(shù)據(jù)存取的技術(shù)范圍真的特別廣大,不好建議什么,還是要根據(jù)自己公司的業(yè)務(wù)場(chǎng)景、發(fā)展階段去選型技術(shù)架構(gòu)。

就我本人目前正在研發(fā)Oracle、MySQL的數(shù)據(jù)實(shí)時(shí)復(fù)制相關(guān)的技術(shù),主要是為了實(shí)現(xiàn)業(yè)務(wù)服務(wù)異地多活的功能特性。再者,處在互聯(lián)網(wǎng)金融領(lǐng)域,我也在關(guān)注區(qū)塊鏈的技術(shù)發(fā)展。

CSDN:可以介紹一下您在本次SDCC 2016·北京站,將要著重分享的內(nèi)容嗎?

王義林:這次分享主要講解了高性能數(shù)據(jù)存取的設(shè)計(jì)步驟、注意事項(xiàng);同時(shí)會(huì)介紹一下CDS分布式數(shù)據(jù)庫(kù)的原理, 以及會(huì)分享CDS在京東金融的成功實(shí)踐:平滑實(shí)施分庫(kù)分表。我覺得這些還是對(duì)大家有參考價(jià)值的。

本站僅提供存儲(chǔ)服務(wù),所有內(nèi)容均由用戶發(fā)布,如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請(qǐng)點(diǎn)擊舉報(bào)
打開APP,閱讀全文并永久保存 查看更多類似文章
猜你喜歡
類似文章
我的編程之路——訪閱文集團(tuán)首席架構(gòu)師徐海峰
基于區(qū)塊鏈技術(shù)的風(fēng)險(xiǎn)信息共享怎么做?中國(guó)銀聯(lián)和京東金融出大招
金融云市場(chǎng)競(jìng)爭(zhēng)激烈 銀行到底該關(guān)注誰(shuí)的“朋友圈”?
容器集群支持?jǐn)?shù)據(jù)庫(kù)實(shí)踐
架構(gòu)干貨:京東商城架構(gòu)、途牛安卓組件化、中興金融分布式數(shù)據(jù)庫(kù)
今日頭條楊震原:好的架構(gòu)源于產(chǎn)品需求
更多類似文章 >>
生活服務(wù)
熱點(diǎn)新聞
分享 收藏 導(dǎo)長(zhǎng)圖 關(guān)注 下載文章
綁定賬號(hào)成功
后續(xù)可登錄賬號(hào)暢享VIP特權(quán)!
如果VIP功能使用有故障,
可點(diǎn)擊這里聯(lián)系客服!

聯(lián)系客服