未來(lái)可期!華為云數(shù)倉(cāng)將繼續(xù)助力招行的數(shù)字化轉(zhuǎn)型之路

來(lái)源:中國(guó)網(wǎng)科學(xué)

招商銀行定位為“金融科技銀行”,作為銀行業(yè)數(shù)字化轉(zhuǎn)型的代表和先行者,在持續(xù)金融創(chuàng)新之路上堅(jiān)定不移的探索前行。招行數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)師曾民在華為云TechWave全球技術(shù)峰會(huì)上分享了招商銀行云化數(shù)倉(cāng)探索之路。

早在1998年,招行就開(kāi)始引入數(shù)據(jù)倉(cāng)庫(kù)的理念,使用SYBASE搭建數(shù)據(jù)處理臺(tái),成為國(guó)內(nèi)最早一批開(kāi)展企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)的銀行。2002年基于DB2構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)臺(tái),再到2013年重構(gòu)TD倉(cāng)庫(kù)。招行基本上建成涵蓋客戶(hù)服務(wù)、產(chǎn)品銷(xiāo)售、風(fēng)險(xiǎn)管理、績(jī)效管理、監(jiān)管審計(jì)等領(lǐng)域的完整的數(shù)據(jù)應(yīng)用臺(tái)。

2020年招行正式啟動(dòng)數(shù)據(jù)使能臺(tái)建設(shè),并提出了“人人用數(shù),人人都是數(shù)據(jù)分析師”的數(shù)據(jù)發(fā)展戰(zhàn)略,一體機(jī)數(shù)據(jù)倉(cāng)庫(kù)使用模式遇到了瓶頸:數(shù)據(jù)倉(cāng)庫(kù)臺(tái)存儲(chǔ)和算力無(wú)法匹配應(yīng)用數(shù)據(jù)量高速增長(zhǎng)。隨著云計(jì)算技術(shù)的蓬勃發(fā)展,云化數(shù)據(jù)倉(cāng)庫(kù)可通過(guò)計(jì)算存儲(chǔ)和網(wǎng)絡(luò)的資源池化管理,按需彈部署;云分布式架構(gòu)以其靈活和高可用優(yōu)勢(shì),成為招商銀行數(shù)據(jù)使能臺(tái)首選架構(gòu)。

面向未來(lái),新一代數(shù)據(jù)倉(cāng)庫(kù)臺(tái)是怎么樣的?在不斷思考中,招商銀行開(kāi)啟了新一代云數(shù)據(jù)倉(cāng)庫(kù)的選型。

打破重建無(wú)疑是極其痛苦的。新一代云數(shù)據(jù)倉(cāng)庫(kù)的考察包括數(shù)據(jù)臺(tái)的數(shù)據(jù)處理能力、能、高可用、擴(kuò)展、易用、通用、自主可控等維度?;鶞?zhǔn)測(cè)試基于TPC-DS 1000X標(biāo)準(zhǔn)測(cè)試套件,包括4大項(xiàng)、11個(gè)子任務(wù);場(chǎng)景測(cè)試基于“分行手機(jī)銀行行為分析”業(yè)務(wù),包括6960個(gè)數(shù)據(jù)庫(kù)對(duì)象,2470個(gè)批處理腳本,數(shù)據(jù)量超過(guò)30TB。隨后,數(shù)據(jù)研發(fā)部啟動(dòng)了更嚴(yán)苛運(yùn)維測(cè)試,畢竟數(shù)據(jù)臺(tái)除了能指標(biāo)以外,更重要的是要能穩(wěn)定運(yùn)行。結(jié)合招行實(shí)際運(yùn)維需要,數(shù)據(jù)中心從安全功能、能容量、管理功能、部署能力、維護(hù)能力、拓展能力這六個(gè)維度設(shè)計(jì)了若干測(cè)試用例,涉及7大項(xiàng),98個(gè)子任務(wù)。測(cè)試評(píng)估結(jié)果,華為云數(shù)倉(cāng)GaussDB(DWS)完全滿(mǎn)足招行標(biāo)準(zhǔn)。

華為云數(shù)倉(cāng)GaussDB(DWS)“大”、“快”、“穩(wěn)”的技術(shù)特征符合招商銀行對(duì)核心數(shù)倉(cāng)的能力要求。尤其是“大”:基于MPP的全對(duì)稱(chēng)分布式架構(gòu),橫向可擴(kuò)展至2048節(jié)點(diǎn)大集群,支持EB級(jí)數(shù)據(jù)量,突破傳統(tǒng)數(shù)倉(cāng)擴(kuò)展的天花板!

招商銀行2020年4月正式啟動(dòng)原數(shù)據(jù)倉(cāng)庫(kù)臺(tái)向華為云GaussDB(DWS)遷移項(xiàng)目。招行信息技術(shù)部、數(shù)據(jù)中心、架構(gòu)辦等多方部門(mén)通力合作,華為數(shù)據(jù)倉(cāng)庫(kù)研發(fā)專(zhuān)家、云技術(shù)專(zhuān)家以及資深服務(wù)技術(shù)團(tuán)隊(duì)全程鼎力支持,聯(lián)合成立數(shù)倉(cāng)遷移實(shí)施團(tuán)隊(duì),為招行核心數(shù)倉(cāng)臺(tái)遷移保駕護(hù)航。2020年7月完成基礎(chǔ)設(shè)施部署并開(kāi)始應(yīng)用遷移;2021年1月完成首批11個(gè)零售應(yīng)用切換,并全部完成投產(chǎn),所有應(yīng)用均穩(wěn)運(yùn)行,原數(shù)倉(cāng)臺(tái)相關(guān)應(yīng)用已關(guān)停。

基于華為云GaussDB(DWS)構(gòu)筑全新一代云上數(shù)倉(cāng),招商銀行實(shí)現(xiàn)對(duì)零售客戶(hù)體驗(yàn)的實(shí)時(shí)監(jiān)測(cè)和數(shù)字化呈現(xiàn),更大的算力支撐使得跑批作業(yè)速度較之前得到大幅提升,數(shù)據(jù)分析師們得以更快更深更廣地挖掘客戶(hù)體驗(yàn)數(shù)據(jù)價(jià)值,全面升級(jí)零售客戶(hù)業(yè)務(wù)體驗(yàn)。

招行云化數(shù)倉(cāng)的探索還在繼續(xù),2021年6月預(yù)計(jì)完成一半應(yīng)用遷移,2022年6月預(yù)計(jì)完成全部應(yīng)用遷移和投產(chǎn)。華為云數(shù)倉(cāng)GaussDB(DWS)也將會(huì)繼續(xù)助力招商銀行的數(shù)字化轉(zhuǎn)型之路,未來(lái)可期。

招商銀行定位為“金融科技銀行”,作為銀行業(yè)數(shù)字化轉(zhuǎn)型的代表和先行者,在持續(xù)金融創(chuàng)新之路上堅(jiān)定不移的探索前行。招行數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)師曾民在華為云TechWave全球技術(shù)峰會(huì)上分享了招商銀行云化數(shù)倉(cāng)探索之路。

早在1998年,招行就開(kāi)始引入數(shù)據(jù)倉(cāng)庫(kù)的理念,使用SYBASE搭建數(shù)據(jù)處理臺(tái),成為國(guó)內(nèi)最早一批開(kāi)展企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)的銀行。2002年基于DB2構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)臺(tái),再到2013年重構(gòu)TD倉(cāng)庫(kù)。招行基本上建成涵蓋客戶(hù)服務(wù)、產(chǎn)品銷(xiāo)售、風(fēng)險(xiǎn)管理、績(jī)效管理、監(jiān)管審計(jì)等領(lǐng)域的完整的數(shù)據(jù)應(yīng)用臺(tái)。

2020年招行正式啟動(dòng)數(shù)據(jù)使能臺(tái)建設(shè),并提出了“人人用數(shù),人人都是數(shù)據(jù)分析師”的數(shù)據(jù)發(fā)展戰(zhàn)略,一體機(jī)數(shù)據(jù)倉(cāng)庫(kù)使用模式遇到了瓶頸:數(shù)據(jù)倉(cāng)庫(kù)臺(tái)存儲(chǔ)和算力無(wú)法匹配應(yīng)用數(shù)據(jù)量高速增長(zhǎng)。隨著云計(jì)算技術(shù)的蓬勃發(fā)展,云化數(shù)據(jù)倉(cāng)庫(kù)可通過(guò)計(jì)算存儲(chǔ)和網(wǎng)絡(luò)的資源池化管理,按需彈部署;云分布式架構(gòu)以其靈活和高可用優(yōu)勢(shì),成為招商銀行數(shù)據(jù)使能臺(tái)首選架構(gòu)。

面向未來(lái),新一代數(shù)據(jù)倉(cāng)庫(kù)臺(tái)是怎么樣的?在不斷思考中,招商銀行開(kāi)啟了新一代云數(shù)據(jù)倉(cāng)庫(kù)的選型。

打破重建無(wú)疑是極其痛苦的。新一代云數(shù)據(jù)倉(cāng)庫(kù)的考察包括數(shù)據(jù)臺(tái)的數(shù)據(jù)處理能力、能、高可用、擴(kuò)展、易用、通用、自主可控等維度。基準(zhǔn)測(cè)試基于TPC-DS 1000X標(biāo)準(zhǔn)測(cè)試套件,包括4大項(xiàng)、11個(gè)子任務(wù);場(chǎng)景測(cè)試基于“分行手機(jī)銀行行為分析”業(yè)務(wù),包括6960個(gè)數(shù)據(jù)庫(kù)對(duì)象,2470個(gè)批處理腳本,數(shù)據(jù)量超過(guò)30TB。隨后,數(shù)據(jù)研發(fā)部啟動(dòng)了更嚴(yán)苛運(yùn)維測(cè)試,畢竟數(shù)據(jù)臺(tái)除了能指標(biāo)以外,更重要的是要能穩(wěn)定運(yùn)行。結(jié)合招行實(shí)際運(yùn)維需要,數(shù)據(jù)中心從安全功能、能容量、管理功能、部署能力、維護(hù)能力、拓展能力這六個(gè)維度設(shè)計(jì)了若干測(cè)試用例,涉及7大項(xiàng),98個(gè)子任務(wù)。測(cè)試評(píng)估結(jié)果,華為云數(shù)倉(cāng)GaussDB(DWS)完全滿(mǎn)足招行標(biāo)準(zhǔn)。

華為云數(shù)倉(cāng)GaussDB(DWS)“大”、“快”、“穩(wěn)”的技術(shù)特征符合招商銀行對(duì)核心數(shù)倉(cāng)的能力要求。尤其是“大”:基于MPP的全對(duì)稱(chēng)分布式架構(gòu),橫向可擴(kuò)展至2048節(jié)點(diǎn)大集群,支持EB級(jí)數(shù)據(jù)量,突破傳統(tǒng)數(shù)倉(cāng)擴(kuò)展的天花板!

招商銀行2020年4月正式啟動(dòng)原數(shù)據(jù)倉(cāng)庫(kù)臺(tái)向華為云GaussDB(DWS)遷移項(xiàng)目。招行信息技術(shù)部、數(shù)據(jù)中心、架構(gòu)辦等多方部門(mén)通力合作,華為數(shù)據(jù)倉(cāng)庫(kù)研發(fā)專(zhuān)家、云技術(shù)專(zhuān)家以及資深服務(wù)技術(shù)團(tuán)隊(duì)全程鼎力支持,聯(lián)合成立數(shù)倉(cāng)遷移實(shí)施團(tuán)隊(duì),為招行核心數(shù)倉(cāng)臺(tái)遷移保駕護(hù)航。2020年7月完成基礎(chǔ)設(shè)施部署并開(kāi)始應(yīng)用遷移;2021年1月完成首批11個(gè)零售應(yīng)用切換,并全部完成投產(chǎn),所有應(yīng)用均穩(wěn)運(yùn)行,原數(shù)倉(cāng)臺(tái)相關(guān)應(yīng)用已關(guān)停。

基于華為云GaussDB(DWS)構(gòu)筑全新一代云上數(shù)倉(cāng),招商銀行實(shí)現(xiàn)對(duì)零售客戶(hù)體驗(yàn)的實(shí)時(shí)監(jiān)測(cè)和數(shù)字化呈現(xiàn),更大的算力支撐使得跑批作業(yè)速度較之前得到大幅提升,數(shù)據(jù)分析師們得以更快更深更廣地挖掘客戶(hù)體驗(yàn)數(shù)據(jù)價(jià)值,全面升級(jí)零售客戶(hù)業(yè)務(wù)體驗(yàn)。

招行云化數(shù)倉(cāng)的探索還在繼續(xù),2021年6月預(yù)計(jì)完成一半應(yīng)用遷移,2022年6月預(yù)計(jì)完成全部應(yīng)用遷移和投產(chǎn)。華為云數(shù)倉(cāng)GaussDB(DWS)也將會(huì)繼續(xù)助力招商銀行的數(shù)字化轉(zhuǎn)型之路,未來(lái)可期。

標(biāo)簽: 華為云數(shù)倉(cāng) 數(shù)字化轉(zhuǎn)型

推薦

財(cái)富更多》

動(dòng)態(tài)更多》

熱點(diǎn)