文｜白 鴿

傳統(tǒng)的商業(yè)數(shù)據(jù)庫(kù)Oracle，到后來(lái)加入的MySQL數(shù)據(jù)庫(kù)，再到現(xiàn)如今的分布式數(shù)據(jù)庫(kù)，中國(guó)金融行業(yè)數(shù)據(jù)庫(kù)的轉(zhuǎn)型升級(jí)走過了多年時(shí)間。

2018年，我們提出了要向分布式架構(gòu)轉(zhuǎn)型。四川農(nóng)商聯(lián)合銀行科技部相關(guān)負(fù)責(zé)人回顧起當(dāng)時(shí)做的戰(zhàn)略決策，現(xiàn)在看是一種理所當(dāng)然的趨勢(shì)，但在2018年選擇這個(gè)方向是艱難的，因?yàn)楫?dāng)時(shí)分布式數(shù)據(jù)庫(kù)都是互聯(lián)網(wǎng)場(chǎng)景在用，傳統(tǒng)銀行都還沒有。

彼時(shí)，對(duì)于國(guó)產(chǎn)數(shù)據(jù)庫(kù)廠商而言，大家也都還處于起步階段。

當(dāng)時(shí)的產(chǎn)品還不太成熟。他回憶道，報(bào)名參與我們PoC的只有3家，其中就包括Oceanbase。

經(jīng)過嚴(yán)格的PoC場(chǎng)景測(cè)試，四川農(nóng)商聯(lián)合銀行最終選擇了Oceanbase，自此開啟了從外圍向核心系統(tǒng)推進(jìn)的數(shù)據(jù)庫(kù)轉(zhuǎn)型升級(jí)之路。

我們一共有111個(gè)系統(tǒng)，現(xiàn)在一共有49個(gè)系統(tǒng)上了Oceanbase的數(shù)據(jù)庫(kù)，今年預(yù)計(jì)有一大半系統(tǒng)將全部上去。他如此說(shuō)道。

對(duì)于承載關(guān)鍵業(yè)務(wù)負(fù)載的數(shù)據(jù)庫(kù)而言，一定是在場(chǎng)景中打磨出來(lái)，而不是在實(shí)驗(yàn)室寫出來(lái)的。

作為經(jīng)過內(nèi)部支付寶、淘寶、天貓等具有高并發(fā)的金融交易場(chǎng)景中深度打磨出的數(shù)據(jù)庫(kù)，Oceanbase在走向商業(yè)化過程中，也受到眾多金融機(jī)構(gòu)的青睞。

7月18日，IT市場(chǎng)研究和咨詢公司IDC發(fā)布《中國(guó)金融行業(yè)分布式事務(wù)型數(shù)據(jù)庫(kù)市場(chǎng)份額，2023：技術(shù)驗(yàn)證結(jié)束，迎接高速增長(zhǎng)》報(bào)告顯示，Oceanbase占據(jù)金融行業(yè)本地部署市場(chǎng)份額第一、保險(xiǎn)證券子市場(chǎng)本地部署份額第一。

據(jù)Oceanbase官方數(shù)據(jù)顯示，目前70%千億資產(chǎn)規(guī)模以上銀行、75%頭部證券機(jī)構(gòu)、65%頭部保險(xiǎn)機(jī)構(gòu)、45%頭部基金公司都已選擇Oceanbase進(jìn)行核心系統(tǒng)升級(jí)。

主要包括中國(guó)工商銀行、交通銀行、四川農(nóng)商聯(lián)合銀行、中國(guó)太平洋保險(xiǎn)、招商證券等，其中有一半以上將Oceanbase應(yīng)用于核心系統(tǒng)。

從營(yíng)收角度來(lái)講，2023年，Oceanbase的金融行業(yè)營(yíng)收規(guī)模為2.7億人民幣，在金融行業(yè)分布式數(shù)據(jù)庫(kù)市場(chǎng)中位列獨(dú)立數(shù)據(jù)庫(kù)廠商第一。

據(jù)IDC報(bào)告統(tǒng)計(jì)，2023年中國(guó)金融行業(yè)分布式事務(wù)型數(shù)據(jù)庫(kù)的市場(chǎng)規(guī)模約2億美元，同比增長(zhǎng)12.1%，市場(chǎng)正在加速增長(zhǎng)。同時(shí)，市場(chǎng)競(jìng)爭(zhēng)格局基本穩(wěn)定，頭部5家廠商占據(jù)整體市場(chǎng)份額的86.9%。

隨著中國(guó)數(shù)智化轉(zhuǎn)型進(jìn)入深水區(qū)，作為基礎(chǔ)軟件的三座大山之一，金融行業(yè)的數(shù)據(jù)庫(kù)轉(zhuǎn)型升級(jí)，已經(jīng)從選擇題成為了必答題。

金融行業(yè)數(shù)據(jù)庫(kù)迎關(guān)鍵年

IDC報(bào)告稱，2024年將進(jìn)入分布式數(shù)據(jù)庫(kù)大規(guī)模部署階段，這也將是金融行業(yè)數(shù)據(jù)庫(kù)轉(zhuǎn)型升級(jí)的關(guān)鍵年。一方面，金融行業(yè)的數(shù)據(jù)庫(kù)升級(jí)將從邊緣系統(tǒng)走向核心系統(tǒng)。另一方面，國(guó)產(chǎn)分布式數(shù)據(jù)庫(kù)也將從可用走向好用。

自20世紀(jì)70年代開啟信息化建設(shè)以來(lái)，金融行業(yè)開始著手搭建核心系統(tǒng)，作為金融機(jī)構(gòu)的交易中樞，經(jīng)過數(shù)十年的發(fā)展，在沉淀大量數(shù)據(jù)資產(chǎn)的同時(shí)，更是與周邊系統(tǒng)盤根錯(cuò)節(jié)，可以說(shuō)是牽一發(fā)而動(dòng)全身。

相比其他系統(tǒng)，數(shù)據(jù)庫(kù)是最底層、也是最關(guān)鍵的核心技術(shù)之一，而且由于國(guó)產(chǎn)數(shù)據(jù)庫(kù)起步較晚，金融行業(yè)使用國(guó)產(chǎn)數(shù)據(jù)庫(kù)普遍在2016年之后。但即便經(jīng)過了約8年時(shí)間，金融系統(tǒng)對(duì)于新型數(shù)據(jù)庫(kù)的升級(jí)、轉(zhuǎn)型，依然處于早期階段。

目前，頭部大銀行、保險(xiǎn)機(jī)構(gòu)已經(jīng)走完了分布式數(shù)據(jù)庫(kù)升級(jí)轉(zhuǎn)型的路，但數(shù)量更多的中小銀行、保險(xiǎn)、證券等金融機(jī)構(gòu)仍然才剛剛開始做、甚至計(jì)劃開始做。

提速背后，是金融機(jī)構(gòu)的數(shù)智化轉(zhuǎn)型進(jìn)入了深水區(qū)。

不過，金融機(jī)構(gòu)的數(shù)據(jù)庫(kù)升級(jí)并不是一蹴而就，往往需要2~3年時(shí)間。而且大多數(shù)金融機(jī)構(gòu)在開展數(shù)據(jù)庫(kù)升級(jí)時(shí)，通常采取循序漸進(jìn)、風(fēng)險(xiǎn)可控的策略，即先邊緣系統(tǒng)再核心系統(tǒng)。

典型的銀行系統(tǒng)業(yè)務(wù)全景架構(gòu)

四川農(nóng)商聯(lián)合銀行策略也是以穩(wěn)妥為主，先外圍后核心，先一般再關(guān)鍵。

截至目前，四川農(nóng)商聯(lián)合銀行已經(jīng)有49個(gè)系統(tǒng)穩(wěn)定運(yùn)行在Oceanbase上，其中關(guān)鍵業(yè)務(wù)系統(tǒng)6個(gè)、重要業(yè)務(wù)系統(tǒng)18個(gè)、一般業(yè)務(wù)系統(tǒng)23個(gè)。

經(jīng)過7年迭代升級(jí)，四川農(nóng)商聯(lián)合銀行的數(shù)據(jù)庫(kù)升級(jí)也將迎來(lái)從一般向核心邁進(jìn)的關(guān)鍵一步。

據(jù)光錐智能了解，四川農(nóng)商聯(lián)合銀行的分布式核心系統(tǒng)已經(jīng)于2023年年初啟動(dòng)建設(shè)，預(yù)計(jì)2024年年底完成主體開發(fā)和測(cè)試。新一代核心系統(tǒng)也將基于Oceanbase建設(shè)。

我們今年列了20個(gè)左右的項(xiàng)目，要全部放到Oceanbase上做升級(jí)改造。四川農(nóng)商聯(lián)合銀行相關(guān)負(fù)責(zé)人對(duì)光錐智能講述了今年的發(fā)展計(jì)劃，更關(guān)鍵的是要把2.2和3.2的系統(tǒng)統(tǒng)一升級(jí)到4.2版，啟動(dòng)信貸業(yè)務(wù)，2025年會(huì)把收單業(yè)務(wù)放上去，2026到2028年會(huì)完成全部存量系統(tǒng)遷移。

這也就意味著，四川農(nóng)商聯(lián)合銀行底層的技術(shù)架構(gòu)也將逐漸實(shí)現(xiàn)統(tǒng)一。

相比于銀行業(yè)在數(shù)據(jù)庫(kù)升級(jí)路徑上的穩(wěn)妥，部分保險(xiǎn)企業(yè)的策略可能會(huì)更激進(jìn)一些。

保險(xiǎn)系統(tǒng)業(yè)務(wù)全景架構(gòu)

我們根據(jù)中國(guó)太保的情況因地制宜，最終選擇了一開始就從核心系統(tǒng)做數(shù)據(jù)庫(kù)升級(jí)，跟Oceanbase一起做聯(lián)合攻堅(jiān)。中國(guó)太平洋保險(xiǎn)數(shù)智研究院首席數(shù)據(jù)庫(kù)專家林春的這種做法，與其說(shuō)是冒險(xiǎn)、不如說(shuō)是戰(zhàn)略眼光足夠堅(jiān)定。

林春認(rèn)為，通過先難后易，選擇核心系統(tǒng)做攻堅(jiān)，在暴露了很多問題后，就可以迅速沉淀出自己的知識(shí)庫(kù)。

通過金融機(jī)構(gòu)和數(shù)據(jù)庫(kù)廠商的雙方聯(lián)合攻堅(jiān)，做大量復(fù)雜場(chǎng)景的歷練，國(guó)產(chǎn)的數(shù)據(jù)庫(kù)產(chǎn)品正在從可用向好用演進(jìn)。

自2021年至今，Oceanbase數(shù)據(jù)庫(kù)越來(lái)越好用，也正在加速形成完整生態(tài)。在林春看來(lái)，數(shù)據(jù)庫(kù)廠商是否有內(nèi)核掌控能力、修復(fù)能力，決定了未來(lái)能否走的遠(yuǎn)。

金融分布式數(shù)據(jù)庫(kù)、從選擇題到必答題

上世紀(jì)60年代，國(guó)內(nèi)出現(xiàn)了第一代集中式數(shù)據(jù)庫(kù)。

彼時(shí)用戶業(yè)務(wù)量和數(shù)據(jù)量很小，因此Oracle做的集中式數(shù)據(jù)庫(kù)就可以滿足絕大部分客戶需求。后隨著互聯(lián)網(wǎng)興起，出現(xiàn)中間件形式，如MySQL數(shù)據(jù)庫(kù)等。

但集中式的數(shù)據(jù)庫(kù)部署方式是IOE（IO擴(kuò)展口），屬于煙囪式部署，一套系統(tǒng)就需要部署一套數(shù)據(jù)庫(kù)架構(gòu)，成本非常高昂，且擴(kuò)展性非常差。而中間件數(shù)據(jù)庫(kù)只是一種過渡方案。

第三代，則是原生分布式數(shù)據(jù)庫(kù)。2019年，在信通院總結(jié)報(bào)告中明確表示，分布式數(shù)據(jù)庫(kù)一定是未來(lái)方向。

2021年前，分布式數(shù)據(jù)庫(kù)市場(chǎng)是混沌的。林春回憶道。

而最終選擇Oceanbase，林春總結(jié)了三方面原因：

一、數(shù)據(jù)壓縮能力強(qiáng)。由于保險(xiǎn)行業(yè)的數(shù)據(jù)、保險(xiǎn)的周期很長(zhǎng)，海量大庫(kù)多，而Oceanbase的數(shù)據(jù)壓縮特性就對(duì)中國(guó)太保而言非常重要。

二、要能夠兼容Oracle系統(tǒng)，并實(shí)現(xiàn)平滑遷移。過去十幾年中，由于保險(xiǎn)業(yè)務(wù)的復(fù)雜性，中國(guó)太保的保險(xiǎn)業(yè)務(wù)與Oracle綁定程度很深，所以在進(jìn)行數(shù)據(jù)庫(kù)架構(gòu)升級(jí)中，必須考慮能不能匹配Oracle的深度特性，能不能支持平滑遷移，而這一點(diǎn)對(duì)數(shù)據(jù)庫(kù)廠商的挑戰(zhàn)很大。

三、整體軟硬件綜合成本要低。為了尋求最終的效果做評(píng)判，中國(guó)太保集團(tuán)先做了試點(diǎn)，然后在這個(gè)基礎(chǔ)上，制定了選型路線，路線的核心重點(diǎn)就是成本。

我們把綜合的軟硬件成本做了非常細(xì)致的計(jì)算。林春說(shuō)道，通過綜合測(cè)評(píng)，一般場(chǎng)景中，Oceanbase非常適合，而在核心攻堅(jiān)場(chǎng)景里，有的問題只有Oceanbase能解決。

不難看出，中國(guó)太保做數(shù)據(jù)庫(kù)轉(zhuǎn)型升級(jí)背后的核心原因，一是技術(shù)架構(gòu)能力，二則是降本增效的需求。當(dāng)然，于銀行業(yè)而言，在數(shù)字化轉(zhuǎn)型進(jìn)程中，也同樣面臨著傳統(tǒng)數(shù)據(jù)庫(kù)架構(gòu)不足以滿足未來(lái)發(fā)展需求，且成本高昂的問題。

四川農(nóng)商聯(lián)合銀行相關(guān)負(fù)責(zé)人也說(shuō)道：在進(jìn)行分布式數(shù)據(jù)庫(kù)架構(gòu)轉(zhuǎn)型前，我們使用了6種數(shù)據(jù)庫(kù)，這就導(dǎo)致維護(hù)、人員技能，都必須依賴廠商，且每一個(gè)數(shù)據(jù)庫(kù)都需要買一個(gè)原廠的支持服務(wù)，成本非常高。

因此，統(tǒng)一數(shù)據(jù)庫(kù)架構(gòu)體系，實(shí)現(xiàn)技術(shù)的自主掌控，勢(shì)在必行。金融行業(yè)的分布式數(shù)據(jù)架構(gòu)體系，正從選擇題成為必答題。

那么，金融數(shù)字化到底需要怎樣的分布式數(shù)據(jù)庫(kù)？

Oceanbase副總裁、金融政企事業(yè)部總經(jīng)理王爽認(rèn)為，要立足當(dāng)下，著眼未來(lái)，既要能夠?yàn)榭蛻糇鰯?shù)據(jù)庫(kù)兜底，實(shí)現(xiàn)自主掌控，還要保證技術(shù)路線是未來(lái)主流發(fā)展趨勢(shì)。

分布式數(shù)據(jù)庫(kù)發(fā)展路線已經(jīng)是既定趨勢(shì)，而在這趨勢(shì)之下，只有100%根自研數(shù)據(jù)庫(kù)才能成為金融需求兜底，才能確保完全的自主掌控。

我們的代碼是一行行寫出來(lái)的，沒有依賴于任何開源軟件，代碼是根自研，自建了研發(fā)環(huán)境和流程，自研編碼優(yōu)化技術(shù)，同時(shí)還沒有開源協(xié)議風(fēng)險(xiǎn)。王爽說(shuō)道。

當(dāng)前，分布式事務(wù)型數(shù)據(jù)庫(kù)的實(shí)際應(yīng)用價(jià)值和可行性已經(jīng)得到驗(yàn)證，伴隨技術(shù)驗(yàn)證的穩(wěn)固，除了頭部大型金融廠商外，越來(lái)越多的中小型金融機(jī)構(gòu)，也都正在加速數(shù)據(jù)庫(kù)架構(gòu)的轉(zhuǎn)型升級(jí)。而在此過程中，如何降本增效，則成為影響金融機(jī)構(gòu)數(shù)據(jù)庫(kù)轉(zhuǎn)型升級(jí)的關(guān)鍵。

一個(gè)好的數(shù)據(jù)庫(kù)，不僅增效，更可以降本

技術(shù)的創(chuàng)新和應(yīng)用，在企業(yè)側(cè)的目的都是降本增效，分布式數(shù)據(jù)庫(kù)的誕生，也同樣如此。

Oceanbase的公司成立于2020年，但這款產(chǎn)品卻于2010年敲下了第一行代碼。彼時(shí)阿里每年在數(shù)據(jù)庫(kù)上耗費(fèi)大量的錢。

2013年的雙十一，10%的流量數(shù)據(jù)架構(gòu)支持轉(zhuǎn)移至Oceanbase上，當(dāng)年我們非常好的完成了這個(gè)任務(wù)，到第二年，我們把雙十一底層數(shù)據(jù)庫(kù)的支撐全部轉(zhuǎn)移至Oceanbase，一直到現(xiàn)在。王爽說(shuō)道。

而經(jīng)歷了內(nèi)部眾多核心業(yè)務(wù)場(chǎng)景打磨的Oceanbase，降本增效也成為了其切入金融行業(yè)的核心競(jìng)爭(zhēng)力。

我們最初的目標(biāo)就是節(jié)約成本，因?yàn)樵镜姆桨柑F了。四川農(nóng)商聯(lián)合銀行相關(guān)負(fù)責(zé)人如此說(shuō)道，我們之前用的大型機(jī)，每年需要投入70%的成本，來(lái)確保大型機(jī)的安全，這也導(dǎo)致我們成本投入結(jié)構(gòu)失衡。

將數(shù)據(jù)庫(kù)向Oceanbase遷移后，由于多地多活架構(gòu)的成功落地，四川農(nóng)商聯(lián)合銀行的IT系統(tǒng)在可用性方面有了顯著提升，在數(shù)據(jù)庫(kù)層面可以實(shí)現(xiàn)同城RPO（恢復(fù)點(diǎn)目標(biāo)）=0、RTO（恢復(fù)時(shí)間目標(biāo)）<8s的自動(dòng)無(wú)損容災(zāi)效果，相當(dāng)于即使發(fā)生故障、機(jī)房進(jìn)行切換，對(duì)比Oceanbase2.x版本，切換影響降低 了四倍，以1000tps的系統(tǒng)為例，容災(zāi)切換將少影響客戶交易2.4萬(wàn)筆，極大地提升了客戶體驗(yàn)。

與此同時(shí)，新數(shù)據(jù)庫(kù)運(yùn)維方面也更加高效和方便，整體成本得到明顯降低。Oceanbase提供的運(yùn)維工具OCP，極大提升了數(shù)據(jù)庫(kù)的運(yùn)維和管理效率。

此外，對(duì)于中國(guó)太保來(lái)說(shuō)，由于業(yè)務(wù)系統(tǒng)場(chǎng)景的復(fù)雜性，對(duì)于數(shù)據(jù)壓縮能力要求較高。

基于Oceanbase的高壓縮比的分布式存儲(chǔ)引擎，在同一業(yè)務(wù)數(shù)據(jù)存儲(chǔ)量下，能顯著節(jié)約存儲(chǔ)空間，降低存儲(chǔ)成本。于數(shù)據(jù)量大、數(shù)據(jù)生命周期長(zhǎng)的業(yè)務(wù)場(chǎng)景來(lái)說(shuō)，可極大地滿足業(yè)務(wù)需求。

因此，中國(guó)太保在核心系統(tǒng)上線后，數(shù)據(jù)庫(kù)壓縮比高達(dá) 8 倍，業(yè)務(wù)數(shù)據(jù)庫(kù)容量瘦身 78%，數(shù)據(jù)庫(kù)軟硬件成本縮減 75%。

2024年1月，承載中國(guó)太保集團(tuán)資金收付交易任務(wù)的資金交易系統(tǒng)上線，存儲(chǔ)平均壓縮至原來(lái)1/3。2024年5月，承載全產(chǎn)險(xiǎn)的會(huì)計(jì)核算管理系統(tǒng)上線，應(yīng)收結(jié)果統(tǒng)計(jì)模塊計(jì)算效率提升2倍。

不僅是金融行業(yè)，在通用行業(yè)中，如零售、支付、出行、物流、電商等，每個(gè)CTO的腦袋上都頂了‘降本’兩個(gè)字。楊冰坦言，在當(dāng)年經(jīng)濟(jì)環(huán)境下，大家對(duì)降本增效的要求都很高。

目前，行業(yè)中對(duì)分布式數(shù)據(jù)庫(kù)的認(rèn)知，還停留在使用成本很高。

但王爽表示：Oceanbase越用越便宜，這是基于幾十個(gè)OB用戶的樣本，得出了這樣的結(jié)果。比如所有客戶里存儲(chǔ)空間的節(jié)約比例是70%，服務(wù)器資源節(jié)約可以達(dá)到85%，三年財(cái)務(wù)收益結(jié)果，ROI是投資回報(bào)率是218%，凈現(xiàn)值2509萬(wàn)，平均每注冊(cè)用戶數(shù)據(jù)成本節(jié)約50%。

一般來(lái)說(shuō)，技術(shù)都會(huì)有一個(gè)從研發(fā)到應(yīng)用普及的周期，在新技術(shù)應(yīng)用前期，由于技術(shù)研發(fā)投入高，應(yīng)用規(guī)模小，所以成本就高。但隨著技術(shù)的大規(guī)模應(yīng)用和普及，其研發(fā)成本不斷被攤平，最終價(jià)格會(huì)越來(lái)越低。

分布式數(shù)據(jù)庫(kù)也正在經(jīng)歷這樣的一個(gè)過程。楊冰也坦言，從技術(shù)原理和實(shí)際特性中，Oceanbase是規(guī)模越大越便宜，如果僅有兩三臺(tái)的需求，成本價(jià)格會(huì)與集中式數(shù)據(jù)庫(kù)差不多，而當(dāng)有幾十臺(tái)規(guī)模時(shí)，則有更大的優(yōu)勢(shì)。

國(guó)產(chǎn)數(shù)據(jù)庫(kù)，生態(tài)體系亟待完善

純講技術(shù)的話，從已經(jīng)投產(chǎn)系統(tǒng)的批量響應(yīng)來(lái)看，國(guó)產(chǎn)數(shù)據(jù)庫(kù)已經(jīng)完全不弱于海外的數(shù)據(jù)庫(kù)，基本沒差別。但要真正趕上，四川農(nóng)商聯(lián)合銀行相關(guān)負(fù)責(zé)人則認(rèn)為，哪天普通技術(shù)人員打個(gè)標(biāo)準(zhǔn)服務(wù)電話就能解決所有問題，那就成了。

這其中的差別，是數(shù)據(jù)庫(kù)生態(tài)體系的建設(shè)。即除了技術(shù)能力外，還包括服務(wù)體系、開源社區(qū)、培訓(xùn)體系等。

Oceanbase也正在加速構(gòu)建服務(wù)生態(tài)體系，但楊冰也坦言，我們雖然已經(jīng)投入3年時(shí)間打造生態(tài)體系，但相對(duì)于老牌廠商十幾年的成熟體系來(lái)說(shuō)，這個(gè)生態(tài)還不夠。

總體而言，國(guó)產(chǎn)數(shù)據(jù)庫(kù)廠商正在完成新一輪的更迭，傳統(tǒng)靠資源的項(xiàng)目制數(shù)據(jù)庫(kù)廠商正在被逐步淘汰，而擁有更先進(jìn)技術(shù)的分布式數(shù)據(jù)庫(kù)、云數(shù)據(jù)庫(kù)廠商已經(jīng)成為主流的玩家。而生態(tài)的成熟，未來(lái)也只是時(shí)間問題。

路漫漫其修遠(yuǎn)兮，國(guó)產(chǎn)數(shù)據(jù)庫(kù)更需要長(zhǎng)期主義。

看完覺得寫得好的，不防打賞一元，以支持藍(lán)海情報(bào)網(wǎng)揭秘更多好的項(xiàng)目。

標(biāo)簽： 標(biāo)簽 內(nèi)容 隨筆