順德農(nóng)商行一表通系統(tǒng)項(xiàng)目
項(xiàng)目背景
一表通報(bào)送系統(tǒng)是國(guó)家金融監(jiān)督管理總局研究搭建的一套完整的明細(xì)級(jí)、標(biāo)準(zhǔn)化的金融數(shù)據(jù)體系。在銀行端建設(shè)監(jiān)管數(shù)據(jù)可信區(qū),構(gòu)建面向銀行的監(jiān)管統(tǒng)計(jì)數(shù)據(jù)采集、審核、應(yīng)用流程,探索實(shí)現(xiàn)一個(gè)高效安全用數(shù)環(huán)境,滿足監(jiān)管對(duì)數(shù)據(jù)報(bào)送規(guī)范性、及時(shí)性和靈活性及基礎(chǔ)環(huán)境建設(shè)的要求。順德農(nóng)村商業(yè)銀行積極響應(yīng)金管局的試點(diǎn)號(hào)召,快速啟動(dòng)系統(tǒng)建設(shè),在不到3個(gè)月的時(shí)間內(nèi)完成了整個(gè)系統(tǒng)的測(cè)試和上線。
關(guān)注問題
一表通報(bào)送系統(tǒng)分為銀行方建設(shè)的報(bào)送區(qū)和監(jiān)管方使用的可信區(qū)。在報(bào)送區(qū)要求數(shù)據(jù)庫(kù)提供大容量歷史數(shù)據(jù)存儲(chǔ),數(shù)據(jù)副本機(jī)制保證硬件故障的情況下數(shù)據(jù)無(wú)丟失、業(yè)務(wù)不停止,高性能的數(shù)據(jù)加載、加工處理和檢核能力;在可信區(qū)要求數(shù)據(jù)庫(kù)提供極高性能的數(shù)據(jù)復(fù)雜查詢分析能力和數(shù)據(jù)安全性。
建設(shè)要求
數(shù)據(jù)庫(kù)滿足一表通規(guī)范中要求的POSITION、STR_TO_DATE、DATE_TO_CHAR、LAST_MONTH、NOW、DATEDIFF 6個(gè)函數(shù);
數(shù)據(jù)庫(kù)滿足37個(gè)邏輯區(qū)(總局和36個(gè)省局),每區(qū)5個(gè)schema,每schema 90張表共185個(gè)schema、16650張表的數(shù)據(jù)管理能力;
數(shù)據(jù)庫(kù)提供高性能數(shù)據(jù)加載、加工處理和檢核能力,現(xiàn)階段數(shù)據(jù)量下數(shù)據(jù)加載、加工處理和檢核均低于30分鐘;
數(shù)據(jù)庫(kù)具備在線擴(kuò)展的能力,可以支撐未來(lái)數(shù)據(jù)量的巨大增長(zhǎng);
數(shù)據(jù)庫(kù)滿足7×24小時(shí)的業(yè)務(wù)連續(xù)性需求;
提供從服務(wù)器、操作系統(tǒng)到數(shù)據(jù)庫(kù)的全國(guó)產(chǎn)化平臺(tái)解決方案,要求數(shù)據(jù)庫(kù)提供對(duì)國(guó)產(chǎn)硬件和操作系統(tǒng)的全適配能力。
解決方案
順德農(nóng)商銀行一表通系統(tǒng)由宇信科技負(fù)責(zé)應(yīng)用部分的開發(fā),依托南大通用分布式分析型數(shù)據(jù)庫(kù)集群GBase 8a進(jìn)行構(gòu)建。在數(shù)據(jù)庫(kù)層分為兩個(gè)主要的集群:行方側(cè)的報(bào)送區(qū)和監(jiān)管側(cè)的可信區(qū)。其中,報(bào)送區(qū)集群進(jìn)行數(shù)據(jù)加載、數(shù)據(jù)脫敏、加工處理、數(shù)據(jù)檢核等作業(yè);可信區(qū)集群為監(jiān)管機(jī)構(gòu)提供不可篡改的、高性能的數(shù)據(jù)查詢服務(wù)。在本項(xiàng)目中GBase 8a數(shù)據(jù)庫(kù)通過其自身優(yōu)異的性能設(shè)計(jì)、數(shù)據(jù)安全性和集群高可用能力、在線擴(kuò)容能力等滿足本項(xiàng)目的需要。對(duì)于報(bào)送平臺(tái)的各類參數(shù)配置信息、調(diào)度流程配置信息、報(bào)送規(guī)則配置信息、日志和告警信息等,采用南大通用3套GBase 8s主備集群(報(bào)送區(qū)、可信區(qū)和可信區(qū)災(zāi)備各1套主備集群)作為資料庫(kù)承載平臺(tái)系統(tǒng)管理模塊持久化存儲(chǔ)。
一表通系統(tǒng)業(yè)務(wù)處理流程:
1)ODS數(shù)據(jù)卸載:首先將數(shù)據(jù)從ODS層卸載。
2)報(bào)送區(qū)數(shù)據(jù)處理:通過USE工具將數(shù)據(jù)加載到報(bào)送區(qū)8a,接著運(yùn)行數(shù)據(jù)檢核程序,業(yè)務(wù)人員填寫相關(guān)數(shù)據(jù)。
3)可信區(qū)數(shù)據(jù)處理:將報(bào)送區(qū)USE卸載的數(shù)據(jù)傳輸?shù)娇尚艆^(qū)USE,再次通過USE工具將數(shù)據(jù)加載到可信區(qū)8a,運(yùn)行數(shù)據(jù)檢核程序以確保數(shù)據(jù)的準(zhǔn)確性。
4)數(shù)據(jù)上報(bào):完成所有檢核和填報(bào)后,將數(shù)據(jù)上報(bào)給相關(guān)監(jiān)管部門。
應(yīng)用效果
運(yùn)行情況
本項(xiàng)目從2024年5月開始測(cè)試,到2024年8月已完成初步上線,自系統(tǒng)上線以來(lái),數(shù)據(jù)總量已達(dá)3TB。系統(tǒng)每日入庫(kù)數(shù)據(jù)量約為8000萬(wàn)行,最大表每日增量約為2000萬(wàn)行,每日入庫(kù)的文件大小總計(jì)約為30GB。集群每日數(shù)據(jù)加載時(shí)長(zhǎng)約15分鐘,數(shù)據(jù)處理時(shí)長(zhǎng)約20分鐘,數(shù)據(jù)檢核時(shí)長(zhǎng)約25分鐘。
效果及價(jià)值
系統(tǒng)快速上線:GBase數(shù)據(jù)庫(kù)產(chǎn)品與一表通系統(tǒng)開發(fā)商:中經(jīng)惠眾、天陽(yáng)宏業(yè)科技、宇信、銀豐新融、南京科融、東華軟件、江蘇睿希、中軟和蘇州銀豐睿哲等均有系統(tǒng)適配和項(xiàng)目應(yīng)用,能夠幫助客戶在最短時(shí)間內(nèi)實(shí)現(xiàn)系統(tǒng)快速上線。
客戶滿意度高:數(shù)據(jù)庫(kù)滿足金管局一表通新標(biāo)準(zhǔn)中函數(shù)的要求;GBase 8a已上線的系統(tǒng)中包含數(shù)百個(gè)庫(kù)、100萬(wàn)+張表的落地案例,遠(yuǎn)超金管局一表通新標(biāo)準(zhǔn)中185個(gè)schema、16650張表的數(shù)據(jù)管理能力要求;性能卓越,數(shù)據(jù)加載、數(shù)據(jù)處理和數(shù)據(jù)檢核均短于項(xiàng)目要求的30分鐘。
自主可控:為金融業(yè)全面推進(jìn)“去IOE”戰(zhàn)略,為全面加快國(guó)產(chǎn)化“安全可控”監(jiān)管落地施行,為促進(jìn)行業(yè)國(guó)產(chǎn)技術(shù)架構(gòu)發(fā)展,起到了積極的表率作用;全兼容、全適配的國(guó)產(chǎn)數(shù)據(jù)庫(kù)GBase 8a和GBase 8s數(shù)據(jù)庫(kù)支持所有國(guó)產(chǎn)CPU和操作系統(tǒng),100%滿足銀行業(yè)客戶對(duì)全國(guó)產(chǎn)化系統(tǒng)的要求,為客戶核心業(yè)務(wù)系統(tǒng)的數(shù)據(jù)安全提供有力保障。