《構建面向未來的金融核心系統.pdf》由會員分享,可在線閱讀,更多相關《構建面向未來的金融核心系統.pdf(20頁珍藏版)》請在三個皮匠報告上搜索。
1、構建面向未來的金融核心系統莊培培平凱星辰資深解決方案架構師自 主 創 新 引 領大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會IT 架構重構業務需求互聯網峰值流量提高服務質量和效率業務需求快速變化降低營銷成本渠道及產品多樣化提高風控能力用戶體驗優化提升拓寬業務范圍傳統金融核心系統特性 面向業務流程 產品開發周期長 數據龐大、業務繁雜 大而全豎井型的架構模式 信息交換和共享效率低金融數字化升級需求 面向客戶需求 系統可用性,架構
2、靈活性需求 海量高頻的業務承接能力 分布式、微服務架構 智能化應用改造需求 人工智能技術應用雙輪驅動:IT 架構重構+業務需求升級大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會單機/網絡核心 胖核心 瘦核心雙核心分布式核心/無核心互聯網分布式核心集中式核心結算業務現金業務資金業務憑證業務保函業務投資業務中間業務外幣業務存款貸款內部核算客戶管理信貸管理渠道管理賬戶數據分析產品數據分析交易數據分析胖核心瘦核心穩態集中式+敏態微服務
3、分布式架構成為必然路徑微服務架構單元化架構分布式計算自主可控銀行核心系統的演進:分布式架構成為銀行核心轉型的必然路徑從 WTO 時代的胖核心到 SOA 架構的瘦核心大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會銀行核心:TiDB 助力頭部城商行新一代核心系統成功投產 1.5 倍 聯機交易提升倍數,平均交易延時小于100毫秒2.5 倍 日終跑批提升倍數,當前1小時完成 同城雙活 兩地三中心架構,同城 PRO=0投產新一代核心系統
4、2021 上半年2021 下半年2023 年2022 年金融核心實踐 分布式數據庫選型 上線 CMMP 客戶營銷 信創全平臺上線 服務 10+業務系統 投產第一階段互聯網核心 信創風洞實驗室適配攻關首個云原生+分布式數據庫+全棧國產化銀行核心業務系統大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會面向未來的金融核心系統提出對數據庫的要求 分布式事務 讀寫熱點 金融跑批 建立技術生態從研發視角看 同城雙活 RPO=0 線性可擴展
5、運維簡便,可觀測性 多平臺適配 易用性,整體滿足從可用到好用 從運維視角看 可靠性是第一位 開發透明化非常重要 重構好于平遷 微服務好于單元化架構 標準產品而非定制化能力從架構視角看大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會架構視角:數據庫應用開發透明化的意義應用開發透明運維擴容透明查詢分析透明熱點優化透明像使用傳統數據庫一樣設計應用和開發代碼,無需考慮 sharding key,跨單元 join 性能問題等。應用無需擔心
6、數據庫表容量問題,單表大小可無限擴展且無性能拐點。智能優化器在 HTAP 場景,提供更高性能的 SQL 執行效率。熱點數據自動感知且自動打散,降低應用設計復雜度。大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會架構視角:對城商行而言,微服務架構好于單元化 總分總架構 優先水平擴展 大型銀行業務大單元設計,可以采用 TiDB 中型+銀行業務微服務設計,優先 TiDB 全局單元,采用 TiDBGSLBAPPDB業務單元APPDB業務
7、單元APPDB業務單元APPDB全局管理單元APPDB全局批量單元APPDB數據匯聚單元金融核心實踐大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會TiDB 新一代分布式 HTAP 數據庫架構計算和存儲分離,解決高性能和高并發,在線擴容TiKV 分布式三副本解決高可靠和強一致TiKV 和 TiFlash 存儲與存儲分離應對 TP 和 AP 場景金融核心實踐TiSpark 計算分離解決大數據使用完整周邊工具解決企業運維便利的需求大
8、數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會 存算分離架構,獨立擴容 準線性增長的實測性能 一鍵擴縮容,降低風險,提高效率 典型場景:季度結息交易洪峰運維視角:數據庫在線擴縮容,更靈活、更方便金融核心實踐應用層 MySQL協議TiDB TiDB TiDB TiDB 計算集群TiKV存儲集群TiKVDistSQL APIKV APITiKVTiDB TiKV按需擴容,每次可只新增一個節點+按需擴容,每次可只新增一個節點Capac
9、ityPerformance性能線性擴展TiDB/TiKV+TiDB/TiKV+TiDB/TiKV+大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會運維視角:業界首例核心系統分布式數據庫雙中心雙活架構 現狀只有兩中心 TiDB 首創 3-2-1 雙中心方案 雙中心 5+1 副本強同步 故障自動轉移,同城雙活金融核心實踐大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推
10、進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會運維視角:金融級高可用兩地三中心方案 同城雙活+異地災備方案 災備方案擴展:只讀集群、測試集群、近線庫、逃生庫金融核心實踐大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會研發視角:讀、寫熱點解決方案 寫熱點場景 讀熱點場景 熱點賬戶場景金融核心實踐寫熱點讀熱點熱點賬號交易流水表散列寫入索引熱點:LSM Tree 避免索引分裂問
11、題參數表緩存化合并高頻請求緩存表內部戶集團戶優化性能大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會研發視角:單元化架構,銀行核心批處理解決方案,應對峰值、提效單元化金融核心架構:TiDB 批處理參考架構 TiDB 作為全局批量單元 批處理效率提高 3.8 倍 線性擴展金融核心實踐單元化數據庫實例業務單元A單元化數據庫實例業務單元B單元化數據庫實例業務單元CTiDB DM 數據同步TiDB 集群批量APP批量APP同城 IDC1
12、批量APP批量APP同城 IDC3批量APP批量APP同城 IDC2大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會研發視角:混沌工程全面檢驗和提升分布式系統穩定性 建立混沌工程體系 驗證功能邊界和非功能性需求 不同場景穩定性度量方案:全環境、全層級、全環節、全鏈路覆蓋,分層分階段進行金融核心實踐Chaos Mesh強大的混沌工程平臺數據庫能力邊界可擴展能力高可用和容災能力總結最佳實踐測試目的測試手段故障注入業務發壓工具運維管理
13、工具觀測工具故障注入物理機、容器、數據庫、對象存儲集群高可用鏈路高可用測試場景最佳實踐驗證高可用容災集群能力邊界擴展性驗證評估標準業務指標數據庫指標系統指標混沌工程全面檢驗和提升分布式系統穩定性大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會研發視角:銀行科技擁抱技術升級,建立技術生態銀行科技部門銀行業務部門/最終用戶需求分析開發測試發布反饋規劃建立面向未來的技術生態監控運維建立面向未來的業務演進、規劃閉環 IT走出舒適區 建立
14、技術生態:開發、測試、發布、監控、運維金融核心實踐大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會CoreBanking技術中立,不綁定特有的平臺和硬件代碼自主,擁有完全產品能力控制技術復雜性重構好于平遷微服務好于單元化兩地三中心異地災備高吞吐、高可用、低延遲數據庫在線擴容云原生優于中間件開源更透明通用產品能力,不要特殊版本業務連續性IT 走出舒適區體系建設和適配:開發、測試、發布、監控、運維賬務表分拆分布式事務讀寫熱點異步核算
15、混沌測試技術架構策略建立技術生態數據庫選擇核心系統架構原則核心完全自主可控構建面向未來的金融核心系統通用實踐大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會平凱星辰(PingCAP)公司:技術、開源軟件、國產化成為世界上最好且最受尊敬的基礎軟件公司起源:一篇技術論文公司使命:為開發者和企業賦能,以速度、敏捷、增長之道創新 100%自主研發安全可控3,000+全球優質企業用戶軟件出海最大數據庫海外單筆訂單中國開源第一全球頂級開源基
16、金會貢獻榜2,100 代碼貢獻者根社區開源根社區覆蓋44 個國家和地區大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會TiDB 是全球流行的開源分布式數據庫開發者社區排名國際影響的開源社區 2023 年度業績增速最快“具有國際影響力的三大開源社區”之一工信部2023 年工業和信息化發展情況GartnerMarket Share Analysis:Database Management Systems,Worldwide,2023
17、報告,PingCAP 成為全球數據庫管理系統市場增速最快的廠商TiDB 計算引擎TiKV 存儲引擎TiDB 是 GitHub 上獲得 Stars 排名第二的數據庫大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會金融機構生產場景的長期驗證TiDB 1.0-2.02017-2018 年OLTP 規?;瘮U展TiDB 3.02019 年TiDB 4.02020 年TiDB 5.02021 年TiDB 7.02023 年 OLTP 規?;?/p>
18、擴展解決復雜 OLAP 需求OLTP 規?;瘮U展隔離事務與大數據負載全面 HTAP 能力提供一棧式數據服務服務金融級核心場景TiDB Cloud 正式商用TiDB 6.02022 年企業版新升級:平凱數據庫多租戶提供數據庫整合能力發布 TiDB Serverless大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會THANKS感謝聆聽自 主 創 新 引 領大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會大數據技術標準推進委員會