2019年ApacheShardingSphere數據平臺演進之路.pdf

1、ApacheShardingSphere數據平臺演進之路數據平臺DBDBDBDBManageIntegrateGather數據庫集群數據分片分布式事務分布式治理彈性擴展接入端架構架構數據庫數據庫 計算 存儲ShardingSphere SQL解析&改寫&路由 分布式事務拓展拓展 高可用 數據脫敏 可觀察性 彈性伸縮 數據庫u 充分利用數據庫的存儲能力u 在保證查詢結果正確的前提下，充分利用數據庫的計算能力。例如：SELECT AVG(score)FROM student;score=-+/+0 =()()架構數據庫數據庫 計算 存儲ShardingSphere SQL解析&改寫&路由 分布式事

2、務拓展拓展 高可用 數據脫敏 可觀察性 彈性伸縮 SQL理解SELECT AVG(price)FROM billWHERE user_id=1解析處理user_id=1改寫SELECT SUM(price)/COUNT(price)FROM bill_0WHERE user_id=1ROOTSELECTITEMSavg(price)FROMTABLEbillWHERECONDITIONSuser_id=1規則規則SQL理解方案優點缺點第一代解析引擎Druid SQL Parser支持多數據庫解析效率較高新舊版本不兼容SQL解析引擎無法自主可控第二代解析引擎自研的”半理解”方式解析器支持常見的關

3、系型數據庫解析效率最高無法實現100%SQL兼容維護成本高第三代解析引擎ANTLR語言解析器自定義解析規則實現100%SQL兼容穿透緩存的情況下解析效率略低SQL路由分布式事務電商技術金融本地事務兩階段事務柔性事務業務改造無無實現相關接口一致性不支持強一致最終一致隔離性不支持原生支持服務保證并發性能無影響嚴重衰退略微衰退適合場景業務方處理不一致短事務/低并發長事務/高并發事務層級數據庫層數據庫層服務層分布式事務分布式事務事務集成LocalXAAtomikosNarayanaBASESagaSeata事務自研NativeJDTXSaga:https:/ 透明化底層分布式事務實現細節，用戶可使用標

4、準API開啟分布式事務。u 支持同時使用數據分片，分布式事務等。u 依據實際場景，用戶可選擇使用不同類型的分布式事務。分布式事務DBDBDB數據庫集群JDTXTM/RM寫入查詢MVCCWAL架構數據庫數據庫計算存儲ShardingSphereSQL解析&改寫&路由分布式事務拓展拓展高可用數據脫敏可觀察性彈性伸縮數據脫敏電商技術金融參考文章：https:/ Server貢獻社區貢獻者 技術積累 影響力積累 交友圈擴大 職業渠道擴寬社區 功能擴展 生態圈活躍 知名度增加 持續發展 云公司開源戰略 業務系統采用 個人興趣提升來源 相互促進 彈性控制 興趣與目標驅動工作與開源成為Committer技術代碼貢獻Issue調查文檔補充UI設計文章分享AnyThing