分布式事务JDTX与数据库中间件集成方案

1、京东数科分布式事务JDTX与数据库中间件 Apache ShardingSphere的集成之道垂直拆分单机数据库水平拆分分布式数据库集群1998年，加州大学的计算机科学家 Eric Brewer 提出分布式系统的三个指标:l Consistency. The client perceives that a set of operations has occurred all at once.l Availability. Every operation must terminate in an intended response.l Partition tolerance. Operation

2、s will complete, even if individual components are unavailable.ACIDBASEAtomicity - 原子性 Consistency - 一致性 Isolation - 隔离性 Durability - 持久性Basically Available - 基 本可用Soft State -软状态 Eventual Consistency- 最终一致性两阶段事务柔性事务JDTX原子性（回滚）支持服务保证支持一致性强一致最终一致强一致隔离性支持服务保证支持持久性支持支持支持可用性严重衰退略微衰退略微衰退业务改造无一般需要无数据库限制有无

3、无JDTX内部架构开启事务LSN生成器更新提交回滚恢复引擎MVCC引擎WAL查询更新执行器查询执行器落盘执行器约束校验引擎事务处理器删除获取 本地事务元组更新原子性&持久性： 未提交的数据只存在于本地 异步刷盘机制一致性&隔离性： 自研MVCC引擎 自研查询&更新引擎可序列化仅持有一把排他锁读读无法并行可重复读读共享锁和写排它锁互斥读读并行读写 & 写读不可并行读已提交读共享锁可升级为写排它锁读写并行写读不可并行读未提交读不加锁读写 & 写读并行写写不可并行Snapshot IsolationSerializable Snapshot Isolation时间线Tx1Tx2Tx3Tx4Tx5Tx

4、6事务发生时间点快照已提交未提交IDNAME1Trista2TonyV1V2V1V2MIN_IDTX_1MAX_IDTX_2DATA_ID1DATA_NAMETrista1设计亮点Idea刚柔并济刚性事务的强一致性&柔性事务的高可用性分布式 & 1PC完全摒弃两阶段提交的透明化实现方案活动数据与存储数据分离充分利用数据库存储&计算能力异步刷盘通过WAL和内存的方式异步化刷盘异步刷盘开发成本最小化充分采用论文思路以及第三方开源实现难点DifficultyMVCC内核完全实现MVCC机制内存查询引擎内存快照数据与SQL计算表达式的适配数据异步落盘事务只需将数据提交到WAL即可完成提交&落盘引擎负责

5、异步刷盘&旧数据清理高可用绝大部分组件的失效均不影响事务的正常 运行&恢复未来规划RoadmapSSI实现SQL兼容度提升更多元数据库的支持Driver & Proxy接入端与ShardingSphere对接App2DBApp1App3App2DB1DB2DB3App1App3SApp 1MApp 2App3writesyncread读写分离水平分片App1S1App2App3M2readS2S3M1M3writesyncDBDBDBDBManageIntegrateGather数据库集群数据分片分布式事务分布式治理弹性扩展接入端分布式事务事务集成LocalAtomikosXANarayanaBASESagaSeata事务自研JDTXJDTXSaga :/apache/servicecomb-saga-actuator Seata： /seata/seata优势： 透明化底层分布式事务实现细节，用户可使用标准API开启分布式 事务。 支持同时使用数据分片，分布式事务等。 依据实际场景，用户可选择使用不同类型的分布式事务。“1-线上应用-l线上应用1功能