Apache ShardingSphere Shadow DB 及在 CyborgFlow 中的应用 - 侯阳侯阳 2022年1月15日 01 SphereEx 中间件研发工程师 Apache ShardingSphere Contributor 目前专注于 Shadow DB 及全链路压测相关的设计和研发 Apache ShardingSphere 发展和现状 Apache ShardingSphere 架构设计 Apache ShardingSphere Roadmap 1.x (2016) 全链路压测:流量规划,比如双 11,618 等 灰度发布:指定测试用户的体验版本发布 服务预热:预热数据隔离 对比测试:基于版本的对比测试 Shadow DB Scenes 4.1.1 Shadow DB API rules: - !SHADOW column: shadowMappings: ds: shadow_ds Shadow DB 重构的原因 5.0.0 Shadow DB API Shadow Datasource 影子数据源 用于存储隔离数据的数据源。 压力测试尽量与生产数据库一 致。 功能测试和灰度测试可以使用 相同数据库。 Shadow Table 影子表 压测业务涉及相关的表我们称 为影子表。压测相关业务场景 需要很多基础信息比如字典表 等,并不会产生压测数据。影 子库只需要创建产生压测数据 的影子表即可。 Shadow Algorithm 影子算法0 码力 | 22 页 | 3.83 MB | 1 年前3
解密SHARDINGSPHERE与SERVICECOMB联合打造的分布式事务解决方案联合打造的分布式事务解决方案 京东数科-潘娟 panjuan@apache.org 2 github.com/apache?q=servicecomb servicecomb.apache.org Apache ShardingSphere生态 1 Apache ShardingSphere事务体系 2 Apache ServiceComb-saga 3 分布式事务解决方案的合作与探索 com/apache?q=servicecomb servicecomb.apache.org Apache ShardingSphere简介 完全开源 Apache的首个分布式数据库中间件 gitHub近8000star,近百家公司的成功落地案例 核心功能:数据分片&分布式事务&数据库治理 多接入端选择 京东主导,多公司&社区参与推动 4 github.com/apache?q=servicecomb org 分布式事务的需求体现 垂直拆分 水平拆分 混合拆分 本地事务 分布式事务 单机部署 10 github.com/apache?q=servicecomb servicecomb.apache.org 分布式事务概述 金融 CAP原则 Consistency 2PC事务 XA Availability BASE事务 saga TCC 基于可靠消息 的事务 Partition0 码力 | 19 页 | 4.18 MB | 1 年前3
Apache ShardingSphere 中文文档 5.4.18.1.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据高并发的 OLTP 场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据实时分析 OLAP 场景 . . . . . . 36 8.3.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 复杂的主从数据库架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 8.3.5 相关参考 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于 Hint 的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于列的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 530 页 | 4.49 MB | 1 年前3
Apache ShardingSphere 中文文档 5.2.03.1.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17 海量数据高并发的 OLTP 场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17 海量数据实时分析 OLAP 场景 . . . . . . 32 3.3.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 32 复杂的主从数据库架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 32 3.3.5 相关参考 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44 基于 Hint 的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44 iv 基于列的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 449 页 | 5.85 MB | 1 年前3
Mybatis 3.3.0 中文用户指南SQL、存储过程以及高级映射的优秀的持久层框架。MyBatis 避免了几乎所有的 JDBC 代码和手动设置参数以 及获取结果集。MyBatis 可以对配置和原生Map使用简单的 XML 或注解,将接口和 Java 的 POJOs(Plain Old Java Objects,普通的 Java对象)映射成数据库中的记录。 帮助改进文档 帮助改进文档... 不管你以何种方式发现了文档的不足,或是丢失对某一特性的描述,那 么你能做的最好的事情莫过于去研究它并把文档写出来。 该文档 xdoc 格式的源码文件可通过项目的 Git 代码库 来获取。Fork 该源码库,做出更新,然后提交一个 pull request 吧。 你将成为本文档的最佳作者,MyBatis 的用户定会过来查阅的。 当前的国际化版本 当前的国际化版本 MyBatis 的其他语言版本: English Español 日本語 한국어 简体中文 简体中文 你想使用本地语言来了解MyBatis吗?那就将它翻译成你的母语并提供给我们吧! 最近更新: 24 五月 2015 最近更新: 24 五月 2015 || 版本: 3.3.0 版本: 3.3.0 This PDF was generated via the PDFmyURL web conversion service! Copyright © 2010–2015 MyBatis.org0 码力 | 98 页 | 2.03 MB | 1 年前3
Apache ShardingSphere v5.5.0 中文文档8.1.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据高并发的 OLTP 场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据实时分析 OLAP 场景 . . . . . . 36 8.3.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 复杂的主从数据库架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 8.3.5 相关参考 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于 Hint 的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于列的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 557 页 | 4.61 MB | 1 年前3
Apache ShardingSphere 中文文档 5.3.28.1.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据高并发的 OLTP 场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 海量数据实时分析 OLAP 场景 . . . . . . 36 8.3.4 应用场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 复杂的主从数据库架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 8.3.5 相关参考 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于 Hint 的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 46 基于列的影子算法 . . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 508 页 | 4.44 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.0. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 300 7.8.1 [JDBC] 为什么配置了某个数据连接池的 spring‐boot‐starter(比如 druid)和 shardingsphere‐jdbc‐spring‐boot‐starter 时,系统启动会报错? . . . . . . . . . . . . . . . . 300 7.8.3 [JDBC] 引入 shardingsphere-transaction-xa-core 后,如何避免 spring‐ boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 301 7.8.4 [Proxy] Windows 环境下,运行 Shardi ShardingSphere‐Proxy 的时候,如何动态在添加新的 logic schema? . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 301 7.8.6 [Proxy] 在 使 用 ShardingSphere‐Proxy 时, 怎 么 使 用 合 适 的 工 具 连 接 到 ShardingSphere‐Proxy?0 码力 | 406 页 | 4.40 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.1. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 304 7.8.1 [JDBC] 为什么配置了某个数据连接池的 spring‐boot‐starter(比如 druid)和 shardingsphere‐jdbc‐spring‐boot‐starter 时,系统启动会报错? . . . . . . . . . . . . . . . . 304 7.8.3 [JDBC] 引入 shardingsphere-transaction-xa-core 后,如何避免 spring‐ boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 305 7.8.4 [Proxy] Windows 环境下,运行 Shardi ShardingSphere‐Proxy 的时候,如何动态在添加新的 logic schema? . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 305 7.8.6 [Proxy] 在 使 用 ShardingSphere‐Proxy 时, 怎 么 使 用 合 适 的 工 具 连 接 到 ShardingSphere‐Proxy?0 码力 | 409 页 | 4.47 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.2. . . 198 区分同一日志中的 database . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 198 区分同一日志中的 database 和用户 . . . . . . . . . . . . . . . . . . . . . . . . . . 199 拆分为不同的日志文件 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 316 7.8.1 [JDBC] 为什么配置了某个数据连接池的 spring‐boot‐starter(比如 druid)和 shardingsphere‐jdbc‐spring‐boot‐starter 时,系统启动会报错? . . . . . . . . . . . . . . . . 316 7.8.3 [JDBC] 引入 shardingsphere-transaction-xa-core 后,如何避免 spring‐ boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 316 7.8.4 [Proxy] Windows 环境下,运行 Shardi0 码力 | 446 页 | 4.67 MB | 1 年前3
共 24 条
- 1
- 2
- 3













