e78a84f228315a528/p7_1.jpg) Frequent Updates ## Chanllenges ## Possible Solutions 1 ## Replay binlog/oplog CRUD directly Can't update/delete table frequently in Clickhouse Not suitable for MongoDB tables SolidKey ## Typical Provider Config Type: mysql, // mysql, mongodb, redis Listen: binlog, // binlog, kafka DataSource: user:pass@tcp(example.com:3306)/user, Table: user, QueryKeys: [ // usually ID Name Gender ## PTS ## Provider Transform Sinker Transform MySQL Redis Transform Sinker binlog wait, batch deduplicated ids Query with id Result Query with id Result PTS Provider Transform

is a duck. ## 问题背景 上游 ## 业务系统 ## ( ) DB 下游 数据孤岛怎么办？ Single Source of Truth ## MySQL 怎么做 Binlog   ## PolarDB-X 完全兼容 MySQL Binlog 可行性 ## PolarDB-X CN CN DN CN DN DN ![Image](/uploads/documents/3/f/4/e/3f4ec83abe17d21c7 PolarDB-X 全局 Binlog：完全兼容 • 与 MySQL Binlog 体验完全一致 • 保障分布式事务完整性 - 透明：下游系统或工具改造成本为零 - 实现复杂度高 ## PolarDB-X Global Binlog 特性详情 提供与 MySQL 生态下游透明对接能力 ## 产品体验 • 与 MySQL Binlog 完全一致体验 • 文件格式兼容：Binlog v4 row-based

重制用户密码 58 删除非root用户 59 Binlog 同步 60 进入管理页面 60 开启 Binlog 61 全量数据迁移，记录CommitTS数据 65 添加消费者 67 查看消费者 70 删除消费者 72 修改 Binlog GC 73 关闭 Binlog 74 如何使用TiFlash 76 简介 76 步骤一 开启TiFlash for update，以及网络问题，执行事务TiDB会返回错误，有什么办法可以区分吗? 116 Q7: TiDB能否支持session级别的悲观锁 116 Q8: TiDB binlog的目标端在以下情况不支持udb-mysql5.6.41版本 116 Q9: 在 TiDB 中，表或字段设置为utf8 和 设置为 utf8mb4 的效果是否一样 117 Q10: 用户 - 备份恢复 - Dashboard/监控访问 - TiDB Serverless - 实例 - 用户 - Binlog同步 - TiFlash管理 - 备份恢复 - 参数配置调整 - 告警通知 - 证书管理 - 数据库审计

备份与迁移 备份与恢复 数据迁移 数据迁移概述 数据迁移 故障诊断 TiDB 周边工具 Syncer Loader TiDB-Binlog PD Control TiKV Control TiDB Controller TiDB-Binlog 部署方案 TiSpark 快速入门指南 TiSpark 用户指南 常见问题与解答(FAQ) TiDB Sysbench 性能测试报告 ■ 增量导入 ○ 故障诊断 • TiDB 周边工具 ○ Syncer ○ Loader ○ TiDB-Binlog ○ PD Control ○ TiKV Control ○ TiDB Controller • TiSpark 文档 warn, error 或者 fatal - P • TiDB 服务监听端口 • 默认：“4000” • TiDB 服务将会使用这个端口接受 MySQL 客户端发过来的请求 ## --binlog-socket • TiDB 服务使用 unix socket file 方式接受内部连接，如 PUMP 服务 • 默认：“” - 譬如使用 “/tmp/pump.sock” 来接受 PUMP

4.3.1 最小拓扑架构 ..... 106 4.3.2 TiFlash 部署拓扑 ..... 107 4.3.3 TiCDC 部署拓扑 ..... 108 4.3.4 TiDB Binlog 部署拓扑 ..... 108 4.3.5 TiSpark 部署拓扑 ..... 111 4.3.6 跨数据中心部署拓扑 ..... 114 4.3.7 混合部署拓扑 ..... 117 . 195 5.4.1 上游使用 pt-osc/gh-ost 工具的持续同步场景 ..... 195 5.4.2 下游存在更多列的迁移场景 ..... 197 5.4.3 如何过滤 binlog 事件 ..... 206 5.4.4 如何通过 SQL 表达式过滤 DML ..... 208 5.5 运维操作 ..... 210 6.1 升级 TiDB 版本 ..... 210 7.5.2 PD 报警规则 ..... 336 7.5.3 TiKV 报警规则 ..... 341 7.5.4 TiFlash 报警规则 ..... 349 7.5.5 TiDB Binlog 报警规则 ..... 349 7.5.6 TiCDC 报警规则 ..... 349 7.5.7 Node_exporter 主机报警规则 ..... 349 7.5.8 Blackbox_exporter

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 496 5.3.4 TiDB Binlog 部署拓扑 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 621 6.5.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 857 9.6.5 TiDB Binlog 报警规则 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·

Topology 137 4.3.2 TiFlash Deployment Topology 139 4.3.3 TiCDC Deployment Topology 142 4.3.4 TiDB Binlog Deployment Topology 144 4.3.5 TiSpark Deployment Topology 149 4.3.6 Geo-Distributed Deployment or pt-osc 263 5.4.2 Migrate Data to a Downstream TiDB Table with More Columns 265 5.4.3 Filter Binlog Events 273 5.4.4 Filter DML Events Using SQL Expressions 276 # 6 Maintain 279 6.1 Upgrade 279 alert rules ··· 465 7.5.3 TiKV alert rules ··· 471 7.5.4 TiFlash alert rules ··· 479 7.5.5 TiDB Binlog alert rules ··· 479 7.5.6 TiCDC Alert rules ··· 479 7.5.7 Node_exporter host alert rules ··· 480

2 TiFlash 部署拓扑 ..... 484 5.3.3 TiProxy 部署拓扑 ..... 493 5.3.4 TiCDC 部署拓扑 ..... 495 5.3.5 TiDB Binlog 部署拓扑 ..... 499 5.3.6 TiSpark 部署拓扑 ..... 508 5.3.7 跨数据中心部署拓扑 ..... 515 5.3.8 混合部署拓扑 ..... 521 复杂迁移场景 …… 624 6.5.1 上游使用 pt-osc/gh-ost 工具的持续同步场景 …… 624 6.5.2 下游存在更多列的迁移场景 …… 626 6.5.3 如何过滤 binlog 事件 …… 630 6.5.4 如何通过 SQL 表达式过滤 DML …… 633 7 数据集成 …… 635 7.1 数据集成概述 …… 635 7.1.1 与 Confluent 9.6.2 PD 报警规则 ..... 861 9.6.3 TiKV 报警规则 ..... 866 9.6.4 TiFlash 报警规则 ..... 873 9.6.5 TiDB Binlog 报警规则 ..... 873 9.6.6 TiCDC 报警规则 ..... 873 9.6.7 Node_exporter 主机报警规则 ..... 873 9.6.8 Blackbox_exporter

Topology 113 4.3.2 TiFlash Deployment Topology 115 4.3.3 TiCDC Deployment Topology 118 4.3.4 TiDB Binlog Deployment Topology 120 4.3.5 TiSpark Deployment Topology 125 4.3.6 Geo-Distributed Deployment 7.5.1 TiDB alert rules 336 7.5.2 PD alert rules 340 7.5.3 TiKV alert rules 345 7.5.4 TiDB Binlog alert rules 354 7.5.5 TiCDC Alert rules 354 7.5.6 Node_exporter host alert rules 354 7.5.7 subscription 773 11.3 Download TiDB Tools 773 11.3.1 TiUP 773 11.3.2 TiDB Operator 773 11.3.3 TiDB Binlog 773 11.3.4 TiDB Lightning 774 11.3.5 BR (backup and restore) 775 11.3.6 TiDB DM (Data Migration)

648 5.3.4 TiProxy Deployment Topology ··· 650 5.3.5 TiCDC Deployment Topology ··· 653 5.3.6 TiDB Binlog Deployment Topology ··· 656 5.3.7 TiSpark Deployment Topology ··· 661 5.3.8 Geo-Distributed Deployment alert rules ··· 1177 9.6.3 TiKV alert rules ··· 1183 9.6.4 TiFlash alert rules ··· 1192 9.6.5 TiDB Binlog alert rules ··· 1192 9.6.6 TiCDC Alert rules ··· 1192 9.6.7 Node_exporter host alert rules ··· are deprecated starting from v8.3.0: - Starting from v7.5.0, TiDB Binlog replication is deprecated. Starting from v8.3.0, TiDB Binlog is fully deprecated, with removal planned for a future release. For