· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 865 9.5 将 Grafana 监控数据导出成
快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 865 该功能与用于数据加载的导入、加载和恢复操作不同。
提升 BR �→ 快照恢复速度 (GA) | 通过该功能,BR 可以充分利用集群的规模优势,使 TiKV �→ 集群中的所有节点都能参与到数据恢复的准备阶段,从而显著提升大规模集群中大数据集的恢复速度 更多信息,请参考用户文档。 2.2.1.2 性能 • BR 快照恢复速度提升 GA #50701 @3pointer @Leavrth 从 TiDB v8.0.0 版本起,BR 快照恢复提速功能正式发布并默认启用。通过采用粗粒度打散 Region 算法、批 量创建库表、降低 SST 文件下载和 Ingest 操作之间的相互影响、加速表统计信息恢复等改进措施,快照 恢复的速度有大幅提升。在实际案例中,单个 TiKV 0 码力 |
4805 页 |
101.28 MB
| 1 年前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 849 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 849 rowspan="5">可扩展性与性能 | 提升 BR �→ 快照恢复速度(从 v8.0.0 开始 GA) | 通过该功能,BR 可以充分利用集群的规模优势,使 TiKV �→ 集群中的所有节点都能参与到数据恢复的准备阶 @nolouch – 为 LDAP 身份认证添加超时机制,避免资源锁 (RLock) 无法及时释放的问题 #51883 @YangKeao • TiKV – 在 Raftstore 线程中避免进行快照文件的 IO 操作,提高 TiKV 稳定性 #16564 @Connor1996 – 加快 TiKV 停机的速度 #16680 @LykxSassinator – 增加每个线程内存使用量的监控指标 0 码力 |
4807 页 |
101.31 MB
| 1 年前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 818 7.6.6 TiDB 主从集群数据校验和快照读· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 821 7.6.7 · · · · · · · · · · · · · · · · · · · · · · · · · · 953 7.8.12 TiCDC 把数据同步到 Kafka 时,能在 TiDB 中控制单条消息大小的上限吗? · · · · · · · · · · · · · · · 953 7.8.13 在一个事务中对一行进行多次修改,TiCDC 会输出多条行变更事件吗? · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1205 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1206 0 码力 |
5095 页 |
104.54 MB
| 10 月前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 951 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 952 的查询响应时间,提升集群吞吐,减少执行计划突变的可能性,并保持集群性能的稳定。相比会话级 执行计划缓存,实例级执行计划缓存具有以下优势: – 消除冗余,在相同的内存消耗下缓存更多执行计划。 – 在实例上分配固定大小的内存区域,更有效地限制内存使用。 在 v8.4.0 中,实例级执行计划缓存仅支持对查询的执行计划进行缓存,且默认关闭。你可以通过系统变 量tidb_enable_instance_plan_cache (RESOURCE_GROUP、MAX_REQUEST_UNIT_WRITE、MAX_ �→ REQUEST_UNIT_READ、MAX_PROCESSED_KEYS),根据历史执行情况决定条件值的大小。 更多信息,请参考用户文档。 • 超出预期的查询 (Runaway Queries) 支持切换资源组 #54434 @JmPotato v8.4.0 新增支持将 Runaway Queries 0 码力 |
5072 页 |
104.05 MB
| 10 月前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 855 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 855 href="https://docs.pingcap.com/zh/tidb/v7.6/br-snapshot-guide#恢复快照备份数据">BR �→ 快照恢复速度最高提升 10 倍(实验特性) | BR v7.6.0 实验性地引入了粗粒度打散 Region 算法,用于提升集群的快照恢复速度。在 TiKV �→ 节点较多的集群中,该算法可显著提高集群资源利用率,更均匀地分配负载, �→ 信息时会将请求均匀地发送到所有 PD 节点上,使 PD follower 也可以处理 Region 请求,从而减轻 PD leader 的 CPU 压力。 更多信息,请参考用户文档。 2.2.1.2 性能 • BR 快照恢复速度最高提升 10 倍(实验特性)#33937 #49886 @3pointer 随着 TiDB 集群规模的不断扩大,故障时快速恢复集群以减少业务中断时间显得尤为重要。在 v7.6.0 之前 的版本中,Region 0 码力 |
4666 页 |
101.24 MB
| 1 年前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 885 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 886 请求时,默认 使用新版本的 Region 副本选择器。 – 从 v8.2.0 开始,BR 快照恢复参数 --concurrency 被废弃。作为替代,你可以通过--tikv-max-restore �→ -concurrency 配置快照恢复阶段单个 TiKV 节点的任务最大并发数。 – 从 v8.2.0 开始,BR 快照恢复参数 --granularity 被废弃,粗粒度打散 Region 算法默认启用。 #17078 @LykxSassinator – 利用单独的线程来进行副本清理工作,保证 Raft 读写关键路径的延迟稳定 #16001 @hbisheng – 提升正在进行 apply 的 Raft 快照数量的可观测性 #17078 @hbisheng • PD – 优化提升 Region 心跳处理的性能 #7897 @nolouch @rleungx @JmPotato 43 – pd-ctl 0 码力 |
4987 页 |
102.91 MB
| 10 月前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 784 9 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 784 支持密码管理策略,满足密码合规审计需求。 • TiDB Lightning 和 Dumpling 支持导入和导出压缩格式文件。 • TiDB Data Migration (DM) 的增量数据校验特性 GA。 • TiDB 快照备份支持断点续传,此外PITR 的恢复性能提升了 50%,通用场景下 RPO 降低到 5 分钟。 • TiCDC 同步数据到 Kafka,吞吐从 4000 行每秒提升到 35000 行每秒,复制延迟降低到 10 备份和恢复 • TiDB 快照备份支持断点续传 #38647 @Leavrth TiDB 快照备份功能支持断点续传。当 BR 遇到可恢复的错误时会进行重试,但是超过固定重试次数之后 会备份退出。断点续传功能允许对持续更长时间的可恢复故障进行重试恢复,比如几十分钟的网络故 障。 需要注意的是,如果你没有在 BR 退出后一个小时内完成故障恢复,那么还未备份的快照数据可能会被 GC 机制回收, 0 码力 |
4049 页 |
94.00 MB
| 1 年前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 843 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 843 息。 TiCDC case- �→ sensitive �→ 修改 经进一步 的测试后, 默认值由 true 改为 false,即 默认情况 下 TiCDC 配 置文件中 涉及的表 名、库名 大小写不 敏感。 TiCDC sink. �→ dispatchers �→ . �→ partition �→ 修改 控制增量 数据的 Kafka Partition 分 发策略, 可选值新 增 调度的稳定性和易用性 #7156 @LykxSassinato • Tools – Backup & Restore (BR) * 快照备份新增表间备份参数 table-concurrency,用于控制统计信息备份、数据校验等元信息 的表间并发度 #48571 @3pointer * 快照备份恢复在遇到某些网络错误时会进行重试 #48528 @Leavrth 44 2.2.6 错误修复 • TiDB 0 码力 |
4590 页 |
100.91 MB
| 1 年前 3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 695 9.5 将 Grafana 监控数据导出成快照 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 695 Performance Overview 面板,你可以直观地看到整个系统的性能瓶颈在哪 里,数量级地缩短了性能诊断时间并降低了性能分析和诊断难度。 用户文档 2.2.1.3 性能 • 支持自定义 Region 大小 从 v6.1.0 起,你可以通过coprocessor.region-split-size 设置更大的 Region 从而有效减少 Region 数量, 降低 Region 管理成本,提升集群性能和稳定性。 DB 引入 bucket 概念,即将每个 Region 划分为更小 的区间 bucket。使用 bucket 作为并发查询单位能够优化 Region 调大时的查询性能,动态调整热点 Region 的大小来保证热点调度效率和负载均衡。该特性目前属于实验特性,不建议在生产环境使用。 用户文档,#11515 • Raft Engine 存储引擎 GA TiDB 从 v6.1.0 开始默认使用引擎 Raft 0 码力 |
3572 页 |
84.36 MB
| 1 年前 3
|