· · · · · · · · · · 1947 13.2.4 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · --format 指定的方式解码，再被送到 TiKV 上去，目前支持以下解码 方式： • “raw”：不进行任何操作，将输入的字符串直接编码为二进制格式的键。 • “hex”：将输入的字符串视作十六进制数字。这是默认的编码方式。 • “escape”：对输入的字符串进行转义之后，再编码为二进制格式。 6.3.1.2.3 使用 BR 命令行恢复集群数据 使用 br restore 命令来恢复备份数据。可选择添加 --ratelimit 128 \ --format hex \ --cf default 以上命令会将范围在 [0x31, 0x3130303030303030) 的已备份键恢复到 TiKV 集群中。这里键的编码方式和备份 时相同。 在线恢复（实验性功能） 警告： 在线恢复功能还在实验中，没有经过完备的测试，同时还依赖 PD 的不稳定特性 Placement Rules。暂时请避免在生产环境中使用该功能。

· · · · · · · · · · 1898 13.2.4 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · --format 指定的方式解码，再被送到 TiKV 上去，目前支持以下解码 方式： • “raw”：不进行任何操作，将输入的字符串直接编码为二进制格式的键。 • “hex”：将输入的字符串视作十六进制数字。这是默认的编码方式。 • “escape”：对输入的字符串进行转义之后，再编码为二进制格式。 6.3.1.2.3 使用 BR 命令行恢复集群数据 使用 br restore 命令来恢复备份数据。可选择添加 --ratelimit 128 \ --format hex \ --cf default 以上命令会将范围在 [0x31, 0x3130303030303030) 的已备份键恢复到 TiKV 集群中。这里键的编码方式和备份 时相同。 在线恢复（实验性功能） 警告： 在线恢复功能还在实验中，没有经过完备的测试，同时还依赖 PD 的不稳定特性 Placement Rules。暂时请避免在生产环境中使用该功能。

· · · · · · · · · · 2039 13.2.4 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · Lightning 增加了执行前检查配置的功能。默认开启。该功能会自动进行一些磁盘空间和执行配置的 常规检查，主要目的是确保后续的整个导入过程顺利。 用户文档 • TiDB Lightning 支持导入 GBK 编码的文件 通过指定源数据文件的字符集，TiDB Lightning 会在导入过程中将源文件从指定的字符集转换为 UTF-8 编 码。 用户文档 • Sync-diff-inspector 优化 * 修复当扫描存量数据耗时过长时，可能由于 TiKV 进行 GC 而导致存量数据扫描失败的问题 #2470 * 修复在将某些类型的列编码为 Open Protocol 格式时，TiCDC 进程可能 panic 的问题 #2758 * 修复在将某些类型的列编码为 Avro 格式时，TiCDC 进程可能 panic 的问题 #2648 – TiDB Binlog * 修复当大部分表被过滤掉时

· · · · · · · · · · 2489 13.2.4 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · --format 指定的方式解码，再被送到 TiKV 上去，目前支持以下解码 方式： • “raw”：不进行任何操作，将输入的字符串直接编码为二进制格式的键。 • “hex”：将输入的字符串视作十六进制数字。这是默认的编码方式。 • “escape”：对输入的字符串进行转义之后，再编码为二进制格式。 6.3.1.2.3 使用 BR 命令行恢复集群数据 使用 br restore 命令来恢复备份数据。可选择添加 --ratelimit 128 \ --format hex \ --cf default 以上命令会将范围在 [0x31, 0x3130303030303030) 的已备份键恢复到 TiKV 集群中。这里键的编码方式和备份 时相同。 在线恢复（实验性功能） 警告： 在线恢复功能还在实验中，没有经过完备的测试，同时还依赖 PD 的不稳定特性 Placement Rules。暂时请避免在生产环境中使用该功能。

· · · · · · · · · · 3140 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 共享。 用户文档，#4423 – TiCDC 支持 SASL GSSAPI 认证类型。增加了使用 Kafka 的 SASL 认证示例。 用户文档，#4423 • TiCDC 支持同步使用 GBK 编码的上游表。 用户文档，#4806 2.2.2 兼容性变更 2.2.2.1 系统变量 37 变量 名 修改 类型 描述 tidb_ �→ enable �→ _ �→ list �→ _ �→ txn-total �→ -size-limit 调整，低于 TiDB v4.0 的版本支持的最大单个事务容量为 100MB）。 另外注意，无论是大小限制还是行数限制，还要考虑事务执行过程中，TiDB 做编码以及事务额外 Key 的开销。 在使用的时候，为了使性能达到最优，建议每 100 ～ 500 行写入一个事务。 4.8.3.6 自动提交的 SELECT FOR UPDATE 语句不会等锁 自动提交下的

· · · · · · · · · · 3671 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · txn-total �→ -size-limit 调整，低于 TiDB v4.0 的版本支持的最大单个事务容量为 100MB）。 另外注意，无论是大小限制还是行数限制，还要考虑事务执行过程中，TiDB 做编码以及事务额外 Key 的开销。 在使用的时候，为了使性能达到最优，建议每 100 ～ 500 行写入一个事务。 4.8.3.6 自动提交的 SELECT FOR UPDATE 语句不会等锁 自动提交下的 • 其中 需要经过 HTML URL 编码后再替换，替换完毕后示例如下： tiup cdc:v cli changefeed create --server="http://127.0.0.1:8300"

· · · · · · · · · · 3978 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 使用了加密密码，需参考DM 自定义加解密 key 中的升级步骤进行额外操作。#9492 @D3Hunter • 在之前版本中，启用添加索引加速功能 (tidb_ddl_enable_fast_reorg = ON) 后，编码后的索引键值 ingest 到 TiKV 的过程使用了固定的并发数 (16)，并未根据下游 TiKV 的处理能力进行动态调整。从 v8.0.0 开 始，支持使用tidb_ddl_reorg_worker_cnt txn-total �→ -size-limit 调整，低于 TiDB v4.0 的版本支持的最大单个事务容量为 100MB）。 另外注意，无论是大小限制还是行数限制，还要考虑事务执行过程中，TiDB 做编码以及事务额外 Key 的开销。 在使用的时候，为了使性能达到最优，建议每 100 ～ 500 行写入一个事务。 4.8.3.6 自动提交的 SELECT FOR UPDATE 语句不会等锁 自动提交下的

· · · · · · · · · · 3967 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · txn-total �→ -size-limit 调整，低于 TiDB v4.0 的版本支持的最大单个事务容量为 100MB）。 另外注意，无论是大小限制还是行数限制，还要考虑事务执行过程中，TiDB 做编码以及事务额外 Key 的开销。 在使用的时候，为了使性能达到最优，建议每 100 ～ 500 行写入一个事务。 4.8.3.6 自动提交的 SELECT FOR UPDATE 语句不会等锁 自动提交下的 • 其中 需要经过 HTML URL 编码后再替换，替换完毕后示例如下： tiup cdc:v cli changefeed create --server="http://127.0.0.1:8300"

· · · · · · · · · · 3470 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · TiKV。TiDB Lightning 删除本地临时文件后，再 继续导入过程。 有这个功能之前，TiDB Lightning 在使用物理模式导入数据时，会在本地磁盘创建大量的临时文件，用来 对原始数据进行编码、排序、分割。当用户本地磁盘空间不足时，TiDB Lightning 会由于写入文件失败而 报错退出。推出该功能后，可避免 TiDB Lightning 任务写满本地磁盘。 更多信息，请参考用户文档。 #36910 @MoCuishle28 * 日志备份的 TLS 功能使用 OpenSSL 协议，提升 TLS 的兼容性 #13867 @YuJuncen – TiCDC * 提升 Kafka 相关协议的编码性能 #7540 #7532 #7543 @3AceShowHand @sdojjy – TiDB Data Migration (DM) * 通过不再解析黑名单中表的数据提升 DM 同步数据的性能

· · · · · · · · · · 3870 15.3.8 TiDB 的 codec 能保证 UTF8 的字符串是 memcomparable 的吗？我们的 key 需要支持 UTF8，有什 么编码建议吗？ · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 函数可能导致数据竞争的问题 #49677 @lcwangchao – 修复由于 STREAM_AGG() 错误处理 CI 导致查询结果有误的问题 #49902 @wshwsh12 – 修复将字节转换为 TIME 时出现编码失败的问题 #47346 @wshwsh12 – 修复 CHECK 约束的 ENFORCED 选项的行为与 MySQL 8.0 不一致的问题 #47567 #47631 @jiyfhust – 修复 txn-total �→ -size-limit 调整，低于 TiDB v4.0 的版本支持的最大单个事务容量为 100MB）。 另外注意，无论是大小限制还是行数限制，还要考虑事务执行过程中，TiDB 做编码以及事务额外 Key 的开销。 在使用的时候，为了使性能达到最优，建议每 100 ～ 500 行写入一个事务。 4.8.3.6 自动提交的 SELECT FOR UPDATE 语句不会等锁 自动提交下的