become higher and higher?1206 7.7.12 When TiCDC replicates data to Kafka, can I control the maximum size of a single message in TiDB? · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1206 · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3375 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3376 14.4 TiDB Distributed eXecution Eliminates redundancy, caching more execution plans with the same memory consumption. • Allocates a fixed-size memory on the instance, limiting memory usage more effec- tively. In v8.4.0, instance-level execution

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3359 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3360 14.4 TiDB Distributed eXecution Eliminates redundancy, caching more execution plans with the same memory consumption. • Allocates a fixed-size memory on the instance, limiting memory usage more effec- tively. In v8.4.0, instance-level execution tidb_enable_instance �→ _plan_cache and set its maximum memory usage using tidb_instance_plan_cache �→ _max_size. Before enabling this feature, disable Prepared execution plan cache and Non-prepared execution plan

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3157 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3159 14.4 TiDB Distributed eXecution committing every fixed number of rows by setting the tidb_dml_batch_size system variable. Starting from v7.0.0, tidb_dml_batch_size no longer takes effect on LOAD DATA and TiDB commits all rows in one modifying the size limit of a single row record in TiDB #49237 @zyguan Before v7.6.0, the size of a single row record in a transaction is limited by the TiDB configuration item txn-entry-size-limit. If the

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3117 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3119 14.4 TiDB Distributed eXecution for statistics is deprecated in v7.5.0. 56 2.2.5 Improvements • TiDB • Optimize the concurrency model of merging GlobalStats: introduce tidb_enable_async_merge_global_stats �→ to enable simultaneous 2 5.1 5.0 4.0 MPP execution engine - compression exchange Y Y N N N N N N N N TiFlash Pipeline Model Y N N N N N N N N N TiFlash replica selection strategy Y N N N N N N N N N Index Merge Y Y Y Y Y

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3321 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3322 14.4 TiDB Distributed eXecution optimizes the process of load- ing statistics from multiple perspectives, such as the concurrency model and memory allocation, to reduce latency, improve throughput, and avoid slow loading of statistics concur- rency of the scan opera- tion when execut- ing the ANALYZE �→ opera- tion based on the cluster size. 44 Variable name Change type Description tidb_ �→ analyze �→ _ �→ skip �→ _ �→ column �→ _ �→

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3329 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3330 14.4 TiDB Distributed eXecution #50305 @tangenta In previous versions, querying system tables has poor performance when the cluster size becomes large and there are a large number of tables. In v8.0.0, query performance is optimized for variables 43 Variable name Change type Description tidb_ �→ ddl_ �→ reorg �→ _ �→ batch �→ _ �→ size Modified Adds the SES- SION scope. tidb_ �→ ddl_ �→ reorg �→ _ �→ worker �→ _cnt Modified Adds

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3288 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3289 14.4 TiDB Distributed eXecution @JinheLin 58 • Fix the issue that in the disaggregated storage and compute architecture, the disk used_size metric displayed in Grafana is incorrect after you modify the value of the storage.remote.cache.capacity Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y N N N N N N TiFlash Pipeline Model Y Y N N N N N N N TiFlash replica selection strategy Y Y N N N N N N N Index Merge Y Y Y Y Y Y E

· · · · · · · · · · · · · · · · · · · · · · · · · · · · 3249 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3250 14.4 TiDB Distributed eXecution