Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3157 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3159 14.4 TiDB Distributed Y Y Y Y Y Y Y Y Y N MPP execution engine - compression exchange Y Y Y N N N N N N N N TiFlash Pipeline Model Y Y N N N N N N N N N TiFlash replica selection strategy Y Y N N N N N N N N N Index Merge similar to that of TiDB flow control and TiKV scheduling: • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3117 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3119 14.4 TiDB Distributed 4 5.3 5.2 5.1 5.0 4.0 MPP execution engine - compression exchange Y Y N N N N N N N N TiFlash Pipeline Model Y N N N N N N N N N TiFlash replica selection strategy Y N N N N N N N N N Index Merge Y similar to that of TiDB flow control and TiKV scheduling: • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3375 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3376 14.4 TiDB Distributed processing a large number of such requests #9334 @JinheLin • Enhance the task waiting mechanism in the pipeline execution model #8869 @SeaRise • Improve the cancel mechanism of the JOIN operator, so that the Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y Y Y Y N N N N N N TiFlash Pipeline Model Y Y Y Y Y N N N N N N N TiFlash replica selection strategy Y Y Y Y Y N N N N N N N Index

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3359 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3360 14.4 TiDB Distributed processing a large number of such requests #9334 @JinheLin • Enhance the task waiting mechanism in the pipeline execution model #8869 @SeaRise • Improve the cancel mechanism of the JOIN operator, so that the Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y Y Y Y N N N N N N TiFlash Pipeline Model Y Y Y Y Y N N N N N N N TiFlash replica selection strategy Y Y Y Y Y N N N N N N N Index

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3321 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3322 14.4 TiDB Distributed engine Y Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y Y N N N N N N TiFlash Pipeline Model Y Y Y N N N N N N N TiFlash replica selection strategy Y Y Y N N N N N N N Index Merge Y to that of TiDB flow control and TiKV scheduling: 1018 • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3329 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3330 14.4 TiDB Distributed Y Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y Y Y N N N N N N TiFlash Pipeline Model Y Y Y Y N N N N N N N TiFlash replica selection strategy Y Y Y Y N N N N N N N Index Merge to that of TiDB flow control and TiKV scheduling: 1023 • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3288 14.3.15 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3289 14.4 TiDB Distributed engine Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y N N N N N N TiFlash Pipeline Model Y Y N N N N N N N TiFlash replica selection strategy Y Y N N N N N N N Index Merge Y Y Y to that of TiDB flow control and TiKV scheduling: 1015 • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3215 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3216 14.4 TiDB Distributed engine Y Y Y Y Y Y Y Y Y MPP execution engine - compression exchange Y Y Y N N N N N N TiFlash Pipeline Model Y Y N N N N N N N TiFlash replica selection strategy Y Y N N N N N N N Index Merge Y Y Y similar to that of TiDB flow control and TiKV scheduling: • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

Notes · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3249 14.3.14 TiFlash Pipeline Execution Model· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3250 14.4 TiDB Distributed Y Y Y Y Y Y Y Y N MPP execution engine - compression exchange Y Y Y Y N N N N N N N N TiFlash Pipeline Model Y Y Y N N N N N N N N N TiFlash replica selection strategy Y Y Y N N N N N N N N N Index similar to that of TiDB flow control and TiKV scheduling: • TiFlash flow control: With the TiFlash pipeline execution model, TiFlash can more accurately obtain the CPU consumption of different queries and

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 2519 14.3.14 TiFlash Pipeline Model 执行模型 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 5 6.1 5.4 5.3 5.2 5.1 5.0 4.0 MPP 执行引擎 - compression exchange Y Y Y Y N N N N N N N N TiFlash Pipeline 执行模型 Y Y Y N N N N N N N N N TiFlash 副本选择策略 Y Y Y N N N N N N N N N 索引合并 Y Y Y Y Y Y Y E E E E TiKV 调度类似： • TiFlash 流控：借助TiFlash Pipeline Model 执行模型，可以更精确地获取不同查询的 CPU 消耗情况，并转换 为Request Unit (RU) 进行扣除。流量控制通过令牌桶算法实现。 • TiFlash 调度：当系统资源不足时，会根据优先级对多个资源组之间的 pipeline task 进行调度。具体逻辑 是：首先判断资源组的优先级 PRIORITY，然后根据