TiDB Operator: Design & Implemention Presented by Yecheng Fu (@cofyc) PingCAP.com Agenda ● TiDB Operator 简介 ● 扩展 Kubernetes 的几种方式 ● TiDB Operator 实现 TiDB Operator 是什么 PingCAP.com Cloud Native Scaling - Handle network, hardware failures, etc. - Backup/Restore/Data migration - ... TiDB Operator TiDB PingCAP.com Kubernetes Pattern - Declarative Model - 用户描述自己的期望，提交给 Kubernetes API Server implemented TiDB Operator Kubernetes Pattern - Declarative Model PingCAP.com Operator Pattern - Extending Kubernetes TiDB Operator TiDB PD API Kubernetes API PingCAP.com Operator Pattern - Custom

defining. Competitors: TiDB feature similar optimizations to those that clickhouse has. These optimizations would normally make Clickhouse an ideal database solution for big data problems like registering Migration, and TiDB Lighting, to database management packages like TiUp, and a fully up-to-date Operator. This is not an extensive list but is meant to give an overview of the tools available, but is there exists a range of solutions that are up to date and supported. So for example Vitess has an Operator tool, this lacks support which results in issues while trying to set it up with Kubernetes. In

An extended analytical engine for TiDB ○ Columnar storage and vectorized processing ○ Based on ClickHouse with tons of proprietary modifications ● Data sync via extended Raft consensus algorithm ○ Strong b 0 kevin 107 b 0 joe L0 L0 L1 L0 L1 L2 MutableMergeTree Storage Engine (Based on MergeTree of ClickHouse, LSM-Tree like design) In memory, rowbased (raft, transaction, cache) Versioned rows (MVCC)

DeltaTree Adopting DeltaIndex to accelerate scan speed The scan speed of DeltaTree is 3x of ClickHouse in SELECT … FINAL The improvements in TiDB v6.2 PageStorage before 6.2 V1 V2 PageStorage in

TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 174 6.1.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 180 6.2 Cluster Using TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 180 6.2.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 191 6.3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 773 11.3.2 TiDB Operator· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 773

TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 198 6.1.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 205 6.2 Cluster Using TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 205 6.2.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 215 6.3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 831 11.3.2 TiDB Operator· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 831

TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 186 6.1.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 192 6.2 Cluster Using TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 192 6.2.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 202 6.3 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 805 11.3.2 TiDB Operator· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 805

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 147 6.1.2 使用 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 152 6.2.2 使用 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 611 11.3.2 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 139 6.1.2 使用 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 143 6.2.2 使用 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 590 11.3.2 TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·

TiUP · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 279 6.1.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 286 6.2 Cluster Using TiUP· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 286 6.2.2 Use TiDB Operator · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 296 5 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 945 11.3.2 TiDB Operator· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 945