The HTAP architecture design of TiDB, and the improvement in v6.2 Wei Wan @ PingCAP About Me Wei Wan, work at PingCAP, as the leader of OLAP Storage team. Over 11 years of experience in game, e-commerce database development. TiDB Introduction TiDB is an open-source NewSQL database that supports HTAP workloads. It is MySQL compatible and features horizontal scalability, strong consistency, and Processing), OLAP (Online Analytical Processing), and HTAP services. Agenda 1. A typical user case 2. The challenges to storage module on HTAP scenario 3. The improvements in TiDB v6.2 4. TiDB's future

TiDB with TiFlash Extension A Venture Towards the True HTAP Platform weiwan@pingcap.com 在此键入姓名 在此键入tittle About me ● Wei Wan ⻙韦万 ● R&D @ PingCAP ● Used to be a game / android / big-data dev, TiFlash? What Is TiFlash? TiFlash + = Distributed database with MySQL protocol AP extension Real HTAP database! Spark Cluster TiD BTiD B Region 1 TiKV Node 1 Store 1 Region 2 Region 3 Region 4 Region (MVCC) On disk, columnar (MVCC, AP performance) } } TiFlash is beyond columnar format ● An HTAP database needs to store huge amount of data ● Scalability is very important ● TiDB relies on multi-raft

Greenplum 新篇章： 兼容欧拉开源操作系统的数据平台 支持国产生态的高级分析数据平台 作者：Greenplum 中文社区、 欧拉开源社区 完全兼容欧拉开源操作系统的 HTAP 数据平台 Greenplum 白皮书 2 白皮书 | 2 ............................................................................... 8 Greenplum：新一代 HTAP 数据平台 ............................................................................................ Greenplum 6.17.0 版本 ............................................................. 13 完全兼容欧拉开源操作系统的 HTAP 数据平台 Greenplum 白皮书 3 白皮书 | 3

o 5.3 物流 中通快递 - 从 Exadata 到TiDB HTAP 的升级之路 …37 5.4 零售 多点DMall- TiDB 助力新零售"业财一体化"运营 “039 5.5 互联网 小红书-TiDB HTAP 助力小红书业务升级“0 41 美国点评 -TiDB Operator 开启云原生运维的新时代 。。*"，''，43 务，涉及金融、运营商、制造、零售、互联网、政府等多个行业 1.2 创新成果 ，。 论文(TiDB:ARaftbased HTAP Database}被国际三大顶级数据库会议VLDB 2020 收录, 成为业界第 一篇 Real-time HTAP 分布式数据库工业实现的顶级论文 *。 ”发明专利:一种键值存储系统沙《一种基于共识算法的 HTAP 数据库》 *。 ”计算机软件著作权登记证书: 分布式数据库 TiDB 企业版软件.Tiflash Migration L0 GA发呈 2020年5月 TiDB40GA发版 2020年9月 CNCF宣布Tiky 正式从CNCF毕业 -则 PingCAP 论文(TiDB:ARaftbased HTAP Database》 -二 入造YLDB2020 平交星友和北京银行获得 2020 年度亚洲银行家大奖 -直 机 关于 PingCAP 2015年9月 Tipe在GhHub 上开源 2016年4月

什么是 什么是TiDB 产品优势 产品优势 ⾼度兼容 MySQL 动态扩展 分布式事务 HTAP 真正⾦融级⾼可⽤ 适⽤场景 适⽤场景 对数据⼀致性及⾼可靠、系统⾼可⽤、可扩展性、容灾要求较⾼的⾦融⾏业属性的场景 对存储容量、可扩展性、并发要求较⾼的海量数据及⾼并发的 OLTP 场景 Real-time HTAP 场景 数据汇聚、⼆次加⼯处理的场景 真正⾦融级⾼可⽤ UCloud 云上 云上 TiDB Copyright © 2012-2021 UCloud 优刻得 10/120 什么是 什么是TiDB TiDB 是 PingCAP 公司研发的开源分布式关系型数据库。定位于在线事务处理、在线分析处理 HTAP 的融合型数据库产品。兼容 MySQL 协议，⽀持⽔平伸缩，具备强⼀致性和⾼可⽤性。 UCloud 基于PingCAP的TiDB，实现TiDB在公有云的产品化，给⽤⼾提供两种形态产品。TiDB：按 动态扩展 动态扩展 通过简单地增加新节点即可实现 TiDB 的⽔平扩展，按需扩展吞吐或存储，轻松应对⾼并发、海量数据场景。 分布式事务 分布式事务 TiDB 100% ⽀持标准的 ACID 事务。 HTAP 为在线事务处理、在线分析处理提供⼀站式解决⽅案，⽆需独⽴部署分析处理系统。 产品优势 分布式NewSQL数据库 TiDB Copyright © 2012-2021 UCloud 优刻得 12/120

托管平台 GitHub 信息 开源 许可证 2015年开源 分布式HTAP 数据库 公司项目 Apache 2.0 GitHub GitHub GitHub GitHub GitHub Apache 2.0 Apache 2.0 Apache 2.0 / 公司项目 CNCF CNCF 公司项目 分布式HTAP 数据库 云原生 混沌工程平台 开源软件洞察工具 分布式Key-Value https://github.c om/ping- cap/tidb 备注：以上仅选取部分代表性项目（数据截止于2023年5月6日） 全球开源态势洞察｜第十期 11 重点开源项目 TiDB：TiDB是全新一栈式实时HTAP数据库，于2015年在GitHub上开源，是一款定位于在线事务 处理/在线分析处理的融合型数据库产品，实现了一键水平伸缩，强一致性的多副本数据安全，分 布式事务，实时OLAP等重要特性。同时兼容M 2022年9月 2022年6月 2022年5月 2022年4月 2022年2月 2021年12月 2021年11月 2021年7月 2021年5月 2021年4月 TiDB首批通过信通院HTAP数据库基础能力评测 以“现在决定未来”为主题的PingCAP用户峰会在京线下成功举办 TiDB Cloud正式商用 TiFlash开源；TiDB 6.0正式发布 云原生混沌工程测试平台Chaos

2. 基于pgcypto的数据加密方案 3. GPDB数据透明加密方案设计 4. GPDB数据透明加解密流程 5. 总结 我们所面临的问题 什么是Greenplum数据库 一款开源的HTAP数据库: • MPP架构 • 完整的事务+ACID+标准SQL支持 • 支持上千个节点的部署 • 支持PB级文件 • 丰富的ETL和外部组件 • 支持Python/R/Java直接访问处理数据库数据 pgcypto的问题 一款开源的HTAP数据库: • MPP架构 • 完整的事务+ACID+标准SQL支持 • 支持上千个节点的部署 • 支持PB级文件 • 丰富的ETL和外部组件 • 支持Python/R/Java直接访问处理数据库数据 • https://github.com/greenplum-db/gpdb Recall pgcypto的问题 一款开源的HTAP数据库: • MPP架构 pgcypto的问题 一款开源的HTAP数据库: • MPP架构 • 完整的事务+ACID+标准SQL支持 • 支持上千个节点的部署 • 支持PB级文件 • 丰富的ETL和外部组件 • 支持Python/R/Java直接访问处理数据库数据 • https://github.com/greenplum-db/gpdb Recall again GPDB透明加密 一款开源的HTAP数据库: • MPP架构

の組み合わせ方について 一緒に学んでいきましょう? よろしくお願いします！ Open Source Conference 2022 Online/Spring 9 TiDB とは TiDB は HTAP ワークロードをサポートするオープンソースの NewSQLデータベースです TiDB は MySQL と互換性があり、水平方向のスケーラビリ ティ、強力な一貫性、および高可用性を備えています す 主に PingCAP 社によって開発されています https://github.com/pingcap/tidb ※ TiDB の Ti は Titanium の Ti ※ HTAP は Hybrid Transactional and Analytical Processing Open Source Conference 2022 Online/Spring 10 TiDB Open Source Conference 2022 Online/Spring 23 TiDB の特徴 (Minimize ETL) TiDB は OLTP と OLAP を同時にサポート(HTAP)しています ETL に読ませるために、わざわざ分析用のデータに変換する必 要がありません (別途 TiFlash というコンポーネントを動かす 必要があります) あと実は MySQL

results in issues while trying to set it up with Kubernetes. In real-time analytics TiDB is using HTAP, which is also known as hybrid transaction/analytics processing, transactions—like updating a may be supported by an HTAP database, which offers speed and simplicity. TiDB is using Storage engines, Data consistency, Data isolation, and the MPP computing engine of HTAP. Unlike some other architectures

CURRENT_TIMESTAMP); END; HTAP - Hybrid transactional/analytical processing - 混合事务/分析处理 Gartner技术成熟度曲线 OLTP-OLAP独立部署 OLTP数据库 OLAP数据仓库 ■ 实时性 ■ 数据同步复杂性 ■ 应用复杂性 HTAP HTAP = ? ■ 卓越的OLAP特性 ■ 出色的OLTP特性