TiDB 实践 HTAP 的架构进展和未来展望-韦万

• 语言: 中文（简体）
• 格式: .pdf
• 来源: github.com/baiyutang

摘要

TiDB 是一个开源的 NewSQL 数据库，支持 HTAP 工作负载，兼容 MySQL，具有水平扩展、高可用性和强一致性的特点。其目标是为用户提供一站式数据库解决方案，覆盖 OLTP、OLAP 和 HTAP 服务。文档介绍了 TiDB 的核心架构，以及在 v6.2 版本中对存储模块的改进，包括在 HTAP 场景下的挑战和优化。未来，TiDB 将继续在架构上进行演进，以更好地支持复杂的在线事务和分析处理需求。

AI总结

《TiDB 实践 HTAP 的架构进展和未来展望-韦万》文档总结：

文档介绍了TiDB在HTAP（ Hybrid Transactional/Analytical Processing）领域的架构进展及未来发展方向。以下是核心内容的总结：

1. **TiDB 简介**
TiDB 是一款开源的 NewSQL 数据库，支持 HTAP 工作负载，兼容 MySQL，具有横向扩展、高一致性和高可用性。其目标是为用户提供一站式解决方案，涵盖 OLTP（在线事务处理）、OLAP（在线分析处理）和 HTAP 服务。

2. **典型用户案例**
以 ZTO 的运单系统为例，用户从 Exadata 迁移到 TiDB 后，HTAP 场景下的性能得到了显著提升。

3. **HTAP 场景下的存储模块挑战**
在 HTAP 场景中，存储模块面临以下挑战：
- 实时性要求高，但数据量大且有时效性。
- 存储结构需要兼顾 OLTP 和 OLAP 的需求。
- 高吞吐写入与查询性能之间存在权衡。
- 数据版本控制复杂，需在多版本并发控制（MVCC）中平衡性能与一致性。

4. **TiDB 6.2 的改进**
TiDB 6.2 版本在存储模块进行了多项优化：
- **Raft 日志优化**：减少 Raft 日志的大小，提升写入与同步效率。
- **分区表改进**：支持灵活的分区策略，兼顾写入与查询性能。
- **日志组成并行写入**：优化事务日志写入逻辑，提升写入吞吐量。
- **列式存储支持**：初步引入列式存储，优化分析型查询性能。

5. **TiDB 未来的架构发展方向**
未来，TiDB 的架构将重点关注以下三个方向：
- **分区感知调度**：优化数据分布与调度算法，提升资源利用率。
- **列式存储增强**：进一步完善列式存储功能，提升分析查询效率。
- **多核并行技术**：利用多核 CPU 的并行计算能力，提升 HTAP 场景下的整体性能。

6. **总结**
TiDB 在 HTAP 领域取得了显著进展，通过 TiDB 6.2 的优化提升了存储模块的性能与效率。未来，TiDB 将继续推动架构创新，进一步巩固其在 HTAP 领域的技术优势，并为用户提供更高效、更灵活的数据库解决方案。