TiDB 开源分布式关系型数据库具备水平扩容或者编容、金融级高可用、实时 HTAP,云原生的分 布式数据库、兼容 MySQL 5.7协议和 MySQL 生态等重要特性, 向用户提供一站式 OLTP.OLAPHTAP 解决 方案,适用于对高可用、一致性要求高、数据规模较大等应用场景。 目前TiDB 项目在 GitHub 上已总计获得超过 25000 颗星, 累计超过 1000 位开源贡献者, 是国内基础架构 领域的顶级开源项目。2020 年 9 月, TiDB v 妆据 CDC 迁移 同步I具 7 7 7 时 产品技术支持服务 社区支持 商业支持 专业商业支持团队 8 。。 支持积取 。。 获得产品技术支持的通道与方法 TDB 和区网站及 。。 (电话,JM 邮件, 和途径 GiHub Nt vs 吕late. TiCDC 系统架构图 通过TiCDC 工具,用户可以非常方便及安全可靠的实现: * TiDB 分布式数据库的数据实时同步 *。 ”匹配任何规模 TiDB 集群的水平扩展能力 。 同步任务的高可用 *。 对接丰富的第三方生态 (Canal/ Kafka Connect) PingCAP.COM 数据导入-TiDB Lightning0 码力 | 58 页 | 9.51 MB | 1 年前3
PingCAP TiDB&TiKV Introduction OLTPPingCAP 划时代的 NewSQL 分布式关系型数据库 技术团队 刘奇 | CEO Co-Founder 前京东 / 豌豆荚资深架构师,知名开源分 布式缓存项目 Codis 作者, 国内 Go 语言 社区知名技术领袖之一 黄东旭 | CTO Co-Founder 前微软亚洲研究院 / 网易有道 / 豌豆荚 全栈工程师,架构师, Codis 共同作者, Open Source Hacker,业界知名程序员 Codis 作者。 Codis 是基于 Redis 的分布式集群解决方案, 为用户提供在线弹性伸缩和高性能的缓存服务,该项目 目前已广泛被各大互 联网公司(百度/小米/滴滴/猎豹 等)采用。 核心技术团队均为一线互联网公司基础架构部资深架构师,有技术改变世界的强烈抱负。 2013年以后 2008年至2013年 2008年以前 • 背景:应用最为广泛的数据库;能 很好的解决复杂的数据运算及表 型数据库,大数据的存储刚需不可 避免 • 挑战:基于 Google Spanner/F1 论 文,基础软件最前沿的领域之一,技 术门槛最高 资料来源:公开资料整理 数据库技术发展演进 Google - 大规模分布式计算领域的领跑者 2003 GFS 2004 MapReduce 2006 BigTable 2012 Spanner 2013 F1 BigTable Map Reduce GFS Google0 码力 | 21 页 | 613.54 KB | 6 月前3
TiDB v5.3 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高 可用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩容或者缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 存储分别进行扩容和缩容,计算最大支持 512 节点,每个节点最大支持 1000 并发,集群容量最大支持 PB 级别。 • Real-time HTAP 场景 随着 5G、物联网、人工智能的高速发展,企业所生产的数据会越来越多,其规模可能达到数百 TB 甚 至 PB 级别,传统的解决方案是通过 OLTP 型数据库处理在线联机交易业务,通过 ETL 工具将数据同步到 OLAP 型数据库进行数据分析,这种处理方案存在存储成本高、实时性差等多方面的问题。TiDB 命令的支持,实现在线数据有损恢复。当多数副本发生 了永久性损坏(如磁盘损坏)等问题,导致无法在业务层读写一段数据时,PD 可以执行在线数据恢复, 使该数据恢复至可读写状态。 进行该功能相关操作时,建议在 TiDB 团队支持下完成。 用户文档,#10483 2.2.2.5 数据迁移 • 提高 DM 同步性能 支持以下功能,实现以更低的延迟将数据从 MySQL 同步数据到 TiDB。 – 合并单行数据的多次变更0 码力 | 2374 页 | 49.52 MB | 1 年前3
TiDB v6.1 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高 可用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩容或者缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 存储分别进行扩容和缩容,计算最大支持 512 节点,每个节点最大支持 1000 并发,集群容量最大支持 PB 级别。 • Real-time HTAP 场景 随着 5G、物联网、人工智能的高速发展,企业所生产的数据会越来越多,其规模可能达到数百 TB 甚 至 PB 级别,传统的解决方案是通过 OLTP 型数据库处理在线联机交易业务,通过 ETL 工具将数据同步到 OLAP 型数据库进行数据分析,这种处理方案存在存储成本高、实时性差等多方面的问题。TiDB 3.1.2.1 准备环境 准备一台部署主机,确保其软件满足需求: • 推荐安装 CentOS 7.3 及以上版本 • 运行环境可以支持互联网访问,用于下载 TiDB 及相关软件安装包 最小规模的 TiDB 集群拓扑: 注意: 下表中拓扑实例的 IP 为示例 IP。在实际部署时,请替换为实际的 IP。 实例 个数 IP 配置 TiKV 3 10.0.1.1 10.0.1.1 10.00 码力 | 3572 页 | 84.36 MB | 1 年前3
TiDB v5.4 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高 可用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩容或者缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 存储分别进行扩容和缩容,计算最大支持 512 节点,每个节点最大支持 1000 并发,集群容量最大支持 PB 级别。 • Real-time HTAP 场景 随着 5G、物联网、人工智能的高速发展,企业所生产的数据会越来越多,其规模可能达到数百 TB 甚 至 PB 级别,传统的解决方案是通过 OLTP 型数据库处理在线联机交易业务,通过 ETL 工具将数据同步到 OLAP 型数据库进行数据分析,这种处理方案存在存储成本高、实时性差等多方面的问题。TiDB 3.1.2.1 准备环境 准备一台部署主机,确保其软件满足需求: • 推荐安装 CentOS 7.3 及以上版本 • 运行环境可以支持互联网访问,用于下载 TiDB 及相关软件安装包 最小规模的 TiDB 集群拓扑: 注意: 下表中拓扑实例的 IP 为示例 IP。在实际部署时,请替换为实际的 IP。 实例 个数 IP 配置 TiKV 3 10.0.1.1 10.0.1.1 10.00 码力 | 2852 页 | 52.59 MB | 1 年前3
TiDB v7.1 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高 可用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 案,采用计算、存储分离的架构,可对计算、存储分别进行扩缩容,计算最大支持 512 节点,每个节点 最大支持 1000 并发,集群容量最大支持 PB 级别。 • 实时 HTAP 场景 TiDB 适用于需要实时处理的大规模数据和高并发场景。TiDB 在 4.0 版本中引入列存储引擎 TiFlash,结合 行存储引擎 TiKV 构建真正的 HTAP 数据库,在增加少量存储成本的情况下,可以在同一个系统中做联机 交易处理、实时数据分析,极大地节省企业的成本。 target="_blank">行级 TTL(从 �→ v7.0.0 开始 GA)支持通过后台任务自动删除超过生命周期 (Time to live) 的数据, �→ 并以此来自动管理数据规模并提高性能。 33生成列 0 码力 | 4369 页 | 98.92 MB | 1 年前3
TiDB v8.1 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高可 用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 案,采用计算、存储分离的架构,可对计算、存储分别进行扩缩容,计算最大支持 512 节点,每个节点 最大支持 1000 并发,集群容量最大支持 PB 级别。 • 实时 HTAP 场景 TiDB 适用于需要实时处理的大规模数据和高并发场景。TiDB 在 4.0 版本中引入列存储引擎 TiFlash,结合 行存储引擎 TiKV 构建真正的 HTAP 数据库,在增加少量存储成本的情况下,可以在同一个系统中做联机 交易处理、实时数据分析,极大地节省企业的成本。 1/br-snapshot-guide#恢复快照备份数据">提升 BR �→ 快照恢复速度(从 v8.0.0 开始 GA)通过该功能,BR 可以充分利用集群的规模优势,使 TiKV �→ 集群中的所有节点都能参与到数据恢复的准备阶段,从而显著提升大规模集群中大数据集的恢复速度 �→ 。实际测试表明,该功能可将下载带宽打满,下载速度可提升 8 到 10 倍,端到端恢复速度大约提升 �→ 1.5 到 3 倍。 0 码力 | 4807 页 | 101.31 MB | 1 年前3
TiDB v8.0 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高可 用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 案,采用计算、存储分离的架构,可对计算、存储分别进行扩缩容,计算最大支持 512 节点,每个节点 最大支持 1000 并发,集群容量最大支持 PB 级别。 • 实时 HTAP 场景 TiDB 适用于需要实时处理的大规模数据和高并发场景。TiDB 在 4.0 版本中引入列存储引擎 TiFlash,结合 行存储引擎 TiKV 构建真正的 HTAP 数据库,在增加少量存储成本的情况下,可以在同一个系统中做联机 交易处理、实时数据分析,极大地节省企业的成本。 进而影响整个集群的服务质量。为了解决该问题,从 v8.0.0 起,TiDB 支持将 PD 的 TSO �→ 和调度模块拆分成可独立部署的微服务,可以显著降低当集群规模扩大时模块间的互相影响。 �→ 通过这种架构,TiDB 能够支持更大规模、更高负载的集群。 330 码力 | 4805 页 | 101.28 MB | 1 年前 3
TiDB v8.4 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高可 用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 案,采用计算、存储分离的架构,可对计算、存储分别进行扩缩容,计算最大支持 512 节点,每个节点 最大支持 1000 并发,集群容量最大支持 PB 级别。 • 实时 HTAP 场景 TiDB 适用于需要实时处理的大规模数据和高并发场景。TiDB 在 4.0 版本中引入列存储引擎 TiFlash,结合 行存储引擎 TiKV 构建真正的 HTAP 数据库,在增加少量存储成本的情况下,可以在同一个系统中做联机 交易处理、实时数据分析,极大地节省企业的成本。使用系统变量 tidb_auto_analyze_concurrency�→ 控制单个自动统计信息收集任务内部的并发度,TiDB �→ 会根据节点规模和硬件规格自动确定扫描任务的并发度。该功能通过充分利用系统资源, �→ 提高统计信息收集效率,从而减少手动调优,并确保集群性能稳定。SQL 支持 0 码力 | 5072 页 | 104.05 MB | 10 月前3
TiDB v8.5 中文手册(Online Transactional Processing)、OLAP (Online Analytical Processing)、HTAP 解决方案。TiDB 适合高可 用、强一致要求较高、数据规模较大等各种应用场景。 关于 TiDB 的关键技术创新,请观看以下视频。 2.1.1 五大核心特性 • 一键水平扩缩容 得益于 TiDB 存储计算分离的架构的设计,可按需对计算、存储分别进行在线扩容或者缩容,扩容或者 案,采用计算、存储分离的架构,可对计算、存储分别进行扩缩容,计算最大支持 512 节点,每个节点 最大支持 1000 并发,集群容量最大支持 PB 级别。 • 实时 HTAP 场景 TiDB 适用于需要实时处理的大规模数据和高并发场景。TiDB 在 4.0 版本中引入列存储引擎 TiFlash,结合 行存储引擎 TiKV 构建真正的 HTAP 数据库,在增加少量存储成本的情况下,可以在同一个系统中做联机 交易处理、实时数据分析,极大地节省企业的成本。使用系统变量 tidb_auto_analyze_concurrency�→ 控制单个自动统计信息收集任务内部的并发度,TiDB �→ 会根据节点规模和硬件规格自动确定扫描任务的并发度。该功能通过充分利用系统资源, �→ 提高统计信息收集效率,从而减少手动调优,并确保集群性能稳定。SQL 支持 0 码力 | 5095 页 | 104.54 MB | 10 月前3共 21 条- 1
- 2
- 3













