此外，包括亚⻢逊、⾕歌、RedisLabs、阿⾥云和腾讯云在内的多个云服务提供商都提 供了基于 Redis 或兼容 Redis 的服务， 如果你不打算⾃⼰搭建 Redis 服务器， 那么上述的这些提供商可能 是⼀个不错的选择。 图 1-1 Redis 特⾊⼀览 1.2 内容编排 本书由数据结构与应⽤、附加功能和多机功能三个部分共⼆⼗章组成。 在数据结构与应⽤部分， 书本介绍了 Redis 核⼼的九种数据结构， 列举了操作这些数据结构的众多命令及其详细 命令的基本知识了。 1.5 执⾏命令 Redis 服务器通过接收客户端发送的命令请求来执⾏指定的命令， 并在命令执⾏完毕之后通过响应将命令的执⾏ 结果返回给客户端， ⾄于结果的内容则被称为命令回复。 图 1-2 命令请求与响应 Redis 为每种数据结构和功能特性都提供了⼀簇相应的命令， 学习如何使⽤这些命令是学习 Redis 的重中之重。 幸运的是， ⼤部分 Redis 命令都⾮常简单， 只需要 我们为这个命令调⽤添加了⼀条注释， ⽤于说明客户端遇到的问题。 在本书中， redis-cli 客户端的命令执⾏示 例都使⽤ -- 作为注释前缀， 这些注释仅⽤于对被执⾏的命令做进⼀步的说明， 它们并不是被执⾏命令的⼀部 分。 图 1-3 在 redis-cli 中执⾏ Redis 命令 1.6 配置服务器 在阅读本书的过程中， 有时候我们还需要使⽤配置选项对 Redis 服务器进⾏配置， 这⼀点可以通过两种⽅法来完 成。

pivotal.io/cn 白皮书 4 © Copyright 2017 Pivotal Software, Inc.保留所有权利。 PIVOTAL GREENPLUM 5：新一代数据平台 图 1：Pivotal Greenplum 5：新一代数据平台。 以开源创新替代专有分析环境 为了支持 Greenplum 的后续发展，Pivotal 于 2015 年决定将其产品 Greenplum 云平台上运行，并且同时支持自带使用授权 (BYOL) 配置和以小时为单位的按需配置。只需选择要在群集中调配的数据节点数量（不超过预定义的最大大小），然后选择一系 列部署选项，群集便会立即启动运行，可供客户使用。 图 2：Pivotal Greenplum 5：不受限于基础架构的软件架构。 不受限于基础架构 裸机 私有云 公有云 pivotal.io/cn 白皮书 6 © Copyright 2017 、stringi、stringr、survival、tibble、tseries 和 zoo。 此外，Greenplum 5 还支持最新版 Apache MADlib（可用 SQL 进行机器学习和图分析），支持在 Apache Solr 数据库内实 施 GPText 完成索引和搜索功能，其中包含用于国际文本和社交媒体文本的自定义分词器和一个通用查询处理器（可接受 来自支持的 Solr 查询处理器的采用混合语法的查询）。PostGIS

的自动 FailOver 效果，编者也实现了自动 切换命令，当 Master 出现无法正常工作的故障时，自动激活 Standby 来接管 Master 的任务。下面的流程图，是编者实现的 Master 和 Standby 自动切换的逻辑流程图， 可以供读者参考，不过，编者不方便公开实现的代码。 Greenplum Database 管理员指南 V6.2.1 版权所有：Esena(陈淼 +86 18616691889) Greenplum Database 管理员指南 V6.2.1 版权所有：Esena(陈淼 +86 18616691889) 编写：陈淼 - 54 - 此图展示的是内存配额的情况，该图与官方文档中有不同，因为 default_group 资源组的 memory_limit 是 0，应该是只能使用全局共享内存的资源。 当一个查询的内存消耗超过了资源组中定额部分的限制，将可以从该资源组的可共 资源组的 CONCURRENCY 属性为 0。 使用 DROP RESOURCE GROUP 命令来删除资源组，要删除一个资源组，该资源组 不能被分配给任何 ROLE，同时，该资源组上不能有任何活动的事务和等待的事务。如 果删除一个基于外部组件的资源组，该资源组上正在运行的实例将会被杀死。例如： =# DROP RESOURCE GROUP exec; 配置基于内存限制的查询终止

。 Greenplum 与欧拉开源社区强强联手，不仅是双方业务用户所期盼的，同时也是 Greenplum 社区与对中国本地开源社 区的深入合作尝试。本次合作对双方打造丰富应用生态注入了鲜活动力！ 完全兼容欧拉开源操作系统的 HTAP 数据平台 Greenplum Greenplum 社区版同时能够支持 X86 和 ARM 架构的芯片，支持主流品牌的芯片和操作系统，也将支持越来越多样 化的芯片和操作系统，特别是中国的本地化的芯片和操作系统： 图 1：Greenplum 纯中立支持主流芯片和操作系统 另外随着越来越多的客户将其生产数据集迁移到公有云中，这种灵活性将成倍增长。Greenplum 目前不但可在国外 的 Amazon Web 腾讯云等，只需选择要在群集中调配的数据节点数量（不超过预定义的最大大小），然后选择一系列部署选项，群集 便会立即启动运行，可供客户使用，国内外有相当数量的客户已选择云上 Greenplum。 图 2：Greenplum 不受限于基础架构的软件架构 完全兼容欧拉开源操作系统的 HTAP 数据平台 Greenplum

SQLite 数据库备份 nbsqlite -o backup 命令使用 -S、-P、-d 和 -s 作为必需参数启动备份操作。对 于 Linux LVM 配置系统，参数 -z 是必需参数。 3 图 3-1 NetBackup for SQLite 备份工作流程 连接到 SQLite 数据库 并准备创建快照 存储单元 NetBackup 主服务器 NetBackup 介质服务器 NetBackup 数据对象中。然后，代理将文件发送到 NetBackup XBSA 接口。 NetBackup XBSA 接口将此数据写入由 NetBackup 介质服务器管理的装入介质或 磁盘存储。 命令提示符显示备份的成功完成状态。“活动监视器”还显示备份作业的状态。 执行 SQLite 备份 前提条件 执行备份之前，必须满足以下先决条件： ■ 确保用户具有管理员 (Windows) 或 root (Linux) 访问权限。 列出指定客户端上存在的所 有备份。如果未指定客户端，则其默认为 NetBackup 主服务器。 14 NetBackup for SQLite 备份和还原 从 NetBackup 目录库文件中删除备份信息 图 3-2 NetBackup for SQLite 还原工作流程 存储单元 NetBackup 主服务器 NetBackup 介质服务器 NetBackup XBSA SQLite 数据库

conf 文件中配置这些参数或在 nbsqlite 命令行上提供，但命令行上 提供的参数优先。 注意：确保 SQLite 代理和 NetBackup 的版本相同，以便成功执行备份和还原操 作。 4 图 4-1 NetBackup for SQLite 备份工作流程 连接到 SQLite 数据库 并准备创建快照 存储单元 NetBackup 客户端 NetBackup SQLite 代理 然后，代理将文件发送到 NetBackup XBSA 接口。 NetBackup XBSA 接口将此数据写入由 NetBackup 介质服务器管理的装入介质或 磁盘存储。 命令提示符显示备份的成功完成状态。“活动监视器”还显示备份作业的状态。 执行 SQLite 备份 前提条件 执行备份之前，必须满足以下先决条件： ■ 确保 SQLite 代理和 NetBackup 的版本相同。如果将 NetBackup -C 列出指定客户端上存在的所 有备份。如果未指定客户端，则默认为 NetBackup 主服务器。 注意：确保 SQLite 代理和 NetBackup 的版本相同，以便成功执行备份和还原操 作。 图 4-2 NetBackup for SQLite 还原工作流程 NetBackup 客户端 NetBackup SQLite 代理 存储单元 NetBackup 主服务器 NetBackup

Ø非实时，离线+在线流系统，趋势分析 Ø算法分析，持续计算 5 数据仓库体系架构 OLAP场景举例 • 业务相关场景 Ø用户状态 （注册数，活跃数，并发量，峰值） Ø金币状态 Ø道具/物品状态 Ø对账状态 Ø活动反馈 • 架构相关场景 Ø不同数据量，不同事务特点，不同查询需求 Ø历史数据归档与冷热分离 Ø实时与延时需求的权衡 6 数据仓库体系架构 数据流转过程 • 1 业务数据的产生 —— OLTP 计算，部分实时交互操作 Ø 以对账业务为主，统计计算为辅 • 公司IDC_02机房Greenplum体系 Ø 针对数据来源主要是kfk产生csv文件的业务，不直接从数据库传数 Ø 以重点业务线、活动数据、非OLTP业务数据的任务计算为主 • 公司IDC_03机房Greenplum体系 Ø 数据来源来源为OTLP库库，针对大数据量传输和计算，采用T+1方式 Ø 以核心业务的数据计算、统计为主 数据处理不同 • 时效速度不同 • 体系架构相同 • 年表划分相同 • 平台整体定位 • 定位不同，多集群配合形成逻辑大集群 20 Greenplum现状说明 Greenplum多层业务规划图 21 Greenplum现状说明 三 Greenplum体系架构 二 数据仓库体系架构 一 Greenplum开发规范 五 Greenplum运维体系 四 Greenplum扩展规划 六

需要移动数据，避免了数据加载的复杂 性，和其带来的数据不一致的问题。 ● 支持各种数据格式的平台：不管是结构化、半结构化（XML、JSON、KV）还是非结构化， 譬如文本数据、GIS 数据、图数据等。 ● 具有强大内核的平台：Greenplum 具有强大的内核技术，包括数据水平分布、并行查询执 行、专业优化器、线性扩展能力、多态存储、资源管理、高可用、高速数据加载等。 ● 具备强大灵活性和可扩展性的平台： 成为了数据平台的万向头，向上可以连接各种 BI 工具、可视化工具和数据分析工具， 向下可以连接各种 ETL 工具、各种数据源和各种格式的数据等。 ● 集成数据分析平台：支持商业智能（BI）、文本、GIS、图、图像等。流式支持也在开发 中。通过 Pivotal 开源的 Apache 顶级项目 MADlib，Greenplum 可以在数据内部运行 50 多种数据分析和机器学习算法。MADlib 提供 SQL 区 期待的特性稳健推进中，包括内核升级、新课题，处于业界领先地位。 Greenplum 社区邀请 Pivotal、阿里云、百度等社区人士共同定期举办各种技术研讨会、技术沙龙、 101 培训等活动，获得良好反馈。国内多所知名大学开设了 Greenplum 相关数据库课程，并在学 术领域取得了突出成就。 Greenplum 生态完善。得益于对 SQL 标准的出色支持，Greenplum 可以与上下游的各种产品实

示月有旅游”eesc5h 。 资车之家 。 2 58到未”加 SByx和小红书 。 国委视 blued 图am 从9本”所总和和项 。 过提科技 “metux四全)搜狗 和8 smEs 国maxr [at 搜财 国人图 半卫第 hulu 关paypay 回u-NExT 刚一一 上上签 Ga Oil BR 四 为是 图zazst maat 知于 E3 吻呆;28 口] Blco 汽车之家是全球访问量最大的汽车网站,致力于通过产品服务.数据技术.生态规则和资源为用户和客户夺 能,建设"车媒体,车电商、车金融,车生活" 4个图。 业务挑战 "818 全球汽车夜"是由汽车之家与湖南卫视联手打造的汽车行业顶级盛典, 参与用户数以百万, 晚会期间 系统并发峰值达数十万, 因每轮秒杀、扬奖等活动时间短, 流量集中, 以及业务场景涉及到对账核销, 数据 持久层的选型在系统设计中显的尤为重要。 解决方案 汽车之家基于TiDB

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 330 8 8.8 TiDB 集群问题导图· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 运维操作。 用户文档 2.2.2.8 部署及运维 • 持续性能分析（实验特性） TiDB Dashboard 引入持续性能分析功能，提供在集群运行状态时自动保存实例性能分析结果的能力，通 过火焰图的形式提高了 TiDB 集群性能的可观测性，有助于缩短故障诊断时间。 该功能默认关闭，需进入 TiDB Dashboard 持续性能分析页面开启。 持续性能分析功能必须使用 TiUP 1.7.0 及以上版本升级或安装的集群才可使用。 如果在同一个局域网内，可设置成较短的时间。 timeout client 30000s # 客户端与 HAProxy 连接后，数据传输完毕， �→ 即非活动连接的超时时间。 timeout server 30000s # 服务器端非活动连接的超时时间。 listen tidb-cluster # 配置 database 负载均衡。 bind 0.0.0.0:3390 # 浮动 IP 和 监听端口。