VMware Greenplum v6.19 Documentation

• 语言: 英语
• 格式: .pdf
• 来源: docs.vmware.com

摘要

VMware Tanzu Greenplum 6.19 是一个基于大规模并行处理 (MPP) 的数据库服务器，支持下一代数据仓库和大规模分析处理。它通过自动分区数据和并行查询，使一组服务器作为一个超级计算机运行，速度比传统数据库快数十倍甚至数百倍。该版本新增了内存使用跟踪工具、优化器改进、支持新的连接器和协议，修复了多个查询优化器、集群管理和资源队列相关的错误，并改进了与外部系统的兼容性和集成能力。

AI总结

《VMware Greenplum v6.19 Documentation》总结如下：

### 1. **Greenplum 简介**
- **Greenplum** 是一个大规模并行处理（MPP）数据库，支持下一代数据仓库和大规模分析处理。
- 通过自动分区数据和并行查询，集群服务器可作为单个数据库超级计算机运行，速度比传统数据库快数十倍甚至数百倍。
- 支持 SQL、MapReduce 并行处理，以及从数百 GB 到数百 TB 的数据量。

---

### 2. **与开源 Greenplum 的区别**
VMware Tanzu Greenplum 6.x 包含开源 Greenplum Database 的所有功能，并额外提供：
- 产品打包和安装脚本。
- QuickLZ 压缩支持（开源版受限于许可协议无法提供）。
- 数据连接器：Greenplum-Spark Connector、Greenplum-Informatica Connector、Greenplum-Kafka Integration、Greenplum Streaming Server。
- 数据直连 ODBC/JDBC 驾驶员。
- Greenplum PostGIS 扩展。
- gpcopy 工具，用于对象复制或迁移。
- 使用 VMware Tanzu Greenplum Command Center 管理数据库。
- 支持全文搜索和文本分析（VMware Tanzu GPText）。
- Greenplum 备份插件（Data Domain Boost）。

---

### 3. **新功能与改进**
#### 3.1 新增功能
- **工具与扩展**：
- 新增 `gpmemwatcher` 和 `gpmemreport` 工具，用于跟踪和分析内存使用情况。
- 移除 PXF（Greenplum Platform Extension Framework）功能，需单独下载 PXF 包。
- 新增三个连接服务器配置参数：`gp_dispatch_keepalives_count`、`gp_dispatch_keepalives_idle` 和 `gp_dispatch_keepalives_interval`，用于调优 TCP 保活机制。
- 新增 `enable_implicit_timeformat_YYYYMMDDHH24MISS` 服务器配置参数，启用对过时时间格式的隐式转换。
- 支持 `s3` 外部表协议的 `config_server` 选项，指定获取 S3 配置文件的服务器 URL。
- `gpload` 工具新增 `NEWLINE` 属性，指定文本和 CSV 文件中的换行符类型。

- **优化与性能**：
- Query Optimizer（GPORCA）改进优化时间性能，减少生成嵌套循环连接计划，优先使用哈希连接。
- 新增 `optimizer_force_comprehensive_join_implementation` 参数，可强制 GPORCA 恢复全面连接实现。
- 提升资源管理功能，推荐使用资源组方案（`Greenplum 6` 已支持）。

- **其他改进**：
- 同步 PostgreSQL 9.4.24 到 9.4.26 的提交。
- 新增 GPSS（Greenplum Streaming Server）版本 1.5.0，包含大量新功能和修复。
- 新增 `advanced_password_check` 模块，支持设置密码复杂度策略。

---

### 4. **已解决的问题**
#### 4.1 优化器与查询性能
- 修复了 Query Optimizer 在处理 `ALL` 子查询构造时的错误。
- 修复了 Query Optimizer 依赖未生成统计信息时的错误，现会回退到 PostgreSQL Planner。
- 修复了因 `ALL` 操作符导致的估算基数不正确问题。

#### 4.2 集群管理
- 修复了 `gpcheckcat` 执行缓慢的问题，移除了默认测试中的_acl 和 _owner 测试。
- 修复了 `gpinitsystem` 在 `.bashrc` 配置了启动 banner 文本时的失败问题。

#### 4.3 其他问题
- 修复了因 `NOT IN`/`IN` 构造导致性能下降的问题。
- 修复了因取消查询引发的内存锁定 panic 错误。
- 修复了 `gpstate -s` 输出字段的调整，新增了对主镜段 WAL 同步状态的详细输出。

---

### 5. **兼容性与限制**
- **PXF 移除**：Greenplum 6.x 不再捆绑 PXF，需单独下载 PXF 包。
- **cURL 依赖**：Greenplum 6.x 使用系统提供的 cURL 库，要求 cURL 版本 7.29.0 或更高。
- **操作系统兼容性**：不支持 CentOS 6.x 和 RHEL 6.x，建议升级到 CentOS 7+ 或 RHEL 7+。

---

### 6. **总结**
VMware Tanzu Greenplum 6.19.0 是一个功能增强型小版本更新，主要包含性能优化、新功能支持、问题修复和兼容性改进。用户在升级时需注意 PXF 的移除和相关依赖要求，同时可利用新增工具和配置参数提升数据库性能和管理效率。