Apache Kyuubi 1.7.0-rc1 Documentation

• 语言: 英语
• 格式: .pdf
• 来源: kyuubi.readthedocs.io

摘要

Apache Kyuubi 1.7.0-rc1 Documentation provides detailed information on the release process, including promoting the release, updating the website, creating announcements, and removing deprecated release candidates. It also covers upgrading from previous versions, such as handling configuration changes and authentication settings. Additionally, the document highlights Kyuubi's features as a unified multi-tenant JDBC interface built on Apache Spark, supporting various data sources like Hive and Apache Thrift. The documentation includes guidance on serverless SQL, high availability, security, and extensions, along with SQL optimization techniques and integration with Apache Spark.

AI总结

### Apache Kyuubi 1.7.0 发布文档总结

#### 1. 发布流程
- **推广版本**：将 Apache Kyuubi 1.7.0 提交到 Maven Central。
- **更新网站**：
- 在 `src/zh/news/` 和 `src/en/news/` 添加新 Markdown 文件。
- 在 `src/zh/release/` 和 `src/en/release/` 添加新版本说明文件。
- 使用文档构建工具生成内容，并将构建后的文件复制到指定位置。
- **创建公告**：发布完成后，通过脚本生成公告并在邮件列表中发送。
- 邮件列表包括：`[e-mail]`, `[e-mail]`, `[e-mail]`。
- **清理旧版本目录**：删除已弃用的候选发布目录。

#### 2. 主要功能
- **统一多租户 JDBC 接口**：Kyuubi 是基于 Apache Spark 的大规模数据处理和分析的统一多租户 JDBC 接口。
- **高可用性**：
- 支持负载均衡，避免单点故障。
- 通过指标、日志等实现故障检测。
- **扩展性**：
- **服务器端扩展**：通过插件扩展 Kyuubi 服务器功能，例如动态配置会话参数。
- **引擎端扩展**：允许在运行时动态加载功能。
- **SQL 优化**：
- 支持小文件合并、优化偏斜连接、分阶段配置隔离等特性。
- 针对 Apache Spark 3.1 及以上版本提供优化支持。

#### 3. 迁移指南
- **从 Kyuubi 1.6 到 1.7**：
- Kerberos 认证不再自动回退，需手动配置 `kyuubi.ha.zookeeper.engine.auth.type`。
- GetInfo 请求返回引擎信息，默认行为需设置 `kyuubi.server.info.provider`。
- 会话类型 `SQL` 已重构为 `INTERACTIVE`，需使用新类型查找会话。
- REST API 创建会话时不再包含 `user` 和 `password` 参数，需通过 HTTP 授权设置。
- **从 Kyuubi 1.6.0 到 1.6.1**：
- 同样需手动配置 Kerberos 认证。
- **从 Kyuubi 1.5 到 1.6**：
- 更新了 Zookeeper 认证配置，需手动设置 `kyuubi.ha.zookeeper.auth.principal` 和 `kyuubi.ha.zookeeper.auth.keytab`。

#### 4. 配置与安全
- **配置系统**：Kyuubi 提供多种方式配置系统和引擎，支持动态调整配置。
- **多租户安全**：
- 提供集中化身份验证，支持 LDAP 和 Kerberos 等协议。
- 引擎端支持细粒度的行/列级授权。

#### 5. 其他
- **连接器与工具**：支持多种数据源和协议（如 JDBC、Thrift）。
- **测试连接**：推荐在客户端或服务器端测试连接配置，确保连接正确。
- **SQL 操作**：通过 SQL 编辑器与 Kyuubi 交互，支持创建表、插入数据等操作。

### 总结
Apache Kyuubi 1.7.0 是一个功能强大的统一多租户 JDBC 接口，支持高可用性、扩展性和多种优化特性。发布流程包括版本推广、网站更新和公告创建，同时提供了详细的迁移指南和配置说明。