Apache Kyuubi 1.6.1 Documentation

• 语言: 英语
• 格式: .epub
• 来源: kyuubi.readthedocs.io

摘要

文档记录了Apache Kyuubi 1.6.1版本的更新日志，涵盖了功能增强、错误修复、性能优化和文档改进。主要更新包括停止对Spark 3.0的支持，修复了Kyuubi Hive JDBC的多个问题，配置了JUL到SLF4J的日志桥接，升级了Flink版本到1.14.5和1.15.1，改进了授权模块，支持新的数据类型，优化了高可用性配置，修复了日志路径错误，并增加了对Hive、Spark、Flink等引擎的支持。

AI总结

《Apache Kyuubi 1.6.1 Documentation》主要记录了Kyuubi在1.6.1版本中的功能更新、修复问题及改进内容。以下是核心内容的总结：

### 主要功能更新
1. **Spark 3.0支持**
- 增加了对Spark 3.0的末期（End-of-Life, EOL）支持，确保兼容性。

2. **Hive JDBC驱动改进**
- Hive JDBC驱动抛出`KyuubiSQLException`，提升异常处理能力。
- �移除Hive存储API依赖，优化模块结构。

3. **日志系统改进**
- 配置JUL到SLF4J桥接，优化日志管理。

4. **Kerberos认证改进**
- 替换基于UGI的Kerberos认证为JAAS认证，提升安全性。

5. **Flink支持升级**
- 将Flink版本升级至1.14.5和1.15.1，增强兼容性。

6. **性能优化**
- 修复SparkPi测试的资源使用问题，提升测试效率。

7. **扩展支持**
- 支持更多数据类型，如`TimestampNTZType`和`YearMonthIntervalType`。
- 增加Iceberg和Hudi连接器文档，扩展生态系统。

8. **安全性增强**
- 移除过时依赖，修复潜在安全漏洞。
- 强化对敏感信息的处理，避免泄露。

9. **文档改进**
- 修复文档中的拼写错误和路径问题，优化构建流程。
- 增加扩展点和连接器的详细文档。

### 其他重要改进
- **HA支持**
- 使用etcd作为发现客户端，提升高可用性。

- **资源管理**
- 优化资源利用率，关闭空闲连接。

- **兼容性改进**
- 修复与Zookeeper的Kerberos认证问题，明确配置参数。

- **工具支持**
- 更新构建工具版本，支持更多开发环境。

### 总结
Apache Kyuubi 1.6.1版本在兼容性、安全性、性能和文档质量上均有显著提升，支持更多数据类型、扩展更多存储方案，并优化了高可用性和资源管理能力，适合复杂大数据应用场景。