云原生虚拟数仓PieCloudDB Database产品白皮书

• 语言: 中文（简体）
• 格式: .pdf
• 来源: www.openpie.com

摘要

PieCloudDB是一款云原生虚拟数仓产品，采用弹性大规模并行计算（eMPP）架构，实现计算和存储分离，支持按需扩缩容，提供高可用性和高性能。其核心优势包括弹性灵活的资源管理、高安全性和可靠性、以及高效的数仓引擎。通过动态创建虚拟数仓，PieCloudDB帮助企业打破数据孤岛，降低管理成本，提升数据计算效率，满足PB级海量数据分析需求。

AI总结

《云原生虚拟数仓PieCloudDB Database产品白皮书》主要介绍了杭州拓数派科技发展有限公司（OpenPie）旗下旗舰产品PieCloudDB，这是一款基于云原生技术的虚拟数仓解决方案，旨在通过弹性计算、存算分离和智能化优化等特性，帮助企业构建高效、安全、可靠的数据计算平台，满足PB级海量数据分析需求。

### 产品概述
PieCloudDB通过云原生虚拟化技术，将物理数仓整合到云数据计算平台，按需动态创建虚拟数仓，支持灵活计算和数据共享，打破数据孤岛。其核心优势在于：
- **弹性灵活**：计算和存储分离，资源按需扩缩容，降低硬件和管理成本。
- **高性能**：采用eMPP（弹性大规模并行计算）架构，支持高效数据处理和高并发场景。
- **高可用**：通过分布式存储、多副本和自动故障恢复，确保数据安全和系统稳定性。
- **智能化**：内置自主研发的优化器「达奇」，支持高级查询优化和复杂分析需求。

### 产品架构
PieCloudDB整体架构分为三层：
1. **基础设施层**：提供计算、存储和网络资源，支持公有云、私有云和混合云部署。
2. **数据处理层**：包含元数据节点、计算节点、存储节点和云原生管控平台节点，分别负责元数据管理、数据计算、存储优化和集群运维。
3. **数据应用层**：提供标准SQL接口、分析工具和Postgres生态兼容，支持地理信息和文本处理，未来还将扩展AI/数据科学功能。

### 核心技术
- **eMPP分布式技术**：实现多集群并发执行，支持PB级数据处理。
- **Serverless技术**：无状态计算节点，按需自动扩缩容，提升资源利用率。
- **TDE透明数据加密**：保障数据安全，防止未授权访问。
- **存储引擎「简墨」**：支持行列混存和多模存储，优化查询效率和存储空间。
- **优化器「达奇」**：智能生成高效查询计划，支持复杂分析任务。

### 产品优势
- **弹性灵活**：资源按需配置，避免传统数仓资源浪费。
- **高性能**：高效并行处理和弹性伸缩，满足高并发需求。
- **高可用**：分布式架构和多副本存储，保障数据安全和系统稳定。
- **低成本**：通过虚拟化和云原生技术，降低硬件和运维成本。
- **敏捷可靠**：自动化运维工具支持快速迭代和不中断升级。

### 适用场景
- **动态业务需求**：支持从小规模到大规模计算任务的弹性扩展。
- **跨部门协作**：打破数据孤岛，实现数据共享和高效分析。
- **AI/BI应用**：支持复杂模型和智能分析，推动业务创新。

### 总结
PieCloudDB作为新一代云原生虚拟数仓，凭借其弹性、高性能、高可用和智能化特性，为企业提供了高效、安全、低成本的数据计算解决方案，助力企业在云原生时代实现数据驱动的业务创新和数字化转型。