搜索

排序方式
23 个文档
  • pdf 文档 兼容龙蜥的云原生大模型数据计算系统:πDataCS

    0 码力 | 29 页 | 7.46 MB | 1 年前
    3
    πDataCS 是一款兼容龙蜥操作系统的云原生大模型数据计算系统,支持大语言模型和私域数据结合开发垂直应用。该系统采用全新架构,实现一份数据多引擎计算,具备湖仓一体化能力,支持多种计算引擎和数据格式,兼容主流云服务和私有部署。其自主研发的简墨存储技术支持数据治理和多引擎计算,与龙蜥操作系统完成兼容性测试,运行稳定。系统适用于医疗健康等领域的数据处理和大模型训练,助力企业构建数据驱动的核心竞争力。
  • pdf 文档 PieCloudDB 的云原生之路

    0 码力 | 47 页 | 1.80 MB | 1 年前
    3
    文档介绍了PieCloudDB的云原生数据库解决方案,重点阐述了其核心技术优势。通过eMPP(弹性大规模并行处理)分布式技术,PieCloudDB实现了弹性计算和高效资源管理。其存算分离架构能够按需分配计算资源,提升资源利用效率。同时,PieCloudDB支持多云部署,具备高安全性和可靠性,采用透明数据加密和服务器无感知技术,确保数据安全。文档还强调了其在降低管理成本、提升数据计算能力方面的突破性创新。
  • pdf 文档 云原生数据库PieCloudDB 性能优化之路

    0 码力 | 26 页 | 711.44 KB | 1 年前
    3
    本文主要介绍了云原生数据库PieCloudDB的性能优化之路,重点阐述了其优化器的改进与创新。文章详细讲解了PostgreSQL优化器的几个关键阶段,包括预处理阶段、扫描/连接优化阶段以及后处理阶段,并介绍了PieCloudDB优化器在分布式架构和云原生特性方面的拓展。通过引入Motion概念和分布式查询计划,优化器实现了数据在不同工作节点之间的高效移动和并行执行。此外,云原生优化器结合对象存储设计,实现了聚集下推、Block skipping和预计算等高阶优化技术,进一步提升了查询性能。
  • pdf 文档 云原生虚拟数仓 PieCloudDB ETL 方案设计与实现

    0 码力 | 29 页 | 5.24 MB | 1 年前
    3
    文档详细介绍了PieCloudDB的ETL方案设计与实现,包括任务调度总控pdbconduct的功能,数据源提取的插件/客户端工具,计算节点的Foreign Table和Formatter处理,以及INSERT/MERGE模式的具体实现。在云原生环境下,ETL优化目标是实现数据共享,减少ETL需求,并支持直接读取对象存储中的Parquet格式文件。文档还展示了Merge/Upsert模式的步骤和示例,强调了断点续传、错误处理和事务性保证的重要性。
  • pdf 文档 PieCloudDB:云原生分布式虚拟数仓的诞生之旅

    0 码力 | 24 页 | 2.01 MB | 1 年前
    3
    文档介绍了PieCloudDB,一款云原生分布式虚拟数仓,构建于大数据计算引擎之上。其核心特点包括计算和存储分离、弹性伸缩、按需付费、多租户隔离等。文档详细描述了其技术架构,包括数据存储在S3/HDFS/NAS,元数据存储在NoSQL数据库中,并基于Postgres生态。此外,文档还提到其发布历程,2022年10月24日发布1.0版本,2023年3月14日上线阿里云,并展望了未来在元数据存储和用户数据存储方面的优化方向。
  • pdf 文档 PostgreSQL 查询优化器解析

    0 码力 | 37 页 | 851.23 KB | 1 年前
    3
    本文档介绍了PostgreSQL查询优化器(Planner)的工作原理及其优化过程。文档详细阐述了Planner在查询处理中的角色,包括预处理、规划和后处理阶段的具体步骤。预处理阶段包括简化标量表达式和优化查询树;规划阶段生成多种可能的执行路径(Path),并选择最优的执行计划;后处理阶段对计划进行调整,例如移除不必要的子查询扫描节点和优化执行路径。文档还展示了通过EXPLAIN命令分析查询计划的实际案例,帮助理解查询优化器的工作机制。
  • pdf 文档 PieCloudDB云原生数仓虚拟化之路

    0 码力 | 44 页 | 1.64 MB | 1 年前
    3
    文档主要介绍了云原生数据库PieCloudDB的发展远景及其架构特点。PieCloudDB作为一种云原生数据库,具备虚拟化、分布式架构和弹性扩展等核心特性,能够高效处理大规模数据和高并发场景。文档重点阐述了其在云原生环境下的技术优势,包括对资源的高效利用和对复杂数据处理场景的支持,展现了其在现代数据库技术中的领先地位。
  • pdf 文档 AGI 趋势下的云原生数据计算系统

    0 码力 | 26 页 | 2.84 MB | 1 年前
    3
    文档探讨了AGI趋势下的云原生数据计算系统,分析了中国AGI市场的快速增长趋势,介绍了云原生数据计算系统的技术架构和应用场景,包括虚拟数仓引擎设计、分布式优化器、向量计算引擎等核心技术。文档还提到了PieCloudDB和PieCloudML在AIGC全生命周期管理中的应用,并通过案例展示了从基础数据底座到AIGC应用的全场景覆盖。
  • pdf 文档 云原生虚拟数仓 PieCloudDB 的架构和关键模块实现

    0 码力 | 43 页 | 1.14 MB | 1 年前
    3
    文档介绍了云原生虚拟数仓 PieCloudDB 的架构和关键模块实现,探讨了其设计背景和必要性,分析了用户对兼顾关系型数仓和公有云优势产品的期望,并展示了系统表 mStore 的实现细节。文档通过图表和示例详细阐述了 PieCloudDB 的技术特点和优势。
  • pdf 文档 PieCloudDB:基于PostgreSQL的eMPP云原生数据库

    0 码力 | 45 页 | 1.32 MB | 1 年前
    3
    文档介绍了PieCloudDB,一款基于PostgreSQL的云原生数据库。文章探讨了数据库的云原生远景,详细介绍了PieCloudDB的特点和优势,包括其架构设计和2.1版本的新功能。内容涵盖了云原生数据库的基本概念、PieCloudDB的技术特点以及其在实际应用中的表现。
共 23 条
  • 1
  • 2
  • 3
前往