Greenplum开源MPP数据库介绍Agenda Greenplum简介 Greenplum的MPP架构 > 分布式优化器: Postgres planner 和 ORCA > 分布式事务和执行 Greenplum存储 Greenplum生态 Greenplum 7 Greenplum简介:什么是Greenplum? 基于PostgreSQL、开源、分布式MPP、ACID完备、为OLAP优化的关系型数据仓库。 https://greenplum Greenplum 项目,从 PostgreSQL 8 分支,做成 MPP 架构 2010年被EMC收购 2012年成为Pivotal的一部分 2015年开源,可能是世界上第一个成熟商用的开源MPP数据仓库 ➢ 2019年底跟随Pivotal被VMware收购 ## 谁在用Greenplum? ➢ 500多付费企业客户 成千上万的开源用户 ➢ 支撑巨大的生产集群: ☐ 250+ servers servers 10+ PetaBytes ➢ 十几个甚至几十个国内国外的衍生项目(我们是真开源,欢迎大家贡献) Federal & Government Services     ## 企业级数据库    ## MPP  Master Servers Query0 码力 | 18 页 | 913.39 KB | 2 年前3
Greenplum on Kubernetes
容器化MPP数据库## Greenplum on Kubernetes 容器化MPP数据库 ## AGENDA ## 云数据库背景 云数据库实现方案 Greenplum on Kubernetes Greenplum Operator 总结 ## 云数据库背景 ## 云数据库背景 ● 资源变化 ☐ 本地资源 → 云 ☐ 静态资源 → 弹性需求 ## ● 数据变化 ☐ 内部数据 → 多数据源 is expanding beyond the scope of a single CSP — to multiple CSPs — 云数据库市场巨大 云数据库增速巨大 DBasS的需求 ## ● 跨云的需求 ## 云数据库实现方案 ## 云数据库需求 - DBasS - 自动化运维 - 自动化调优 - 弹性资源管理 - 存储资源 - 计算资源 权限控制 - 跨云 - 公有云 - 私有云 ## 云数据库实现方案 全新数据库 ○ Snowflake 原有数据库架构升级 ☐ Vertica Eon Mode ● 容器化数据库+Kubernetes ○ Apache Spark ○ CockroachDB ○ Apache HAWQ ## 云数据库存储方案 ● 块存储 ☐ 文件系统接口 ● 对象存储 ☐ 成本低0 码力 | 33 页 | 1.93 MB | 2 年前3
深度揭秘Greenplum开源数据库透明加密## 深度揭秘Greenplum开源数据库 透明加密 Greenplum 研发工程师 王湯舟 1. 我们所面临的问题 2. 基于pgcrypto的数据加密方案 3. GPDB数据透明加密方案设计 4. GPDB数据透明加解密流程 5. 总结 ## 我们所面临的问题 ## 什么是Greenplum数据库 GPDB 一款开源的HTAP数据库: • MPP架构 完整的事务+ACID+标准SQL支持 支持上千个节点的部署 • 支持PB级文件 • 丰富的ETL和外部组件 • 支持Python/R/Java直接访问处理数据库数据 https://github.com/greenplum-db/gpdb ## GPDB的数据安全运行模式 用户 连接数据库 • 运行业务 DBA 管理数据库 • 业务审计 System Admin 管理集群 数据备份恢复  ## GPDB的数据安全管理模式 用户 连接数据库 • 运行业务 DBA 管理数据库 业务审计 System Admin • 管理集群 数据备份恢复   • TiDB 技术负责人 ● 网易有道 / 360搜索 / PingCAP • Infrastructure software engineer 为什么需要一个新的数据库? ## 从单机数据库到 NewSQL ● 关系型数据库 • NoSQL • 中间件 • NewSQL ents/f/e/2/8/fe2873497b7c368983e79b995ed6a9c5/p6_2.jpg) TiDB A Distributed SQL Database 如何构建分布式数据库? ## 原则 • 分层 • Make it right and make it fast. 测试很重要 ● 简单易用 和社区结合 ## 架构 蚂蚁 seata 开源负责人 阿里开源先锋人物、阿里开源大使 2022开放原子开源基金会年度开源贡献之星 2022开放原子开源基金会年度开源贡献之星 2022 信通院 OSCAR 尖峰开源人物 dubbo一go中国科学技术协会 2021年度优秀开源产品 ’ alt=‘OCR图片’/> 开源里程 ’ alt=‘OCR图片’/> 开源感悟 主动做事 多学习多思考 经常沟通 保证质量 充满责任感与使命感 长期保持专注 ’ alt=‘OCR图片’/> 第二部分 项目历程 ’ alt=‘OCR图片’/> 通用性 | 复杂性 | 接入成本 | | :— | :— | :— | :— | :— | | 应用框架 | 低 | 低 | 低 | 高 | | 数据中间件 | 中 | 高 | 中 | 低 | | 数据库 | 高 | 中 | 高 | 中 | ’ alt=‘OCR图片’/> 交易场景 1 数据一致性 2 网络流量控制 3 通信安全问题 ’ alt=‘OCR图片’/> 数据一致性:TXC/Seata(Java0 码力 | 36 页 | 5.00 MB | 1 月前3
走进开源 - Apache ServiceComb## 走进开源 - Apache ServiceComb ## 议程 · 什么是开源 • 开源开发是什么状态 • 如何参与开源 ## 软件发展史 ## 软件历史 商业软件:1980~2005 完胜 自由软件:从未胜利,仅有 GNU/Linux 软件 开源软件:1998 开始起步,2010 年后崛起   开源软件 开源软件  服务,相关产品  商业软件 ## 开源发展第一阶段 ## Free Software  项目介绍 CloudWeGo是一套由字节跳动开源的、可快速构建企业级云原生微服务架构的中间件集合。在github开源后获得超过1w的star和超142位贡献者。 项目官网:https://www.cloudwego.io/ github: https://github.com/cloudwego CloudWeGo 开源的主打项目 Golang RPC框架:Kitex(目前已 提供高性能的框架项目,让用户不用关注其中过多技术细节,同时还提供开箱即用的脚手架工具,外加配套齐全的扩展能力。(后文详细介绍) 高可靠 所有开源在 CloudWeGo 项目中的特性,都经过在字节内部的可靠性使用验证。不会随意开源特性进入开源库。 内外一致。开源项目版本和字节内部使用版本一致,统一维护,不维护两套代码。可靠性同时获得外部验证 免费提供企业技术支持 CloudWeGo免费为企业用户提供0 码力 | 37 页 | 89.14 MB | 2 月前3
Kubernetes开源书 - 周立# Kubernetes 开源书 周立 http://www.itmuch.com  干货小程序 












