Greenplum开源MPP数据库介绍72e8/p1_1.jpg) ## Agenda Greenplum简介 Greenplum的MPP架构 > 分布式优化器: Postgres planner 和 ORCA > 分布式事务和执行 Greenplum存储 Greenplum生态 Greenplum 7 Greenplum简介:什么是Greenplum? 基于PostgreSQL、开源、分布式MPP、AC ID完备、为OLAP优化的关系型数据仓库。 https://greenplum.org https://github.com/greenplum-db/gpdb  PostgreSQL  ## Greenplum的历史  2003年,Luke Lonergan 和 Scott Yara 发起 Greenplum 项目,从 PostgreSQL 8 分支,做成 MPP 架构0 码力 | 23 页 | 4.55 MB | 2 年前3
Greenplum on Kubernetes
容器化MPP数据库## Greenplum on Kubernetes 容器化MPP数据库 ## AGENDA ## 云数据库背景 云数据库实现方案 Greenplum on Kubernetes Greenplum Operator 总结 ## 云数据库背景 ## 云数据库背景 ● 资源变化 ☐ 本地资源 → 云 ☐ 静态资源 → 弹性需求 ## ● 数据变化 ☐ 内部数据 → 多数据源 is expanding beyond the scope of a single CSP — to multiple CSPs — 云数据库市场巨大 云数据库增速巨大 DBasS的需求 ## ● 跨云的需求 ## 云数据库实现方案 ## 云数据库需求 - DBasS - 自动化运维 - 自动化调优 - 弹性资源管理 - 存储资源 - 计算资源 权限控制 - 跨云 - 公有云 - 私有云 ## 云数据库实现方案 全新数据库 ○ Snowflake 原有数据库架构升级 ☐ Vertica Eon Mode ● 容器化数据库+Kubernetes ○ Apache Spark ○ CockroachDB ○ Apache HAWQ ## 云数据库存储方案 ● 块存储 ☐ 文件系统接口 ● 对象存储 ☐ 成本低0 码力 | 33 页 | 1.93 MB | 2 年前3
PostgreSQL和Greenplum 数据库故障排查PostgreSQL ## PostgreSQL和Greenplum 数据库故障排查 赵振平 zzp@taryartar.com 北京太阳塔信息科技有限责任公司 ## 自我介绍 赵振平,太阳塔技术总监 电子工业出版社签约作家 • 腾讯最具价值专家(TVP) - 计算机畅销书作家 贵州省省管专家 国家首批大数据高级职称 • 出版了技术专著《Oracle数据库精讲与疑难解析》 确认防火墙是否关闭 ## 2 )确认数据库是否在运行,端口号是否正确 ps -ef | grep post [root@tar1 log]# ps -ef lgrep post postgres 4138 1 0 09:52 ? postgres0 码力 | 84 页 | 12.61 MB | 2 年前3
深度揭秘Greenplum开源数据库透明加密## 深度揭秘Greenplum开源数据库 透明加密 Greenplum 研发工程师 王湯舟 1. 我们所面临的问题 2. 基于pgcrypto的数据加密方案 3. GPDB数据透明加密方案设计 4. GPDB数据透明加解密流程 5. 总结 ## 我们所面临的问题 ## 什么是Greenplum数据库 GPDB 一款开源的HTAP数据库: • MPP架构 完整的事务+ACID+标准SQL支持 支持上千个节点的部署 • 支持PB级文件 • 丰富的ETL和外部组件 • 支持Python/R/Java直接访问处理数据库数据 https://github.com/greenplum-db/gpdb ## GPDB的数据安全运行模式 用户 连接数据库 • 运行业务 DBA 管理数据库 • 业务审计 System Admin 管理集群 数据备份恢复  ## GPDB的数据安全管理模式 用户 连接数据库 • 运行业务 DBA 管理数据库 业务审计 System Admin • 管理集群 数据备份恢复  ## Greenplum 分布式数据库简介 Greenplum 07cf7747cf0d9/p5_1.jpg) ## Greenplum 集群化概述 数据库的组成  ## • Coordinator/Segment 架构 Greenplum 集群通常由一个 Coordinator 节点、一个 Standby Standby Coordinator 节点以及多个 Segment 节点组成 - Coordinator 是整个数据库的入口,客户端只会连接至 Coordinator 节点,并执行相关的查询操作 Standby 节点为 Coordinator 提供高可用支持 Mirror 则为 Segment 提供高可用支持   Pivotal Greenplum ## orca ## SQL ## Stop following me, you fucking freaks!  Key-Value 3_9.jpg)  ## 企业级数据库  简介 • Greenplum 数据库(GPDB)架构 • Greenplum 数据库(GPDB)组件 • Greenplum 数据库(GPDB)执行流程 • Greenplum 数据库(GPDB)5. x ## Greenplum 简介 GPDB:为大数据存储、计算、挖掘而设计 • 标准 SQL 数据库:ANSI SQL 2008 标准,OLAP,JDBC/ODBC - 支持ACID、分布式事务 • 分布式数据库:线性扩展,支持上百物理节点 企业级数据库:全球大客户超过 1000+ 安装集群 • 百万行源代码,超过10年的全球研发投入 • 开源数据库(greenplum.org),良性生态系统 ## Greenplum 架构 ## 平台概况 客户端访问和工具 查询处理  外部数据源 ## Greenplum 组件 ## 解析器 解析器执行词法分析、语法分析并生成解析树 ## 客户端  Client Host ## Greenplum架构: Master介绍 Master服务器是外面用户访问greenplum的入口。用户都是连接master服务器的,对于外部用户来说,他并不与segment host服务器发生任何关系,外部用户的网络只需要与master服务器连通就可以了,不需要访问segment host服务器。 所有的用户连接都是直接连接到master服务器上的。 Greenplum数据库是基于0 码力 | 38 页 | 655.38 KB | 2 年前3
Greenplum 介绍## Greenplum 介绍 Greenplum 是全球领先的开源大数据平台,是能够提供包含实时处理、弹性扩容、混合负载、云原生和集成数据分析等强大功能的大数据引擎。 著名分析机构 Gartner 2019 年报告中,在经典数据分析领域 Greenplum 全球排名第三,实时分析领域全球排名并列第四。Greenplum 是两个领域中排名前十的产品中的唯一一款开源产品。 Greenplum 基于 和优化技术。同时,Greenplum 还兼容 SQL 标准,具备强大、高效、安全的 PB 级结构化、半结构化和非结构化数据存储、处理和实时分析能力,可部署于企业裸机、容器、私有云和公有云中。值得一提的是,作为 OLAP 型的大数据平台,Greenplum 同时还能够支持涵盖 OLTP 型业务的混合负载,从而帮助客户真正打通业务-数据-洞见-业务的闭环。 目前,Greenplum 已经为国内外各行 腾云科技、饿了么、金风科技在内大量开源用户。 ## Greenplum 大数据平台的优势 - 一次打包到处运行的平台:部署灵活,不受限于硬件环境和平台,无论裸机、私有云、公有云均可部署。硬件环境的普适性,提供了极大的灵活性,解放了硬件平台的制约和绑定,从而允许客户灵活选择最适合的方案,降低未来的迁移代价,而开发、运维人员无需要学习新的数据库处理技术,人力成本也能够大大降低。 - 处理和分析各种0 码力 | 3 页 | 220.42 KB | 2 年前3
Greenplum 5.0 and Roadmap## Pivotal TM ### Greenplum 5.0 and Roadmap Brian Lu Pivotal ## Safe Harbor “Any information regarding pre-release of Pivotal offerings, future updates or other planned modifications is subject to ” ## Greenplum is Growing Steady • Greenplum is Growing Steady – Operating in 34 countries globally – Customer count and revenue growing – Pivotal engineering investment growing – 9 Greenplum Database commits to the github repo of Greenplum in 2016 – 111 unique contributors on github repo of Greenplum in 2016 – Major Greenplum 5.0 release planned early 2017 ## Greenplum Database Overview - Massively0 码力 | 27 页 | 2.66 MB | 2 年前3
共 997 条
- 1
- 2
- 3
- 4
- 5
- 6
- 100













