Greenplum开源MPP数据库介绍Agenda Greenplum简介 Greenplum的MPP架构 > 分布式优化器: Postgres planner 和 ORCA > 分布式事务和执行 Greenplum存储 Greenplum生态 Greenplum 7 Greenplum简介:什么是Greenplum? 基于PostgreSQL、开源、分布式MPP、ACID完备、为OLAP优化的关系型数据仓库。 https://greenplum 2003年,Luke Lonergan 和 Scott Yara 发起 Greenplum 项目,从 PostgreSQL 8 分支,做成 MPP 架构 2010年被EMC收购 2012年成为Pivotal的一部分 2015年开源,可能是世界上第一个成熟商用的开源MPP数据仓库 ➢ 2019年底跟随Pivotal被VMware收购 ## 谁在用Greenplum? ➢ 500多付费企业客户 成千上万的开源用户 e60d5572e8/p5_11.jpg) ## Greenplum的MPP架构 ## Massively: ☐ PB级的数据,单台主机无法处理 ☐ 所以数据分布在多个主机上 ☐ 高效、灵活的数据分布,和实际业务相关 ## Parallel: ☐ 数据并行处理计算 ☐ 通过网络进行数据交换和汇总 ## 执行架构 ## ➤ Coordinator: ☐ 管理其它节点 ☐ 生成分布式计划0 码力 | 23 页 | 4.55 MB | 2 年前3
Greenplum on Kubernetes
容器化MPP数据库## Greenplum on Kubernetes 容器化MPP数据库 ## AGENDA ## 云数据库背景 云数据库实现方案 Greenplum on Kubernetes Greenplum Operator 总结 ## 云数据库背景 ## 云数据库背景 ● 资源变化 ☐ 本地资源 → 云 ☐ 静态资源 → 弹性需求 ## ● 数据变化 ☐ 内部数据 → 多数据源 用户数据 - 临时文件 - 网络传输 - 权限控制 - 跨云 - 公有云 - 私有云 ## 云数据库实现方案 全新数据库 ○ Snowflake 原有数据库架构升级 ☐ Vertica Eon Mode ● 容器化数据库+Kubernetes ○ Apache Spark ○ CockroachDB ○ Apache HAWQ ## 云数据库存储方案 云数据库存储方案 ● 块存储 ☐ 文件系统接口 ● 对象存储 ☐ 成本低 ☐ 扩展性强 ☐ 访问延迟高 ## Greenplum on Kubernetes ## Greenplum 架构  Master节点和Standby Master节点0 码力 | 33 页 | 1.93 MB | 2 年前3
Greenplum 架构概览Greenplum 架构概览 基本拓拉结构 GP 基本查询流程 segmentl Segment 2 上,吉站可为 Gygenglum [后科称 GP 对是个PogigreSoL 实明和。GP 对外主代的入口,并用户雪上并行 情人 上| aaase 这He,人的入对 Segment 渤行;Standby aster 有为 aster 提供可用 Segment0 码力 | 1 页 | 734.79 KB | 2 年前3
Nacos架构&原理# NACOS 架构与原理 NACOS ARCHITECTURE & PRINCIPLES. 一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。 易用·稳定·实时·规模 NΛCOs. 特别鸣谢:     ## MPP  Master Servers Query0 码力 | 18 页 | 913.39 KB | 2 年前3
微服务架构云端应用## 微服务架构云端应用 好雨云创始人 刘凡 ## 自我介绍 刘凡,好雨云创始人兼CEO。曾任澳客网 CTO和CEO职位。拥有超过12年互联网产品开发和管理经验,专注于互联网技术架构设计,对产品设计、敏捷开发、安全、OKRs、大数据等领域有深入研究。推崇反应式编程(http://www.reactivemanifesto.org/),并在多个产品中成功应用。 ## 大纲 01 微服务架构介绍 02 02 架构模式 03 应用 ## 01 微服务架构 介绍 微服务架构(Microservices Architecture)是将应用拆分成小业务单元开发和部署,使用轻量级协议通信,通过协同工作实现应用逻辑的架构模式。  ## 改变 按职能划分 Mesos Scala with JVM Container Focus on efficient datacenter deployment at scale ## 02 ## 架构模式 ## 一 体化架构模式  数据库 ## 聚合模式0 码力 | 32 页 | 864.40 KB | 2 年前3
领域驱动设计&中台/领域驱动架构透析与架构解耦领域驱动 架构透析与架构解耦 张逸 DDCHINA ## 内容 01 领域的边界 02 领域驱动架构的演进 03 DDD与C4模型 04 DDD与RUP 4+1视图 ## 领域的边界 ## 整洁架构  ## 六 边形架构 | a1b93a093b0107faff0bb8ee20e/p5_1.jpg) ## 微服务架构  ## 领域驱动架构的演进 ## 经典的DDD分层架构  ## 经典的DDD分层架构  ## 经典的三层架构 用户展现层  云架构演化## Apache ShardingSphere (Incubating) ## 云架构演化 京东数科-张亮 (email: zhangliang@apache.org) 京东数科-潘娟 (email: panjuan@apache.org) # 未来架构 从服务化到云原生 张亮 吴晟 敖小剑 宋净超 著  ## 分布式数据库中间优势 ## DB-Engines Ranking The DB-Engines Ranking ranks database management systems0 码力 | 37 页 | 3.00 MB | 2 年前3
Apache ShardingSphere(Incubating)云架构演化6/b/126bfe1465ea2bfc007e1620c0f37e48/p1_1.jpg) PostgreSQL ## Apache ShardingSphere(Incubating) 云架构演化 Juan Pan panjuan@apache.org JD Digits ## Sharding Sphere  ## ShardingSphere架构 核心功能 数据分片 分布式事务 数据库治理 弹性伸缩 管控界面 Apache ShardingSphere Sharding-JDBC 接入端 Sharding-Proxy ShardingSphere ShardingSphere Zookeeper ETCD 注册中心 SkyWalking:基于分布式追踪的性能监控系统。项目的核心目标是针对微服务、Cloud Native、容器化架构,并提供应用性能监控和分布式调用链追踪能力。 SkyWalking已于2017年12月8日,进入Apache孵化器。 ## 回 + Skywalking Apache SkyWalking Sharding-Proxy0 码力 | 34 页 | 5.07 MB | 2 年前3
微服务架构及ServiceComb实践## 微服务架构及ServiceComb实践 ## 什么是微服务架构? 一个既“简单”的又“强大”的后端架构模式。 ## 简单: 每个服务相对较小并比较容易开发维护。 服务可以独立的部署。 • 更适合小团队(个人)开发管理 • 更容易实验和采纳新的技术。 适合同学们学习 Demo也可以作为生产系统的一部分 ## 强大: 使大型的复杂应用程序可以持续的交付和持续的部署。 • 更容易测试 g) 分布式跟踪 网关 a) 路由 b) 黑白名单 c)和认证鉴权集成 ## 服务间的通信 背景:为什么服务间通信重要? • 每个微服务有自己的数据库(层) 服务架构应用的质量很大程度取决于服务的拆分的高内聚,低耦合,不了解服务间通信,无法做出高质量的拆分。 不同的业务,涉及的不同服务间通信有不同的要求 1. 关注事务性要求(ACID) 2. 关注对性能的要求 Zuul VS edge-service(更优)。 5. 生产环境需从最外层开始设置限流策略,并设置降级机制。 Thank You. 欢迎添加 ServiceComb小助手 加入微服务技术交流群,架构、设计、开 发、解BUG、调优,总有您感兴趣的话题 欢迎关注 微服务蜂巢公众号 获取更多微服务技术干货、资讯文章 












