## Greenplum资源管理器 姚珂男/Pivotal kyao@pivotal.io ## Agenda • Greenplum数据库 • Resource Queue • Resource Group ## Greenplum数据库 • 基于PostgreSQL • 分布式 • OLAP • MPP(Massively Parallel Processing) ## Greenplum数据库 优化器不能被纳入资源管理器 ## Resource Queue ## • Priority is rough – 不能精确控制CPU - CHECK FOR INTERRUPTS – BackoffBackendTick – sweeper process (backoff.c) ## Resource Queue ## • Memory – Chaotic – 没有严格资源隔离 – 第三方库的malloc Resource Group • SQL语句并发控制 => 事务并发控制 ·基于cost的并发控制 • 基于优先级的CPU控制 => 精确CPU比例 • 内存控制 => 严格资源隔离 ## Running Example • CREATE RESOURCE Group rg WITH ( concurrency=1, cpu_rate_limit=.5,

云+社区技术沙龙 ## 腾讯云提高K8S集群资源利用率实践 庄鹏锐 腾讯云高级工程师 ## 资源利用率分析 Node节点资源碎片 Pod Resource（requests）配置不合理 WorkLoad/HPA 副本数设置不合理 业务空闲时间 ## 解决方案 ## Pod 压缩 ## HPA ## 动态调度 Node 超卖 VPA 碎片处理 ## Pod 资源压缩  关注云加社区公众号

.22 2.3.4 工作空间角色切换.....23 2.3.5 语言切换.....25 2.3.6 页面 Logo 主题设置.....25 3 纳管云账号及资源.....26 3.1 纳管 VMware 资源池.....26 3.2 纳管 OpenStack.....28 3.3 纳管阿里公有云.....32 3.4 纳管腾讯公有云.....35 3.5 纳管华为公有云 Azure 公有云.....40 3.7 纳管华为 FusionCompute.....43 3.8 纳管青云公有云.....47 3.9 纳管 SmartX 资源池.....49 3.10 纳管 Nutanix 资源池.....51 3.11 纳管华为 HCSOnline.....53 4 组织用户角色权限管理.....62 4.1 使用场景.....62 4.2 功能说明 实现多因子认证 ..... 86 5 资源及人员分权分域 ..... 92 5.1 使用场景 ..... 92 5.2 功能说明 ..... 93 5.3 使用说明 ..... 94 5.3.1 创建工作空间 ..... 94 5.3.2 管理工作空间 ..... 96 5.3.3 批量导入创建工作空间 ..... 97 5.3.4 授权资源到工作空间 ..... 98 5

名词术语 ..... 5 1.4 整体功能说明 ..... 10 1.5 整体界面说明 ..... 11 2 登录首页 ..... 14 2.1 我的导航面板 ..... 15 2.2 资源概览面板 ..... 16 2.3 账单汇总面板 ..... 18 2.4 我的待办面板 ..... 18 3 虚拟机在线申请部署及变更操作管理 ..... 20 3.1 申请同配置虚拟机 回收 F5 负载均衡 VS 实例 ..... 75 8 云数据库在线申请部署及操作变更回收 ..... 77 8.1 新建公有云 RDS 实例 ..... 77 8.2 变更 RDS 实例资源配置 ..... 78 8.3 变更 RDS 实例端口 ..... 错误！未定义书签。 8.4 变更 RDS 实例安全组 ..... 错误！未定义书签。 8.5 变更 RDS 实例 IP 96 12 查看配额及申请提升 ..... 98 12.1 查看配额 ..... 98 12.2 申请提升配额 ..... 98 13 回收过期资源 ..... 100 13.1 查看回收站资源列表 ..... 100 13.2 回收虚拟机资源 ..... 100 ## 1 概述 ### 1.1 文档目的 面向使用云管理平台在线申请 IT 资源、应用运行环境的项目组应

. -45 第六章：资源管理..... -46 使用资源组..... -46 资源组基于角色或基于外部组件..... -47 资源组的属性..... -48 配置与使用资源组..... -57 监控资源组状态..... -62 转移查询的资源组..... -66 使用资源队列..... -68 资源队列如何工作..... -68 -68 使用资源队列做资源管理的步骤..... -71 配置资源队列管理资源..... -71 创建资源队列..... -74 分配 ROLE(User)到资源队列..... -77 修改资源队列..... -78 检查资源队列状态..... -79 第七章：定义数据库对象..... -83 创建与管理数据库..... -83 关于数据库模版 行存与列存..... - 374 压缩..... - 375 分布键..... - 375 内存管理..... - 376 分区..... - 377 索引..... - 378 资源队列..... -379 监控与维护..... -379 收集统计信息..... -380 回收空间..... -381 数据加载..... -381 账户安全

CPU、内存、磁盘等抽象成一个资源池 ## Mesos 调度  各个 Agent 启动后, 向 Master 注册, 携带统计资源, 由 Master 决定给每个框架多少资源, 默认采用分级主导资源公平算法 每个框架收到资源后, 根据自身任务需求 根据自身任务需求, 调度任务的资源分配 ## MARATHON + CHR + ? 为云处理服务定制的容器调度框架，支持长期服务和定时任务 ## 处理流程  Image credit: dcos architecture (https://dcos.io/docs/1 SUBSCRIBE 消息, 开启一个长链接来订阅事件 (Event), 常用事件类型: |事件|简介| |---|---| |SUBSCRIBED|成功订阅| |OFFERS|提供资源的信息| |RESCIND|通知资源不再有效| |UPDATE|任务状态的改变| |FAILURE|执行器终止或者代理失去连接,通常伴随着 UPDATE 等事件| |HEATBEAT|心跳| ## OFFERS 事件处理