## Greenplum资源管理器 姚珂男/Pivotal kyao@pivotal.io ## Agenda • Greenplum数据库 • Resource Queue • Resource Group ## Greenplum数据库 • 基于PostgreSQL • 分布式 • OLAP • MPP(Massively Parallel Processing) ## Greenplum数据库 优化器不能被纳入资源管理器 ## Resource Queue ## • Priority is rough – 不能精确控制CPU - CHECK FOR INTERRUPTS – BackoffBackendTick – sweeper process (backoff.c) ## Resource Queue ## • Memory – Chaotic – 没有严格资源隔离 – 第三方库的malloc Resource Group • SQL语句并发控制 => 事务并发控制 ·基于cost的并发控制 • 基于优先级的CPU控制 => 精确CPU比例 • 内存控制 => 严格资源隔离 ## Running Example • CREATE RESOURCE Group rg WITH ( concurrency=1, cpu_rate_limit=.5,

# Hyper-V 给虚拟机换磁盘-centos 怎么开头呢，咱也不知道，先上图吧：  某实体服务器使用了 Hyper-V 作为基础虚拟化设施，其上运行若干虚拟机，其中有台虚拟机运行的是 Centos7 的系统，主要运行 web 服务器，刚开始给它分配了 的磁盘，后来在实际的使用过程中发现这台虚拟机用不了那么多的存储空间，所以想给它降一下配置，只分配 10GB 的磁盘。因为 Hyper-V 本身只能给虚拟机的虚拟磁盘扩容，不支持缩小，所以没别的办法，只能换一个虚拟磁盘，把原来的位于 100GB 磁盘上的 centos7 系统整体迁移到新的 10GB 的磁盘上。（这和给实体机的 centos7 系统换磁盘是差不多的步骤） ## 操作的主要流程如下： 0. 先进入目标虚拟机（ce 先进入目标虚拟机（centos7_web_serv1），查看运行的服务及某些关键配置，再关机 1. 给目标虚拟机（centos7_web_serv1）添加一块虚拟磁盘，容量为 10GB 2. 给目标虚拟机添加一个虚拟光驱，使用 centos7 的镜像 iso 文件 3. 设置目标虚拟机的启动顺序，让 CD/DVD 优先启动，并进入 centos7 光盘的救援系统 4. 在 centos7 光盘的救援系统里，给新添加的

## 现代编程思想 案例：栈式虚拟机 Hongbo Zhang ## 编译与解释 ## • 编译 ☐ 源程序 x 编译器 -> 目标程序 ☐ 目标程序 x 输入数据 -> 输出数据 ## • 解释 ☐ 源程序 x 输入数据 x 解释器 -> 输出数据 ☐ CPU可以被视为广义上的解释器 • 拓展阅读：二村映射/部分计算 ◦ 部分计算：程序优化，根据已知信息，运算进行特化 已知源程序与解释器，进行部分运算，获得目标程序 ■ 目标程序 x 输入数据 -> 输出数据 ## 虚拟机 • 一处编写，处处运行 ☐ 定义一个不基于任何平台的指令集 在不同平台上实现解释器 • 两种常见的虚拟机 ☐ 堆栈虚拟机：运算数存储在栈上，数据遵循先进后出原则 ☐ 寄存器虚拟机：运算数存储在寄存器中 ## 寄存器虚拟机 • 例：Lua VM (The Implementation of Lua 5 JUMP -> 5 (4 + 1) MOVE 2 1 0 ; R(2) = R(1) RETURN 2 2 0 ; return R(2) RETURN 0 1 0 ; return ## 堆栈虚拟机 ## • 例：WebAssembly Virtual Machine ☐ 取最大值 fn max(a : Int, b : Int) -> Int 1. local.get $a local

云+社区技术沙龙 ## 腾讯云提高K8S集群资源利用率实践 庄鹏锐 腾讯云高级工程师 ## 资源利用率分析 Node节点资源碎片 Pod Resource（requests）配置不合理 WorkLoad/HPA 副本数设置不合理 业务空闲时间 ## 解决方案 ## Pod 压缩 ## HPA ## 动态调度 Node 超卖 VPA 碎片处理 ## Pod 资源压缩  关注云加社区公众号

# QCon 全球软件开发大会【北京站】2016 ## OpenStack + Kubernetes: 搭建容器虚拟机组合云平台 qingyuanos 王昕 #### QCon | 2016.10.20~22 上海·宝华万豪酒店 全球软件开发大会 2016 [上海站] 购票热线：010-64738142 会务咨询：qcon@cn.infoq.com 赞助咨询: sponsor@cn.infoq 0/p5_1.jpg)  ## 提供虚拟机服务的意义 > 客户的需求不仅仅是更多的计算能力 ➢ 安全性：更小的Attack Surface 易于提供有状态服务 传统应用容易迁移 Windows应用容易迁移 易于部署单体应用 openstack™ ### 容器编排系统的选择 ——Kubernetes的优势 vs. Mesos and Swarm 来自Google的简单一致的设计理念 原生为容器集群打造 原生服务发现 统一的资源模型 支持丰富的标签Label发现机制 原生负载均衡，高可用方案 原生的Rolling Update设计 为生产环境专门打造的容器集群 多镜像Pod 多种业务类型：Service+RC/Job/DaemonSet

.22 2.3.4 工作空间角色切换.....23 2.3.5 语言切换.....25 2.3.6 页面 Logo 主题设置.....25 3 纳管云账号及资源.....26 3.1 纳管 VMware 资源池.....26 3.2 纳管 OpenStack.....28 3.3 纳管阿里公有云.....32 3.4 纳管腾讯公有云.....35 3.5 纳管华为公有云 Azure 公有云.....40 3.7 纳管华为 FusionCompute.....43 3.8 纳管青云公有云.....47 3.9 纳管 SmartX 资源池.....49 3.10 纳管 Nutanix 资源池.....51 3.11 纳管华为 HCSOnline.....53 4 组织用户角色权限管理.....62 4.1 使用场景.....62 4.2 功能说明 实现多因子认证 ..... 86 5 资源及人员分权分域 ..... 92 5.1 使用场景 ..... 92 5.2 功能说明 ..... 93 5.3 使用说明 ..... 94 5.3.1 创建工作空间 ..... 94 5.3.2 管理工作空间 ..... 96 5.3.3 批量导入创建工作空间 ..... 97 5.3.4 授权资源到工作空间 ..... 98 5

CPU、内存、磁盘等抽象成一个资源池 ## Mesos 调度  各个 Agent 启动后, 向 Master 注册, 携带统计资源, 由 Master 决定给每个框架多少资源, 默认采用分级主导资源公平算法 每个框架收到资源后, 根据自身任务需求 根据自身任务需求, 调度任务的资源分配 ## MARATHON + CHR + ? 为云处理服务定制的容器调度框架，支持长期服务和定时任务 ## 处理流程  Image credit: dcos architecture (https://dcos.io/docs/1 SUBSCRIBE 消息, 开启一个长链接来订阅事件 (Event), 常用事件类型: |事件|简介| |---|---| |SUBSCRIBED|成功订阅| |OFFERS|提供资源的信息| |RESCIND|通知资源不再有效| |UPDATE|任务状态的改变| |FAILURE|执行器终止或者代理失去连接,通常伴随着 UPDATE 等事件| |HEATBEAT|心跳| ## OFFERS 事件处理