OpenStack + Kubernetes: 搭建容器虚拟机组合云平台 qingyuanos 王昕 2016-4-21 提供虚拟机服务的意义 Ø 客户的需求不仅仅是更多的计算能力 Ø 安全性：更小的Attack Surface Ø 易于提供有状态服务 Ø 传统应用容易迁移 Ø Windows应用容易迁移 Ø 易于部署单体应用 Ø 用于桌面云 Ø 多服务单服务器部署 云平台技术的选择 Compute Node Compute Node Controller Nodes Compute Node Compute Node Storage Nodes 多租户隔离的容器和 虚拟机组合网络 kube-proxy的负载均衡原理 对外发布服务——浮动IP模式 对外发布应用服务 利用端口映射节省IP 多用户共享Kubernetes集群 通过二级域名发布服务 覆盖网络（Overlay） PaaS层网络 适用场景 Calico Kuryr 不需要多租户隔离，大量使用容器技术，对性能 要求很高 Overlay Kuryr 需要多租户隔离，需要统一管理容器网络和虚拟 机网络，将容器用作轻量级虚拟机，对性能要求 较高 Overlay Calico 需要多租户隔离，对容器网络的管理独立于虚拟 机网络 Overlay Overlay 需要多租户隔离，对容器网络的管理独立于虚拟 机网络，对性能要求不高；快速集成，用于测试

创建容器 7.5. LIBGUESTFS 工具和 VIRTCTL GUESTFS 7.6. 其他资源 第 第 8 章 章 虚 虚拟 拟机 机 8.1. 创建虚拟机 8.2. 编辑虚拟机 8.3. 编辑引导顺序 8.4. 删除虚拟机 5 5 6 6 6 6 7 8 8 8 8 9 10 10 11 15 15 19 25 26 28 30 32 34 34 34 36 . . . . . . . . 8.5. 管理虚拟机实例 8.6. 控制虚拟机状态 8.7. 访问虚拟机控制台 8.8. 使用 SYSPREP 自动执行 WINDOWS 安装 8.9. 解决故障节点来触发虚拟机故障切换 8.10. 在虚拟机上安装 QEMU 客户机代理 8.11. 查看虚拟机的 QEMU 客户机代理信息 8.12. 在虚拟机中管理配置映射、SECRET 和服务帐户 8.13 在现有 WINDOWS 虚拟机上安装 VIRTIO 驱动程序 8.14. 在新 WINDOWS 虚拟机上安装 VIRTIO 驱动程序 8.15. 高级虚拟机管理 8.16. 导入虚拟机 8.17. 克隆虚拟机 8.18. 虚拟机网络 8.19. 虚拟机磁盘 第 第 9 章 章 虚 虚拟 拟机模板 机模板 9.1. 创建虚拟机模板 9.2. 编辑虚拟机模板 9.3. 为虚拟机模板启用专用资源

. . 目 目录 录 第 第 1 章 章 关于 关于 OPENSHIFT VIRTUALIZATION 1.1. OPENSHIFT VIRTUALIZATION 的作用 1.2. 关于虚拟机磁盘的存储卷 1.3. 单节点 OPENSHIFT 的不同 1.4. 其他资源 第 第 2 章 章 OPENSHIFT VIRTUALIZATION 架 架构 构 2.1. OPENSHIFT VIRT-OPERATOR 第 第 3 章 章 OPENSHIFT VIRTUALIZATION 入 入门 门 3.1. 规划和安装 OPENSHIFT VIRTUALIZATION 3.2. 创建和管理虚拟机 3.3. 后续步骤 第 第 4 章 章 WEB 控制台概述 控制台概述 4.1. 概述页面 4.2. 目录页面 4.3. VIRTUALMACHINES 页面 4.4. 模板页 4.5. 数据源页 章 章 虚 虚拟 拟机 机 10.1. 创建虚拟机 10.2. 编辑虚拟机 10.3. 编辑引导顺序 10.4. 删除虚拟机 10.5. 导出虚拟机 10.6. 管理虚拟机实例 10.7. 控制虚拟机状态 10.8. 访问虚拟机控制台 10.9. 使用 SYSPREP 自动执行 WINDOWS 安装 10.10. 解决故障节点来触发虚拟机故障切换 10.11. 安装 QEMU 客户机代理和

版本，则本书使用 术语 “ESX Server 3.x”。 目标读者 本手册面向需要熟悉 VMware Infrastructure 的组件和功能的任何人。本手册中信息的 目标读者为经验丰富的、熟悉虚拟机技术和数据中心操作的 Windows 或 Linux 系统管 理员。 关于本书 VMware Infrastructure 简介 6 VMware, Inc. 文档反馈 VMware VirtualCenter 的受管主机 SAN 受管主机之间共享的存储区域网络类型数据存储 tmplt 模板 user# 具有访问权限的用户 VC VirtualCenter VM# 受管主机上的虚拟机 VMware, Inc. 7 关于本书 支持服务项目 了解 VMware 支持服务项目如何帮助您满足业务需求。网址为： http://www.vmware.com/cn/support/services。 Infrastructure 包括 图 1 中所示的下列组件： � VMware ESX Server - 一个在物理服务器上运行的健壮的、经过生产验证的虚拟化 层，它将处理器、内存、存储器和网络资源抽象为多个虚拟机。 ESX Server 分为 多个不同版本。 � ESX Server 3 包含内置服务控制台。它的安装文件是一个可安装的 CD-ROM 引导映像。 � ESX Server 3i 不包含服务控制台。它有两种形式：ESX

广州办公室 广州市天河北路 233 号 中信广场 7401 室 www.vmware.com/cn 目录 关于本文档 5 1 了解 VMware Data Recovery 7 备份虚拟机 7 卷影复制服务 8 删除重复存储的优点 8 2 安装 VMware Data Recovery 9 VMware Data Recovery 系统要求 9 安装客户端插件 9 安装备份设备 安装备份设备 10 向备份设备中添加硬盘 10 3 配置 VMware Data Recovery 13 启动备份设备 13 配置备份设备 14 使用入门向导 14 创建备份作业 15 还原虚拟机 16 VMware Data Recovery 故障排除 18 索引 21 VMware, Inc. 3 VMware Data Recovery 4 VMware, Inc. Data Recovery 管理员指南》包含为中小型企业建立备份解决方案的信息。 目标读者 本文档适用于需要使用 VMware Data Recovery 提供备份解决方案的用户。本书的目标读者为熟悉虚拟机技术 和数据中心操作且具有丰富经验的 Windows 或 Linux 系统管理员。 文档反馈 VMware 欢迎您提出宝贵建议，以便改进我们的文档。如有意见，请将反馈发送到 docfeedback@vmware

5 虚拟机的定义 6 VMware Fusion 的功能 6 VMware Fusion 的系统要求 6 安装 VMware Fusion 7 升级 VMware Fusion 7 使用自动更新升级 VMware Fusion 7 通过下载升级 VMware Fusion 8 VMware Fusion 入门 8 启动和运行 9 利用“Windows 快捷安装”创建虚拟机 9 将 Boot Camp 分区作为虚拟机开启 10 导入 Parallels 或 Virtual PC 虚拟机 11 支持的客户机操作系统 12 在虚拟机中使用 Mac 键盘 12 暂停与继续运行虚拟机 12 利用 VMware Fusion 在线资源 13 索引 15 VMware, Inc. 3 VMware Fusion 入门指南 4 VMware, Inc. VMware 入门指南 1 利用 VMware Fusion™，您可以在基于英特尔处理器的 Mac 上运行个人电脑 (PC) 应用程序和设备。 VMware Fusion 专为 Mac 用户设计，它有助于充分利用虚拟机的安全性、灵活性和可移动性，让 Windows 及其他 x86 操作系统与 Mac OS X 一同运行。 本章讨论了以下主题： n 第 5 页，“关于 VMware Fusion” n 第 6

瓶颈 主机资源管理 � 网络通信调整，存储 I/O 优先级， 按虚拟机的资源共享 � 缺少类似功能 性能增强 � AMD RVI、大型内存页面、 通用 4 路 vSMP、VMI 半虚拟化 � 没有 AMD-RVI，没有大型内存页面， 仅在 Windows 2008 虚拟机上支持 4 路 vSMP 虚拟化安全技术 � VMware VMsafe™ 操作系统作为其虚拟化体系结构的核心部分。 在数据中心实现更好的可扩展性和性能 虚拟化管理程序在提供可扩展的虚拟化性能方面起着重要的作用。详细的性能演示和对比清楚 地表明，在高度虚拟化的环境中，即使每台物理主机支持的用户和虚拟机总数增加，VMware ESX 也能实现高性能吞吐。 VMware ESX 能够达到多快？100,000 IOPS 甚至更高！ I/O 是虚拟环境中最重要的性能瓶颈之一，但是即使 I/O 资源占用量最大的应用程序也可以 有了这样强大的性能，即使要求最为苛刻的工作负载也可以实现虚拟化。 其他供应商尝试展示自己的 I/O 性能，但是其测试结果都受到了批评，因为这些可疑的测试 配置并未基于实际的虚拟化情景。而且，他们还不现实地将测试仅限于一个或两个虚拟机，以 回避自身的扩展弱点。 这就引出了一个问题，为什么 ESX 的扩展性和性能比其他供应商的产品好这么多？正如最近 的一篇 VMware 文章“A Look at Some VMware Infrastructure

集群。 表 1.1. VMware 组件支持的最低 vSphere 版本 第 第 1 章 章 在 在 VSPHERE 上安装 上安装 7 组 组件 件 最低支持版本 最低支持版本 描述 描述 虚拟机监控程序 vSphere 6.5 及之后的版本 13 此版本是 Red Hat Enterprise Linux CoreOS(RHCOS)支持的最 低版本。请查看 Red Hat Enterprise OpenShift Container Platform 集群的文件夹时（这是默认行为）才需要。您必须为 指定对象创建或修改 vSphere 角色，才能授予所需的权限。 如果安装程序创建 vSphere 虚拟机文件夹，则需要额外的角色。 例 1.1. 安装所需的角色和权限 第 第 1 章 章 在 在 VSPHERE 上安装 上安装 9 角色的 角色的 vSphere 对 对象 象 何 何时 时需要 FileManagement vSphere 端口组 Always Network.Assign OpenShift Container Platform 4.6 在 在 vSphere 上安装 上安装 10 虚拟机文件夹 Always Resource.AssignVMToPool VApp.Import VirtualMachine.Config.Add ExistingDisk VirtualMachine

SKU。rh-ocp-worker SKU 代表 Hyper-V 生成版本 2 虚拟机镜像。OpenShift Container Platform 中使用的默认实例类型与版本 2 兼容。如果您计划使用与版本 1 兼容的实例类型，请使用与 rh-ocp-worker-gen1 SKU 关联的 镜像。rh-ocp-worker-gen1 SKU 代表 Hyper-V 版本 1 虚拟机镜像。 重要 重要 在使用 64 位 ARM 出示例 注意 注意 无论您安装的 OpenShift Container Platform 版本是什么，要使用的 Azure Marketplace 镜像的正确版本都是 4.13。如果需要，您的虚拟机会在安装过程中自 动升级。 2. 运行以下命令之一检查您的所提供的镜像： 北美： 欧洲、中东和非洲地区： 3. 运行以下命令之一查看提供的术语： 北美： 欧洲、中东和非洲地区： 4. 运行以下命令之一接受产品条款： 将机器部署为 Spot 虚拟机的机器 您可以通过创建一个在 Azure 上运行的计算机器集来节约成本，该机器集将机器部署为非保障的 Spot 虚 拟机。Spot VM 使用未使用的 Azure 容量，且比标准虚拟机的成本要低。您可以将 Spot 虚拟机用于可容 许中断的工作负载，如批处理或无状态工作负载、横向可扩展工作负载。 Azure 可随时终止 Spot 虚拟机。Azure 在发生中断时向用户发出

节点有最新的更新。 您可以通过删除特定机器来删除 Windows 节点。 您可以使用 Bring-Your-Own-Host (BYOH) Windows 实例 重新使用 Windows Server 虚拟机并将其引入 OpenShift Container Platform。BYOH Windows 实例让希望降低 Windows 服务器离线时发生重大中断的 用户受益。您可以使用 BYOH Windows Windows 实例。(BZ#2070892) 2.4.2. 已知问题 Windows 节点不支持从安全的私有 registry 中拉取容器镜像。使用公共 registry 中的镜像，或预 拉取虚拟机镜像中的镜像。 2.4.3. 已弃用的功能 vSphere worker 节点不再支持 Windows Server 20H2。 2.4.4. 新功能及改进 2.4.4.1. Windows Docker 运行时。用户不再需要启用 Docker 格式的容器运行时，或在 Bring-Your-Own-Host (BYOH) 实例上安装 Docker 容器运行时。您可以基于使用 Docker 的虚拟机镜像 来继续使用节点。容器运行时可以和 Docker 服务一起运行。 WMCO 支持带有或不带 Docker 用于 vSphere 和 BYOH Windows 实例的 Windows 金级镜像。