OpenStack + Kubernetes: 搭建容器虚拟机组合云平台 qingyuanos 王昕 2016-4-21 提供虚拟机服务的意义 Ø 客户的需求不仅仅是更多的计算能力 Ø 安全性：更小的Attack Surface Ø 易于提供有状态服务 Ø 传统应用容易迁移 Ø Windows应用容易迁移 Ø 易于部署单体应用 Ø 用于桌面云 Ø 多服务单服务器部署 云平台技术的选择 Compute Node Compute Node Controller Nodes Compute Node Compute Node Storage Nodes 多租户隔离的容器和 虚拟机组合网络 kube-proxy的负载均衡原理 对外发布服务——浮动IP模式 对外发布应用服务 利用端口映射节省IP 多用户共享Kubernetes集群 通过二级域名发布服务 覆盖网络（Overlay） PaaS层网络 适用场景 Calico Kuryr 不需要多租户隔离，大量使用容器技术，对性能 要求很高 Overlay Kuryr 需要多租户隔离，需要统一管理容器网络和虚拟 机网络，将容器用作轻量级虚拟机，对性能要求 较高 Overlay Calico 需要多租户隔离，对容器网络的管理独立于虚拟 机网络 Overlay Overlay 需要多租户隔离，对容器网络的管理独立于虚拟 机网络，对性能要求不高；快速集成，用于测试

考虑将 Hadoop YARN 加入到软件栈中，它是面向大数据应用程序的分布式 操作系统。 ZooKeeper 是另一个 Hadoop Stack 组件，它能通过共享层次名 称空间的数据寄存器(称为 znode)，使得分布式进程相互协调工作。 每个 znode 都由一个路径来标识，路径元素由斜杠(/)分隔。 还有其他一些系统能与 Hadoop 进行集成并从其基础架构中受 益。虽然 的其余组件了。HDFS(Hadoop Distributed File System)提供一个分布 式文件系统，设计目标是能够运行在基础硬件组件之上。大多数企 业被其最小化的系统配置要求所吸引。此环境可以在虚拟机(Virtual Hadoop 大数据解决方案 4 Machine，VM)或笔记本电脑上完成初始配置，而且可以升级到服务 器部署。它具有高度的容错性，并且被设计为能够部署在低成本的 业工具相集成的解决方案为基础，Hadoop 的开放源码和企业生态系 统还在不断成长。HDFS是该生态系统的主要组成部分。由于Hadoop 有着低廉的商业成本，因此很容易去探索 Hadoop 的特性，无论是 通过虚拟机，还是在现有环境建立混合生态系统。使用 Hadoop 解 决方案来审查当前的数据方法以及日渐增长的供应商阵营是一种非 Hadoop 大数据解决方案 10 常好的方法。借助这些服务和工具，Hadoop

. . 目 目录 录 第 第 1 章 章 关于 关于 OPENSHIFT VIRTUALIZATION 1.1. OPENSHIFT VIRTUALIZATION 的作用 1.2. 关于虚拟机磁盘的存储卷 1.3. 单节点 OPENSHIFT 的不同 1.4. 其他资源 第 第 2 章 章 OPENSHIFT VIRTUALIZATION 架 架构 构 2.1. OPENSHIFT VIRT-OPERATOR 第 第 3 章 章 OPENSHIFT VIRTUALIZATION 入 入门 门 3.1. 规划和安装 OPENSHIFT VIRTUALIZATION 3.2. 创建和管理虚拟机 3.3. 后续步骤 第 第 4 章 章 WEB 控制台概述 控制台概述 4.1. 概述页面 4.2. 目录页面 4.3. VIRTUALMACHINES 页面 4.4. 模板页 4.5. 数据源页 章 章 虚 虚拟 拟机 机 10.1. 创建虚拟机 10.2. 编辑虚拟机 10.3. 编辑引导顺序 10.4. 删除虚拟机 10.5. 导出虚拟机 10.6. 管理虚拟机实例 10.7. 控制虚拟机状态 10.8. 访问虚拟机控制台 10.9. 使用 SYSPREP 自动执行 WINDOWS 安装 10.10. 解决故障节点来触发虚拟机故障切换 10.11. 安装 QEMU 客户机代理和

能得 到大小为128的小批量。 当涉及到单个GPU甚至CPU时，事情会更微妙一些：这些设备有多种类型的内存、通常情况下多种类型的计 算单元以及在它们之间不同的带宽限制。例如，一个CPU有少量寄存器（register），L1和L2缓存，以及L3缓 存（在不同的处理器内核之间共享）。随着缓存的大小的增加，它们的延迟也在增加，同时带宽在减少。可以 说，处理器能够执行的操作远比主内存接口所能提供的多得多。 与PCIe总线相连接，这种驱动器称为NVMe（非 易失性内存增强），其最多可以使用4个PCIe通道。在PCIe4.0上最高可达8GB/s。 云存储 云存储提供了一系列可配置的性能。也就是说，虚拟机的存储在数量和速度上都能根据用户需要进行动态分 配。建议用户在延迟太高时（例如，在训练期间存在许多小记录时）增加IOPs的配置数。 12.4.4 CPU 中央处理器（central processing instruction multiple data，SIMD）操作。 图12.4.5显示了如何在ARM上的一个时钟周期中完成8个整数加法。 图12.4.5: 128位NEON矢量化 根据体系结构的选择，此类寄存器最长可达512位，最多可组合64对数字。例如，我们可能会将两个数字相乘， 然后与第三个数字相加，这也称为乘加融合（fused multiply‐add）。Intel的OpenVino155就是使用这些处理器

创建容器 7.5. LIBGUESTFS 工具和 VIRTCTL GUESTFS 7.6. 其他资源 第 第 8 章 章 虚 虚拟 拟机 机 8.1. 创建虚拟机 8.2. 编辑虚拟机 8.3. 编辑引导顺序 8.4. 删除虚拟机 5 5 6 6 6 6 7 8 8 8 8 9 10 10 11 15 15 19 25 26 28 30 32 34 34 34 36 . . . . . . . . 8.5. 管理虚拟机实例 8.6. 控制虚拟机状态 8.7. 访问虚拟机控制台 8.8. 使用 SYSPREP 自动执行 WINDOWS 安装 8.9. 解决故障节点来触发虚拟机故障切换 8.10. 在虚拟机上安装 QEMU 客户机代理 8.11. 查看虚拟机的 QEMU 客户机代理信息 8.12. 在虚拟机中管理配置映射、SECRET 和服务帐户 8.13 在现有 WINDOWS 虚拟机上安装 VIRTIO 驱动程序 8.14. 在新 WINDOWS 虚拟机上安装 VIRTIO 驱动程序 8.15. 高级虚拟机管理 8.16. 导入虚拟机 8.17. 克隆虚拟机 8.18. 虚拟机网络 8.19. 虚拟机磁盘 第 第 9 章 章 虚 虚拟 拟机模板 机模板 9.1. 创建虚拟机模板 9.2. 编辑虚拟机模板 9.3. 为虚拟机模板启用专用资源

版本，则本书使用 术语 “ESX Server 3.x”。 目标读者 本手册面向需要熟悉 VMware Infrastructure 的组件和功能的任何人。本手册中信息的 目标读者为经验丰富的、熟悉虚拟机技术和数据中心操作的 Windows 或 Linux 系统管 理员。 关于本书 VMware Infrastructure 简介 6 VMware, Inc. 文档反馈 VMware VirtualCenter 的受管主机 SAN 受管主机之间共享的存储区域网络类型数据存储 tmplt 模板 user# 具有访问权限的用户 VC VirtualCenter VM# 受管主机上的虚拟机 VMware, Inc. 7 关于本书 支持服务项目 了解 VMware 支持服务项目如何帮助您满足业务需求。网址为： http://www.vmware.com/cn/support/services。 Infrastructure 包括 图 1 中所示的下列组件： � VMware ESX Server - 一个在物理服务器上运行的健壮的、经过生产验证的虚拟化 层，它将处理器、内存、存储器和网络资源抽象为多个虚拟机。 ESX Server 分为 多个不同版本。 � ESX Server 3 包含内置服务控制台。它的安装文件是一个可安装的 CD-ROM 引导映像。 � ESX Server 3i 不包含服务控制台。它有两种形式：ESX

广州办公室 广州市天河北路 233 号 中信广场 7401 室 www.vmware.com/cn 目录 关于本文档 5 1 了解 VMware Data Recovery 7 备份虚拟机 7 卷影复制服务 8 删除重复存储的优点 8 2 安装 VMware Data Recovery 9 VMware Data Recovery 系统要求 9 安装客户端插件 9 安装备份设备 安装备份设备 10 向备份设备中添加硬盘 10 3 配置 VMware Data Recovery 13 启动备份设备 13 配置备份设备 14 使用入门向导 14 创建备份作业 15 还原虚拟机 16 VMware Data Recovery 故障排除 18 索引 21 VMware, Inc. 3 VMware Data Recovery 4 VMware, Inc. Data Recovery 管理员指南》包含为中小型企业建立备份解决方案的信息。 目标读者 本文档适用于需要使用 VMware Data Recovery 提供备份解决方案的用户。本书的目标读者为熟悉虚拟机技术 和数据中心操作且具有丰富经验的 Windows 或 Linux 系统管理员。 文档反馈 VMware 欢迎您提出宝贵建议，以便改进我们的文档。如有意见，请将反馈发送到 docfeedback@vmware

5 虚拟机的定义 6 VMware Fusion 的功能 6 VMware Fusion 的系统要求 6 安装 VMware Fusion 7 升级 VMware Fusion 7 使用自动更新升级 VMware Fusion 7 通过下载升级 VMware Fusion 8 VMware Fusion 入门 8 启动和运行 9 利用“Windows 快捷安装”创建虚拟机 9 将 Boot Camp 分区作为虚拟机开启 10 导入 Parallels 或 Virtual PC 虚拟机 11 支持的客户机操作系统 12 在虚拟机中使用 Mac 键盘 12 暂停与继续运行虚拟机 12 利用 VMware Fusion 在线资源 13 索引 15 VMware, Inc. 3 VMware Fusion 入门指南 4 VMware, Inc. VMware 入门指南 1 利用 VMware Fusion™，您可以在基于英特尔处理器的 Mac 上运行个人电脑 (PC) 应用程序和设备。 VMware Fusion 专为 Mac 用户设计，它有助于充分利用虚拟机的安全性、灵活性和可移动性，让 Windows 及其他 x86 操作系统与 Mac OS X 一同运行。 本章讨论了以下主题： n 第 5 页，“关于 VMware Fusion” n 第 6

瓶颈 主机资源管理 � 网络通信调整，存储 I/O 优先级， 按虚拟机的资源共享 � 缺少类似功能 性能增强 � AMD RVI、大型内存页面、 通用 4 路 vSMP、VMI 半虚拟化 � 没有 AMD-RVI，没有大型内存页面， 仅在 Windows 2008 虚拟机上支持 4 路 vSMP 虚拟化安全技术 � VMware VMsafe™ 操作系统作为其虚拟化体系结构的核心部分。 在数据中心实现更好的可扩展性和性能 虚拟化管理程序在提供可扩展的虚拟化性能方面起着重要的作用。详细的性能演示和对比清楚 地表明，在高度虚拟化的环境中，即使每台物理主机支持的用户和虚拟机总数增加，VMware ESX 也能实现高性能吞吐。 VMware ESX 能够达到多快？100,000 IOPS 甚至更高！ I/O 是虚拟环境中最重要的性能瓶颈之一，但是即使 I/O 资源占用量最大的应用程序也可以 有了这样强大的性能，即使要求最为苛刻的工作负载也可以实现虚拟化。 其他供应商尝试展示自己的 I/O 性能，但是其测试结果都受到了批评，因为这些可疑的测试 配置并未基于实际的虚拟化情景。而且，他们还不现实地将测试仅限于一个或两个虚拟机，以 回避自身的扩展弱点。 这就引出了一个问题，为什么 ESX 的扩展性和性能比其他供应商的产品好这么多？正如最近 的一篇 VMware 文章“A Look at Some VMware Infrastructure

集群。 表 1.1. VMware 组件支持的最低 vSphere 版本 第 第 1 章 章 在 在 VSPHERE 上安装 上安装 7 组 组件 件 最低支持版本 最低支持版本 描述 描述 虚拟机监控程序 vSphere 6.5 及之后的版本 13 此版本是 Red Hat Enterprise Linux CoreOS(RHCOS)支持的最 低版本。请查看 Red Hat Enterprise OpenShift Container Platform 集群的文件夹时（这是默认行为）才需要。您必须为 指定对象创建或修改 vSphere 角色，才能授予所需的权限。 如果安装程序创建 vSphere 虚拟机文件夹，则需要额外的角色。 例 1.1. 安装所需的角色和权限 第 第 1 章 章 在 在 VSPHERE 上安装 上安装 9 角色的 角色的 vSphere 对 对象 象 何 何时 时需要 FileManagement vSphere 端口组 Always Network.Assign OpenShift Container Platform 4.6 在 在 vSphere 上安装 上安装 10 虚拟机文件夹 Always Resource.AssignVMToPool VApp.Import VirtualMachine.Config.Add ExistingDisk VirtualMachine