vSphere 可用性 - VMware

Transcription

1 VMware vsphere 6.5 VMware ESXi 6.5 vcenter Server 6.5 在本文档被更新的版本替代之前, 本文档支持列出的每个产品的版本和所有后续版本 要查看本文档的更新版本, 请访问 ZH_CN

2 最新的技术文档可以从 VMware 网站下载 : VMware 网站还提供最近的产品更新信息 您如果对本文档有任何意见或建议, 请把反馈信息提交至 : docfeedback@vmware.com 版权所有 VMware, Inc. 保留所有权利 版权和商标信息 VMware, Inc Hillview Ave. Palo Alto, CA 北京办公室北京市海淀区科学院南路 2 号融科资讯中心 C 座南 8 层 上海办公室上海市浦东新区浦东南路 999 号新梅联合广场 23 楼 广州办公室广州市天河北路 233 号中信广场 7401 室 2 VMware, Inc.

3 目录 关于 vsphere 可用性 5 更新了 vsphere 可用性的信息 7 1 业务连续性和最小化停机时间 9 减少计划的停机时间 9 防止非计划停机时间 10 vsphere HA 提供快速中断恢复 10 vsphere Fault Tolerance 提供连续可用性 11 使用 vcenter High Availability 保护 vcenter Server Appliance 11 使用 VMware Service Lifecycle Manager 保护 vcenter Server 12 2 创建和使用 vsphere HA 群集 13 vsphere HA 的工作方式 13 vsphere HA 准入控制 19 vsphere HA 互操作性 24 创建 vsphere HA 群集 27 配置 vsphere 可用性设置 29 vsphere HA 群集的最佳做法 36 3 为虚拟机提供 Fault Tolerance 39 Fault Tolerance 的工作方式 39 Fault Tolerance 用例 40 Fault Tolerance 要求 限制和许可 40 Fault Tolerance 互操作性 41 为 Fault Tolerance 准备群集和主机 42 使用 Fault Tolerance 45 Fault Tolerance 的最佳做法 48 旧版 Fault Tolerance 50 4 vcenter High Availability 53 规划 vcenter HA 部署 54 配置网络 58 使用 基本 选项配置 vcenter HA 59 使用 高级 选项配置 vcenter HA 60 管理 vcenter HA 配置 62 vcenter HA 环境故障排除 67 修补 vcenter High Availability 环境 70 VMware, Inc. 3

4 5 使用 Microsoft 群集服务实现基于 Windows 的 vcenter Server 高可用性 71 使用 MSCS 的优点和限制 71 在 MSCS 环境中升级 vcenter Server 71 配置 MSCS 以实现高可用性 72 索引 75 4 VMware, Inc.

5 关于 vsphere 可用性 目标读者 vsphere 可用性 介绍提供业务连续性的解决方案, 包括如何建立 vsphere High Availability (HA) 和 vsphere Fault Tolerance 此信息专供需要通过 vsphere HA 和 Fault Tolerance 解决方案提供业务连续性的用户使用 本书的目标读者为熟悉虚拟机技术和数据中心操作且具有丰富经验的 Windows 或 Linux 系统管理员 本指南中的任务说明基于 vsphere Web Client 您也可以使用新的 vsphere Client 执行本指南中的大部分任务 新的 vsphere Client 用户界面术语 拓扑及工作流与 vsphere Web Client 用户界面的相同方面和元素保持高度一致 可以将 vsphere Web Client 说明应用到新的 vsphere Client, 除非另有指示 注意在 vsphere 6.5 版本中, 并未针对 vsphere Client 实现 vsphere Web Client 中的所有功能 有关不受支持的功能的最新列表, 请参见 vsphere Client 功能更新指南, 网址为 VMware, Inc. 5

6 6 VMware, Inc.

7 更新了 vsphere 可用性的信息 本 vsphere 可用性 文档随产品的每个版本更新或在必要时更新 下表提供了 vsphere 升级 文档的更新历史记录 修订版本 描述 添加了有关 vcenter HA 所需许可的信息 请参见第 54 页, vcenter HA 硬件和软件要求 初始版本 移除了 vcenter HA 网络必备条件中映射到 FQDN 的要求 请参见第 58 页, 配置网络 VMware, Inc. 7

8 8 VMware, Inc.

9 业务连续性和最小化停机时间 1 无论是计划停机时间还是非计划停机时间, 都会带来相当大的成本 但是, 用于确保更高级别可用性的传统解决方案都需要较大开销, 并且难以实施和管理 VMware 软件可为重要应用程序提供更高级别的可用性, 并且操作更简单, 成本更低 使用 vsphere, 组织可以轻松提高为所有应用程序提供的可用性基准级别, 并且以更低成本和更简单的操作来实现更高级别的可用性 使用 vsphere, 您可以 : 独立于硬件 操作系统和应用程序提供更高可用性 减少常见维护操作的计划停机时间 在出现故障时提供自动恢复 vsphere 可以减少计划的停机时间, 防止出现非计划停机, 并迅速从中断中恢复 本章讨论了以下主题 : 第 9 页, 减少计划的停机时间 第 10 页, 防止非计划停机时间 第 10 页, vsphere HA 提供快速中断恢复 第 11 页, vsphere Fault Tolerance 提供连续可用性 第 11 页, 使用 vcenter High Availability 保护 vcenter Server Appliance 第 12 页, 使用 VMware Service Lifecycle Manager 保护 vcenter Server 减少计划的停机时间 计划的停机时间通常占数据中心停机时间的 80% 以上 硬件维护 服务器迁移和固件更新均需要将物理服务器停机 为最小化此停机时间的影响, 会强制组织延迟维护, 直到出现不便且难以调度的停机时间段 通过 vsphere, 组织可以显著减少计划的停机时间 由于 vsphere 环境中的工作负载无需停机或服务中断就可以动态移动到其他物理服务器, 所以服务器维护无需应用程序和服务停机就可以执行 通过 vsphere, 组织可以执行以下任务 : 消除常见维护操作的停机时间 消除计划的维护时间段 随时执行维护, 无需中断用户和服务 由于 VMware 环境中的工作负载无需中断服务即可动态移动到不同的物理服务器或基础存储器, 所以, 通过 vsphere 中的 vsphere vmotion 和 Storage vmotion 功能, 组织可以减少计划的停机时间 管理员可以快速而完整地执行透明的维护操作, 无需强制调度不方便的维护时间段 VMware, Inc. 9

10 防止非计划停机时间 在 ESXi 主机为应用程序的运行提供稳定平台时, 组织还必须保护自身, 避免出现硬件或应用程序故障所导致的非计划停机时间 vsphere 将重要功能构建到数据中心基础架构中, 这有助于避免出现非计划停机时间 这些 vsphere 功能是虚拟基础架构的一部分, 因此, 对操作系统以及虚拟机中运行的应用程序而言是透明的 这些功能可以进行配置, 而且可供物理系统上的所有虚拟机使用, 从而降低成本并降低实现高可用性的复杂程度 vsphere 中内置的密钥可用性功能 : 共享存储器 通过在共享存储器 ( 如光纤通道 iscsi SAN 或 NAS) 上存储虚拟机文件来消除单一故障点 可以使用 SAN 镜像和复制功能将虚拟磁盘的更新副本保留在灾难恢复站点 网络接口绑定 允许单个网卡发生故障 存储多路径 允许存储路径发生故障 除了这些功能外,vSphere HA 和 Fault Tolerance 功能分别通过提供中断快速恢复和连续可用性来最小化或消除非计划停机时间 vsphere HA 提供快速中断恢复 vsphere HA 利用配置为群集的多台 ESXi 主机, 为虚拟机中运行的应用程序提供快速中断恢复和具有成本效益的高可用性 vsphere HA 通过以下方式保护应用程序可用性 : 通过在群集内的其他主机上重新启动虚拟机, 防止服务器故障 通过持续监控虚拟机并在检测到故障时对其进行重新设置, 防止应用程序故障 通过在仍然有权访问其数据存储的其他主机上重新启动受影响的虚拟机, 可防止出现数据存储可访问性故障 如果虚拟机的主机在管理或 Virtual SAN 网络上被隔离, 它会通过重新启动这些虚拟机来防止网络隔离 即使网络已分区, 仍会提供此保护 与其他群集解决方案不同,vSphere HA 提供基础架构并使用该基础架构保护所有工作负载 : 无需在应用程序或虚拟机内安装特殊软件 所有工作负载均受 vsphere HA 保护 配置 vsphere HA 之后, 不需要执行操作即可保护新虚拟机 它们会自动受到保护 可以将 vsphere HA 与 vsphere Distributed Resource Scheduler (DRS) 结合使用以防止出现故障, 以及在 群集内的主机之间提供负载平衡 与传统的故障切换解决方案相比,vSphere HA 具有多个优势 : 最小化设置减少了硬件成本和设置提高了应用程序的可用性 DRS 和 vmotion 集成 设置 vsphere HA 群集之后, 群集内的所有虚拟机无需额外配置即可获得故障切换支持 虚拟机可充当应用程序的移动容器, 可在主机之间移动 管理员会避免在多台计算机上进行重复配置 使用 vsphere HA 时, 必须拥有足够的资源来对要通过 vsphere HA 保护的主机数进行故障切换 但是,VMware vcenter Server 系统会自动管理资源并配置群集 虚拟机内运行的任何应用程序的可用性变得更高 虚拟机可以从硬件故障中恢复, 提高了在引导周期内启动的所有应用程序的可用性, 而且没有额外的计算需求, 即使该应用程序本身不是群集应用程序也一样 通过监控和响应 VMware Tools 检测信号并重新启动未响应的虚拟机, 可防止客户机操作系统崩溃 如果主机发生了故障, 并且在其他主机上重新启动了虚拟机, 则 DRS 会提出迁移建议或迁移虚拟机以平衡资源分配 如果迁移的源主机和 / 或目标主机发生故障, 则 vsphere HA 会帮助从该故障中恢复 10 VMware, Inc.

11 第 1 章业务连续性和最小化停机时间 vsphere Fault Tolerance 提供连续可用性 vsphere HA 通过在主机出现故障时重新启动虚拟机来为虚拟机提供基本级别的保护 vsphere Fault Tolerance 可提供更高级别的可用性, 允许用户对任何虚拟机进行保护以防止主机发生故障时丢失数据 事务或连接 Fault Tolerance 通过确保主虚拟机和辅助虚拟机的状态在虚拟机的指令执行的任何时间点均相同来提供连续可用性 如果运行主虚拟机的主机或运行辅助虚拟机的主机发生故障, 则会发生即时且透明的故障切换 正常运行的 ESXi 主机将无缝变成主虚拟机的主机, 而不会断开网络连接或中断正在处理的事务 使用透明故障切换, 不会有数据损失, 并且可以维护网络连接 在进行透明故障切换之后, 将重新生成新的辅助虚拟机, 并将重新建立冗余 整个过程是透明且全自动的, 并且即使 vcenter Server 不可用, 也会发生 使用 vcenter High Availability 保护 vcenter Server Appliance vcenter High Availability (vcenter HA) 不仅能够在主机和硬件出现故障时提供保护, 还能够在 vcenter Server 应用程序出现故障时提供保护 使用自动故障切换功能从主动切换到被动,vCenter HA 支持的高可用性可最大限度减少停机时间 vcenter HA 部署选项 vcenter HA 可以保护 vcenter Server Appliance 但是,Platform Services Controller 为 vcenter Server Appliance 提供身份验证 证书管理和许可证 因此, 您必须保证 Platform Services Controller 的高可用性 您有以下选项 部署具有嵌入式 Platform Services Controller 部署的主动节点 克隆过程中将克隆 Platform Services Controller 及其所有服务 在从主动节点同步到被动节点的过程中, 将更新被动节点上的 Platform Services Controller 从主动节点故障切换到被动节点时, 被动节点上的 Platform Services Controller 将可用, 并提供完整的环境 至少部署两个 Platform Services Controller 实例, 并将其置于负载平衡器之后 当从主动节点故障切换到被动节点时, 被动节点将继续指向负载平衡器 当其中一个 Platform Services Controller 实例不再可用时, 负载平衡器会将请求定向到第二个 Platform Services Controller 实例 请参见第 55 页, vcenter HA 部署选项 vcenter HA 配置选项 您从 vsphere Web Client 中配置 vcenter HA 配置向导提供以下选项 选项 基本 高级 描述 基本 选项可以将主动节点克隆到被动节点和见证节点, 并为您配置这些节点 如果您的环境满足以下要求之一, 可使用此选项 将成为主动节点的 vcenter Server Appliance 管理其自己的 ESXi 主机及虚拟机 此配置有时称为自我管理 vcenter Server vcenter Server Appliance 由其他 vcenter Server( 管理 vcenter Server) 管理, 并且两个 vcenter Server 实例位于同一 vcenter Single Sign-On 域中 这意味着两者都使用外部 Platform Services Controller 且都运行 vsphere 6.5 请参见第 59 页, 使用 基本 选项配置 vcenter HA 高级 选项更具灵活性 只要您的环境满足硬件和软件要求, 就可以使用此选项 如果您选择此选项, 您将负责将主动节克隆到被动节点和见证节点 您还必须执行一些网络配置 请参见第 60 页, 使用 高级 选项配置 vcenter HA VMware, Inc. 11

12 使用 VMware Service Lifecycle Manager 保护 vcenter Server VMware Service Lifecycle Manager 可提供 vcenter Server 可用性 如果 vcenter 服务失败,VMware Service Lifecycle Manager 会重新启动该服务 VMware Service Lifecycle Manager 监控服务的运行状况, 并在检测到故障时采取预先配置的修复操作 如果多次尝试修复均失败, 服务将不会重新启动 12 VMware, Inc.

13 创建和使用 vsphere HA 群集 2 vsphere HA 群集允许 ESXi 主机集合作为一个组协同工作, 这些主机为虚拟机提供的可用性级别比 ESXi 主机单独提供的级别要高 当规划新 vsphere HA 群集的创建和使用时, 您选择的选项会影响群集对主机或虚拟机故障的响应方式 在创建 vsphere HA 群集之前, 应清楚 vsphere HA 标识主机故障和隔离以及响应这些情况的方式 还应了解接入控制的工作方式以便可以选择符合故障切换需要的策略 建立群集之后, 不但可以通过高级选项自定义其行为, 还可以通过执行建议的最佳做法优化其性能 注意尝试使用 vsphere HA 时可能会获得错误消息 有关与 vsphere HA 相关的错误消息的信息, 请参见位于 的 VMware 知识库文章 本章讨论了以下主题 : 第 13 页, vsphere HA 的工作方式 第 19 页, vsphere HA 准入控制 第 24 页, vsphere HA 互操作性 第 27 页, 创建 vsphere HA 群集 第 29 页, 配置 vsphere 可用性设置 第 36 页, vsphere HA 群集的最佳做法 vsphere HA 的工作方式 vsphere HA 可以将虚拟机及其所驻留的主机集中在群集内, 从而为虚拟机提供高可用性 群集中的主机均会受到监控, 如果发生故障, 故障主机上的虚拟机将在备用主机上重新启动 创建 vsphere HA 群集时, 会自动选择一台主机作为首选主机 首选主机可与 vcenter Server 进行通信, 并监控所有受保护的虚拟机以及从属主机的状态 可能会发生不同类型的主机故障, 首选主机必须检测并相应地处理故障 首选主机必须可以区分故障主机与处于网络分区中或已与网络隔离的主机 首选主机使用网络和数据存储检测信号来确定故障的类型 Sphere HA 群集 ( bctid=ref:vspherehaclusters) VMware, Inc. 13

14 首选主机和从属主机 在将主机添加到 vsphere HA 群集时, 代理将上载到主机, 并配置为与群集内的其他代理通信 群集中的每台主机作为首选主机或从属主机运行 如果为群集启用了 vsphere HA, 则所有活动主机 ( 未处于待机或维护模式的主机或未断开连接的主机 ) 都将参与选举以选择群集的首选主机 挂载最多数量的数据存储的主机在选举中具有优势 每个群集通常只存在一台首选主机, 其他所有主机都是从属主机 如果首选主机出现故障 关机或处于待机模式或者从群集中移除, 则会进行新的选举 群集中的首选主机具有很多职责 : 监控从属主机的状况 如果从属主机发生故障或无法访问, 首选主机将确定需要重新启动的虚拟机 监控所有受保护虚拟机的电源状况 如果有一台虚拟机出现故障, 首选主机可确保重新启动该虚拟机 使用本地放置引擎, 首选主机还可确定执行重新启动的位置 管理群集主机和受保护的虚拟机列表 充当群集的 vcenter Server 管理界面并报告群集健康状况 从属主机主要通过本地运行虚拟机 监控其运行时状况和向首选主机报告状况更新对群集发挥作用 首选主机也可运行和监控虚拟机 从属主机和首选主机都可实现虚拟机和应用程序监控功能 首选主机执行的功能之一是协调受保护虚拟机的重新启动 在 vcenter Server 观察到为响应用户操作, 某虚拟机的电源状况由关闭电源变为打开电源之后, 该虚拟机会受到首选主机的保护 首选主机会将受保护虚拟机的列表保留在群集的数据存储中 新选的首选主机使用此信息来确定要保护哪些虚拟机 注意如果断开主机与群集之间的连接, 则所有向该主机注册的虚拟机均不受 vsphere HA 保护 主机故障类型 vsphere HA 群集的首选主机负责检测从属主机的故障 根据检测到的故障类型, 在主机上运行的虚拟机可能需要进行故障切换 在 vsphere HA 群集中, 检测三种类型的主机故障 : 故障 主机停止运行 隔离 主机出现网络隔离 分区 主机失去与首选主机的网络连接 首选主机监控群集中从属主机的活跃度 此通信通过每秒交换一次网络检测信号来进行 当首选主机停止从从属主机接收这些检测信号时, 它会在声明该主机出现故障之前检查主机活跃度 首选主机执行的活跃度检查是要确定从属主机是否在与数据存储之一交换检测信号 请参见第 18 页, 数据存储检测信号 而且, 首选主机还检查主机是否对发送至其管理 IP 地址的 ICMP ping 进行响应 如果首选主机无法直接与从属主机上的代理通信, 从属主机不会对 ICMP ping 进行响应 如果代理未发出检测信号, 则被视为出现故障 会在备用主机上重新启动主机的虚拟机 如果此类从属主机与数据存储交换检测信号, 首选主机会假设从属主机在网络分区上或已与网络隔离 因此, 首选主机会继续监控该主机及其虚拟机 请参见第 18 页, 网络分区 当主机仍在运行但无法再监视来自管理网络上 vsphere HA 代理的流量时, 会发生主机网络隔离 如果主机停止监视此流量, 则它会尝试 ping 群集隔离地址 如果此 ping 也失败, 主机会声明它已与网络隔离 首选主机会监控隔离主机上正在运行的虚拟机 如果首选主机观察到虚拟机已关闭电源, 且首选主机负责虚拟机, 则会重新启动虚拟机 注意如果您确保网络基础架构具有足够的冗余度且至少有一个网络路径始终可用, 则不太可能发生主机网络隔离 14 VMware, Inc.

15 第 2 章创建和使用 vsphere HA 群集 Proactive HA 故障 当主机组件发生故障时, 即发生了 Proactive HA 故障, 这会导致冗余丢失或非灾难性故障 但是, 主机上的虚拟机的功能行为不会受到影响 例如, 如果主机出现电源故障, 但是其他电源可用, 则属于 Proactive HA 故障 发生 Proactive HA 故障时, 可在 vsphere Web Client 的 vsphere 可用性 部分自动执行修复操作 受影响主机上的虚拟机可以撤出到其他主机, 并将该主机置于隔离模式或维护模式 注意您的群集必须使用 vsphere DRS, 以便 Proactive HA 故障监控正常工作 确定对主机问题的响应 如果主机发生故障而必须重新启动虚拟机, 您可使用虚拟机重新启动优先级 设置控制重新启动虚拟机的顺序 您也可使用主机隔离响应设置, 配置主机与其他主机失去管理网络连接时 vsphere HA 的响应方式 发生故障后,vSphere HA 重新启动虚拟机时还将考虑其他因素 以下设置适用于主机发生故障或主机隔离时群集内的所有虚拟机 此外, 也可以为特定虚拟机配置异常 请参见第 35 页, 自定义单个虚拟机 主机隔离响应 主机隔离响应确定当 vsphere HA 群集内的某个主机失去其管理网络连接但仍继续运行时出现的情况 您可以使用隔离响应使 vsphere HA 关闭隔离主机上运行的虚拟机的电源, 然后在非隔离主机上将其重新启动 主机隔离响应要求启用 主机监控状态 如果 主机监控状态 处于禁用状态, 则主机隔离响应将同样被挂起 当主机无法与其他主机上运行的代理通信且无法 ping 其隔离地址时, 该主机确定其已被隔离 然后, 主机会执行其隔离响应 响应为 关闭虚拟机电源再重新启动虚拟机 或 关闭再重新启动虚拟机 还可以为各个虚拟机自定义此属性 注意如果虚拟机的重新启动优先级设置为 已禁用, 则不会做出任何主机隔离响应 要使用 关闭再重新启动虚拟机 设置, 必须在虚拟机的客户机操作系统中安装 VMware Tools 将虚拟机关机的优点在于可以保留其状况 关机操作优于关闭虚拟机电源操作, 关闭虚拟机不会将最近的更改刷新到磁盘中, 也不会提交事务 在关机完成时, 正在关机的虚拟机需要更长时间进行故障切换 未在 300 秒内或在高级选项 das.isolationshutdowntimeout 中指定的时间内关机的虚拟机将被关闭电源 创建 vsphere HA 群集后, 可以替代特定虚拟机的 重新启动优先级 和 隔离响应 的默认群集设置 此替代操作对于用于特殊任务的虚拟机很有帮助 例如, 可能需要先打开提供基础架构服务 ( 如 DNS 或 DHCP) 的虚拟机电源, 再打开群集内的其他虚拟机电源 如果主机已从主主机隔离或分区, 或主主机无法使用检测信号数据存储与该主机通信, 则可能会发生虚拟机 裂脑 情况 在这种情况下, 主主机无法确定该主机处于活动状态, 因此声明其已停止运行 然后, 主主机尝试重新启动已隔离或已分区主机上正在运行的虚拟机 如果虚拟机仍在已隔离 / 已分区主机上运行, 且该主机在隔离或分区时失去对虚拟机数据存储的访问权限, 则此尝试将成功 然后, 便会发生裂脑情况, 因为存在两个虚拟机实例 但是, 只有一个实例能够读取或写入虚拟机的虚拟磁盘 虚拟机组件保护可用于防止发生此裂脑情况 使用激进设置启用 VMCP 时, 它会监控已打开电源的虚拟机的数据存储可访问性, 并关闭失去对其数据存储访问权限的虚拟机 为了从此情况中恢复,ESXi 会针对已丢失磁盘锁的虚拟机生成一个问题 ( 关于主机何时摆脱隔离状态且无法重新获取磁盘锁 ) vsphere HA 将自动回答该问题, 这就使已丢失磁盘锁的虚拟机实例关闭电源, 只留下具有磁盘锁的实例 VMware, Inc. 15

16 虚拟机依赖关系 可以在虚拟机组之间创建依赖关系 要执行此操作, 必须首先在 vsphere Web Client 中创建虚拟机组, 方法是转到群集的配置选项卡, 然后选择虚拟机 / 主机组 创建组之后, 可以在组之间创建重新启动依赖关系规则, 方法是浏览到虚拟机 / 主机规则, 然后在 类型 下拉菜单中, 选择虚拟机到虚拟机 这些规则可以指定在其他指定虚拟机组就绪之前, 不会重新启动某些虚拟机 重新启动虚拟机要考虑的因素 发生故障后, 群集的主主机会确定一个可打开受影响虚拟机电源的主机, 从而尝试重新启动这些虚拟机 选择此类主机时, 主主机会考虑许多因素 文件可访问性虚拟机与主机的兼容性资源预留主机限制功能限制 在可启动虚拟机之前, 必须能够从可通过网络与主主机通信的某个活动群集主机中访问该虚拟机的文件 如果存在可访问的主机, 则虚拟机必须至少与其中一个主机兼容 为虚拟机设置的兼容性包括任何所需虚拟机 - 主机关联性规则的影响 例如, 如果某个规则仅允许虚拟机在两个主机上运行, 则会考虑将其放置在这两个主机上 在可运行虚拟机的主机中, 必须至少有一个主机具有足够的未预留容量以满足虚拟机的内存开销及任何资源预留 可采用四种预留类型 :CPU 内存 虚拟网卡和虚拟闪存 此外, 必须提供足够的网络端口, 才能打开虚拟机电源 除了资源预留之外, 一个虚拟机只能放置在一个主机上 ( 如果这样做不会违反允许的虚拟机最大数量或正在使用的 vcpu 数量 ) 如果已设置需要 vsphere HA 强制执行虚拟机 - 虚拟机反关联性规则的高级选项, 则 vsphere HA 不会违反此规则 此外,vSphere HA 不会违反为容错虚拟机配置的任何每主机限制 如果没有任何主机满足上述注意事项, 则主主机会发布一个事件指出没有足够的资源让 vsphere HA 来启动虚拟机, 并会在群集状况发生更改时进行重试 例如, 如果虚拟机不可访问, 则主主机会在文件可访问性发生更改后进行重试 虚拟机和应用程序监控 如果在设置的时间内没有收到单个虚拟机的 VMware Tools 检测信号, 虚拟机监控将重新启动该虚拟机 同样, 如果没有收到虚拟机正在运行的应用程序的检测信号, 应用程序监控也可以重新启动该虚拟机 可以启用这些功能, 并配置 vsphere HA 监控无响应时的敏感度 启用虚拟机监控后, 虚拟机监控服务 ( 使用 VMware Tools) 将通过检查正在客户机内运行的 VMware Tools 进程的常规检测信号和 I/O 活动来评估群集内的每个虚拟机是否正在运行 如果没有收到检测信号或 I/O 活动, 则很有可能是客户机操作系统出现故障, 或未分配给 VMware Tools 用来完成任务的时间 在这种情况下, 虚拟机监控服务会先确定虚拟机已发生故障, 然后决定重新引导虚拟机以还原服务 有时, 仍然正常工作的虚拟机或应用程序会停止发送检测信号 为了避免不必要的重置, 虚拟机监控服务还监控虚拟机的 I/O 活动 如果在故障时间间隔内未收到任何检测信号, 则会检查 I/O 统计间隔 ( 群集级别属性 ) I/O 统计间隔确定在前两分钟 (120 秒 ) 内是否已发生与虚拟机有关的任何磁盘或网络活动 如果没有, 则重置该虚拟机 可以使用高级选项 das.iostatsinterval 更改此默认值 (120 秒 ) 要启用应用程序监控, 必须先获取相应的 SDK( 或使用可支持 VMware 应用程序监控的应用程序 ), 然后使用它来设置要监控的应用程序的自定义检测信号 完成此操作后, 应用程序监控的工作方式将与虚拟机监控的工作方式大致相同 如果在指定时间内没有收到应用程序的检测信号, 将重新启动其虚拟机 您可以配置监控敏感度的级别 高敏感度监控可以更快得出已发生故障的结论 然而, 如果受监控的虚拟机或应用程序实际上仍在运行, 但由于资源限制等因素导致未收到检测信号, 高敏感度监控可能会错误地认为此虚拟机发生了故障 低敏感度监控会延长实际故障和虚拟机重置之间服务中断的时间 请选择一个有效折衷满足需求的选项 16 VMware, Inc.

17 第 2 章创建和使用 vsphere HA 群集 表 2 1 介绍了监控敏感度的默认设置 也可以通过选中自定义复选框来指定监控敏感度和 I/O 统计间隔的自定义值 表 2 1 虚拟机监控设置 设置故障时间间隔 ( 秒 ) 重置期 高 30 1 小时 中 小时 低 天 检测到故障后,vSphere HA 会重置虚拟机 重置可确保这些服务仍然可用 为了避免因非瞬态错误而反复重置虚拟机, 默认情况下, 在某个可配置的时间间隔内将对虚拟机仅重置三次 在对虚拟机执行过三次重置后, 指定的时间结束之前,vSphere HA 不会在后续故障出现后进一步尝试重置虚拟机 可以使用每个虚拟机的最大重置次数自定义设置来配置重置次数 注意当关闭虚拟机电源然后再次打开虚拟机电源时, 或使用 vmotion 将虚拟机迁移到其他主机时, 重置统计信息将被清除 这将导致客户机操作系统重新引导, 但不同于虚拟机电源状况发生更改的 重新启动 如果虚拟机存在数据存储访问故障 ( 全部路径异常或永久设备丢失 ), 则虚拟机监控服务会挂起该虚拟机, 直到故障得到排除 虚拟机组件保护 如果启用虚拟机组件保护 (VMCP),vSphere HA 可以检测到数据存储可访问性故障, 并为受影响的虚拟机提供自动恢复 VMCP 可防止发生数据存储可访问性故障, 这些故障可能会影响 vsphere HA 群集中主机上正在运行的虚拟机 当发生数据存储可访问性故障时, 受影响的主机无法再访问特定数据存储的存储路径 您可以确定 vsphere HA 将对此类故障作出的响应, 从创建事件警报到虚拟机在其他主机上重新启动 注意使用虚拟机组件保护功能时,ESXi 主机的版本必须为 6.0 或更高版本 故障类型 存在两种类型的数据存储可访问性故障 : PDL APD PDL( 永久设备丢失 ) 是在存储设备报告主机无法再访问数据存储时发生的不可恢复的可访问性丢失 如果不关闭虚拟机的电源, 此状况将无法恢复 APD( 全部路径异常 ) 表示暂时性或未知的可访问性丢失, 或 I/O 处理中的任何其他未识别的延迟 此类型的可访问性问题是可恢复的 VMware, Inc. 17

18 配置 VMCP 在 vsphere Web Client 中配置虚拟机组件保护 转到配置选项卡并单击 vsphere 可用性和编辑 在故障和响应下, 可以选择处于 PDL 状态的数据存储或处于 APD 状态的数据存储 您可选择的存储保护级别以及可用的虚拟机修复操作根据数据库可访问性故障的类型而异 PDL 故障 APD 故障 在处于 PDL 状态的数据存储下, 可以选择发布事件或关闭虚拟机电源再重新启动虚拟机 响应 APD 事件是更加复杂的, 相应地配置是更加精细的 可以选择发布事件 关闭虚拟机电源再重新启动虚拟机 - 保守的重新启动策略或关闭虚拟机电源再重新启动虚拟机 - 激进的重新启动策略 注意如果禁用 主机监控 或 虚拟机重新启动优先级 设置,VMCP 将无法执行虚拟机重新启动 但是, 仍可监控存储运行状况, 且可发布事件 网络分区 在 vsphere HA 群集发生管理网络故障时, 该群集中的部分主机可能无法通过管理网络与其他主机进行通信 一个群集中可能会出现多个分区 已分区的群集会导致虚拟机保护和群集管理功能降级 请尽快更正已分区的群集 虚拟机保护 vcenter Server 允许虚拟机打开电源, 但仅当虚拟机与负责它的首选主机在相同的分区中运行时, 才能对其进行保护 首选主机必须与 vcenter Server 进行通信 如果首选主机以独占方式锁定包含虚拟机配置文件的数据存储上的系统定义的文件, 则首选主机将负责虚拟机 群集管理 vcenter Server 可以与首选主机通信, 但仅可与从属主机的子集通信 因此, 只有在解决分区之后, 配置中影响 vsphere HA 的更改才能生效 此故障可能会导致其中一个分区在旧配置下操作, 而另一个分区使用新的设置 数据存储检测信号 当 vsphere HA 群集中的首选主机无法通过管理网络与从属主机通信时, 首选主机将使用数据存储检测信号来确定从属主机是否出现故障, 是否位于网络分区中, 或者是否与网络隔离 如果从属主机已停止数据存储检测信号, 则认为该从属主机出现故障, 并且其虚拟机已在别处重新启动 vcenter Server 选择一组首选数据存储集用于检测信号 这种选择会使有权访问检测信号数据存储的主机数最大, 也会使数据存储由同一 LUN 或 NFS 服务器支持的可能性最小 可以使用高级选项 das.heartbeatdsperhost 更改 vcenter Server 为每个主机选择的检测信号数据存储的数量 默认值为 2, 最大有效值为 5 vsphere HA 将在用于数据存储检测信号和保留受保护的虚拟机集的每个数据存储的根目录中创建一个目录, 目录名称为.vSphere-HA 请勿删除或修改存储在此目录中的文件, 因为这可能会对操作产生影响 由于多个群集可能使用一个数据存储, 因此将针对每个群集创建该目录的子目录 根用户拥有这些目录和文件, 并且只有根用户可以读写这些目录和文件 vsphere HA 使用的磁盘空间取决于多个因素, 包括所用的 VMFS 版本以及将数据存储用于信号检测的主机数 使用 vmfs3 时, 最大使用量约为 2 GB, 典型使用量约为 3 MB 使用 vmfs5 时, 最大使用量和典型使用量约为 3 MB vsphere HA 使用数据存储增加的开销很小, 并且对其他数据存储操作的性能没有影响 18 VMware, Inc.

19 第 2 章创建和使用 vsphere HA 群集 vsphere HA 会限制配置文件可在单个数据存储中的虚拟机数量 有关更新的限制, 请参见 最高配置 如果将超过该数量的虚拟机置于数据存储中并打开其电源, 则 vsphere HA 只保护这一上限数量的虚拟机 注意 Virtual SAN 数据存储无法用于数据存储检测信号 因此, 如果群集中的所有主机均无法访问其他共享存储, 则无法使用任何检测信号数据存储 但是, 如果您拥有的存储可以通过独立于 Virtual SAN 网络的备用网络路径访问, 则可以将其用于设置检测信号数据存储 vsphere HA 安全性 多个安全功能增强了 vsphere HA 选择已打开的防火墙端口 使用文件系统权限保护的配置文件 详细的日志记录 vsphere HA 对代理至代理的通信使用 TCP 和 UDP 端口 8182 防火墙端口将自动打开和关闭, 确保仅在需要时打开端口 vsphere HA 在本地存储器或 ramdisk( 如果没有本地数据存储 ) 上存储配置信息 使用文件系统权限保护这些文件, 且仅 root 用户可以访问它们 不具有本地存储器的主机只有在由 Auto Deploy 管理时才受支持 vsphere HA 放置日志文件的位置取决于主机版本 对于 ESXi 5.x 主机,vSphere HA 默认仅写入 syslog, 因此, 日志放置在 syslog 所配置的放置位置 vsphere HA 日志文件名前置 fdm(fdm 代表故障域管理器,vSphere HA 中的一种服务 ) 对于旧版 ESXi 4.x 主机,vSphere HA 写入本地磁盘上的 /var/log/vmware/fdm 以及 syslog( 如果已配置 ) 对于旧版 ESX 4.x 主机,vSphere HA 写入 /var/log/vmware/fdm 安全 vsphere HA 登录 安全通信 需要验证主机 SSL 证书 vsphere HA 使用 vcenter Server 创建的用户帐户 vpxuser 登录到 vsphere HA 代理 此帐户与 vcenter Server 用于管理主机的帐户相同 vcenter Server 为此帐户创建随机密码, 并定期更改密码 时间段由 vcenter Server VirtualCenter.VimPasswordExpirationInDays 设置进行设置 对主机的根文件夹具有管理特权的用户可登录到代理 vcenter Server 和 vsphere HA 代理之间的所有通信都是通过 SSL 完成的 除选举消息以外 ( 通过 UDP 完成 ), 代理至代理的通信也使用 SSL 选举消息通过 SSL 进行验证, 因此, 恶意代理只能阻止在其上运行代理的主机被选为首选主机 在这种情况下, 将发出群集的配置问题, 以便用户了解问题 vsphere HA 要求每个主机都具有一个经过验证的 SSL 证书 每个主机在首次引导时都会生成一个自签署证书 然后, 可以重新生成或使用机构颁发的证书替换该证书 如果证书被替换, 需要重新配置主机上的 vsphere HA 如果主机在其证书更新后断开与 vcenter Server 的连接, 且重新启动 ESXi 或 ESX 主机代理, 则主机重新连接到 vcenter Server 时将自动重新配置 vsphere HA 如果此时因禁用 vcenter Server 主机 SSL 证书验证而没有断开连接, 请验证新证书并重新配置主机上的 vsphere HA vsphere HA 准入控制 vsphere HA 使用准入控制确保在主机出现故障时预留足够的资源用于虚拟机恢复 准入控制对资源使用施加一些限制 任何可能违反这些限制的操作都不会被允许 可能不允许的操作示例如下 : 打开虚拟机电源 迁移虚拟机 VMware, Inc. 19

20 增加虚拟机的 CPU 或内存预留 vsphere HA 准入控制的基础是群集允许的且仍能保证可故障切换的主机故障数 可通过三种方式来设置主机故障切换容量 : 群集资源百分比 插槽策略 专用故障切换主机 注意可以禁用 vsphere HA 准入控制 但是, 如果禁用 VMware HA 准入控制, 将无法保证预期数量的虚拟机能够在故障后重新启动 请勿永久禁用准入控制 无论选择的准入控制选项如何, 都会存在虚拟机资源减少阈值 您可以使用此设置指定允许的资源减少百分比, 但在启用 vsphere DRS 后才可用 会针对 CPU 和内存进行资源减少计算 此项计算会考虑虚拟机的预留内存和内存过载以便决定是否允许打开电源 执行迁移或更改预留 计算不会考虑虚拟机消耗的实际内存, 因为内存预留并不总是与虚拟机的实际内存利用率相关联 如果实际利用率大于预留内存, 则故障切换容量会不足, 导致故障切换的性能下降 通过设置性能减少阈值, 可以指定配置问题的发生次数 例如 : 默认值为 100%, 不会产生任何警告 如果阈值降至 0%, 则群集利用率超过可用容量时, 就会生成警告 如果阈值降至 20%, 可以允许的性能减少量按如下方式计算 :performance reduction = current utilization * 20% 当前利用率减去性能减少量的值超过可用容量时, 将发出配置通知 群集资源百分比准入控制 可以将 vsphere HA 配置为通过预留特定百分比的群集 CPU 和内存资源来执行准入控制, 用于从主机故障中进行恢复 使用此准入控制类型,vSphere HA 可确保预留特定百分比的 CPU 和内存资源总量用于进行故障切换 使用群集资源百分比选项,vSphere HA 可强制执行下列准入控制 : 1 计算群集内所有已打开电源虚拟机的总资源要求 2 计算可用于虚拟机的主机资源总数 3 计算群集的 当前的 CPU 故障切换容量 和 当前的内存故障切换容量 4 确定 当前的 CPU 故障切换容量 或 当前的内存故障切换容量 是否小于对应的 配置的故障切换容 量 ( 由用户提供 ) 如果是, 则准入控制不允许执行此操作 vsphere HA 将使用虚拟机的实际预留 如果虚拟机没有预留 ( 即预留量为 0), 则会应用默认设置 (0MB 内存和 32MHz CPU) 注意准入控制的群集资源百分比选项还会检查群集中是否至少有两个启用了 vsphere HA 的主机 ( 不包括正在进入维护模式的主机 ) 如果只有一个已启用 vsphere HA 的主机, 即使可以使用足够的资源百分比, 也不允许执行此操作 进行此次额外检查的原因在于如果群集中只有一个主机, 则 vsphere HA 无法进行故障切换 计算当前故障切换容量 已打开电源的虚拟机的总资源要求由两个组件组成, 即 CPU 和内存 vsphere HA 将计算这些值 CPU 组件值的计算方法是 : 加总已打开电源虚拟机的 CPU 预留 如果没有为虚拟机指定 CPU 预留, 则系统会为其分配一个默认值 32MHz( 可以使用 das.vmcpuminmhz 高级选项更改此值 ) 20 VMware, Inc.

21 第 2 章创建和使用 vsphere HA 群集 内存组件值的计算方法是 : 加总每台已打开电源虚拟机的内存预留 ( 以及内存开销 ) 计算出主机的 CPU 和内存资源总和, 从而得出虚拟机可使用的主机资源总数 这些值包含在主机的根资源池中, 而不是主机的总物理资源中 不包括用于虚拟化目的的资源 只有处于连接状态 未进入维护模式而且没有 vsphere HA 错误的主机才列入计算范畴 先用主机 CPU 资源总数减去总 CPU 资源要求, 然后再用这个结果除以主机 CPU 资源总数, 从而计算出 当前的 CPU 故障切换容量 当前的内存故障切换容量 的计算方式与之相似 示例 : 使用群集资源百分比进行准入控制 示例中展示了使用此准入控制策略计算和使用 当前故障切换容量 的方式 对群集进行如下假设 : 群集包括三台主机, 每台主机上可用的 CPU 和内存资源数各不相同 第一台主机 (H1) 的可用 CPU 资源和可用内存分别为 9 GHz 和 9 GB, 第二台主机 (H2) 为 9 GHz 和 6 GB, 而第三台主机 (H3) 则为 6 GHz 和 6 GB 群集内存在五个已打开电源的虚拟机, 其 CPU 和内存要求各不相同 VM1 所需的 CPU 资源和内存分别为 2 GHz 和 1 GB,VM2 为 2 GHz 和 1 GB,VM3 为 1 GHz 和 2 GB,VM4 为 1 GHz 和 1 GB,VM5 则为 1 GHz 和 1 GB CPU 和内存的已配置故障切换容量都设置为 25% 图 2 1 使用 预留的群集资源的百分比 策略的准入控制示例 已打开电源的虚拟机的总资源要求为 7 GHz CPU 和 6 GB 内存 可用于虚拟机的主机资源总数为 24 GHz CPU 和 21 GB 内存 根据上述情况, 当前的 CPU 故障切换容量 为 70% ((24GHz - 7GHz)/24GHz) 同样, 当前的内存故障切换容量 为 71% ((21GB-6GB)/21GB) 由于群集的 配置的故障切换容量 设置为 25%, 因此仍然可使用 45% 的群集 CPU 资源总数和 46% 的群集内存资源打开其他虚拟机电源 VMware, Inc. 21

22 插槽策略准入控制 使用插槽策略选项,vSphere HA 准入控制允许指定数目的主机出现故障, 同时可以确保群集内留有足够的资源来对这些主机上的所有虚拟机进行故障切换 使用插槽策略时,vSphere HA 通过以下方式执行准入控制 : 1 计算插槽大小 插槽是内存和 CPU 资源的逻辑表示 默认情况下, 会调整插槽的大小来满足群集中任何已打开电源虚拟机的要求 2 确定群集内每台主机可以拥有的插槽数目 3 确定群集的当前故障切换容量 这是可以发生故障并仍然有足够插槽满足所有已打开电源虚拟机的主机的数目 4 确定 当前故障切换容量 是否小于 配置的故障切换容量 ( 由用户提供 ) 如果是, 则准入控制不允许执行此操作 注意您可以从 vsphere Web Client 中 vsphere HA 设置的准入控制部分设置 CPU 和内存的特定插槽大小 插槽大小计算 vsphere HA 插槽大小和准入控制 ( bctid=ref:video_vsphere_slot_admission_control) 插槽大小由两个组件 (CPU 和内存 ) 组成 vsphere HA 计算 CPU 组件的方法是先获取每台已打开电源虚拟机的 CPU 预留, 然后再选择最大值 如果没有为虚拟机指定 CPU 预留, 则系统会为其分配一个默认值 32 MHz 可以使用 das.vmcpuminmhz 高级选项更改此值 vsphere HA 计算内存组件的方法是先获取每台已打开电源虚拟机的内存预留和内存开销, 然后再选择最 大值 内存预留没有默认值 如果群集内虚拟机的预留值大小不一致, 则会影响插槽大小的计算 为避免出现这种情况, 可以使用 das.slotcpuinmhz 或 das.slotmeminmb 高级选项分别指定插槽大小的 CPU 或内存组件的上限 请参见第 34 页, vsphere HA 高级选项 您也可以通过查看需要多个插槽的虚拟机数来确定群集中资源碎片的风险 可以从 vsphere Web Client 中 vsphere HA 设置的准入控制部分对此进行计算 如果已使用高级选项指定了固定插槽大小或最大插槽大小, 则虚拟机可能需要多个插槽 使用插槽数目计算当前故障切换容量 计算出插槽大小后,vSphere HA 会确定每台主机中可用于虚拟机的 CPU 和内存资源 这些值包含在主机的根资源池中, 而不是主机的总物理资源中 可以在 vsphere Web Client 中主机的摘要选项卡上查找 vsphere HA 所用主机的资源数据 如果群集中的所有主机均相同, 则可以用群集级别指数除以主机的数量来获取此数据 不包括用于虚拟化目的的资源 只有处于连接状态 未进入维护模式且没有任何 vsphere HA 错误的主机才列入计算范畴 然后, 即可确定每台主机可以支持的最大插槽数目 为确定此数目, 请用主机的 CPU 资源数除以插槽大小的 CPU 组件, 然后将结果化整 对主机的内存资源数进行同样的计算 然后, 比较这两个数字, 较小的那个数字即为主机可以支持的插槽数 通过确定可以发生故障并仍然有足够插槽满足所有已打开电源虚拟机要求的主机的数目 ( 从最大值开始 ) 来计算当前故障切换容量 22 VMware, Inc.

23 第 2 章创建和使用 vsphere HA 群集 示例 : 使用插槽策略的准入控制 示例中展示了使用此准入控制策略计算和使用插槽大小的方式 对群集进行如下假设 : 群集包括三台主机, 每台主机上可用的 CPU 和内存资源数各不相同 第一台主机 (H1) 的可用 CPU 资源和可用内存分别为 9 GHz 和 9 GB, 第二台主机 (H2) 为 9 GHz 和 6 GB, 而第三台主机 (H3) 则为 6 GHz 和 6 GB 群集内存在五个已打开电源的虚拟机, 其 CPU 和内存要求各不相同 VM1 所需的 CPU 资源和内存分别为 2 GHz 和 1 GB,VM2 为 2 GHz 和 1 GB,VM3 为 1 GHz 和 2 GB,VM4 为 1 GHz 和 1 GB,VM5 则为 1 GHz 和 1 GB 群集允许的主机故障数目 设置为 1 图 2 2 使用 群集允许的主机故障数目 策略的准入控制示例 1 比较虚拟机的 CPU 和内存要求, 然后选择最大值, 从而计算出插槽大小 最大 CPU 要求 ( 由 VM1 和 VM2 共享 ) 为 2 GHz, 而最大内存要求 ( 针对 VM3) 为 2 GB 根据上述情况, 插槽大小为 2 GHz CPU 和 2 GB 内存 2 由此可确定每台主机可以支持的最大插槽数目 H1 可以支持四个插槽 H2 可以支持三个插槽 ( 取 9GHz/2GHz 和 6GB/2GB 中较小的一个 ),H3 也可以支持三个插槽 3 计算出当前故障切换容量 最大的主机是 H1, 如果它发生故障, 群集内还有六个插槽, 足够供所有五个已打开电源的虚拟机使用 如果 H1 和 H2 都发生故障, 群集内将仅剩下三个插槽, 这是不够用的 因此, 当前故障切换容量为 1 群集内可用插槽的数目为 1(H2 和 H3 上的六个插槽减去五个已使用的插槽 ) VMware, Inc. 23

24 专用故障切换主机准入控制 在配置 vsphere HA 时可以将特定主机指定为故障切换主机 借助专用故障切换主机准入控制, 在主机发生故障时,vSphere HA 将尝试在任一指定的故障切换主机上重新启动其虚拟机 如果不能使用此方法 ( 例如, 故障切换主机发生故障或者资源不足时 ), 则 vsphere HA 会尝试在群集内的其他主机上重新启动这些虚拟机 为了确保故障切换主机上拥有可用的空闲容量, 将阻止您打开虚拟机电源或使用 vmotion 将虚拟机迁移到故障切换主机 而且, 为了保持负载平衡,DRS 也不会使用故障切换主机 注意如果使用专用故障切换主机准入控制, 并指定多个故障切换主机, 则 DRS 不会尝试对故障切换主机上运行的虚拟机实施虚拟机 - 虚拟机关联性规则 vsphere HA 互操作性 vsphere HA 可以与其他功能进行交互操作, 如 DRS 和 Virtual SAN 在配置 vsphere HA 之前, 应了解其与其他功能或产品进行交互操作的限制 将 vsphere HA 与 Virtual SAN 配合使用 可以使用 Virtual SAN 作为 vsphere HA 群集的共享存储 如果启用,Virtual SAN 会将主机上指定的本地可用存储磁盘汇聚到所有主机共享的单个数据存储中 要将 vsphere HA 与 Virtual SAN 配合使用, 必须注意针对这两种功能的互操作性的某些注意事项和限制 有关 Virtual SAN 的信息, 请参见 管理 VMware Virtual SAN 注意可以将 vsphere HA 与 Virtual SAN 延伸群集配合使用 ESXi 主机要求 仅当满足以下条件时, 才能将 Virtual SAN 与 vsphere HA 群集配合使用 : 群集中所有 ESXi 主机的版本必须全部为 5.5 或更高版本 群集必须最低具有三个 ESXi 主机 网络连接差异 Virtual SAN 具有自己的网络 如果为同一群集启用 Virtual SAN 和 vsphere HA,HA 代理间流量将流经此存储网络, 而非管理网络 仅当禁用 Virtual SAN 时,vSphere HA 才使用管理网络 当主机上配置了 vsphere HA 时,vCenter Server 会选择合适的网络 注意仅当禁用 vsphere HA 时, 才可以启用 Virtual SAN 如果您更改了 Virtual SAN 网络配置,vSphere HA 代理将不自动获取新网络设置 要更改 Virtual SAN 网络, 必须在 vsphere Web Client 中执行以下步骤 : 1 为 vsphere HA 群集禁用主机监控 2 更改 Virtual SAN 网络 3 右键单击群集中的所有主机, 然后选择重新配置 vsphere HA 4 重新为 vsphere HA 群集启用主机监控 表 2 2 显示了使用和不使用 Virtual SAN 时 vsphere HA 网络连接中的差异 24 VMware, Inc.

25 第 2 章创建和使用 vsphere HA 群集 表 2 2 vsphere HA 网络连接差异 Virtual SAN 已启用 Virtual SAN 已禁用 vsphere HA 使用的网络 Virtual SAN 存储网络管理网络 检测信号数据存储挂载到 1 个以上主机的任何数据存储, 但非 Virtual SAN 数据存储 挂载到 1 个以上主机的任何数据存储 声明已隔离的主机 隔离地址不可 ping, 并且 Virtual SAN 存储网络无法访问 隔离地址不可 ping, 并且管理网络无法访问 容量预留设置 通过准入控制策略为 vsphere HA 群集预留容量时, 必须与确保出现故障时的数据可访问性的相应 Virtual SAN 设置协商此设置 具体来说,Virtual SAN 规则集中的 允许的故障数目 设置不得低于 vsphere HA 准入控制设置预留的容量 例如, 如果 Virtual SAN 规则集仅允许两个故障, 则 vsphere HA 准入控制策略预留的容量必须只能等于一个或两个主机故障 如果您为具有八个主机的群集使用 预留的群集资源的百分比 策略, 则预留的容量不得超过群集资源的 25% 在同一群集中, 使用 群集允许的主机故障数目 策略时, 该设置不得大于两个主机 如果 vsphere HA 预留的容量较少, 则故障切换活动可能不可预知 如果预留太多容量, 则会过分限制打开虚拟机的电源和群集间 vsphere vmotion 迁移操作 结合使用 vsphere HA 和 DRS 将 vsphere HA 和 Distributed Resource Scheduler (DRS) 一起使用, 可将自动故障切换与负载平衡相结合 这种结合会在 vsphere HA 将虚拟机移至其他主机后生成一个更平衡的群集 vsphere HA 执行故障切换并在其他主机上重新启动虚拟机时, 其首要的优先级是所有虚拟机的立即可用性 虚拟机重新启动后, 其上打开虚拟机电源的主机可能会负载过重, 而其他主机的负载则相对较轻 vsphere HA 会使用虚拟机的 CPU 内存预留和开销内存来确定主机是否有足够的空闲容量容纳虚拟机 在结合使用 DRS 和 vsphere HA 并且启用了接入控制的群集内, 可能不会从正在进入维护模式的主机上撤出虚拟机 这种行为的出现是由于用于重新启动虚拟机的预留资源出现了故障 必须使用 vmotion 将虚拟机手动迁出主机 在某些情况下,vSphere HA 可能由于资源限制而无法对虚拟机进行故障切换 这种情况的出现有多种原因 禁用了 HA 接入控制, 但启用了 Distributed Power Management (DPM) 这会导致 DPM 将虚拟机整合到较少数量的主机上, 并将空主机置于待机模式, 使得没有足够的已打开电源容量来执行故障切换 虚拟机 - 主机关联性规则 ( 必需 ) 可能会限制可以容纳某些虚拟机的主机 可能有足够多的聚合资源, 但这些资源在多台主机上是资源碎片, 因此虚拟机无法使用它们进行故障切换 在这些情况下,vSphere HA 可使用 DRS 尝试调整群集 ( 例如, 通过使主机退出待机模式或者迁移虚拟机以整理群集资源碎片 ), 以便 HA 可以执行故障切换 如果 DPM 处于手动模式, 则可能需要确认主机打开电源建议 同样, 如果 DRS 处于手动模式, 可能需要确认迁移建议 如果要使用虚拟机 - 主机关联性规则, 请注意不能违反这些规则 如果执行故障切换违反这样的规则, 则 vsphere HA 将不会执行故障切换 有关 DRS 的详细信息, 请参见 vsphere 资源管理文档 VMware, Inc. 25

26 vsphere HA 和 DRS 关联性规则如果为群集创建 DRS 关联性规则, 可以指定在虚拟机故障切换过程中 vsphere HA 应用此规则的方式 您可以为以下两种类型的规则指定 vsphere HA 故障切换行为 : 虚拟机反关联性规则在故障切换操作过程中强制指定的虚拟机保持分离 虚拟机 - 主机关联性规则在故障切换操作过程中将指定的虚拟机放在特定主机或一组定义主机的成员上 编辑 DRS 关联性规则时, 选中一个或多个强制执行 vsphere HA 的所需故障切换行为的复选框 HA 必须在故障切换过程中遵守虚拟机反关联性规则 -- 如果将具有此规则的虚拟机放在一起, 则将中止故障切换 HA 应在故障切换过程中遵守虚拟机 - 主机关联性规则 -- vsphere HA 尝试将具有此规则的虚拟机放在指定的主机上 ( 如果可能 ) 注意如果在设置规则后不久 ( 默认情况下, 在 5 分钟内 ) 发生主机故障,vSphere HA 可以重新启动已禁用 DRS 的群集中的虚拟机, 以替代虚拟机 - 主机关联性规则映射 其他 vsphere HA 互操作性问题 要使用 vsphere HA, 必须注意以下其他互操作性问题 虚拟机组件保护 虚拟机组件保护 (VMCP) 具有以下互操作性问题和限制 : VMCP 不支持 vsphere Fault Tolerance 如果使用 Fault Tolerance 为群集启用 VMCP, 受影响的 FT 虚拟 机将自动接收禁用 VMCP 的替代项 VMCP 不会检测到或响应位于 Virtual SAN 数据存储上文件的可访问性问题 如果虚拟机的配置和 VMDK 文件仅位于 Virtual SAN 数据存储上, 则它们不受 VMCP 保护 VMCP 不会检测或响应位于虚拟卷数据存储上的文件的可访问性问题 如果虚拟机的配置和 VMDK 文件 仅位于虚拟卷数据存储上, 则它们不受 VMCP 保护 VMCP 不会防止不可访问的裸设备映射 (RDM) IPv6 如果观察到以下注意事项, 可以将 vsphere HA 与完全受支持的 IPv6 网络配置一起使用 : 群集仅包含 ESXi 6.0 或更高版本的主机 必须使用相同的 IP 版本 (IPv6 或 IPv4) 配置群集中所有主机的管理网络 vsphere HA 群集不能同时包 含这两种类型的网络连接配置 vsphere HA 使用的网络隔离地址必须与群集用于其管理网络的 IP 版本匹配 不能在同时使用 Virtual SAN 的 vsphere HA 群集中使用 IPv6 除了之前的限制外, 不支持将以下类型的 IPv6 地址用于 vsphere HA 隔离地址或管理网络 : 本地链接 ORCHID 和具有区域索引的本地链接 此外, 不能将环回地址类型用于管理网络 注意要将现有 IPv4 部署升级到 IPv6, 必须先禁用 vsphere HA 26 VMware, Inc.

27 第 2 章创建和使用 vsphere HA 群集 创建 vsphere HA 群集 vsphere HA 在 ESXi( 或旧版 ESX) 主机群集的环境中运行 必须创建群集, 然后用主机填充群集, 并配置 vsphere HA 设置, 才能建立故障切换保护 创建 vsphere HA 群集时, 必须配置许多可决定功能如何运行的设置 在此之前, 请确定群集的节点 这些节点是为支持虚拟机而提供资源, 并且将由 vsphere HA 用于故障切换保护的 ESXi 主机 然后应当确定如何互相连接这些节点, 以及如何将这些节点连接到虚拟机数据所在的共享存储 在建立好网络架构后, 可以将主机添加到群集并完成 vsphere HA 配置 将主机节点添加到群集之前, 可以启用和配置 vsphere HA 但是, 在将主机添加到群集之前, 群集的所有功能并非都能运行, 部分群集设置不可用 例如, 在出现可以指定为故障切换主机的主机之前, 指定故障切换主机 准入控制策略不可用 注意为处于 ( 或移入 )vsphere HA 群集的主机上驻留的所有虚拟机禁用 虚拟机启动和关机 ( 自动启动 ) 功能 与 vsphere HA 配合使用时, 不支持自动启动 vsphere HA 对照表 vsphere HA 对照表包含在创建和使用 vsphere HA 群集之前必须了解的要求 在设置 vsphere HA 群集之前, 应查看此列表 有关详细信息, 请遵循相应的交叉引用 所有主机必须获得 vsphere HA 许可 群集必须至少包含两个主机 必须为所有主机配置静态 IP 地址 如果使用的是 DHCP, 必须确保每台主机的地址在重新引导期间保留 所有主机必须至少有一个共有的管理网络 最佳做法是至少有两个共有的管理网络 您应使用已启用管理流量复选框的 VMkernel 网络 这些网络必须能够相互访问, 且管理网络上的 vcenter Server 和主机必须能够相互访问 请参见 第 36 页, 网络连接的最佳做法 为了确保任何虚拟机都可以在群集内的任何主机上运行, 所有主机都必须可以访问相同的虚拟机网络和数据存储 同样, 虚拟机必须位于共享而非本地存储器上, 否则在主机出现故障时它们将无法进行故障切换 注意 vsphere HA 使用数据存储信号检测来区分已分区的主机 已隔离的主机和出现故障的主机 因此, 如果环境中有更可靠的数据存储, 请将 vsphere HA 配置为优先考虑这些数据存储 为了使虚拟机监控工作, 必须安装 VMware Tools 请参见 第 16 页, 虚拟机和应用程序监控 vsphere HA 同时支持 IPv4 和 IPv6 有关使用 IPv6 时的注意事项, 请参见第 26 页, 其他 vsphere HA 互操作性问题 为使虚拟机组件保护能够正常运行, 主机必须已启用全部路径异常 (APD) 超时功能 要使用虚拟机组件保护, 群集必须包含 ESXi 6.0 或更高版本的主机 仅可使用包含 ESXi 6.0 或更高版本主机的 vsphere HA 群集来启用 VMCP 包含早期版本主机的群集无法启用 VMCP, 且无法将此类主机添加到已启用 VMCP 的群集中 如果您的群集使用虚拟卷数据存储, 当启用了 vsphere HA 时,vCenter Server 会在每个数据存储上创建一个配置虚拟卷 vsphere HA 将其使用的文件存储在这些容器中以保护虚拟机 如果您删除这些容器, vsphere HA 将无法正常运行 每个虚拟卷数据存储仅创建一个容器 VMware, Inc. 27

28 创建 vsphere HA 群集 要为群集启用 vsphere HA, 必须先创建空群集 规划群集的资源和网络架构后, 可使用 vsphere Web Client 将主机添加到群集中, 并指定群集的 vsphere HA 设置 启用了 vsphere HA 的群集是 vsphere Fault Tolerance 的必备条件 前提条件 确认所有虚拟机及其配置文件都驻留在共享存储上 验证是否已将主机配置为访问共享存储, 以便您可以通过使用群集中的不同主机打开虚拟机电源 确认主机配置为具有虚拟机网络的访问权限 确认正在为 vsphere HA 使用冗余管理网络连接 有关设置网络冗余的信息, 请参见第 36 页, 网络连 接的最佳做法 确认至少已为主机配置两个数据存储, 来为 vsphere HA 数据存储检测信号提供冗余 使用具有群集管理员权限的帐户将 vsphere Web Client 连接到 vcenter Server 步骤 1 在 vsphere Web Client 中, 浏览到想要群集驻留的数据中心, 然后单击创建群集 2 完成新建群集向导 请不要打开 vsphere HA( 或 DRS) 3 单击确定关闭向导并创建空群集 4 根据您的群集资源和网络架构计划, 使用 vsphere Web Client 将主机添加到群集 5 浏览到群集并启用 vsphere HA a b 单击配置选项卡 选择 vsphere 可用性, 然后单击编辑 c 选择打开 vsphere HA d 选择启用 Proactive HA 可主动迁移提供程序通知出现运行状况降级的主机上的虚拟机 6 在故障和响应下, 选择启用主机监控 启用主机监控后, 群集中的主机可以交换网络检测信号,vSphere HA 可以在检测到故障时采取措施 主机监控是 vsphere Fault Tolerance 恢复进程正常运行所必需的 7 为虚拟机监控选择一项设置 如果在设置的时间内没有收到单个虚拟机的检测信号, 请选择仅虚拟机监控以重新启动该虚拟机 也可以选择虚拟机和应用程序监控来启用应用程序监控 8 单击确定 此时即已拥有包含主机的 vsphere HA 群集 下一步为群集配置相应的 vsphere HA 设置 故障和响应 Proactive HA 故障和响应 准入控制 28 VMware, Inc.

29 第 2 章创建和使用 vsphere HA 群集 检测信号数据存储 高级选项请参见第 29 页, 配置 vsphere 可用性设置 配置 vsphere 可用性设置 创建 vsphere HA 群集时或配置现有群集时, 必须配置可决定功能如何运行的设置 在 vsphere Web Client 中, 您可以配置以下 vsphere HA 设置 : 故障和响应 Proactive HA 故障和响应准入控制检测信号数据存储高级选项 在此处提供关于主机故障响应 主机隔离 虚拟机监控和虚拟机组件保护的设置 提供关于当提供程序将运行状况降级 ( 表示此主机出现部分故障 ) 通知给 vcenter 时 Proactive HA 如何响应的设置 可以为 vsphere HA 群集启用或禁用准入控制, 并选择有关其执行方式的策略 为 vsphere HA 用于数据存储检测信号的数据存储指定首选项 通过设置高级选项来自定义 vsphere HA 行为 配置故障响应 利用 vsphere HA 设置的故障和响应窗格, 可以配置遇到问题时群集的响应方式 在 vsphere Web Client 的此部分, 可以确定 vsphere HA 群集针对主机故障和隔离做出的特定响应 还可以配置出现永久设备丢失 (PDL) 和全部路径异常 (APD) 状况时的虚拟机组件保护 (VMCP) 操作, 并且可以启用虚拟机监控 可以执行的任务包括 : 1 响应主机故障第 29 页, 您可以针对 vsphere HA 群集中发生的主机故障设置特定响应 2 响应主机隔离第 30 页, 您可以针对 vsphere HA 群集中发生的主机隔离设置特定响应 3 配置 VMCP 响应第 30 页, 配置当数据存储遇到 PDL 或 APD 故障时, 虚拟机组件保护 (VMCP) 采取的响应 4 启用虚拟机监控第 31 页, 您可以打开虚拟机和应用程序监控, 并设置 vsphere HA 群集的监控敏感度 响应主机故障 您可以针对 vsphere HA 群集中发生的主机故障设置特定响应 仅当启用 vsphere HA 后, 此页面才可编辑 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击故障和响应, 然后展开主机故障响应 VMware, Inc. 29

30 5 选择以下配置选项 选项故障响应默认虚拟机重新启动优先级虚拟机依赖关系重新启动条件 描述 如果选择已禁用, 发生主机故障时, 此设置会关闭主机监控, 且不会重新启动虚拟机 如果选择重新启动虚拟机, 发生主机故障时, 虚拟机会基于重新启动优先级进行故障切换 重新启动优先级用于确定主机发生故障时虚拟机的重新启动顺序 优先级较高的虚拟机将首先启动 如果多个主机发生故障, 将首先迁移优先级最高的主机上的所有虚拟机, 然后迁移优先级第二高的主机上的所有虚拟机, 以此类推 必须选择特定条件以及满足该条件后的延迟, 然后才允许 vsphere HA 继续下一个虚拟机重新启动优先级 6 单击确定 您的主机故障响应设置将生效 响应主机隔离您可以针对 vsphere HA 群集中发生的主机隔离设置特定响应 仅当启用 vsphere HA 后, 此页面才可编辑 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击故障和响应并展开针对主机隔离的响应 5 要配置主机隔离响应, 请选择已禁用 关闭再重新启动虚拟机或关闭虚拟机电源并重新启动虚拟机 6 单击确定 您的主机隔离响应设置将生效 配置 VMCP 响应 配置当数据存储遇到 PDL 或 APD 故障时, 虚拟机组件保护 (VMCP) 采取的响应 仅当启用 vsphere HA 后, 此页面才可编辑 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击故障和响应, 然后展开处于 PDL 状态的数据存储或处于 APD 状态的数据存储 5 如果单击处于 PDL 状态的数据存储, 则可以将此类问题的 VMCP 故障响应设置为已禁用 发布事件或关 闭虚拟机电源并重新启动虚拟机 6 如果单击处于 APD 状态的数据存储, 则可以将此类问题的 VMCP 故障响应设置为禁用 发布事件 关闭虚拟机电源并重新启动虚拟机 - 保守的重新启动策略或关闭虚拟机电源并重新启动虚拟机 - 激进的重新启动策略 您还可以设置响应恢复, 即 VMCP 在采取操作之前等待的分钟数 7 单击确定 30 VMware, Inc.

31 第 2 章创建和使用 vsphere HA 群集 您的 VMCP 故障响应的设置将生效 启用虚拟机监控您可以打开虚拟机和应用程序监控, 并设置 vsphere HA 群集的监控敏感度 仅当启用 vsphere HA 后, 此页面才可编辑 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击故障和响应, 然后展开虚拟机监控 5 选择虚拟机监控和应用程序监控 这些设置会分别启用 VMware Tools 检测信号和应用程序检测信号 6 要设置检测信号监控敏感度, 请在低和高之间移动滑块, 或者选择自定义以提供自定义设置 7 单击确定 监控设置将生效 配置 Proactive HA 您可以配置当提供程序通知 vcenter 其运行状况降级 ( 表示主机出现部分故障 ) 时 Proactive HA 的响应方式 启用 vsphere DRS 后, 才能编辑此页面 步骤 1 在 vsphere Web Client 中, 浏览到 Proactive HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 选择启用 Proactive HA 5 单击 Proactive HA 故障和响应 VMware, Inc. 31

32 6 选择以下配置选项 选项 自动化级别 修复 描述 确定主机隔离或维护模式和虚拟机迁移是建议还是自动执行 手动 vcenter Server 会给出虚拟机的迁移建议 自动 虚拟机将迁移到正常主机, 降级主机将进入隔离或维护模式, 具体取决于配置的 Proactive HA 自动化级别 确定对部分降级的主机执行的操作 对所有故障应用隔离模式 在虚拟机性能不受影响的情况下, 通过避免使用部分降级的主机来平衡性能和可用性 对中等故障应用隔离模式并对严重故障应用维护模式 ( 混合 ) 在虚拟机性能不受影响的情况下, 通过避免使用适度降级的主机来平衡性能和可用性 确保虚拟机不在出现严重故障的主机上运行 对所有故障应用维护模式 确保虚拟机不在出现部分故障的主机上运行 将主机置于隔离模式和维护模式分别需要 Host.Config.Quarantine 和 Host.Config.Maintenance 特权 选中需要的复选框可为该群集启用 Proactive HA 提供程序 安装了提供程序对应的 vsphere Web Client 插件时提供程序会显示在下面, 并且提供程序会监控群集中的每个主机 单击编辑链接可查看 / 编辑提供程序支持的故障状况 7 单击确定 您的 Proactive HA 响应设置将生效 配置准入控制 创建群集后, 可以配置准入控制, 以指定虚拟机违反可用性限制时是否可以启动它们 群集会预留资源, 以便在指定数量的主机上对所有正在运行的虚拟机进行故障切换 准入控制 页面仅在启用了 vsphere HA 时才会出现 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击准入控制以显示配置选项 5 为群集允许的主机故障数目选择一个数字 这是群集能够进行恢复或者确保进行故障切换所允许的最大主机故障数 6 为主机故障切换容量的定义依据选择一个选项 选项 群集资源百分比 描述 指定为了支持故障切换而作为备用容量保留的群集 CPU 和内存资源的百分比 插槽策略 ( 已打开电源的虚拟机 ) 选择可覆盖所有打开电源的虚拟机或为固定大小的插槽大小策略 您还可以计算有多少个虚拟机需要多个插槽 专用故障切换主机选择要用于进行故障切换操作的主机 默认故障切换主机没有足够的资源时, 仍可在群集内的其他主机上进行故障切换 已禁用 选择此选项将禁用准入控制, 并允许在违反可用性限制时打开虚拟机电源 7 为虚拟机允许的性能降低设置百分比 此设置确定故障期间群集中的虚拟机允许的性能降低百分比 8 单击确定 32 VMware, Inc.

33 第 2 章创建和使用 vsphere HA 群集 准入控制设置将生效 配置检测信号数据存储 vsphere HA 使用数据存储检测信号区分出现故障的主机和位于网络分区上的主机 利用数据存储检测信号, 当发生管理网络分区时,vSphere HA 可以监控主机并继续响应故障 您可以指定要用于数据存储检测信号的数据存储 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击检测信号数据存储以显示数据存储检测信号的配置选项 5 要指示 vsphere HA 如何选择数据存储以及如何处理首选项, 请从以下选项中选择 : 表 2 3 数据存储检测信号选项 自动选择可从以下主机访问的数据存储 仅使用指定列表中的数据存储 使用指定列表中的数据存储并根据需要自动补充 6 在 可用检测信号数据存储 窗格中, 选择要用于检测信号的数据存储 列出的数据存储由 vsphere HA 群集中的多个主机共享 选择了某个数据存储后, 下方的窗格将显示 vsphere HA 群集中可访问此数据存储的所有主机 7 单击确定 设置高级选项 要自定义 vsphere HA 行为, 请设置高级 vsphere HA 选项 前提条件确认您具有群集管理员特权 注意因为这些选项会影响 vsphere HA 的运行, 所以更改时请小心谨慎 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 3 选择 vsphere 可用性, 然后单击编辑 4 单击高级选项 5 单击添加, 然后在文本框中键入高级选项的名称 您可在 值 列的文本框中设置选项的值 6 针对要添加的每个新选项重复执行第 5 步, 然后单击确定 群集即会使用您已添加或修改的选项 VMware, Inc. 33

34 下一步设置高级 vsphere HA 选项后, 它将保持不变, 直到您执行以下操作之一 : 使用 vsphere Web Client 将其值重置为默认值 从群集中所有主机上的 fdm.cfg 文件中手动编辑或删除此选项 vsphere HA 高级选项 您可以设置影响 vsphere HA 群集的行为的高级选项 表 2 4 vsphere HA 高级选项 选项 das.isolationaddress[...] das.usedefaultisolationaddress das.isolationshutdowntimeout das.slotmeminmb das.slotcpuinmhz das.vmmemoryminmb das.vmcpuminmhz 描述 设置为了确定主机是否与网络隔离而要 ping 的地址 只有当未从群集内的任何其他主机接收到检测信号时才 ping 此地址 如果未指定, 则使用管理网络的默认网关 此默认网关必须是可用的可靠地址, 以便主机可以确定它是否与网络隔离 可以为群集指定多个隔离地址 ( 最多 10 个 ): das.isolationaddressx, 其中 X = 0-9 通常每个管理网络应指定一个隔离地址 如果指定的地址太多, 则进行隔离检测所需的时间将会较长 默认情况下,vSphere HA 使用控制台网络的默认网关作为隔离地址 此选项指定是否使用此默认设置 (true false) 关闭虚拟机电源之前, 系统等待虚拟机关机的时间段 只有在主机的隔离响应为 关闭虚拟机 时, 此选项才适用 默认值为 300 秒 定义内存插槽大小的最大限制 如果使用此选项, 则插槽大小小于该值, 或是小于群集内任何已打开电源虚拟机的最大内存预留以及内存开销 定义 CPU 插槽大小的最大限制 如果使用此选项, 则插槽大小小于该值, 或是小于群集内任何已打开电源虚拟机的最大 CPU 预留 定义在没有指定虚拟机内存预留或者内存预留为零时, 分配给虚拟机的默认内存资源值 用于 群集允许的主机故障数目 准入控制策略 如果未指定任何值, 则默认值为 0 MB 定义在没有指定虚拟机 CPU 预留或者内存预留为零时, 分配给虚拟机的默认 CPU 资源值 用于 群集允许的主机故障数目 准入控制策略 如果未指定任何值, 则默认值为 32 MHz das.iostatsinterval 更改虚拟机监控敏感度的默认 I/O 统计间隔 默认值为 120 ( 秒 ) 可以设置为大于等于 0 的任何值 设置为 0 会禁用检查 注意建议不要使用小于 50 的值, 因为较小的值可能会导致 vsphere HA 意外重置虚拟机 das.ignoreinsufficienthbdatastore 如果主机不具有足够的 vsphere HA 检测信号数据存储, 则禁用创建的配置问题 默认值为 false das.heartbeatdsperhost 更改所需的检测信号数据存储的数量 有效值范围为 2 至 5, 默认值为 2 fdm.isolationpolicydelaysec 在确定主机被隔离后执行隔离策略之前系统等待的秒数 最小值为 30 如果设置的值小于 30, 延迟时间将为 30 秒 34 VMware, Inc.

35 第 2 章创建和使用 vsphere HA 群集 表 2 4 vsphere HA 高级选项 ( 续 ) 选项 das.respectvmvmantiaffinityrules das.maxresets das.maxterminates das.terminateretryintervalsec das.config.fdm.reportfailoverfailevent vpxd.das.completemetadataupdateintervalsec 描述 确定 vsphere HA 是否强制执行虚拟机间反关联性规则 默认值为 false, 不强制执行规则 也可以设置为 true, 强制执行规则 ( 即使未启用 vsphere DRS) 在此情况下, 如果对虚拟机进行故障切换违反规则, 则 vsphere HA 不会进行故障切换, 但会发出一个事件, 报告资源不足, 无法执行故障切换 有关反关联性规则的详细信息, 请参见 vsphere 资源管理 VMCP 进行重置尝试的最大次数 如果受 APD 状况影响的虚拟机上的重置操作失败,VMCP 将在放弃之前重试此操作许多次 VMCP 进行虚拟机终止重试的最大次数 如果 VMCP 无法终止虚拟机, 这是它重试终止尝试之前系统等待的秒数 如果设置为 1, 则在 vsphere HA 尝试重新启动虚拟机失败时启用详细的每虚拟机事件生成 默认值为 0 在早于 vsphere 6.0 的版本中, 会默认生成此事件 设置虚拟机 - 主机关联性规则后的时间段 ( 秒 ), 在该时间段内,vSphere HA 可以重新启动已禁用 DRS 的群集中的虚拟机以替代此规则 默认值为 300 秒 das.config.fdm.memreservationmb 默认情况下,vSphere HA 代理运行时的配置内存限制为 250 MB 如果主机用尽可预留的容量, 主机可能不允许此预留 您可以使用此高级选项来降低内存限制以避免此问题 仅可指定大于 100( 最小值 ) 的整数 相反, 为防止在大型群集 ( 包含 6,000 至 8,000 个虚拟机 ) 的主代理选举期间出现问题, 应将此限制增加至 325 MB 注意此限制更改后, 必须为群集中的所有主机运行重新配置 HA 任务 另外, 在将新主机添加到群集或重新引导现有主机时, 应对这些主机执行此任务以便更新此内存设置 das.reregisterrestartdisabledvms 在某个特定虚拟机上禁用 vsphere HA 时, 此选项确保该虚拟机会在故障后在其他主机上进行注册 这使您能够打开该虚拟机的电源, 而无需手动重新注册 注意使用此选项时,vSphere HA 不会打开虚拟机的电源, 而是仅注册该虚拟机 注意如果更改以下任一高级选项的值, 则必须先禁用 vsphere HA, 再重新启用它, 更改才会生效 das.isolationaddress[...] das.usedefaultisolationaddress das.isolationshutdowntimeout 自定义单个虚拟机 vsphere HA 群集中的每个虚拟机均分配了 虚拟机重新启动优先级 主机隔离响应 虚拟机组件保护 和 虚拟机监控 的群集默认设置 可以通过更改这些默认项来指定每个虚拟机的特定行为 如果虚拟机离开该群集, 则将丢弃这些设置 步骤 1 在 vsphere Web Client 中, 浏览到 vsphere HA 群集 2 单击配置选项卡 VMware, Inc. 35

36 3 在 配置 下, 选择虚拟机替代项, 然后单击添加 4 使用 + 按钮选择要将替代项应用到的虚拟机 5 单击确定 6 ( 可选 ) 您可以更改其他设置, 如自动化级别 虚拟机重新启动优先级 针对主机隔离的响应 VMCP 设置 虚拟机监控或虚拟机监控敏感度设置 注意您可先后展开相关群集设置和 vsphere HA, 查看这些设置的群集默认值 7 单击确定 现在, 对于更改的每项设置, 虚拟机的行为将不同于群集默认值 vsphere HA 群集的最佳做法 为确保获得最佳 vsphere HA 群集性能, 您应遵循某些最佳做法 本节重点介绍适用于 vsphere HA 群集的一些主要的最佳做法 您也可以参考出版物 vsphere High Availability 部署最佳做法 了解更多信息 网络连接的最佳做法 请遵守以下针对主机网卡配置和 vsphere HA 的网络拓扑的最佳做法 最佳做法包括对 ESXi 主机的建议, 以及对电缆 交换机 路由器和防火墙的建议 网络配置和维护 下列网络维护建议可以帮助您避免对由于丢失 vsphere HA 检测信号而发生故障的主机和网络隔离的意外检测 对群集 ESXi 主机所在的网络进行更改时, 请挂起主机监控功能 更改网络硬件或网络连接设置会中断 vsphere HA 用于检测主机故障的检测信号, 并且这可能导致不必要的虚拟机故障切换尝试 在 ESXi 主机上更改网络连接配置时 ( 例如, 添加端口组或移除 vswitch), 请挂起主机监控 在对网络连接配置进行更改之后, 您必须在群集中的所有主机上重新配置 vsphere HA, 从而能够重新检查网络信息 然后重新启用主机监控 注意由于网络是 vsphere HA 的一个重要组件, 因此, 如果需要执行网络维护, 请通知 vsphere HA 管理员 用于 vsphere HA 通信的网络 要识别哪些网络操作可能会中断 vsphere HA 的运行, 应当了解哪些管理网络用于检测信号和其他 vsphere HA 通信 在群集中的旧版 ESX 主机上,vSphere HA 通信通过被指定为服务控制台网络的所有网络进行传输 这些主机没有将 VMkernel 网络用于 vsphere HA 通信 要在 ESX 控制台网络子集中包含 vsphere HA 流量, 请使用 allowednetworks 高级选项 在群集中的 ESXi 主机上, 默认情况下,vSphere HA 通信通过 VMkernel 网络进行传输 在 ESXi 主机上, 如果不使用 vcenter Server 所用的网络与 vsphere HA 的主机进行通信, 您必须明确启用管理流量复选框 若要保留已指定网络上的 vsphere HA 代理流量, 请配置主机, 以便 vsphere HA 所使用的 vmknic 不会与用于其他用途的 vmknic 共享子网 如果至少为 vsphere HA 管理流量配置了一个 vmknic, 则 vsphere HA 代理将使用与给定子网关联的任一 pnic 发送数据包 因此, 要确保网络流量分离,vSphere HA 以及其他功能所使用的 vmknic 必须位于不同的子网上 36 VMware, Inc.

37 第 2 章创建和使用 vsphere HA 群集 网络隔离地址 网络隔离地址是要 ping 的 IP 地址, 以确定主机是否与网络隔离 只有当主机已停止从群集内的任何其他主机接收检测信号时才 ping 此地址 如果主机可以 ping 其网络隔离地址, 则说明该主机并未与网络隔离, 并且群集内的其他主机已出现故障或网络分区 但是, 如果主机无法 ping 其隔离地址, 则可能该主机已与网络隔离, 并且不会执行故障切换操作 默认情况下, 网络隔离地址是主机的默认网关 无论已定义多少个管理网络, 都只会指定一个默认网关 应当使用 das.isolationaddress[...] 高级选项为其他网络添加隔离地址 请参见第 34 页, vsphere HA 高级选项 网络路径冗余 群集节点之间的网络路径冗余对 vsphere HA 可靠性非常重要 单个管理网络会最终成为单一故障点, 并且, 尽管只有该网络出现故障, 仍可能会导致故障切换 如果仅有一个管理网络, 那么在网络连接故障期间未保留检测信号数据存储连接时主机和群集之间的任何故障都可能会导致不必要 ( 或错误 ) 的故障切换活动 可能的故障包括网卡故障 网络电缆故障 网络电缆移除和交换机重置 考虑主机可能导致故障的上述原因, 然后尝试减少这些问题 ( 通常通过提供网络冗余来实现此目的 ) 实现网络冗余的首选方法是在网卡级别使用网卡成组 如果用两个连接到不同物理交换机的网卡组成一个网卡组, 则可以提高管理网络的可靠性 因为通过两个网卡 ( 并且通过单独的交换机 ) 连接的服务器具有两条独立的路径来发送和接收检测信号, 所以群集具有更好的弹性 要为管理网络配置网卡组, 请在活动或待机配置的 vswitch 配置中配置 vnic 推荐的 vnic 参数设置如下 : 默认的负载平衡 = 基于源虚拟端口 ID 的路由 故障恢复 = 否 在为 vsphere HA 群集中的一个主机添加网卡之后, 必须在该主机上重新配置 vsphere HA 在大多数实现中, 网卡成组可以提供足够的检测信号冗余, 但是除此之外, 您还可以创建一个连接到单独虚拟交换机的辅助管理网络连接 冗余管理网络连接能够可靠地检测故障并防止出现隔离或分区的情况, 因为检测信号可以通过多个网络发送 原始管理网络连接用于网络和管理 辅助管理网络连接创建之后,vSphere HA 会同时通过两种管理网络连接发送检测信号 如果一条路径发生故障,vSphere HA 仍可通过另一条路径发送和接收检测信号 注意在群集内的服务器之间尽量少配置硬件分段, 目的是为了限制单一故障点 此外, 跃点过多的路由可能会导致检测信号的网络数据包延迟, 并增加潜在的故障点数目 使用 IPv6 网络配置 仅应向 vsphere HA 群集使用的给定网络接口分配一个 IPv6 地址 分配多个 IP 地址会增加群集的主控主机发送的检测信号消息数量, 这其实弊大于利 互操作性的最佳做法 请遵守以下针对允许在 vsphere HA 和其他功能之间进行适当的互操作的最佳做法 混合群集中的 vsphere HA 和 Storage vmotion 互操作性 在包含 ESXi 5.x 主机和 ESX/ESXi 4.1 或旧版主机, 且广泛使用 Storage vmotion 或启用了 Storage DRS 的群集中, 请勿部署 vsphere HA vsphere HA 可能通过在某个 ESXi 版本 ( 不同于出现故障前运行虚拟机的主机版本 ) 的主机上重新启动虚拟机来响应主机故障 如果出现故障时虚拟机被卷进 ESXi 5.x 主机上的 Storage vmotion 操作, 而且 vsphere HA 在低于 ESXi 5.0 版本的主机上重新启动虚拟机, 则会出现问题 虽然虚拟机可能打开电源, 但针对快照操作的任何后续尝试都可能会使 vdisk 状态遭到损坏并导致虚拟机不可用 VMware, Inc. 37

38 将 Auto Deploy 与 vsphere HA 配合使用 可以将 vsphere HA 与 Auto Deploy 配合使用来提高虚拟机的可用性 Auto Deploy 可在打开主机电源时置备这些主机, 您还可以将其配置为在引导过程中于这些主机上安装 vsphere HA 代理 有关详细信息, 请参见 vsphere 安装和设置 中的 Auto Deploy 文档 使用 Virtual SAN 升级群集中的主机 如果要将 vsphere HA 群集中的 ESXi 主机升级到版本 5.5 或更高版本, 而且还计划使用 Virtual SAN, 请按以下过程执行操作 1 升级所有主机 2 禁用 vsphere HA 3 启用 Virtual SAN 4 重新启用 vsphere HA 群集监控最佳做法 请遵守以下针对监控 vsphere HA 群集状态和有效性的最佳做法 将警报设置为监控群集更改 当 vsphere HA 或 Fault Tolerance 执行用于维护可用性的操作时 ( 例如, 虚拟机故障切换 ), 可能会向您通知此类更改 将 vcenter Server 中的警报配置为在执行这些操作时触发, 并向指定的一组管理员发送警示 ( 如电子邮件 ) 提供多个默认的 vsphere HA 警报 故障切换资源不足 ( 群集警报 ) 找不到主机 ( 群集警报 ) 正在进行故障切换 ( 群集警报 ) 主机 HA 状态 ( 主机警报 ) VM 监控错误 ( 虚拟机警报 ) 虚拟机监控操作 ( 虚拟机警报 ) 故障切换失败 ( 虚拟机警报 ) 注意默认的警报包括功能名称 vsphere HA 监控群集有效性 有效群集是尚未违反接入控制策略的群集 当已打开电源的虚拟机数超过了故障切换需求, 即当前故障切换容量小于所配置的故障切换容量时, 已启用 vsphere HA 的群集将会变为无效 如果禁用了接入控制, 则群集不会变为无效 在 vsphere Web Client 中, 从群集的监控选项卡中选择 vsphere HA, 然后选择配置问题 此时会显示当前 vsphere HA 问题的列表 如果群集是由于 vsphere HA 问题而变为红色的, 则 DRS 行为不会受到影响 38 VMware, Inc.

39 为虚拟机提供 Fault Tolerance 3 可以为虚拟机利用 vsphere Fault Tolerance, 以获得比 vsphere HA 所提供的级别更高的可用性和数据保护, 从而确保业务连续性 Fault Tolerance 基于 ESXi 主机平台构建, 它通过在单独主机上运行相同的虚拟机来提供连续可用性 要获取 Fault Tolerance 的最佳结果, 应先熟悉其工作原理 如何为群集和虚拟机启用它及其最佳使用方法 虚拟机的 Fault Tolerance 保护 ( bctid=ref:video_fault_tolerance_protection_vms) 本章讨论了以下主题 : 第 39 页, Fault Tolerance 的工作方式 第 40 页, Fault Tolerance 用例 第 40 页, Fault Tolerance 要求 限制和许可 第 41 页, Fault Tolerance 互操作性 第 42 页, 为 Fault Tolerance 准备群集和主机 第 45 页, 使用 Fault Tolerance 第 48 页, Fault Tolerance 的最佳做法 第 50 页, 旧版 Fault Tolerance Fault Tolerance 的工作方式 可以为大多数任务关键虚拟机使用 vsphere Fault Tolerance (FT) FT 通过创建和维护与此类虚拟机相同且可在发生故障切换时随时替换此类虚拟机的其他虚拟机, 来确保此类虚拟机的连续可用性 受保护的虚拟机称为主虚拟机 重复虚拟机, 即辅助虚拟机, 在其他主机上创建和运行 由于辅助虚拟机与主虚拟机的执行方式相同, 并且辅助虚拟机可以无中断地接管任何点处的执行, 因此可以提供容错保护 主虚拟机和辅助虚拟机会持续监控彼此的状态以确保维护 Fault Tolerance 如果运行主虚拟机的主机发生故障, 系统将会执行透明故障切换, 此时会立即启用辅助虚拟机以替换主虚拟机, 启动新的辅助虚拟机, 并自动重新建立 Fault Tolerance 冗余 如果运行辅助虚拟机的主机发生故障, 则该主机也会立即被替换 在任一情况下, 用户都不会遭遇服务中断和数据丢失的情况 容错虚拟机及其辅助副本不允许在相同主机上运行 此限制可确保主机故障不会导致两个虚拟机都丢失 注意也可以使用虚拟机 - 主机关联性规则来确定要在其上运行指定虚拟机的主机 如果使用这些规则, 应了解对于受这种规则影响的任何主虚拟机, 其关联的辅助虚拟机也受这些规则影响 有关关联性规则的详细信息, 请参见 vsphere 资源管理 vsphere Resource Management 文档 VMware, Inc. 39

40 容错可避免 裂脑 情况的发生, 此情况可能会导致虚拟机在从故障中恢复后存在两个活动副本 共享存储器上锁定的原子文件用于协调故障切换, 以便只有一端可作为主虚拟机继续运行, 并由系统自动重新生成新辅助虚拟机 vsphere Fault Tolerance 可容纳最多具有 4 个 vcpu 的对称多处理器 (SMP) 虚拟机 早期版本的 vsphere 使用不同的 Fault Tolerance 技术 ( 现称为旧版 FT), 该技术具有不同要求和特性 ( 包括旧版 FT 虚拟机的单个 vcpu 的限制 ) 如果有必要与这些早期版本的要求相兼容, 可以改用旧版 FT 但是, 这涉及每个虚拟机的高级选项设置 有关详细信息, 请参见第 50 页, 旧版 Fault Tolerance Fault Tolerance 用例 几种典型情况可以受益于 vsphere Fault Tolerance 的使用 Fault Tolerance 可提供比 vsphere HA 更高级别的业务连续性 当调用辅助虚拟机以替换与其对应的主虚拟机时, 辅助虚拟机会立即取代主虚拟机的角色, 并会保存其整个状况 应用程序已在运行, 并且不需要重新输入或重新加载内存中存储的数据 这不同于 vsphere HA 提供的故障切换, 故障切换会重新启动受故障影响的虚拟机 更高的连续性级别以及增加的状况信息和数据保护功能可在您要部署容错时提供方案信息 需要始终保持可用的应用程序, 尤其是那些具有长时间客户端连接的应用程序, 用户希望在硬件故障期间保持这些连接 不能通过任何其他方式实现群集功能的自定义应用程序 可以通过自定义群集解决方案提供高可用性, 但这些解决方案太复杂, 很难进行配置和维护的情况 用容错保护虚拟机的另一个关键用例可以描述为按需容错 在这种情况中, 虚拟机在正常操作期间受到 vsphere HA 的充分保护 在某些关键期间, 您可能希望增强虚拟机的保护 例如, 您可能正在执行季末报告, 如果发生中断, 则可能会延迟任务关键信息的可用性 使用 vsphere Fault Tolerance, 可以在运行此报告之前保护此虚拟机, 然后在生成报告之后关闭或挂起 Fault Tolerance 可以在关键时间段使用按需容错保护虚拟机, 然后在非关键操作期间将资源置回正常状态 Fault Tolerance 要求 限制和许可 在使用 vsphere Fault Tolerance (FT) 之前, 请考虑适用于此功能的高级别要求 限制和许可 要求 以下 CPU 和网络要求适用于 FT 主机中用于容错虚拟机的 CPU 必须与 vsphere vmotion 兼容或使用增强型 vmotion 兼容性进行了改进 此外, 还需要 CPU 支持硬件 MMU 虚拟化 (Intel EPT 或 AMD RVI) 支持以下 CPU Intel Sandy Bridge 或更高版本 Avoton 不受支持 AMD Bulldozer 或更高版本 请对 FT 使用 10 Gb 日志记录网络并验证网络滞后时间是否非常短 强烈建议使用专用 FT 网络 限制 在已配置为使用 Fault Tolerance 的群集中, 分别强制执行两个限制 das.maxftvmsperhost das.maxftvcpusperhost 群集中的主机上允许的最大容错虚拟机数量 主虚拟机和辅助虚拟机计入此限制 默认值为 4 跨主机上所有容错虚拟机聚合的最大 vcpu 数量 主虚拟机和辅助虚拟机中的 vcpu 均计入此限制 默认值为 8 40 VMware, Inc.

41 第 3 章为虚拟机提供 Fault Tolerance 许可 单个容错虚拟机支持的 vcpu 数量受您针对 vsphere 购买的许可级别限制 Fault Tolerance 支持情况如下 : vsphere Standard 和 Enterprise 最多可允许 2 个 vcpu vsphere Enterprise Plus 最多允许 4 个 vcpu 注意在 vsphere Essentials 和 vsphere Essentials Plus 中不支持 FT 和旧版 FT Fault Tolerance 互操作性 vsphere Fault Tolerance 面临一些有关 vsphere 功能 设备及其可与之交互的其他功能的限制 在配置 vsphere Fault Tolerance 之前, 应当了解 Fault Tolerance 不能与之交互操作的功能和产品 Fault Tolerance 不支持的 vsphere 功能 配置群集时, 应注意并非所有 vsphere 功能都可与 Fault Tolerance 进行交互操作 容错虚拟机不支持以下 vsphere 功能 快照 在虚拟机上启用 Fault Tolerance 前, 必须移除或提交快照 此外, 不可能对已启用 Fault Tolerance 的虚拟机执行快照 注意 Fault Tolerance 支持为 vstorage APIs - Data Protection (VADP) 备份而创建的仅磁盘快照 但是, 旧版 FT 不支持 VADP Storage vmotion 不能为已启用 Fault Tolerance 的虚拟机调用 Storage vmotion 要迁移存储器, 应当先暂时关闭 Fault Tolerance, 然后再执行 Storage vmotion 操作 在完成迁移之后, 可以重新打开 Fault Tolerance 链接克隆 不能在为链接克隆的虚拟机上使用 Fault Tolerance, 也不能从启用了 FT 的虚拟机创建链接克隆 虚拟机组件保护 (VMCP) 如果您的群集已启用 VMCP, 则会为关闭此功能的容错虚拟机创建替代项 虚拟卷数据存储 基于存储的策略管理 I/O 筛选器 不与 Fault Tolerance 兼容的功能和设备 并非所有第三方设备 功能或产品都可与 Fault Tolerance 进行交互操作 要使虚拟机与 Fault Tolerance 功能兼容, 虚拟机不能使用以下功能或设备 表 3 1 不与 Fault Tolerance 兼容的功能和设备以及纠正操作 不兼容的功能或设备物理裸磁盘映射 (RDM) 由物理或远程设备支持的 CD-ROM 或虚拟软盘设备 USB 和声音设备 N_Port ID 虚拟化 (NPIV) 网卡直通 纠正操作 使用旧版 FT, 可以将具有支持物理 RDM 的虚拟设备的虚拟机重新配置为改用虚拟 RDM 移除 CD-ROM 或虚拟软盘设备, 或使用共享存储器上安装的 ISO 重新配置备用功能 从虚拟机移除这些设备 禁用虚拟机的 NPIV 配置 Fault Tolerance 不支持此功能, 因此必须将其关闭 VMware, Inc. 41

42 表 3 1 不与 Fault Tolerance 兼容的功能和设备以及纠正操作 ( 续 ) 不兼容的功能或设备热插拔设备 串行或并行端口启用了 3D 的视频设备 虚拟 EFI 固件虚拟机通信接口 (VMCI) 纠正操作 容错虚拟机的热插拔功能将自动禁用 要热插拔设备 ( 添加或移除 ), 必须临时关闭 Fault Tolerance, 完成热插拔操作, 然后重新启用 Fault Tolerance 注意使用 Fault Tolerance 时, 如果在虚拟机正在运行过程中更改虚拟网卡的设置, 该操作即为热插拔操作, 因为它要求先拔出网卡, 然后重新插入 例如, 当正在运行的虚拟机使用虚拟网卡时, 如果更改虚拟网卡所连接到的网络, 必须首先关闭 FT 从虚拟机移除这些设备 Fault Tolerance 不支持启用了 3D 的视频设备 在安装客户机操作系统之前, 请确保将虚拟机配置为使用 BIOS 固件 不受 Fault Tolerance 支持 2TB+ VMDK 2TB+ VMDK 不支持 Fault Tolerance 将 Fault Tolerance 功能与 DRS 配合使用 仅当启用增强型 vmotion 兼容性 (EVC) 功能时, 才可将 vsphere Fault Tolerance 与 vsphere Distributed Resource Scheduler (DRS) 配合使用 此过程可使容错虚拟机受益于更好的初始放置位置 当群集启用了 EVC 时,DRS 将为容错虚拟机提出初始放置位置建议, 并允许您为主虚拟机分配 DRS 自动化级别 ( 辅助虚拟机始终采用与其关联的主虚拟机相同的设置 ) 将 vsphere Fault Tolerance 用于禁用了 EVC 的群集中的虚拟机时, 将为容错虚拟机指定 DRS 自动化级别 已禁用 在此类群集中, 仅可在注册的主机上打开每个主虚拟机的电源, 并且将自动放置其辅助虚拟机 如果将关联性规则用于一对容错虚拟机, 则虚拟机 - 虚拟机关联性规则仅适用于主虚拟机, 而虚拟机 - 主机关联性规则适用于主虚拟机及其辅助虚拟机 如果为主虚拟机设置了虚拟机 - 虚拟机关联性规则, 则 DRS 会尝试解决在故障切换 ( 即主虚拟机移至新的主机 ) 后出现的任何冲突 为 Fault Tolerance 准备群集和主机 要为群集启用 vsphere Fault Tolerance, 必须满足此功能的必备条件, 然后在主机上执行特定的配置步骤 完成这些步骤并创建群集后, 还可以检查配置是否符合启用 Fault Tolerance 的要求 尝试为群集设置 Fault Tolerance 之前, 应完成的任务包括 : 确保您的群集 主机和虚拟机满足 Fault Tolerance 对照表中所述要求 为每台主机配置网络 创建 vsphere HA 群集, 添加主机, 并检查合规性 在为群集和主机准备好 Fault Tolerance 之后, 便可为虚拟机打开 Fault Tolerance 请参见第 46 页, 打开 Fault Tolerance Fault Tolerance 对照表 以下对照表包含在使用 vsphere Fault Tolerance 之前需要了解的群集 主机和虚拟机要求 在设置 Fault Tolerance 之前, 应查看此列表 注意容错虚拟机的故障切换与 vcenter Server 无关, 但必须使用 vcenter Server 来设置 Fault Tolerance 群集 42 VMware, Inc.

43 第 3 章为虚拟机提供 Fault Tolerance Fault Tolerance 的群集要求 在使用 Fault Tolerance 之前, 必须满足以下群集要求 配置了 Fault Tolerance 日志记录和 vmotion 网络 请参见第 44 页, 为主机配置网络 vsphere HA 群集已创建并启用 请参见第 27 页, 创建 vsphere HA 群集 打开容错虚拟机电源或者将主机添加到已支持容错虚拟机的群集之前, 必须启用 vsphere HA Fault Tolerance 的主机要求 在使用 Fault Tolerance 之前, 必须满足以下主机要求 主机必须使用受支持的处理器 主机必须获得 Fault Tolerance 的许可 主机必须已通过 Fault Tolerance 认证 请参见 并选择按与容错兼容的集合搜索, 确定主机是否已通过认证 在配置每台主机时, 都必须在 BIOS 中启用硬件虚拟化 (HV) 注意 VMware 建议将用于支持 FT 虚拟机的主机的 BIOS 电源管理设置设为 最高性能 或 受操作系统管理的性能 要确认群集内的主机是否兼容, 从而判断其是否支持 Fault Tolerance, 还可以按第 44 页, 创建群集和检查合规性 中所说明的那样运行配置文件合规性检查 Fault Tolerance 的虚拟机要求在使用 Fault Tolerance 之前, 必须满足以下虚拟机要求 没有不受支持的设备连接到虚拟机 请参见第 41 页, Fault Tolerance 互操作性 不兼容的功能一定不能与容错虚拟机一起运行 请参见第 41 页, Fault Tolerance 互操作性 虚拟机文件 (VMDK 文件除外 ) 必须存储在共享存储中 可接受共享的存储解决方案包括光纤通道 ( 硬件和软件 )iscsi NFS 和 NAS 其他配置建议 在配置 Fault Tolerance 时还应遵循以下准则 如果要使用 NFS 访问共享存储, 请使用至少具有 1 千兆位网卡的专用 NAS 硬件, 以获取为了使 Fault Tolerance 功能正常工作所需的网络性能 在开启 Fault Tolerance 功能后, 容错虚拟机的预留内存设置为虚拟机的内存大小 确保包含容错虚拟机的资源池拥有大于虚拟机内存大小的内存资源 如果资源池中没有额外内存, 则可能没有内存可用作开销内存 每个容错虚拟机最多使用 16 个虚拟磁盘 为确保冗余和最大 Fault Tolerance 保护, 群集中应至少有三台主机 如果发生故障切换情况, 这可确保有 主机可容纳所创建的新辅助虚拟机 VMware, Inc. 43

44 为主机配置网络 在要添加到 vsphere HA 群集的每台主机上, 必须配置两个不同的网络交换机 (vmotion 和 FT 日志记录 ), 以便主机支持 vsphere Fault Tolerance 要为主机设置 Fault Tolerance, 必须为每个端口组选项 (vmotion 和 FT 日志记录 ) 完成此步骤, 以确保有足够的带宽可供 Fault Tolerance 日志记录使用 选择一个选项, 完成该过程, 然后选择另一个端口组选项, 再执行一次该过程 前提条件 需要多个千兆位网络接口卡 (NIC) 对于支持 Fault Tolerance 功能的每台主机, 建议最少使用两个物理网卡 例如, 您需要一个网卡专门用于 Fault Tolerance 日志记录, 另一个则专门用于 vmotion 使用三个或更多网卡来确保可用性 注意 vmotion 和 FT 日志记录网卡必须位于不同子网上 如果使用的是旧版 FT, 则在 FT 日志记录网卡上不支持 IPv6 步骤 1 在 vsphere Web Client 中, 浏览到主机 2 依次单击配置选项卡和网络 3 选择 VMkernel 网络适配器 4 单击添加主机网络图标 5 提供相应的连接类型信息 6 单击完成 在创建 vmotion 和 Fault Tolerance 日志记录虚拟交换机后, 可以根据需要创建其他虚拟交换机 将主机添加到群集, 并完成打开 Fault Tolerance 所需的所有步骤 下一步 注意如果将网络连接配置为支持 FT, 但随后又挂起了 Fault Tolerance 日志记录端口, 则已打开电源的容错虚拟机对将保持打开电源状态 如果出现了故障切换情况, 那么, 当主虚拟机被其辅助虚拟机替换时, 将不会启动新的辅助虚拟机, 这会导致新的主虚拟机以 不受保护 状态运行 创建群集和检查合规性 vsphere Fault Tolerance 在 vsphere HA 群集环境中使用 为每台主机配置网络连接后, 创建 vsphere HA 群集并向其中添加主机 您可查看群集配置是否正确以及是否符合启用 Fault Tolerance 的要求 步骤 1 在 vsphere Web Client 中, 浏览到群集 2 单击监控选项卡, 然后单击配置文件合规性 3 单击立即检查合规性运行合规性测试 此时将显示合规性测试结果, 并显示每台主机是合规还是不合规 44 VMware, Inc.

45 第 3 章为虚拟机提供 Fault Tolerance 使用 Fault Tolerance 在采取了为群集启用 vsphere Fault Tolerance 所需的全部步骤之后, 可以为各个虚拟机打开 Fault Tolerance 功能 在打开 Fault Tolerance 之前, 需要在虚拟机上执行验证检查 在通过这些检查并为虚拟机打开 vsphere Fault Tolerance 之后, 新选项将添加到其上下文菜单的 Fault Tolerance 区域 这包括关闭或禁用 Fault Tolerance 迁移辅助虚拟机 测试故障切换和测试辅助虚拟机重新启动的选项 打开 Fault Tolerance 时的验证检查 如果用于打开 Fault Tolerance 的选项可用, 则此任务仍然必须进行验证, 并且在未满足某些要求时可能会失败 在打开 Fault Tolerance 之前, 需要在虚拟机上执行多项验证检查 必须在 vcenter Server 设置中启用 SSL 证书检查 主机必须位于 vsphere HA 群集或包含 vsphere HA 和 DRS 的混合群集内 主机必须安装了 ESXi 6.x 或更高版本 (ESX/ESXi 4.x 或更高版本适用旧版 FT) 虚拟机不得有快照 虚拟机不得是模板 对于虚拟机不得禁用 vsphere HA 虚拟机不得有启用了 3D 的视频设备 已启动虚拟机的检查 已对已打开电源的虚拟机 ( 或正在打开电源的虚拟机 ) 执行了多项附加验证检查 容错虚拟机所驻留的主机的 BIOS 必须启用了硬件虚拟化 (HV) 支持主虚拟机的主机必须有支持 Fault Tolerance 的处理器 您的硬件应认证为与 Fault Tolerance 兼容 为了确认这点, 请使用 中的 VMware 兼容性指南 并选择按与容错兼容的集合搜索 虚拟机的配置必须有效, 以便与 Fault Tolerance 功能配合使用 ( 例如, 不得包含任何不受支持的设备 ) 辅助虚拟机放置 当为虚拟机打开 Fault Tolerance 这一操作通过验证检查时, 将创建辅助虚拟机 辅助虚拟机的放置位置和即时状态取决于在打开 Fault Tolerance 时主虚拟机是已打开电源还是已关闭电源 如果主虚拟机已打开电源 : 将复制整个主虚拟机的状况, 创建辅助虚拟机, 并将其放置在单独的兼容主机上, 而且会在通过接入控制时打开电源 虚拟机的 Fault Tolerance 状态显示为受保护 如果主虚拟机已关闭电源 : 将立即创建辅助虚拟机并在群集的主机中注册 ( 打开该虚拟机电源时, 可能会在更合适的主机上重新进行注册 ) 辅助虚拟机在主虚拟机打开电源之后打开电源 VMware, Inc. 45

46 虚拟机的 Fault Tolerance 状态显示为不受保护 虚拟机未运行 当尝试在打开 Fault Tolerance 之后打开主虚拟机的电源时, 将执行上面列出的附加验证检查 通过这些检查之后, 将打开主虚拟机和辅助虚拟机的电源, 并将其分别放置在单独的兼容主机上 虚拟机的 Fault Tolerance 状态标记为受保护 打开 Fault Tolerance 您可以通过 vsphere Web Client 打开 vsphere Fault Tolerance 在打开 Fault Tolerance 功能后,vCenter Server 会重置虚拟机的内存限制, 并将内存预留值设置为虚拟机的内存大小 当 Fault Tolerance 保持打开状态时, 不能更改内存预留 大小 限制 vcpu 数量或份额 也不能添加或移除虚拟机磁盘 在关闭 Fault Tolerance 功能后, 已更改的任何参数均不会恢复到其原始值 使用具有群集管理员权限的帐户将 vsphere Web Client 连接到 vcenter Server 前提条件 如果符合下列任一情况, 则用于打开 Fault Tolerance 的选项将不可用并变成灰色 : 虚拟机所驻留的主机并未获得使用该功能的许可证 虚拟机所驻留的主机处于维护模式或待机模式 虚拟机已断开连接或被孤立 ( 无法访问其.vmx 文件 ) 用户没有打开此功能的权限 步骤 1 在 vsphere Web Client 中, 浏览到您要为其打开 Fault Tolerance 的虚拟机 2 右键单击虚拟机并选择 Fault Tolerance > 打开 Fault Tolerance 3 单击是 4 选择用于放置辅助虚拟机配置文件的数据存储 然后, 单击下一步 5 选择要在其中放置辅助虚拟机的主机 然后, 单击下一步 6 检查选择内容, 然后单击完成 特定的虚拟机将被指定为主虚拟机, 并在另一台主机上建立辅助虚拟机 现在, 主虚拟机已启用了容错功能 关闭 Fault Tolerance 关闭 vsphere Fault Tolerance 将删除辅助虚拟机及其配置以及所有历史记录 如果您不打算重新启动 Fault Tolerance 功能, 请使用关闭 Fault Tolerance 选项 否则, 请使用挂起 Fault Tolerance 选项 注意如果辅助虚拟机所驻留的主机处于维护模式 已断开或不响应, 则不能使用关闭 Fault Tolerance 选项 在这种情况下, 应当挂起 Fault Tolerance, 然后再将其恢复 步骤 1 在 vsphere Web Client 中, 浏览到您要为其关闭 Fault Tolerance 的虚拟机 2 右键单击虚拟机, 然后选择 Fault Tolerance > 关闭 Fault Tolerance 3 单击是 选定虚拟机的 Fault Tolerance 功能将关闭 选定虚拟机的历史记录和辅助虚拟机都将被删除 46 VMware, Inc.

47 第 3 章为虚拟机提供 Fault Tolerance 挂起 Fault Tolerance 挂起虚拟机的 vsphere Fault Tolerance 也将挂起 Fault Tolerance 保护, 但会保留该虚拟机的辅助虚拟机 配置和所有历史记录 使用该选项可在将来恢复 Fault Tolerance 保护 步骤 1 在 vsphere Web Client 中, 浏览到要为其挂起 Fault Tolerance 的虚拟机 2 右键单击虚拟机并选择 Fault Tolerance > 挂起 Fault Tolerance 3 单击是 选定虚拟机的 Fault Tolerance 功能将被挂起 所选虚拟机的辅助虚拟机和所有历史记录都将保留, 并在恢复该功能时使用 下一步 挂起 Fault Tolerance 后, 要恢复功能, 请选择恢复 Fault Tolerance 迁移辅助虚拟机 在为主要虚拟机打开 vsphere Fault Tolerance 之后, 可以迁移其关联的辅助虚拟机 步骤 1 在 vsphere Web Client 中, 浏览到您要迁移其辅助虚拟机的主虚拟机 2 右键单击虚拟机并选择 Fault Tolerance > 迁移辅助虚拟机 3 完成 迁移 对话框中的选项, 并确认做出的更改 4 单击完成以应用所做的更改 与选定容错虚拟机关联的辅助虚拟机会迁移到指定的主机中 测试故障切换 可以通过诱发所选主要虚拟机的故障切换来测试 Fault Tolerance 保护 如果已关闭虚拟机电源, 则此选项不可用 ( 灰显 ) 步骤 1 在 vsphere Web Client 中, 浏览到要对其测试故障切换的主虚拟机 2 右键单击虚拟机并选择 Fault Tolerance > 测试故障切换 3 在任务控制台中查看有关故障切换的详细信息 此任务通过诱发主要虚拟机故障来确保辅助虚拟机能够替换主要虚拟机 同时会启动一个新的辅助虚拟机, 而主要虚拟机将置回受保护状态 测试重新启动辅助虚拟机 可以通过诱发辅助虚拟机发生故障以测试为所选主要虚拟机提供的 Fault Tolerance 保护 如果已关闭虚拟机电源, 则此选项不可用 ( 灰显 ) 步骤 1 在 vsphere Web Client 中, 浏览到您要对其进行测试的主虚拟机 VMware, Inc. 47

48 2 右键单击虚拟机并选择 Fault Tolerance > 测试重新启动辅助虚拟机 3 在任务控制台中查看有关测试的详细信息 此任务会导致为所选主要虚拟机提供 Fault Tolerance 保护的辅助虚拟机终止 将启动一个新的辅助虚拟机, 而主要虚拟机将置回受保护状态 升级用于 Fault Tolerance 的主机 请使用以下步骤升级用于 Fault Tolerance 的主机 前提条件 确认您具有群集管理员特权 确认拥有多组 ESXi 主机, 每组由四台或多台主机组成, 这些主机托管已打开电源的容错虚拟机 如果虚拟机已关闭电源, 则主虚拟机和辅助虚拟机可以重定位到具有不同内部版本的主机 注意此升级过程适用于至少包含四个节点的群集 更小的群集也可以遵循此说明, 不过不受保护的时间间隔将稍微长一些 步骤 1 使用 vmotion 从两台主机中迁出容错虚拟机 2 将这两台已撤出的主机升级到相同的 ESXi 内部版本 3 在主虚拟机上挂起 Fault Tolerance 4 使用 vmotion 将已挂起 Fault Tolerance 的主虚拟机移至其中一台已升级的主机上 5 针对已移动的主虚拟机恢复 Fault Tolerance 6 要在升级的主机上容纳尽可能多的容错虚拟机对, 请重复步骤 1 到步骤 5 7 使用 vmotion 重新分配容错虚拟机 群集中的所有 ESXi 主机即已升级 Fault Tolerance 的最佳做法 为确保获得最佳 Fault Tolerance 结果, 您应当遵循某些最佳做法 以下主机和网络配置建议有助于提高群集的稳定性和性能 主机配置 运行主虚拟机和辅助虚拟机的主机应当按照与处理器大致相同的频率运行, 否则辅助虚拟机可能会更频繁地重新启动 不依据工作负载进行调整 ( 例如, 为省电而执行功率封顶和强制低频率模式 ) 的平台电源管理功能可能会导致处理器频率大范围浮动 如果辅助虚拟机要定期重新启动, 请在运行容错虚拟机的主机上禁用所有的电源管理模式, 或者确保所有主机以相同电源管理模式运行 主机网络配置 您可以按照以下准则配置主机的网络, 以便在不同流量类型的组合 ( 如 NFS) 和不同数目的物理网卡的情况下支持 Fault Tolerance 将每个网卡组分布到两台物理交换机, 并确保这两台物理交换机之间的每个 VLAN 的 L2 域连续性 使用确定的绑定策略确保特定流量类型与特定网卡 ( 活动 / 待机 ) 或网卡集 ( 如源虚拟端口 ID) 具有关联性 48 VMware, Inc.

49 第 3 章为虚拟机提供 Fault Tolerance 使用活动 / 待机策略时, 将流量类型配对, 以便使两种流量类型共享某个 vmnic 的情况下发生故障切换时 所产生的影响最小 使用活动 / 待机策略时, 配置所有活动适配器, 以便特定流量类型 ( 如 FT 日志记录 ) 流向相同物理交换机 这样可使网络跃点的数目最少, 并降低超额预订交换机到交换机链路的可能性 注意主虚拟机与辅助虚拟机之间的 FT 日志记录通信是未加密的, 且包含客户机网络和存储 I/O 数据以及客户机操作系统的内存内容 此通信可以包含敏感数据, 如纯文本格式的密码 为避免这些数据被泄漏, 尤其是避免受到 中间人 攻击, 请确保此网络是受保护的 例如, 可以对 FT 日志记录通信使用专用网络 同类群集 vsphere Fault Tolerance 可以在主机不一致的群集内使用, 但在节点兼容的群集内才能起到最好的效果 构建群集时, 所有主机都应具有以下配置 : 对虚拟机所用数据存储的一般访问权限 相同的虚拟机网络配置 所有主机的相同 BIOS 设置 ( 电源管理和超线程 ) 运行检查合规性确定不兼容性并进行更正 性能 要为主虚拟机和辅助虚拟机之间的日志记录通信增加可用带宽, 请使用 10 千兆位网卡, 并允许使用巨帧 您可以选择多个网卡用于 FT 日志记录网络 通过选择多个网卡, 即使所有网卡都不是专门用于运行 FT, 您也可以利用多个网卡的带宽 在共享存储上存储 ISO 以连续进行访问 将启用了 Fault Tolerance 的虚拟机访问的 ISO 存储在可以供容错虚拟机的两个实例访问的共享存储上 如果使用此配置, 虚拟机中的 CD-ROM 会继续正常工作, 即使发生了故障切换也是如此 对于启用了 Fault Tolerance 的虚拟机, 您可能会使用只有主虚拟机才可访问的 ISO 映像 在这种情况下, 主虚拟机可以访问 ISO, 但是如果出现故障切换,CD-ROM 会报告错误, 就好像介质不存在一样 如果 CD-ROM 只是用于临时的非关键性操作 ( 如修补程序 ), 则此情况是可以接受的 避免网络分区 当 vsphere HA 群集出现管理网络故障而导致某些主机与 vcenter Server 隔离并且使这些主机彼此隔离时, 会出现网络分区 请参见第 18 页, 网络分区 如果出现分区, 则可能降低 Fault Tolerance 保护 在使用 Fault Tolerance 的已分区 vsphere HA 群集中, 主虚拟机 ( 或其辅助虚拟机 ) 可以在由首选主机 ( 不负责管理虚拟机 ) 管理的分区中停止 如果需要故障切换, 则仅当主虚拟机位于首选主机 ( 负责管理该主虚拟机 ) 管理的分区中时才重新启动辅助虚拟机 为确保管理网络尽可能不出现导致网络分区的故障, 请遵循第 36 页, 网络连接的最佳做法 中的建议 使用 Virtual SAN 数据存储 vsphere Fault Tolerance 可以使用 Virtual SAN 数据存储, 但您必须考虑以下限制 : 主虚拟机和辅助虚拟机均不支持混合使用 Virtual SAN 和其他类型的数据存储 FT 不支持 Virtual SAN Metro 群集 要提高使用 FT 与 Virtual SAN 时的性能和可靠性, 建议采用下列条件 Virtual SAN 和 FT 使用单独的网络 VMware, Inc. 49

50 将主虚拟机和辅助虚拟机置于单独的 Virtual SAN 故障域中 旧版 Fault Tolerance 默认情况下,vSphere Fault Tolerance 可容纳最多具有 4 个 vcpu 的 SMP 虚拟机 但是, 如果您的虚拟机只有一个 vcpu, 则可以改用旧版 FT 向后兼容 除非技术上需要旧版 FT, 否则应避免使用 要使用旧版 Fault Tolerance, 必须配置虚拟机的高级选项 完成此配置后, 旧版 FT 虚拟机在某些方面与其他 vsphere FT 虚拟机有所不同 使用旧版 FT 的虚拟机的差异 使用 vsphere FT 的虚拟机和使用旧版 FT 的虚拟机在多个方面有所不同 表 3 2 旧版 FT 和 vsphere FT 之间的差异 旧版 FT vsphere FT 扩展页表 / 快速虚拟化索引 (EPT/RVI) 不支持必需 IPv6 不支持旧版 FT 日志记录网卡 支持 vsphere FT 日志记录网卡 DRS 完全支持初始放置 负载平衡和维护模式 仅支持打开电源时辅助虚拟机的放置和维护模式 vstorage API - Data Protection 备份不支持支持 快速置零的.vmdk 厚格式磁盘文件 必需 无需, 因为 vsphere FT 支持所有磁盘文 件类型, 包括厚格式磁盘文件和精简格 式磁盘文件.vmdk 冗余 只有一个副本 主虚拟机和辅助虚拟机会始终维护独立 的副本, 这些副本可以放置在不同的数 据存储上来增加冗余 网卡带宽建议使用专用的 1-Gb 网卡建议使用专用的 10-Gb 网卡 CPU 和主机兼容性 在正在运行的虚拟机上启用 FT Storage vmotion 需要相同的 CPU 型号和系列, 主机上几乎相同的 vsphere 版本 并非始终支持 可能需要先关闭虚拟机电源 仅在关闭电源的虚拟机上支持 vcenter Server 在执行 Storage vmotion 操作之前会自动关闭 FT, 然后在 Storage vmotion 操作完成后再次启用 FT CPU 必须与 vsphere vmotion 或 EVC 兼容 主机上的 vsphere 版本必须与 vsphere vmotion 兼容 支持 不支持 用户必须在执行 Storage vmotion 操作之前关闭虚拟机的 vsphere FT, 然后再次启用 vsphere FT vlance 网络驱动程序不支持支持 旧版 FT 的其他要求 除了以上列出的旧版 FT 的差异之外, 还有以下特殊要求 ESXi 主机必须访问相同的虚拟机数据存储和网络 虚拟机必须存储在虚拟 RDM 或厚置备的虚拟机磁盘 (VMDK) 文件中 如果虚拟机存储在精简置备的 VMDK 文件中, 则在尝试使用 Fault Tolerance 时将会出现一条消息 消息指示必须转换 VMDK 文件 要执行该转换, 必须关闭虚拟机电源 主机上的处理器必须来自与 vsphere FT 兼容的处理器组 验证主机的处理器是否与其他处理器兼容 50 VMware, Inc.

51 第 3 章为虚拟机提供 Fault Tolerance 支持辅助虚拟机的主机必须具有支持 Fault Tolerance 的处理器, 并且该处理器的 CPU 系列和型号与支持 主虚拟机的主机相同 当升级包含容错虚拟机的主机时, 请确认主虚拟机和辅助虚拟机继续在具有相同 FT 版本号或主机内部版本号的主机上运行 此要求适用于 ESX/ESXi 4.1 之前的主机 注意如果在升级群集中的主机之前指定某个虚拟机使用旧版 FT, 则该虚拟机在主机升级后会继续使用旧版 FT 升级主机涉及到旧版 FT 要将主机升级到 vsphere 6.5 或更高版本, 必须关闭所有受影响虚拟机上的旧版 FT, 或者将这些虚拟机移动到其他主机上 如果不准备通过此方式升级,VMware vsphere Update Manager 会阻止升级 vcenter Server 版本 6.5 或更高版本可以管理现有旧版 FT 虚拟机, 但您无法创建旧版 FT 虚拟机, 即使在 6.5 版本之前的主机上也是如此 在这种情况下, 可以执行以下 vsphere FT 操作 : 挂起或恢复 FT 测试故障切换 重新启动辅助虚拟机 迁移辅助虚拟机 关闭 FT 注意旧版 FT 虚拟机只能存在于版本 6.5 之前的 vsphere 上运行的 ESXi 主机中 VMware, Inc. 51

52 52 VMware, Inc.

53 vcenter High Availability 4 vcenter High Availability (vcenter HA) 可防止 vcenter Server Appliance 发生主机和硬件故障 修补 vcenter Server Appliance 时, 解决方案的主动 - 被动架构还有助于显著缩短停机时间 进行某些网络配置之后, 请创建一个包含主动节点 被动节点和见证节点的三节点群集 可使用不同配置路径 所选路径取决于现有配置 1 规划 vcenter HA 部署第 54 页, 配置 vcenter HA 之前, 必须考虑几种要素 vcenter Server Appliance 部署可使用内部或外部 Platform Services Controller 包含使用不同版本 vsphere 组件的灰场部署需要考虑的要素不同于仅包含 vsphere 6.5 组件的绿场部署 灰场部署还必须要认真考虑资源和软件要求以及网络连接设置 2 配置网络第 58 页, 无论您选择哪种部署选项和清单层次结构, 都必须先设置网络, 然后才能开始配置 要设置 vcenter HA 网络的基础, 请向每个 ESXi 主机添加一个端口组, 并向稍后成为主动节点的 vcenter Server Appliance 添加一个虚拟网卡 3 使用 基本 选项配置 vcenter HA 第 59 页, 使用 基本 选项时,vCenter HA 向导在 vcenter Server Appliance 上创建和配置第二个网络适配器, 克隆主动节点, 并配置 vcenter HA 网络 4 使用 高级 选项配置 vcenter HA 第 60 页, 如果使用 高级 选项配置 vcenter HA 群集, 则可以对环境拥有更大控制力, 并且无需满足基本配置的其中一些必备条件 但是, 您负责将第二个网卡添加到 vcenter Server Appliance 上, 将主动节点克隆到被动和见证节点, 并配置克隆 5 管理 vcenter HA 配置第 62 页, 配置 vcenter HA 群集之后, 您可以执行管理任务 这些任务包括证书替换 SSH 密钥替换和 SNMP 设置 您还可以编辑群集配置以禁用或启用 vcenter HA, 进入维护模式, 以及移除群集配置 6 vcenter HA 环境故障排除第 67 页, 如果出现问题, 您可以对环境进行故障排除 需要执行的任务取决于故障症状 有关其他故障排除信息, 请参见 VMware 知识库系统 7 修补 vcenter High Availability 环境第 70 页, 您可以使用 vcenter Server Appliance shell 中提供的 <codeph>software-packages</codeph> 实用程序修补 vcenter High Availability 群集中的 vcenter Server Appliance 有关详细信息, 请参见 vsphere 升级 VMware, Inc. 53

54 规划 vcenter HA 部署 配置 vcenter HA 之前, 必须考虑几种要素 vcenter Server Appliance 部署可使用内部或外部 Platform Services Controller 包含使用不同版本 vsphere 组件的灰场部署需要考虑的要素不同于仅包含 vsphere 6.5 组件的绿场部署 灰场部署还必须要认真考虑资源和软件要求以及网络连接设置 vcenter 架构概览 一个 vcenter HA 群集由三个 vcenter Server Appliance 实例组成 第一个实例初始用作主动节点, 该节点被克隆两次, 分别克隆为被动节点和见证节点 三个节点一起可提供主动 - 被动故障切换解决方案 在不同的 ESXi 实例上部署单独的节点可防止出现硬件故障 向 DRS 群集中添加三个 ESXi 主机可为您的环境提供进一步保护 vcenter HA 配置完成后, 只有主动节点具有活动管理界面 ( 公共 IP) 三个节点通过称为 vcenter HA 网络的专用网络通信, 该网络是在配置过程中设置的 主动节点和被动节点持续不断地复制数据 图 4 1 vcenter 三节点群集 所有这三个节点是运行此功能所必需的 比较节点责任 表 4 1 vcenter HA 节点 节点 描述 主动节点 运行主动 vcenter Server Appliance 实例 为管理界面使用公共 IP 地址 使用 vcenter HA 网络将数据复制到被动节点 使用 vcenter HA 网络与见证节点通信 被动节点 最初是主动节点的克隆 通过 vcenter HA 网络不断从主动节点接收更新, 并与主动节点保持同步状态 在发生故障时自动接管主动节点的角色见证节点 主动节点的轻量克隆 提供仲裁来防止发生裂脑情况 vcenter HA 硬件和软件要求 设置 vcenter HA 之前, 请确保内存 CPU 和数据存储资源充足, 并确保所使用的 vcenter Server 和 ESXi 版本支持 vcenter HA 您的环境必须满足以下要求 54 VMware, Inc.

55 第 4 章 vcenter High Availability 表 4 2 vcenter HA 要求 组件 要求 ESXi 需要 ESXi 5.5 或更高版本 强烈建议使用三个主机 可以在不同主机上运行单独的 vcenter HA 节点以获得更加完善的保护 建议使用 VMware DRS 保护一组主机 在这种情况下, 至少需要三个 ESXi 主机 管理 vcenter Server( 如果使用 ) 您的环境可以包括管理 vcenter Server 系统, 也可以设置 vcenter Server Appliance 来管理在其上运行的 ESXi 主机 ( 自行管理的 vcenter Server) 需要 vcenter Server 5.5 或更高版本 vcenter Server Appliance 需要 vcenter Server 6.5 需要部署 小型 规模 (4 CPU 和 16GB RAM) 或稍大一些的规模, 以满足 RTO 不要在生产环境中使用 微型 规模 vcenter HA 受支持, 并已通过测试, 可用于 VMFS NFS 和 Virtual SAN 数据存储 确保主动节点具有充足的磁盘空间, 可用于收集和存储所有三个节点的支持包 请参见第 67 页, 收集 vcenter HA 节点的支持包 网络连接 主动节点 被动节点和见证节点之间的 vcenter HA 网络延迟时间必须小于 10 毫秒 vcenter HA 网络与管理网络必须位于不同的子网 vcenter HA 所需的许可 vcenter HA 需要一个 vcenter Server 许可证 vcenter HA 需要 Standard 许可证 vcenter HA 部署选项 可以设置具有嵌入式 Platform Services Controller 部署或外部 Platform Services Controller 部署的 vcenter HA 环境 如果决定使用外部 Platform Services Controller, 您必须将其置于负载平衡器后面以防 Platform Services Controller 发生故障 具有嵌入式 Platform Services Controller 部署的 vcenter HA 使用具有嵌入式 Platform Services Controller 部署的 vcenter HA 时, 环境设置如下所示 图 4 2 具有嵌入式 Platform Services Controller 部署的 vcenter HA 1 用户置备具有嵌入式 Platform Services Controller 部署的 vcenter Server Appliance VMware, Inc. 55

56 2 会将 vcenter Server Appliance 克隆到被动节点和见证节点 在基本配置中, 配置将创建并配置克隆 在高级配置中, 用户将创建并配置克隆 3 在克隆过程中, 也会克隆 Platform Services Controller 及其所有服务 4 配置完成后,vCenter HA 会执行复制, 以确保被动节点与主动节点同步 主动节点到被动节点复制包括 Platform Services Controller 数据 5 配置完成后,vCenter Server Appliance 将受 vcenter HA 保护 如果发生故障切换, Platform Services Controller 及其所有服务在被动节点上可用 具有外部 Platform Services Controller 部署的 vcenter HA 使用具有外部 Platform Services Controller 部署的 vcenter HA 时, 您必须设置外部负载平衡器来保护 Platform Services Controller 如果其中一个 Platform Services Controller 变为不可用, 负载平衡器会将 vcenter Server Appliance 定向到其他 Platform Services Controller 以下 VMware 知识库文章介绍了如何设置外部 Platform Services Controller : 配置 Netscaler 负载平衡器, 使其与 vsphere Platform Services Controller (PSC) 6.5 配合使用 : 配置 F5 BIG-IP 负载平衡器, 使其与 vsphere Platform Services Controller (PSC) 6.5 配合使用 : 配置 NSX Edge 负载平衡器, 使其与 vsphere Platform Services Controller (PSC) 6.5 配合使用 环境设置如下所示 图 4 3 具有外部 Platform Services Controller 部署的 vcenter HA 1 用户设置至少两个外部 Platform Services Controller 实例 这些实例将复制 vcenter Single Sign-On 信息及其他 Platform Services Controller 信息 ( 例如许可 ) 2 在置备 vcenter Server Appliance 期间, 用户选择一个外部 Platform Services Controller 3 用户设置 vcenter Server Appliance, 以使其指向为 Platform Services Controller 提供高可用性的负载平衡器 4 用户或基本配置将克隆第一个 vcenter Server Appliance, 以创建被动节点和见证节点 5 在克隆过程中, 也会克隆有关外部 Platform Services Controller 和负载平衡器的信息 6 配置完成后,vCenter Server Appliance 将受 vcenter HA 保护 7 如果 Platform Services Controller 实例变为不可用, 负载平衡器会将身份验证请求或其他服务重定向到另一个 Platform Services Controller 实例 56 VMware, Inc.

57 第 4 章 vcenter High Availability 配置工作流概览 您可以选择 基本配置 或 高级配置 选项 基本配置 选项会在 vcenter HA 配置过程中自动创建被动节点和见证节点 使用 高级配置 选项, 您需手动克隆主动节点, 才能创建被动节点和见证节点 所选的配置选项取决于环境 基本配置要求更为严格, 但可以自动完成更多配置 如果您的环境满足硬件和软件要求, 则可使用高级配置, 它更为灵活 但是, 高级配置要求您创建和配置主动节点的克隆 基本配置工作流 基本配置将自动克隆主动节点 您必须满足以下任一要求才能执行基本配置 将成为主动节点的 vcenter Server Appliance 管理其自己的 ESXi 主机及虚拟机 此配置有时称为自我管 理 vcenter Server vcenter Server Appliance 由其他 vcenter Server( 管理 vcenter Server) 管理, 并且两个 vcenter Server 实例位于同一 vcenter Single Sign-On 域中 这意味着两者都使用外部 Platform Services Controller 且都运行 vsphere 6.5 如果您满足上述要求, 则基本工作流如下所示 1 用户部署第一个 vcenter Server Appliance, 它将成为主动节点 2 用户在每个 ESXi 主机上为 vcenter HA 通信添加另一个网络 ( 端口组 ) 3 用户开始进行 vcenter HA 配置, 选择 基本配置 并提供每个克隆的 IP 地址 目标 ESXi 主机或群集和 数据存储 4 系统将克隆主动节点, 并使用完全相同的设置 ( 包括相同的主机名 ) 创建被动节点 5 系统再次克隆主动节点, 并创建更轻型的见证节点 6 系统设置 vcenter HA 网络, 在此网络中, 三个节点将通过交换检测信号和其他信息等方式进行通信 有关分步说明, 请参见第 59 页, 使用 基本 选项配置 vcenter HA 高级配置工作流 如果无法选择基本选项, 或者需要更好地控制部署, 则可执行高级配置 使用此选项后, 您需自己在 vcenter HA 设置过程中克隆主动节点 如果选择此选项并稍后移除 vcenter HA 配置, 则需删除自己创建的节点 对于高级选项, 工作流如下所示 1 用户部署第一个 vcenter Server Appliance, 它将成为主动节点 2 用户在每个 ESXi 主机上为 vcenter HA 通信添加另一个网络 ( 端口组 ) 3 用户将另一个网络适配器 (NIC) 添加到主动节点 4 用户使用 vsphere Web Client 登录到 vcenter Server Appliance( 主动节点 ) 5 用户开始进行 vcenter HA 配置, 选择 高级配置, 并提供被动节点和见证节点的 IP 地址和子网信息 ( 可选 ) 用户可替代故障切换管理的 IP 地址 6 用户登录到管理 vcenter Server 并创建两个 vcenter Server Appliance 克隆 ( 主动节点 ) 7 用户返回 vcenter Server Appliance 上的配置向导, 并完成配置过程 8 系统设置 vcenter HA 网络, 在此网络中, 三个节点将交换检测信号和复制信息 9 vcenter Server Appliance 受 vcenter HA 保护 有关详细信息, 请参见第 60 页, 使用 高级 选项配置 vcenter HA VMware, Inc. 57

58 配置网络 无论您选择哪种部署选项和清单层次结构, 都必须先设置网络, 然后才能开始配置 要设置 vcenter HA 网络的基础, 请向每个 ESXi 主机添加一个端口组, 并向稍后成为主动节点的 vcenter Server Appliance 添加一个虚拟网卡 完成配置后,vCenter HA 群集拥有两个网络, 第一个虚拟网卡上的管理网络和第二个虚拟网卡上的 vcenter HA 网络 管理网络 vcenter HA 网络 管理网络可处理客户端请求 ( 公共 IP) 管理网络 IP 地址必须为静态地址 vcenter HA 网络可连接到主动节点 被动节点和见证节点, 并复制设备状态 它还可监控检测信号 主动节点 被动节点和见证节点的 vcenter HA 网络 IP 地址必须为静态地址 vcenter HA 网络与管理网络必须位于不同的子网 三个节点可以位于同一子网, 也可以位于不同子网 主动节点 被动节点和见证节点之间的网络延迟必须少于 10 毫秒 您不得为群集网络添加默认的网关条目 前提条件 稍后成为主动节点的 vcenter Server Appliance 已部署 您可访问并有特权修改该 vcenter Server Appliance 以及它在其上运行的 ESXi 主机 在网络设置期间, 管理网络需要静态 IP 地址 管理和群集网络地址必须为 IPv4 或 IPv6 不能混合使用 步骤 IPv4 和 IPv6 1 登录到管理 vcenter Server 并找到运行主动节点的 ESXi 主机 2 将一个端口组添加到 ESXi 主机 此端口组可以位于现有虚拟交换机, 您也可以为加强网络隔离而创建新的虚拟交换机 它必须位于与 Eth0 上管理网络不同的子网 3 如果您的环境包括建议的三个 ESXi 主机, 请将该端口组添加到每个主机上 下一步接下来的操作取决于您选择的配置类型 对于基本配置, 向导将在每个克隆上创建 vcenter HA 虚拟网卡并设置 vcenter HA 网络 配置完成后, vcenter HA 网路即可用于复制和检测信号通信 对于高级配置, 必须先在主动节点上创建并配置第二个网卡 请参见第 60 页, 在 vcenter Server Appliance 上创建和配置辅助网卡 执行配置时, 向导将提示您输入主动和见证节点的 IP 地址 向导将提示您克隆主动节点 在克隆过程中, 请执行其他网络配置 请参见第 60 页, 使用 高级 选项配置 vcenter HA 58 VMware, Inc.

59 第 4 章 vcenter High Availability 使用 基本 选项配置 vcenter HA 使用 基本 选项时,vCenter HA 向导在 vcenter Server Appliance 上创建和配置第二个网络适配器, 克隆主动节点, 并配置 vcenter HA 网络 前提条件 部署您要用作初始主动节点的 vcenter Server Appliance vcenter Server Appliance 必须具有映射到 FQDN 的静态 IP 地址 必须在 vcenter Server Appliance 上启用 SSH 确认您的环境满足以下要求之一 将成为主动节点的 vcenter Server Appliance 管理其自己的 ESXi 主机及虚拟机 此配置有时称为自 我管理 vcenter Server vcenter Server Appliance 由其他 vcenter Server( 管理 vcenter Server) 管理, 并且两个设备位于同一 vcenter Single Sign-On 域中 这意味着两者都使用外部 Platform Services Controller 且都运行 vsphere 6.5 如果您的环境不满足上述要求之一, 请执行高级配置 请参见第 60 页, 使用 高级 选项配置 vcenter HA 为 vcenter HA 网络设置基础架构 请参见第 58 页, 配置网络 确定要用于两个 vcenter Server Appliance 节点的静态 IP 地址, 这两个节点将分别成为被动节点和见证节 步骤 点 1 通过 vsphere Web Client 登录到主动节点 2 右键单击清单中的 vcenter Server 对象, 然后选择 vcenter HA 设置 3 单击配置 4 选择基本配置选项, 然后单击下一步 此选项仅在您的环境满足基本选项的必备条件时才可用 5 指定主动节点的 IP 地址和子网掩码和以及用于连接到 vcenter HA 网络的端口组, 然后单击下一步 6 提供被动节点和见证节点的 vcenter HA 网络 IP 地址和子网掩码, 然后单击下一步 配置向导需要使用这些地址来创建 vcenter HA 网络, 并将三个节点连接起来 7 ( 可选 ) 如果要替代被动节点的故障切换管理 IP 地址, 请单击高级 8 检查被动节点和见证节点的信息, 单击编辑进行更改, 然后单击下一步 如果您使用的不是 DRS 群集, 请在可能的情况下为被动节点和见证节点选择不同的主机和数据存储 9 单击完成 将创建被动节点和见证节点 完成 vcenter HA 配置后,vCenter Server Appliance 将具有高可用性保护 下一步 请参见第 62 页, 管理 vcenter HA 配置, 查看群集管理任务列表 VMware, Inc. 59

60 使用 高级 选项配置 vcenter HA 如果使用 高级 选项配置 vcenter HA 群集, 则可以对环境拥有更大控制力, 并且无需满足基本配置的其中一些必备条件 但是, 您负责将第二个网卡添加到 vcenter Server Appliance 上, 将主动节点克隆到被动和见证节点, 并配置克隆 步骤 1 在 vcenter Server Appliance 上创建和配置辅助网卡第 60 页, 在开始高级配置之前, 您必须在将成为主动节点的 vcenter Server Appliance 上创建和配置辅助网卡 该网卡将用于处理 vcenter HA 流量 在设置网络之后但启动配置进程之前执行此任务 2 开始高级配置过程第 61 页, 配置了网络并将第二个网卡添加到 vcenter Server Appliance 之后, 您可以开始 vcenter HA 配置过程 3 创建和配置主动节点的克隆第 61 页, 作为高级配置的一部分, 您必须克隆主动节点以创建被动和见证节点 执行克隆任务时, 请勿退出 配置 vcenter HA 向导 4 完成 vcenter HA 高级配置第 62 页, 创建被动节点和见证节点之后, 您将返回主动节点的配置向导以完成配置 在 vcenter Server Appliance 上创建和配置辅助网卡 在开始高级配置之前, 您必须在将成为主动节点的 vcenter Server Appliance 上创建和配置辅助网卡 该网卡将用于处理 vcenter HA 流量 在设置网络之后但启动配置进程之前执行此任务 前提条件 为 vcenter HA 网络设置基础架构 请参见第 58 页, 配置网络 部署要用作初始主动节点的 vcenter Server Appliance vcenter Server Appliance 必须具有映射到 FQDN 的静态 IP 地址 必须在 vcenter Server Appliance 上启用 SSH 步骤 1 使用 vsphere Web Client 登录到管理 vcenter Server 2 选择 vcenter Server Appliance 虚拟机 ( 主动节点 ), 添加辅助网络适配器, 然后将其附加到创建的 vcenter HA 端口组 3 直接登录到将成为初始主动节点的 vcenter Server Appliance 界面 vcenter Server Appliance 操作 转至 vsphere Web Client a 转至 b 选择管理 > 系统配置 4 为辅助网络适配器配置 IP 设置 60 VMware, Inc.

61 第 4 章 vcenter High Availability 开始高级配置过程 配置了网络并将第二个网卡添加到 vcenter Server Appliance 之后, 您可以开始 vcenter HA 配置过程 前提条件 部署要用作初始主动节点的 vcenter Server Appliance vcenter Server Appliance 必须具有映射到 FQDN 的静态 IP 地址 必须在 vcenter Server Appliance 上启用 SSH 配置网络 请参见第 58 页, 配置网络 确定要用于两个 vcenter Server Appliance 节点的静态 IP 地址, 这两个节点将分别成为被动节点和见证节点 步骤 1 通过 vsphere Web Client 登录到主动节点 2 右键单击清单中的 vcenter Server 对象, 然后选择 vcenter HA 设置 3 单击配置 4 选择高级配置选项, 然后单击下一步 5 提供被动节点和见证节点的 IP 地址和子网掩码, 然后单击下一步 即使这两个节点尚未存在, 您也必须立即指定这些 IP 地址 单击下一步之后, 无法再更改这些 IP 地址 6 ( 可选 ) 如果要替代被动节点的故障切换管理 IP 地址, 请单击高级 7 使向导窗口保持打开状态, 并执行克隆任务 下一步第 61 页, 创建和配置主动节点的克隆. 创建和配置主动节点的克隆 作为高级配置的一部分, 您必须克隆主动节点以创建被动和见证节点 执行克隆任务时, 请勿退出 配置 vcenter HA 向导 步骤 1 登录到管理 vcenter Server, 右键单击 vcenter Server Appliance 虚拟机 ( 主动节点 ), 然后选择克隆 > 克隆到虚拟机 2 对于要成为被动节点的第一个克隆, 输入以下值 选项 值 新虚拟机名称被动节点名称 例如, 使用 vcsa-peer 选择计算资源 选择存储 克隆选项 如果可以, 请使用与主动节点不同的目标主机和数据存储 选中自定义操作系统和创建后打开虚拟机电源复选框, 然后在下一页面上单击 新建自定义规范 图标 在出现的 新建自定义规范 向导中指定以下内容 a 使用与主动节点相同的主机名称 b 确保时区与主动节点的时区一致 c 在 配置网络 页面上, 指定网卡 1 和网卡 2 的 IP 设置, 这些设置将映射到管理界面和 vcenter HA 界面 将网卡 2 的默认网关保留为空白 VMware, Inc. 61

62 3 创建第一个克隆后, 请再次克隆主动节点以创建见证节点 选项 值 新虚拟机名称见证节点名称 例如, 使用 vcsa-witness 选择计算资源 选择存储 克隆选项 如果可以, 请使用与主动节点和被动节点不同的目标主机和数据存储 选中 自定义操作系统 和 创建后打开虚拟机电源 复选框, 然后在下一页面上单击 新建自定义规范 图标 在出现的 新建自定义规范 向导中指定以下内容 a 使用您所选的主机名称 b 确保时区与主动节点的时区一致 c 在 配置网络 页面上, 指定网卡 2 的 IP 设置, 这些设置将映射到 vcenter HA 界面 将网卡 2 的默认网关保留为空白 4 请确保克隆过程完成且虚拟机的电源处于打开状态 下一步 返回到主动节点上的 vcenter HA 向导以完成此设置 请参见第 62 页, 完成 vcenter HA 高级配置 完成 vcenter HA 高级配置 创建被动节点和见证节点之后, 您将返回主动节点的配置向导以完成配置 前提条件完成将主动节点克隆到被动节点和见证节点的过程 步骤 1 返回配置向导并单击完成 2 等待 vcenter HA 设置完成 管理 vcenter HA 配置 配置 vcenter HA 群集之后, 您可以执行管理任务 这些任务包括证书替换 SSH 密钥替换和 SNMP 设置 您还可以编辑群集配置以禁用或启用 vcenter HA, 进入维护模式, 以及移除群集配置 设置 SNMP 陷阱第 63 页, 您可以设置简单网络管理协议 (Simple Network Management Protocol, SNMP) 陷阱以接收 vcenter HA 群集的 SNMP 通知 设置环境以使用自定义证书第 63 页, 每个节点上的计算机 SSL 证书用于群集管理通信和复制流量加密 若要使用自定义证书, 必须移除 vcenter HA 配置 删除被动节点和见证节点 使用自定义证书置备主动节点并重新配置群集 管理 vcenter HA SSH 密钥第 64 页, vcenter HA 在主动节点 被动节点和见证节点之间使用 SSH 密钥进行无密码身份验证 身份验证用于检测信号交换, 以及文件和数据复制 要替换 vcenter HA 群集节点中的 SSH 密钥, 请禁用群集, 在主动节点上生成新的 SSH 密钥, 将密钥传输到被动节点, 然后启用群集 启动 vcenter HA 故障切换第 64 页, 您可以手动启动故障切换, 并使被动节点成为主动节点 编辑 vcenter HA 群集配置第 65 页, 编辑 vcenter HA 群集配置时, 您可以禁用或启用群集 将群集置于维护模式, 或移除群集 62 VMware, Inc.

63 第 4 章 vcenter High Availability 执行备份和恢复操作第 65 页, 为了提高安全性, 您可以备份 vcenter HA 群集中的主动节点 然后您可以在出现灾难性故障时还原该节点 移除 vcenter HA 配置第 66 页, 您可以从 vsphere Web Client 中移除 vcenter HA 配置 如果使用的是 高级 配置, 或者无法发现任何节点, 您可能需要执行额外的清理步骤 重新引导所有 vcenter HA 节点第 66 页, 如果需要先关闭再重新引导群集中的所有节点, 您必须按特定的关闭顺序以防止被动节点承担主动节点的角色 更改设备环境第 67 页, 部署 vcenter Server Appliance 时, 您需要选择环境 对于 vcenter HA, 生产环境支持 小型 中型 大型 和 超大型 这几种配置 如果您需要更多空间并且想要更改环境, 您必须先删除被动节点虚拟机, 然后才能更改配置 收集 vcenter HA 节点的支持包第 67 页, 从 vcenter HA 群集的所有节点收集支持包有助于进行故障排除 设置 SNMP 陷阱 您可以设置简单网络管理协议 (Simple Network Management Protocol, SNMP) 陷阱以接收 vcenter HA 群集的 SNMP 通知 陷阱默认为 SNMP 版本 1 为主动节点和被动节点设置 SNMP 陷阱 通过在 snmpd 配置中添加一个目标项告知代理发送相关陷阱的位置 步骤 1 使用虚拟机控制台或 SSH 登录到主动节点 2 运行 vicfg-snmp 命令, 例如 : vicfg-snmp -t @1166/public 在此示例中, 为客户端侦听地址,1166 为客户端侦听端口,public 为团体字符串 3 运行以下命令, 以启用 SNMP 代理 (snmpd) 下一步 vicfg-snmp -e 以下命令可能也会非常有用 要查看命令的完整帮助, 请运行 vicfg-snmp -h 要禁用 SNMP 代理, 请运行 vicfg-snmp -D 要显示 SNMP 代理的配置, 请运行 vicfg-snmp -s 要将配置重置为默认值, 请运行 vicfg-snmp -r 设置环境以使用自定义证书 每个节点上的计算机 SSL 证书用于群集管理通信和复制流量加密 若要使用自定义证书, 必须移除 vcenter HA 配置 删除被动节点和见证节点 使用自定义证书置备主动节点并重新配置群集 如果可以, 请先替换将成为主动节点的 vcenter Server Appliance 中的证书, 然后再克隆该节点 VMware, Inc. 63

64 步骤 1 编辑群集配置并选择移除 2 删除被动节点和见证节点 3 在当前作为独立 vcenter Server Appliance 的主动节点上, 将计算机 SSL 证书替换为自定义证书 请参见 Platform Services Controller 管理文档 4 重新配置群集 管理 vcenter HA SSH 密钥 vcenter HA 在主动节点 被动节点和见证节点之间使用 SSH 密钥进行无密码身份验证 身份验证用于检测信号交换, 以及文件和数据复制 要替换 vcenter HA 群集节点中的 SSH 密钥, 请禁用群集, 在主动节点上生成新的 SSH 密钥, 将密钥传输到被动节点, 然后启用群集 步骤 1 编辑群集, 然后将模式更改为禁用 2 使用虚拟机控制台或 SSH 登录到主动节点 3 启用 Bash shell bash 4 运行以下命令在主动节点上生成 SSH 密钥 /usr/lib/vmware-vcha/scripts/resetsshkeys.py 5 使用 SCP 将密钥复制到被动节点和见证节点 scp /vcha/.ssh/* 6 编辑群集配置, 将 vcenter HA 群集设置为启用 启动 vcenter HA 故障切换 您可以手动启动故障切换, 并使被动节点成为主动节点 vcenter HA 群集支持两种故障切换 自动故障切换 手动故障切换 被动节点在主动节点发生故障时尝试接管主动节点的角色 用户可以使用 启动故障切换 操作强制被动节点接管主动节点的角色 启动手动故障切换以进行故障排除和测试 步骤 1 使用 vsphere Web Client 登录到主动节点 vcenter Server Appliance, 然后单击配置 2 在设置下, 选择 vcenter HA 并单击启动故障切换 3 单击是启动故障切换 此时将打开一个对话框, 其中提供了强制进行故障切换而不执行同步的选项 在大多数情况下, 最好执行同步 4 进行故障切换之后, 您可以在 vsphere Web Client 中验证被动节点是否具有主动节点的角色 64 VMware, Inc.

65 第 4 章 vcenter High Availability 编辑 vcenter HA 群集配置 编辑 vcenter HA 群集配置时, 您可以禁用或启用群集 将群集置于维护模式, 或移除群集 vcenter Server Appliance 的运行模式可控制 vcenter HA 群集中的故障切换能力和状态复制 vcenter HA 可以在下列模式之一中运行 表 4 3 vcenter HA 群集运行模式 模式自动故障切换手动故障切换复制 已启用 是 是 是 此默认运行模式通过执行自动故障切换, 可防止 vcenter Server Appliance 出现硬件和软件故障 维护 否 是 是 用于一些维护任务 对于其他任务, 您必须禁用 vcenter HA 已禁用 否 否 否 如果被动节点或见证节点丢失或正从故障中恢复, 可以禁用 vcenter HA 配置 主动节点作为独立 vcenter Server Appliance 继续运行 注意如果群集在 维护 或 已禁用 模式下运行, 即使被动节点和见证节点已丢失或不可访问, 主动节点仍可继续处理客户端请求 前提条件 验证 vcenter HA 群集是否已部署并包含主动 被动和见证节点 步骤 1 使用 vsphere Web Client 登录到主动节点 vcenter Server Appliance, 然后单击配置 2 在设置下, 选择 vcenter HA, 然后单击编辑 3 选择其中一个选项 选项 启用 vcenter HA 维护模式 结果 启用主动节点和被动节点之间的复制 如果群集处于正常状态, 将从被动节点进行自动故障切换以保护主动节点 在维护模式下, 主动节点与被动节点之间仍会进行复制 但是, 自动故障切换将被禁用 禁用 vcenter HA 禁用复制和故障切换 保留群集的配置 您稍后可以再次启用 vcenter HA 移除 vcenter HA 群集 移除群集 不再提供复制和故障切换 主动节点作为独立 vcenter Server Appliance 继续运行 有关详细信息, 请参见第 66 页, 移除 vcenter HA 配置 4 单击确定 执行备份和恢复操作 为了提高安全性, 您可以备份 vcenter HA 群集中的主动节点 然后您可以在出现灾难性故障时还原该节点 注意在还原主动节点之前先移除群集配置 如果在您还原主动节点时被动节点仍在运行或者其他群集配置仍存在, 则结果不可预知 VMware, Inc. 65

66 前提条件 确认 vcenter HA 与备份和还原解决方案的互操作性 其中一种解决方案是基于 vcenter Server Appliance 文件的还原 步骤 1 备份主动节点 请勿备份被动节点和见证节点 2 在还原群集之前, 请关闭所有 vcenter HA 节点的电源并将它们删除 3 还原主动节点 主动节点将还原为独立的 vcenter Server Appliance 4 重新配置 vcenter HA 移除 vcenter HA 配置 您可以从 vsphere Web Client 中移除 vcenter HA 配置 如果使用的是 高级 配置, 或者无法发现任何节点, 您可能需要执行额外的清理步骤 步骤 1 登录主动节点 vcenter Server Appliance 并单击配置 2 在设置下, 选择 vcenter HA, 然后单击编辑 3 选择移除 vcenter HA 群集 从主动节点 被动节点和见证节点中移除 vcenter HA 群集的配置 主动节点继续作为独立的 vcenter Server Appliance 运行 无法在新的 vcenter HA 配置中重用被动节点和见证节点 如果使用 高级 选项执行了配置, 或者无法发现被动节点和见证节点, 您必须明确删除这些节点 即使第二个虚拟 NIC 是由配置过程添加的, 移除过程也不会移除该虚拟 NIC 重新引导所有 vcenter HA 节点 如果需要先关闭再重新引导群集中的所有节点, 您必须按特定的关闭顺序以防止被动节点承担主动节点的角色 步骤 1 按以下顺序关闭节点 被动节点 主动节点 见证节点 2 重新启动每个节点 可以按任何顺序重新启动节点 3 验证是否所有节点均成功加入群集, 并验证先前的主动节点是否恢复该角色 66 VMware, Inc.

67 第 4 章 vcenter High Availability 更改设备环境 部署 vcenter Server Appliance 时, 您需要选择环境 对于 vcenter HA, 生产环境支持 小型 中型 大型 和 超大型 这几种配置 如果您需要更多空间并且想要更改环境, 您必须先删除被动节点虚拟机, 然后才能更改配置 步骤 1 使用 vsphere Web Client 登录主动节点, 编辑群集配置, 并选择禁用 2 删除被动节点虚拟机 3 更改主动节点的 vcenter Server Appliance 配置, 例如从小型环境更改为中型环境 4 重新配置 vcenter HA 收集 vcenter HA 节点的支持包 从 vcenter HA 群集的所有节点收集支持包有助于进行故障排除 从 vcenter HA 群集中的主动节点收集支持包时, 系统将执行如下操作 从主动节点本身收集支持包信息 从被动和见证节点收集支持包, 并将其放置在主动节点支持包上的 commands 目录中 注意从被动和见证节点收集支持包是最佳操作方式, 在节点可访问时才可行 vcenter HA 环境故障排除 如果出现问题, 您可以对环境进行故障排除 需要执行的任务取决于故障症状 有关其他故障排除信息, 请参见 VMware 知识库系统 vcenter HA 克隆操作在部署过程中失败第 67 页, 如果 vcenter HA 配置过程未成功创建克隆, 您必须解决该克隆错误 vcenter HA 部署失败并显示错误第 68 页, 部署失败的原因可能是配置问题, 尤其是网络设置问题 已降级 vcenter HA 群集的故障排除第 68 页, 要让 vcenter HA 群集正常运行, 每个主动 被动和见证节点都必须完全正常运行, 并且可通过 vcenter HA 群集网络进行访问 如果任何节点出现故障, 群集将被视为处于已降级状态 从隔离的 vcenter HA 节点中恢复第 69 页, 如果 vcenter HA 群集中的所有节点均无法相互通信, 主动节点将停止处理客户端请求 解决故障切换故障第 69 页, 如果被动节点在故障切换期间未成为主动节点, 您可以强制被动节点在故障切换期间成为主动节点 vcenter HA 克隆操作在部署过程中失败 如果 vcenter HA 配置过程未成功创建克隆, 您必须解决该克隆错误 问题 克隆操作失败 VMware, Inc. 67

68 原因查找克隆异常 它可能指示以下问题之一 您有一个已启用 DRS 的群集, 但是没有三个主机 主机或数据库连接丢失 磁盘空间不足 其他克隆虚拟机错误解决方案 1 解决造成这个问题的错误 2 移除群集并重新启动配置 vcenter HA 部署失败并显示错误 部署失败的原因可能是配置问题, 尤其是网络设置问题 问题 开始 vcenter HA 群集配置, 但配置失败并显示错误 错误可能会显示问题的原因, 例如, 您可能会看到 SSH 连接失败消息 解决方案 如果部署失败, 请按照以下步骤解决网络问题 1 确认可从主动节点访问被动节点和见证节点 2 确认节点之间的路由设置正确 3 检查网络延迟 已降级 vcenter HA 群集的故障排除 要让 vcenter HA 群集正常运行, 每个主动 被动和见证节点都必须完全正常运行, 并且可通过 vcenter HA 群集网络进行访问 如果任何节点出现故障, 群集将被视为处于已降级状态 问题 群集处于已降级状态时, 不会进行故障切换 有关群集处于已降级状态时故障情形的信息, 请参见第 69 页, 解决故障切换故障 原因 群集处于已降级状态有很多原因 某个节点出现故障 如果主动节点出现故障, 则会自动从主动节点故障切换到被动节点 故障切换之后, 被动节点将成为主动节点 此时, 群集处于已降级状态, 因为原来的主动节点不可用 出现故障的节点在修复或恢复联机后成为新的被动节点, 而群集在主动节点和被动节点同步后恢复到正常状态 如果被动节点发生故障, 主动节点继续正常运行, 但是无法进行故障切换且群集处于已降级状态 如果被动节点已修复或恢复联机, 它会自动重新加入群集, 主动节点和被动节点同步后, 群集状态恢复正常 68 VMware, Inc.

69 第 4 章 vcenter High Availability 如果见证节点发生故障, 主动节点继续正常运行, 主动节点和被动节点之间的复制也会继续, 但无法进行故障切换 如果见证节点已修复或恢复联机, 它会自动重新加入群集且群集状态恢复正常 数据库复制失败 配置文件复制问题 当主动节点与被动节点之间的复制失败时, 群集将被视为已降级 主动节点继续与被动节点同步 如果同步成功, 群集恢复到正常状态 此状态可能是由于网络带宽问题或其他资源短缺所致 如果主动节点和被动节点之间未正确复制配置文件, 群集则处于已降级状态 主动节点继续尝试与被动节点同步 此状态可能是由于网络带宽问题或其他资源短缺所致 解决方案如何进行恢复取决于已降级群集状态的起因 如果群集处于已降级状态, 事件 警报和 SNMP 陷阱将显示错误 如果某个节点关闭, 请检查是否发生硬件故障或网络隔离 检查发生故障的节点是否已打开电源 如果复制失败, 请检查 vcenter HA 网络的带宽是否充足, 并确保网络延迟不超过 10 ms 从隔离的 vcenter HA 节点中恢复 如果 vcenter HA 群集中的所有节点均无法相互通信, 主动节点将停止处理客户端请求 问题 节点隔离为网络连接问题 解决方案 1 尝试解决连接问题 如果连接可以还原, 隔离的节点会自动重新加入群集, 并且主动节点会开始处理客户端请求 2 如果无法解决连接问题, 您必须直接登录到主动节点的控制台 a b 关闭被动节点和见证节点虚拟机的电源并删除这些虚拟机 使用 SSH 或通过虚拟机控制台登录主动节点 c 要启用 Bash shell, 请在 appliancesh 提示符下输入 shell d 运行以下命令移除 vcenter HA 配置 destroy-vcha -f e 重新引导主动节点 主动节点现在为独立的 vcenter Server Appliance f 再次执行 vcenter HA 群集配置 解决故障切换故障 如果被动节点在故障切换期间未成为主动节点, 您可以强制被动节点在故障切换期间成为主动节点 问题在尝试承担主动节点的角色时, 被动节点发生故障 VMware, Inc. 69

70 原因 vcenter HA 故障切换可能会因为以下原因而无法成功 当被动节点尝试承担主动节点的角色时, 见证节点不可用 节点之间存在设备状态同步问题 解决方案可以按如下所示从此问题恢复 1 如果主动节点从故障中恢复, 它会再次成为主动节点 2 如果见证节点从故障中恢复, 请遵循以下步骤 a 通过虚拟机控制台登录到被动节点 b 要启用 Bash shell, 请在 appliancesh 提示符下输入 shell c 运行下列命令 vcha-reset-primary d 重新引导被动节点 3 如果主动节点和见证节点均无法恢复, 您可以强制被动节点成为独立 vcenter Server Appliance a b 删除主动节点虚拟机和见证节点虚拟机 通过虚拟机控制台登录到被动节点 c 要启用 Bash shell, 请在 appliancesh 提示符下输入 shell d 运行下列命令 destroy-vcha e 重新引导被动节点 修补 vcenter High Availability 环境 您可以使用 vcenter Server Appliance shell 中提供的 <codeph>software-packages</codeph> 实用程序修补 vcenter High Availability 群集中的 vcenter Server Appliance 有关详细信息, 请参见 vsphere 升级 70 VMware, Inc.

71 使用 Microsoft 群集服务实现基于 5 Windows 的 vcenter Server 高可用性 部署 vcenter Server 时, 必须构建一个可以处理各种规模工作负载的高可用性架构 对于需要持续连接到 vcenter Server 的解决方案, 可用性至关重要 为避免停机时间过长, 可以通过使用 Microsoft 群集服务 (MSCS) 群集持续连接到 vcenter Server 本章讨论了以下主题 : 第 71 页, 使用 MSCS 的优点和限制 第 71 页, 在 MSCS 环境中升级 vcenter Server 第 72 页, 配置 MSCS 以实现高可用性 使用 MSCS 的优点和限制 vcenter Server 5.5 Update 3.x 支持使用 Microsoft 群集服务 (MSCS) 提供 vcenter Server 可用性方案 多个 vcenter Server 实例位于一个 MSCS 群集中, 但同一时间只有一个实例处于活动状态 可以使用此解决方案执行如下维护 : 修补或升级操作系统以及排除 vcenter Server 修补或升级 您无需关闭 vcenter Server 数据库即可在群集中的一个节点上执行维护 此方法的另一个潜在优势是 MSCS 使用 不共享任何内容 群集架构类型 该群集不涉及从多个节点并发访问磁盘 换言之, 群集不需要分布式锁定管理器 MSCS 群集通常仅包含两个节点, 并且它们在节点之间使用共享 SCSI 连接 在任意给定时间都只有一个服务器需要磁盘, 因此不会发生任何并发数据访问 此共享会最大程度地降低节点失败造成的影响 与 vsphere HA 群集选项不同,MSCS 选项仅对 Windows 虚拟机有效 MSCS 选项不支持 vcenter Server Appliance 注意仅当 vcenter Server 作为虚拟机运行而不在物理主机上运行时, 此配置才受支持 在 MSCS 环境中升级 vcenter Server 如果运行的是 vcenter Server 6.0, 则必须升级到 vcenter Server 6.5 以设置 MSCS 高可用性环境 vcenter Server 6.0.x 具有 18 项服务, 假设 PSC 服务器正在其他主机上运行 vcenter Server 6.5 具有 3 项服务, 且名称已更改 升级到 vcenter Server 6.5 后, 创建用于为 vcenter Server 6.0 设置高可用性的 MSCS 群集配置将变为无效 在 MSCS 环境中设置 vcenter Server 高可用性的过程如下所示 1 为 vcenter Server 移除 MSCS 配置 2 将 vcenter Server 从版本 6.0 升级到版本 6.5 VMware, Inc. 71

72 3 配置 MSCS 以使 vcenter Server 具有高可用性 前提条件 确认您未删除主节点虚拟机 确认主节点为当前活动节点 确认 vcenter Server 6.0 的所有服务正在主节点上运行 确认 Platform Services Controller 节点升级已完成, 且正在运行 vcenter Server 6.5 收集清单数据库备份 步骤 1 关闭辅助节点的电源并等待所有 vcenter Server 服务在主节点上启动 2 移除角色名称 3 销毁 MSCS 群集 在更改启动类型之前, 使 RDM 磁盘恢复联机 4 打开服务管理视图, 并将 vcenter Server 服务的启动类型从手动更改为自动 5 升级到 vcenter Server 6.5 前, 将 IP 和主机名更改为角色所用的 IP 和主机名 必须重新启动主机并确保 vcenter Server 可访问 6 挂载 vcenter Server 6.5 ISO 并开始安装 7 安装完成后, 打开服务管理视图, 并确认新服务已安装且正在运行 8 再次设置 MSCS 群集配置, 并将所有 vcenter Server 服务的启动类型设置为手动 9 关闭主节点并分离 RDM 磁盘, 但不要将其从数据存储中删除 10 重新配置完成后, 选择虚拟机 > 克隆 > 克隆为模板, 克隆辅助节点, 然后更改其 IP 和主机名 11 使辅助节点保持关机并将两个 RDM 磁盘添加到主节点 然后打开主节点的电源, 并更改其 IP 和主机名 12 将两个 RDM 磁盘添加到辅助节点 然后打开辅助节点的电源 13 打开故障切换群集管理器, 并配置 MSCS 群集 下一步 必须使用群集角色 IP 和主机名 配置 MSCS 群集时, 必须将 vcenter Server 服务 ( 例如 VMware AFD 服务和 VMware vcenter Configuration 服务 ) 作为资源添加到角色 配置 MSCS 以实现高可用性 使用以下步骤将 Microsoft 群集服务 (MSCS) 设置为 vcenter Server 的可用性解决方案 前提条件 使用下列客户机操作系统之一创建虚拟机 (VM): Windows 2008 R2 Datacenter Windows 2012 R2 Datacenter 向此虚拟机添加两个裸设备映射 (RDM) 磁盘 这些磁盘必须在添加时挂载, 同时 RDM 磁盘还必须独立且持久 72 VMware, Inc.

73 第 5 章使用 Microsoft 群集服务实现基于 Windows 的 vcenter Server 高可用性 创建单独的 SCSI 控制器并将其 总线共享 选项设置为 物理 注意由于此配置使用 SCSI 控制器且 总线共享 选项设置为 物理, 因此不支持备份和还原 必须使用基于主机的代理进行备份或还原 将虚拟设备节点设置为新创建的 SCSI 控制器 1 打开 MSCS 驱动器并创建两个文件夹 : 一个用于 VC 数据, 另一个用于 VC 安装 先安装 Platform Services Controller 实例, 然后再安装 vcenter Server 并在安装期间提供其 FQDN 图 5 1 实现 vcenter Server 高可用性的 MSCS 群集 注意 MSCS 作为 vcenter Server 的可用性解决方案, 仅提供给 vcenter Server 的管理节点 (M 节点 ) 对于基础架构节点, 客户必须部署多个 N 节点才能实现高可用性 不能将相同虚拟机上的 M 节点和 N 节点用于 MSCS 保护 步骤 1 打开虚拟机电源 2 格式化两个 RDM 磁盘, 为其分配驱动器盘符, 并将其转换为 MBR 3 使用 Windows > 服务器管理器 > 功能, 安装.net 4 在一个 RDM 磁盘上安装 vcenter Server 并将启动选项设置为手动 5 关闭虚拟机电源 6 分离 RDM 磁盘 分离 RDM 磁盘并不是永久删除 请勿选择从磁盘删除, 也不要删除 vmdk 文件 7 克隆虚拟机并选择自定义操作系统选项, 以便克隆具有唯一标识 通过默认 sysrep 文件或自定义 sysrep 文件创建唯一标识 8 将共享 RDM 同时附加到两个虚拟机上并打开其电源 9 更改第一个虚拟机 ( 虚拟机 1) 上的主机名和 IP 地址 记录在虚拟机 1 上安装 vcenter Server 时使用的原始 IP 地址和主机名 该信息用于分配群集角色 IP 10 在两个节点上安装故障切换群集 11 要在 VM1 上创建 MSCS 群集, 请在该群集中同时包括两个节点 另请选择新群集的验证选项 12 要开始配置角色, 请选择通用服务并单击下一步 13 从列出的服务中选择 VMware Service Lifecycle Manager, 然后单击下一步 VMware, Inc. 73