vSphere 存储 - VMware vSphere 5.5

Transcription

1 Update 2 VMware vsphere 5.5 VMware ESXi 5.5 vcenter Server 5.5 在本文档被更新的版本替代之前, 本文档支持列出的每个产品的版本和所有后续版本 要查看本文档的更新版本, 请访问 ZH_CN

2 最新的技术文档可以从 VMware 网站下载 : VMware 网站还提供最近的产品更新信息 您如果对本文档有任何意见或建议, 请把反馈信息提交至 : docfeedback@vmware.com 版权所有 VMware, Inc. 保留所有权利 版权和商标信息 VMware, Inc Hillview Ave. Palo Alto, CA 北京办公室北京市海淀区科学院南路 2 号融科资讯中心 C 座南 8 层 上海办公室上海市浦东新区浦东南路 999 号新梅联合广场 23 楼 广州办公室广州市天河北路 233 号中信广场 7401 室 2 VMware, Inc.

3 目录 关于 9 更新信息 11 1 存储器简介 13 存储器虚拟化 13 物理存储器的类型 14 目标和设备表示形式 17 存储设备特性 18 支持的存储适配器 19 数据存储特性 20 虚拟机如何访问存储器 23 比较存储器类型 23 2 将 ESXi 与 SAN 配合使用概览 25 ESXi 和 SAN 用例 26 将 SAN 存储器与 ESXi 配合使用的细节 26 ESXi 主机和多个存储阵列 26 决定 LUN 的大小和数目 27 选择虚拟机位置 28 分层应用程序 28 第三方管理应用程序 29 SAN 存储器备份注意事项 29 3 将 ESXi 与光纤通道 SAN 配合使用 31 光纤通道 SAN 概念 31 将区域分配与光纤通道 SAN 配合使用 32 虚拟机如何访问光纤通道 SAN 上的数据 33 4 配置光纤通道存储器 35 ESXi 光纤通道 SAN 要求 35 安装和设置 36 N-Port ID 虚拟化 37 5 配置以太网光纤通道 41 以太网光纤通道适配器 41 软件 FCoE 配置准则 42 在 vsphere Web Client 中为软件 FCoE 设置网络连接 42 在 vsphere Web Client 中添加软件 FCoE 适配器 43 VMware, Inc. 3

4 6 修改 ESXi 的光纤通道存储器 45 测试 ESXi SAN 配置 45 光纤通道 SAN 阵列的常规设置注意事项 46 光纤通道 SAN 配置中的 EMC CLARiiON 存储系统 46 EMC Symmetrix 存储系统 47 IBM System Storage DS4800 存储系统 47 IBM Systems Storage 8000 和 IBM ESS HP StorageWorks 存储系统 49 Hitachi Data Systems 存储器 49 NetApp 存储器 49 基于 LSI 的存储系统 50 7 从光纤通道 SAN 引导 ESXi 51 从 SAN 引导的优点 51 从光纤通道 SAN 引导的要求和注意事项 52 准备从 SAN 引导 52 将 Emulex HBA 配置为从 SAN 引导 53 将 QLogic HBA 配置为从 SAN 引导 55 8 通过软件 FCoE 引导 ESXi 57 软件 FCoE 引导的要求和注意事项 57 软件 FCoE 引导最佳做法 58 设置软件 FCoE 引导 58 对从软件 FCoE 安装和引导进行故障排除 59 9 光纤通道存储最佳做法 61 防止出现光纤通道 SAN 问题 61 在 vsphere Web Client 中禁用自动主机注册 62 优化光纤通道 SAN 存储器性能 62 光纤通道 SAN 配置对照表 将 ESXi 与 iscsi SAN 配合使用 65 iscsi SAN 概念 65 虚拟机如何访问 iscsi SAN 上的数据 配置 iscsi 适配器和存储器 71 ESXi iscsi SAN 要求 72 ESXi iscsi SAN 限制 72 为 iscsi 设置 LUN 分配 72 网络配置和身份验证 72 设置独立硬件 iscsi 适配器 73 配置从属硬件 iscsi 适配器 74 配置软件 iscsi 适配器 76 修改 iscsi 适配器的常规属性 77 4 VMware, Inc.

5 目录 设置 iscsi 网络 78 将巨帧与 iscsi 配合使用 84 配置 iscsi 适配器的发现地址 86 配置 iscsi 适配器的 CHAP 参数 87 配置 iscsi 的高级参数 90 iscsi 会话管理 为 ESXi 修改 iscsi 存储系统 95 测试 ESXi iscsi SAN 配置 95 iscsi SAN 存储系统的常规注意事项 96 EMC CLARiiON 存储系统 96 EMC Symmetrix 存储系统 96 使 HP StorageWorks MSA1510i 能够与 ESXi 通信 97 HP StorageWorks EVA 存储系统 98 NetApp 存储系统 98 Dell EqualLogic 存储系统 98 HP StorageWorks SAN/iQ 存储系统 99 vapp 中的 iscsi 目标 从 iscsi SAN 引导 101 关于从 iscsi SAN 引导的常规建议 101 准备 iscsi SAN 102 配置独立硬件 iscsi 适配器进行 SAN 引导 102 ibft iscsi 引导概览 iscsi 存储器的最佳做法 109 防止出现 iscsi SAN 问题 109 优化 iscsi SAN 存储器性能 110 检查以太网交换机统计信息 112 iscsi SAN 配置对照表 管理存储设备 115 了解存储设备命名 115 存储刷新和重新扫描操作 116 确定设备连接问题 使用数据存储 125 了解 VMFS 数据存储 126 了解 NFS 数据存储 130 创建数据存储 131 在 vsphere Web Client 中更改数据存储名称 132 管理重复 VMFS 数据存储 133 升级 VMFS 数据存储 134 增加 VMFS 数据存储容量 135 卸载 VMFS 或 NFS 数据存储 136 VMware, Inc. 5

6 挂载 VMFS 数据存储 137 在 vsphere Web Client 中移除 VMFS 数据存储 137 存储筛选 138 设置动态磁盘镜像 139 在存储设备上收集 ESXi 主机的诊断信息 140 使用 VOMA 检查元数据一致性 142 配置 VMFS 指针块缓存 裸设备映射 145 关于裸设备映射 145 裸设备映射特性 148 在 vsphere Web Client 中为虚拟机创建 RDM 149 在 vsphere Web Client 中管理映射的 LUN 的路径 处理固态磁盘 153 SSD 启用的优点 154 SSD 设备的自动检测 154 将设备标记为 SSD 154 取消标记 SSD 设备 155 取消标记自动检测到的 SSD 设备 156 将设备标记为本地 157 监控 SSD 设备 157 识别 SSD 设备 158 识别虚拟 SSD 设备 158 SSD 设备的最佳做法 158 交换到主机缓存 159 无法检测到本地 SSD 使用 Virtual SAN 161 关于 Virtual SAN 161 启用 Virtual SAN 167 管理磁盘组 170 监控 Virtual SAN 172 管理 Virtual SAN 173 Virtual SAN 和基于存储策略的管理 关于虚拟机存储策略 179 了解存储功能 179 了解虚拟机存储策略 关于 VMware vsphere 闪存读取缓存 189 针对闪存读取缓存的 DRS 支持 190 vsphere High Availability 支持闪存读取缓存 190 使用虚拟闪存资源配置交换缓存 190 虚拟闪存卷限制 VMware, Inc.

7 目录 设置虚拟闪存资源 190 设置多个虚拟闪存资源 191 使用虚拟闪存资源配置主机交换缓存 191 为虚拟机配置闪存读取缓存 191 移除虚拟闪存资源 192 迁移虚拟机和 Flash Read Cache 192 对虚拟闪存使用 esxcli 命令 VMkernel 和存储器 195 Storage API 了解多路径和故障切换 199 光纤通道故障切换 199 基于主机的 iscsi 故障切换 200 基于阵列的 iscsi 故障切换 201 路径故障切换和虚拟机 202 管理多路径 203 VMware 多路径模块 204 路径扫描和声明 206 管理存储路径和多路径插件 存储硬件加速 219 硬件加速的优点 219 硬件加速要求 220 硬件加速支持状态 220 块存储设备的硬件加速 220 NAS 设备上的硬件加速 225 硬件加速注意事项 存储精简置备 229 存储器超额订购 229 虚拟磁盘精简置备 229 阵列精简置备和 VMFS 数据存储 使用存储提供程序 237 存储提供程序和存储数据表示形式 237 存储提供程序要求和注意事项 238 存储状态报告 238 注册存储提供程序 239 确保与存储提供程序的通信安全 239 在 vsphere Web Client 中查看存储提供程序信息 239 在 vsphere Web Client 中取消注册存储提供程序 240 在 vsphere Web Client 中更新存储提供程序 240 VMware, Inc. 7

8 27 使用 vmkfstools 241 vmkfstools 命令语法 241 vmkfstools 选项 242 索引 VMware, Inc.

9 关于 目标读者 介绍了 VMware ESXi 的可用存储选项, 并对如何配置 ESXi 系统以使其可使用和管理不同类型的存储器进行了论述 此外, 重点介绍作为存储选项的光纤通道和 iscsi 存储区域网络 (SAN), 并讨论在光线通道和 iscsi 环境中使用 ESXi 的详细信息 本信息的目标读者为熟悉虚拟机技术 数据中心操作和 SAN 存储概念且具有丰富经验的系统管理员 VMware, Inc. 9

10 10 VMware, Inc.

11 更新信息 本 随产品的每个版本更新或在必要时更新 下表提供了 的更新历史记录 修订版本 描述 ZH_CN 更新了第 247 页, 克隆或转换虚拟磁盘的示例, 以包含有关更改虚拟磁盘格式以及与磁盘结合使用的适配器的信息 更新了第 159 页, 估算闪存设备的生命周期, 加入了其他详细信息 更新了第 138 页, 存储筛选, 更正了 相同主机和传输筛选器 的值 正确的值是 config.vpxd.filter.samehostsandtransportsfilter ZH_CN ZH_CN 更正了第 192 页, 迁移虚拟机和 Flash Read Cache, 以与 vsphere Web Client 配置选项匹配 轻微修改 ZH_CN 更新了第 161 页, 关于 Virtual SAN 和第 164 页, Virtual SAN 的要求, 以便更清楚地指明每个磁盘组只能包含一个 SSD 以及一个或多个 HDD 更新了第 164 页, Virtual SAN 的要求 和第 170 页, 管理磁盘组, 以便更清楚地指明每个磁盘组中的 SSD 容量至少应为已用 HDD 总容量的 10% 第 128 页, 在主机间共享 VMFS 数据存储 现在引用 最高配置 作为有关可连接到单个 VMFS 数据存储的最大主机数目的可靠信息源 第 130 页, 了解 NFS 数据存储 现在指明 ESXi 不支持将 IPv6 与 NFS 结合使用 ZH_CN 第 72 页, 网络配置和身份验证 包含不正确的要求, 该要求指明用于软件和从属硬件 iscsi 的物理网络必须与 iscsi 目标位于同一个子网中 仅当使用端口绑定时, 此要求才有效 此陈述已从该主题中移除 更新了第 140 页, 在存储设备上收集 ESXi 主机的诊断信息, 以阐明核心转储文件信息 ZH_CN 初始版本 VMware, Inc. 11

12 12 VMware, Inc.

13 存储器简介 1 本简介部分介绍了 vsphere 中的可用存储选项, 并说明了如何配置主机以便可以使用和管理不同类型的存储器 本章讨论了以下主题 : 第 13 页, 存储器虚拟化 第 14 页, 物理存储器的类型 第 17 页, 目标和设备表示形式 第 18 页, 存储设备特性 第 19 页, 支持的存储适配器 第 20 页, 数据存储特性 第 23 页, 虚拟机如何访问存储器 第 23 页, 比较存储器类型 存储器虚拟化 ESXi 提供主机级别的存储器虚拟化, 即采用逻辑方式从虚拟机中抽象物理存储器层 ESXi 虚拟机使用虚拟磁盘来存储其操作系统 程序文件, 以及与其活动相关联的其他数据 虚拟磁盘是一个较大的物理文件或一组文件, 可以像处理任何其他文件那样复制 移动 归档和备份虚拟磁盘 您可以配置具有多个虚拟磁盘的虚拟机 要访问虚拟磁盘, 虚拟机需使用虚拟 SCSI 控制器 这些虚拟控制器包括 BusLogic 并行 LSI Logic 并行 LSI Logic SAS 和 VMware 准虚拟 虚拟机只能查看和访问以上类型的 SCSI 控制器 每个虚拟磁盘都位于物理存储器上部署的一个数据存储上 从虚拟机的角度而言, 每个虚拟磁盘看上去都好像是与 SCSI 控制器连接的 SCSI 驱动器 实际的物理存储器是通过主机上的存储适配器还是网络适配器访问, 这对于客户机操作系统和虚拟机上运行的应用程序而言是透明的 除虚拟磁盘外,vSphere 还提供称为裸设备映射 (RDM) 的机制 在虚拟机内部的客户机操作系统需要对存储设备的直接访问权限时,RDM 非常有用 有关 RDM 的信息, 请参见第 145 页, 第 17 章 裸设备映射 VMware, Inc. 13

14 物理存储器的类型 ESXi 存储器管理过程以存储器管理员在不同存储系统上预先分配的存储空间开始 ESXi 支持下列类型的存储器 : 本地存储器 联网的存储器 将虚拟机文件存储在内部存储磁盘或直接连接的外部存储磁盘上 将虚拟机文件存储在通过直接连接或高速网络与主机相连的外部存储磁盘或阵列上 本地存储器 本地存储器可以是位于 ESXi 主机内部的内部硬盘, 也可以是位于主机之外并直接通过 SAS 或 SATA 等协议连接主机的外部存储系统 本地存储不需要存储网络即可与主机进行通信 您需要一根连接到存储单元的电缆 ; 必要时, 主机中需要有一个兼容的 HBA 下图描述了一台使用本地 SCSI 存储器的虚拟机 图 1 1 本地存储器 主机 虚拟机 SCSI VMFS 在这个本地存储器拓扑示例中, 主机使用的是到存储磁盘的单一连接 可以在该磁盘上创建 VMFS 数据存储, 以存储虚拟机磁盘文件 虽然可以使用这种存储器配置拓扑, 但不推荐使用 如果在存储阵列和主机间使用单一连接, 那么, 在连接不稳定或出现故障时, 会产生将导致中断的单一故障点 (SPOF) 但是, 由于大多数本地存储设备不支持多个连接, 因此无法使用多个路径访问本地存储器 ESXi 支持各种本地存储设备, 包括 SCSI IDE SATA USB 和 SAS 存储系统 无论使用何种存储器类型, 主机都会向虚拟机隐藏物理存储器层 注意不能使用 IDE/ATA 或 USB 驱动器来存储虚拟机 本地存储器不支持在多个主机之间共享 只有一个主机可以访问本地存储设备上的数据存储 因此, 虽然可以使用本地存储器创建虚拟机, 但却无法使用需要用到共享存储器的 VMware 功能, 如 HA 和 vmotion 但是, 如果您使用的是只有本地存储设备的主机群集, 则可以实施 Virtual SAN 或 vsphere Storage Appliance 两种技术都能将本地存储资源转变为软件定义的共享存储器, 并允许您使用需要共享存储器的功能 有关详细信息, 请参见第 161 页, 第 19 章 使用 Virtual SAN 或 vsphere Storage Appliance 文档 14 VMware, Inc.

15 第 1 章存储器简介 联网的存储器 联网的存储器由 ESXi 主机用于远程存储虚拟机文件的外部存储系统组成 通常, 主机通过高速存储器网络访问这些系统 网络存储设备将被共享 网络存储设备上的数据存储可同时由多个主机来访问 ESXi 支持多种网络存储技术 除了本主题中介绍的传统网络存储,VMware 还支持虚拟共享存储技术 这些技术将 ESXi 主机的内部存储资源转变为可为虚拟机提供 High Availability 和 vmotion 等功能的共享存储 有关详细信息, 请参见第 161 页, 第 19 章 使用 Virtual SAN 或 vsphere Storage Appliance 文档 注意同一 LUN 无法通过不同存储协议提供给一个 ESXi 主机或多个主机 要访问 LUN, 主机必须始终使用单一协议, 例如仅使用光纤通道或仅使用 iscsi 光纤通道 (FC) 在 FC 存储区域网络 (SAN) 上远程存储虚拟机文件 FC SAN 是一种将主机连接到高性能存储设备的专用高速网络 该网络使用光纤通道协议, 将 SCSI 流量从虚拟机传输到 FC SAN 设备 要连接到 FC SAN, 您的主机应该配有光纤通道总线适配器 (HBA) 除非使用光纤通道直接连接存储器, 否则需要光纤通道交换机来路由存储器流量 如果主机包含 FCoE( 以太网光纤通道 ) 适配器, 则可以使用以太网网络连接到共享光纤通道设备 光纤通道存储器描述了使用光纤通道存储器的虚拟机 图 1 2 光纤通道存储器 主机 虚拟机 光纤通道 HBA SAN VMFS 光纤阵列 在该配置中, 主机通过光纤通道适配器连接 SAN 架构 ( 包括光纤通道交换机及存储阵列 ) 此时, 存储阵列的 LUN 变得对于主机可用 您可以访问 LUN 并创建用于满足存储需求的数据存储 数据存储采用 VMFS 格式 有关设置光纤通道 SAN 的特定信息, 请参见第 31 页, 第 3 章 将 ESXi 与光纤通道 SAN 配合使用 VMware, Inc. 15

16 Internet SCSI (iscsi) 在远程 iscsi 存储设备上存储虚拟机文件 iscsi 将 SCSI 存储器流量打包在 TCP/IP 协议中, 使其通过标准 TCP/IP 网络 ( 而不是专用 FC 网络 ) 传输 通过 iscsi 连接, 主机可以充当与位于远程 iscsi 存储系统的目标进行通信的启动器 ESXi 提供下列 iscsi 连接类型 : 硬件 iscsi 软件 iscsi 主机通过能够卸载 iscsi 和网络处理的第三方适配器连接到存储器 硬件适配器可以是从属适配器, 也可以是独立适配器 主机使用 VMkernel 中基于软件的 iscsi 启动器连接到存储器 通过这种 iscsi 连接类型, 主机只需要一个标准的网络适配器来进行网络连接 必须配置 iscsi 启动器以使主机能够访问和显示 iscsi 存储设备 iscsi 存储器描述了不同类型的 iscsi 启动器 图 1 3 iscsi 存储器 主机 虚拟机 虚拟机 iscsi HBA 软件适配器 以太网网卡 LAN LAN VMFS iscsi 阵列 在左侧示例中, 主机使用硬件 iscsi 适配器连接到 iscsi 存储系统 在右侧示例中, 主机使用软件 iscsi 适配器和以太网网卡连接到 iscsi 存储器 此时, 存储系统中的 iscsi 存储设备变得对于主机可用 您可以访问存储设备并创建用于满足存储需求的 VMFS 数据存储 有关设置 iscsi SAN 的特定信息, 请参见第 65 页, 第 10 章 将 ESXi 与 iscsi SAN 配合使用 网络附加存储 (NAS) 在通过标准 TCP/IP 网络访问的远程文件服务器上存储虚拟机文件 ESXi 中内置的 NFS 客户端使用网络文件系统 (NFS) 协议第 3 版来与 NAS/NFS 服务器进行通信 为了进行网络连接, 主机需要一个标准的网络适配器 注意 ESXi 不支持借助于非 root 凭据启用对 NFS 卷访问权的委派用户功能 16 VMware, Inc.

17 第 1 章存储器简介 NFS 存储器描述了使用 NFS 卷存储其文件的虚拟机 在此配置中, 主机连接到 NFS 服务器, 此服务器通过常规网络适配器存储虚拟磁盘文件 图 1 4 NFS 存储器 主机 虚拟机 以太网网卡 LAN NFS NAS 设备 共享串行连接的 SCSI (SAS) 在可向多个主机提供共享访问的直接连接的 SAS 存储系统上存储虚拟机 这种类型的访问允许多个主机访问 LUN 上的同一个 VMFS 数据存储 目标和设备表示形式 在 ESXi 环境中, 目标 一词标识可以由主机访问的单个存储单元 术语 设备 和 LUN 描述代表目标上的存储空间的逻辑卷 通常, 设备 和 LUN 等词在 ESXi 环境中表示通过存储器目标向主机呈现的存储卷, 对于该卷可以格式化 不同存储器供应商通过不同的方式向 ESXi 主机呈现存储系统 某些供应商在单个目标上呈现多个存储设备或 LUN, 而有些供应商则向多个目标各呈现一个 LUN 图 1 5 目标和 LUN 表示形式 目标 目标目标目标 LUN LUN LUN LUN LUN LUN 存储阵列 存储阵列 在此图示中, 每种配置都有三个 LUN 可用 在其中一个示例中, 主机可以看到一个目标, 但该目标具有三个可供使用的 LUN 每个 LUN 表示单个存储卷 在另一个示例中, 主机可以看到三个不同的目标, 每个目标都拥有一个 LUN VMware, Inc. 17

18 通过网络访问的目标都有唯一的名称, 该名称由存储系统提供 iscsi 目标使用 iscsi 名称, 而光纤通道目标使用全球名称 (WWN) 注意 ESXi 不支持通过不同传输协议 ( 如 iscsi 和光纤通道 ) 访问相同的 LUN 设备或 LUN 由其 UUID 名称标识 如果某个 LUN 由多个主机共享, 则必须将该 LUN 提供给具有相同 UUID 的所有主机 存储设备特性 可以显示对主机可用的所有存储设备或 LUN( 包括所有的本地设备和联网设备 ) 如果使用第三方多路径插件, 则通过此类插件可用的存储设备也将出现在列表中 对于每个存储适配器, 可以显示此适配器可用的存储设备的单独列表 通常, 在查看存储设备时, 您可看到以下信息 表 1 1 存储设备信息 存储设备信息 名称 标识符 描述 也称为显示名称 ESXi 主机根据存储类型和制造商为设备分配的名称 可以根据需要更改此名称 通用唯一标识符是设备的固有名称 操作状况指示设备已挂载或已卸载 有关详细信息, 请参见第 120 页, 分离存储设备 LUN SCSI 目标中的逻辑单元号 (LUN) LUN 号由存储系统提供 如果目标只有一个 LUN, 则 LUN 号始终为零 (0) 类型设备类型, 例如, 磁盘或 CD-ROM 驱动器类型 传输 容量 有关设备是固态驱动器 (SSD) 还是常规非 SSD 硬盘驱动器的信息 有关详细信息, 请参见第 153 页, 第 18 章 处理固态磁盘 主机用于访问设备的传输协议 存储设备的总容量 所有者主机用于管理存储设备路径的插件 ( 如 NMP 或第三方插件 ) 有关详细信息, 请参见第 203 页, 管理多路径 硬件加速 位置 分区格式 有关存储设备是否能帮助主机执行虚拟机管理操作的信息 状态可以为 支持 不支持 或 未知 有关详细信息, 请参见第 219 页, 第 24 章 存储硬件加速 指向 /vmfs/devices/ 目录中存储设备的路径 存储设备采用的分区方案 可能是主引导记录 (MBR) 或 GUID 分区表 (GPT) 格式 GPT 设备可以支持超过 2 TB 的数据存储 有关详细信息, 请参见第 127 页, VMFS 数据存储和存储磁盘格式 分区主分区和逻辑分区, 包括 VMFS 数据存储 ( 如果已配置 ) 多路径策略 (VMFS 数据存储 ) 主机用于管理存储路径的路径选择策略和存储阵列类型策略 有关详细信息, 请参见第 199 页, 第 23 章 了解多路径和故障切换 路径 (VMFS 数据存储 ) 用于访问存储及其状态的路径 在 vsphere Web Client 中显示主机的存储设备 显示主机可用的所有存储设备 如果使用任何第三方多路径插件, 则通过此类插件可用的存储设备也将出现在列表中 通过 存储设备 视图, 您可列出主机的存储设备 分析其信息并修改属性 18 VMware, Inc.

19 第 1 章存储器简介 1 在 vsphere Web Client 导航器中, 浏览到主机 2 依次单击管理选项卡和存储器 3 单击存储设备 主机可用的所有存储设备都会列在 存储设备 下 4 要查看特定设备的详细信息, 请从列表中选择该设备 5 使用 设备详细信息 下的选项卡访问其他信息, 并修改所选设备的属性 选项卡 属性 路径 描述 查看设备属性和特性 查看和修改设备的多路径策略 显示设备的可用路径 禁用或启用所选路径 在 vsphere Web Client 中显示适配器的存储设备 显示可通过主机上的特定存储适配器访问的存储设备列表 1 在 vsphere Web Client 导航器中, 浏览到主机 2 依次单击管理选项卡和存储器 3 单击 存储适配器 主机上安装的所有存储适配器都会列在 存储适配器 下 4 从列表中选择适配器, 然后单击设备选项卡 此时将显示主机可通过该适配器访问的存储设备 支持的存储适配器 存储适配器为 ESXi 主机提供到特定存储单元或网络的连接 ESXi 支持不同的适配器类别, 包括 SCSI iscsi RAID 光纤通道 以太网上的光纤通道 (FCoE) 和以太网 ESXi 通过 VMkernel 中的设备驱动程序直接访问适配器 根据所使用的存储器类型, 可能需要在主机上启用和配置存储适配器 有关设置软件 FCoE 适配器的信息, 请参见第 41 页, 第 5 章 配置以太网光纤通道 有关配置不同类型的 iscsi 适配器的信息, 请参见第 71 页, 第 11 章 配置 iscsi 适配器和存储器 存储适配器特性 主机使用存储适配器来访问不同的存储设备 可以显示有关可用存储适配器的详细信息, 并查看这些信息 必须启用某些适配器 ( 如软件 iscsi 或 FCoE) 后, 才能查看它们的信息 表 1 2 存储适配器信息 适配器信息型号目标 ( 光纤通道和 SCSI) 已连接的目标 (iscsi) WWN( 光纤通道 ) 描述适配器的型号 通过适配器访问的目标数 iscsi 适配器上已连接的目标数 根据用来唯一标识 FC 适配器的光纤通道标准形成的全球名称 VMware, Inc. 19

20 表 1 2 存储适配器信息 ( 续 ) 适配器信息 iscsi 名称 (iscsi) iscsi 别名 (iscsi) IP 地址 ( 独立硬件 iscsi) 描述根据用来标识 iscsi 适配器的 iscsi 标准形成的唯一名称 用以替代 iscsi 名称的友好名称 分配给 iscsi HBA 的地址 设备适配器可以访问的所有存储设备或 LUN 路径 属性 适配器用于访问存储设备的所有路径 表明适配器需要其他配置的链接 iscsi 和 FCoE 适配器显示此链接 在 vsphere Web Client 中查看存储适配器信息 显示主机使用的存储适配器并查看其信息 1 在 vsphere Web Client 导航器中, 浏览到主机 2 依次单击管理选项卡和存储器 3 单击存储适配器 4 要查看特定适配器的详细信息, 请从列表中选择适配器 数据存储特性 数据存储是逻辑容器, 类似于文件系统, 它将各个存储设备的特性隐藏起来, 并提供一个统一的模型来存储虚拟机文件 可以显示对主机可用的所有数据存储, 并分析其属性 可通过以下方式将数据存储添加到 vcenter Server 中 : 您可以使用 新建数据存储 向导创建 VMFS 或 NFS 数据存储 启用 Virtual SAN 时, 会自动创建一个 Virtual SAN 数据存储 向 vcenter Server 添加主机时, 主机上的所有数据存储都将添加到 vcenter Server 下表说明了查看数据存储时可以显示的数据存储详细信息 某些特性可能不可用或不适用于所有类型的数据存储 表 1 3 数据存储信息 数据存储信息适用的数据存储类型描述 名称 文件系统类型 设备备用 VMFS NFS Virtual SAN VMFS NFS Virtual SAN VMFS NFS Virtual SAN 为数据存储指定的可编辑名称 有关重命名数据存储的信息, 请参见第 132 页, 在 vsphere Web Client 中更改数据存储名称 数据存储使用的文件系统 有关 VMFS 和 NFS 数据存储以及如何管理它们的信息, 请参见第 125 页, 第 16 章 使用数据存储 有关 Virtual SAN (vsan) 数据存储的信息, 请参见第 161 页, 第 19 章 使用 Virtual SAN 关于基础存储器的信息, 如部署数据存储所在的存储设备 (VMFS) 服务器和文件夹 (NFS) 或磁盘组 (Virtual SAN) 数据区 VMFS 数据存储跨越的个别数据区及其容量 驱动器类型 VMFS NFS 基础存储设备的类型, 固态驱动器 (SSD) 或常规的非 SSD 硬盘驱动器 有关详细信息, 请参见第 153 页, 第 18 章 处理固态磁盘 20 VMware, Inc.

21 第 1 章存储器简介 表 1 3 数据存储信息 ( 续 ) 数据存储信息适用的数据存储类型描述 容量 位置 ( 挂载点 ) VMFS NFS Virtual SAN VMFS NFS Virtual SAN 包括总容量 已置备的空间和可用空间 指向 /vmfs/volumes/ 目录中数据存储的路径 服务器 NFS NAS 服务器的名称或 IP 地址 文件夹 NFS 已挂载文件夹的名称 数据存储功能 Storage I/O Control 硬件加速标记连接 VMFS 注意多数据区 VMFS 数据存储将仅显示其中一个数据区的功能 NFS Virtual SAN VMFS NFS VMFS NFS Virtual SAN VMFS NFS Virtual SAN VMFS NFS 物理存储器报告的由数据存储继承的存储功能 您不能对其进行修改 有关是否启用群集范围存储 I/O 优先化的信息 请参见 vsphere 资源管理文档 有关基础存储设备是否支持硬件加速的信息 状态可以为 支持 不支持 或 未知 有关详细信息, 请参见第 219 页, 第 24 章 存储硬件加速 您定义并将其以标记形式与数据存储关联的数据存储功能 有关信息, 请参见第 179 页, 了解存储功能 挂载了数据存储的主机 多路径策略 VMFS 主机用于访问存储的路径选择策略 有关详细信息, 请参 见第 199 页, 第 23 章 了解多路径和故障切换 路径 VMFS 用于访问存储及其状态的路径数目 在 vsphere Web Client 中显示数据存储信息 使用 vsphere Web Client 导航器访问 数据存储 视图 通过导航器显示的 数据存储 视图便于您列出 vsphere 基础架构清单中的所有数据存储 分析信息和修改属性 您也可使用视图创建数据存储 要列出特定父对象 ( 例如数据中心 群集或主机 ) 的数据存储, 请参见第 22 页, 为基础架构对象列出数据存储 1 从 vsphere Web Client 主页中, 单击 vcenter 2 在 清单列表 下, 单击数据存储类别 清单中的数据存储会显示在中间的 数据存储 面板中 3 使用图标创建数据存储或执行所选数据存储的基本任务 图标 描述 创建数据存储 增加数据存储容量 VMware, Inc. 21

22 图标 描述 将数据存储挂载到某些主机 移除数据存储 从某些主机卸载数据存储 4 要查看特定数据存储详细信息, 请双击所选数据存储 5 使用选项卡访问其他信息, 并修改数据存储属性 选项卡入门摘要监控管理相关对象 描述 查看介绍信息并查看基本操作 查看所选数据存储的统计信息和配置 查看数据存储的警报 性能数据 资源分配 事件及其他状态信息 查看和修改数据存储属性 警报定义 标记和权限 使用该选项卡访问支持数据存储的存储设备, 并查看和编辑数据存储设备的多路径详细信息 查看与数据存储相关的对象 对象包括数据存储上的虚拟机和挂载数据存储的主机 为基础架构对象列出数据存储 为特定父对象 ( 例如, 数据中心 群集或主机 ) 显示数据存储 1 从 vsphere Web Client 主页中, 单击 vcenter 2 使用 vsphere Web Client 对象导航器可以浏览到数据存储的某一有效父对象, 例如数据中心 群集或主机 3 单击相关对象选项卡, 然后单击数据存储 如果为此对象配置了任何数据存储, 则这些存储将显示在中心 数据存储 面板中 4 使用图标创建数据存储或执行所选数据存储的基本任务 图标 描述 创建数据存储 增加数据存储容量 将数据存储挂载到某些主机 移除数据存储 从某些主机卸载数据存储 5 使用选项卡访问其他信息, 并修改数据存储属性 选项卡入门摘要监控管理相关对象 描述 查看介绍信息并查看基本操作 查看所选数据存储的统计信息和配置 查看数据存储的警报 性能数据 资源分配 事件及其他状态信息 查看和修改数据存储属性 警报定义 标记和权限 使用该选项卡访问支持数据存储的存储设备, 并查看和编辑数据存储设备的多路径详细信息 查看与数据存储相关的对象 对象包括数据存储上的虚拟机和挂载数据存储的主机 22 VMware, Inc.

23 第 1 章存储器简介 虚拟机如何访问存储器 当虚拟机与存储在数据存储上的虚拟磁盘进行通信时, 它会发出 SCSI 命令 由于数据存储可以存在于各种类型的物理存储器上, 因此根据 ESXi 主机用来连接存储设备的协议, 这些命令会封装成其他形式 ESXi 支持光纤通道 (FC) Internet SCSI (iscsi) 以太网上的光纤通道 (FCoE) 和 NFS 协议 无论主机使用何种类型的存储设备, 虚拟磁盘始终会以挂载的 SCSI 设备形式呈现给虚拟机 虚拟磁盘会向虚拟机操作系统隐藏物理存储器层 这样可以在虚拟机内部运行未针对特定存储设备 ( 如 SAN) 而认证的操作系统 下图描述了使用不同存储器类型的五个虚拟机, 以说明各个类型之间的区别 图 1 6 访问不同类型存储器的虚拟机 主机 要求具备 TCP/IP 连接 虚拟机虚拟机虚拟机虚拟机虚拟机 VMFS SCSI 光纤通道 HBA iscsi HBA 软件适配器 以太网网卡 以太网网卡 主要存储器 SAN LAN LAN LAN 物理磁盘 数据存储 虚拟磁盘 VMFS VMFS NFS 光纤阵列 iscsi 阵列 NAS 设备 注意此图表仅用于展示概念 它并非是推荐的配置 您可以使用存储视图选项卡上的映射直观地表示和了解主机上的虚拟机与所有可用虚拟和物理存储资源之间的关系 有关详细信息, 请参见 vsphere 监控和性能文档 比较存储器类型 某些 vsphere 功能是否受支持可能取决于所用存储技术 下表比较了 ESXi 支持的各种网络存储技术 表 1 4 ESXi 支持的联网存储器技术协议传输接口光纤通道 FC/SCSI 数据 /LUN 的块访问 FC HBA 以太网光纤通道 FCoE/SCSI 数据 /LUN 的块访问 聚合网络适配器 ( 硬件 FCoE) 支持 FCoE 的网卡 ( 软件 FCoE) VMware, Inc. 23

24 表 1 4 ESXi 支持的联网存储器 ( 续 ) 技术协议传输接口 iscsi IP/SCSI 数据 /LUN 的块访问 iscsi HBA 或启用 iscsi 的网卡 ( 硬件 iscsi) NAS IP/NFS 文件 ( 无直接 LUN 访问 ) 网络适配器 网络适配器 ( 软件 iscsi) 下表比较了不同类型存储器支持的 vsphere 功能 表 1 5 存储器支持的 vsphere 功能 存储器类型引导虚拟机 vmotion 数据存储 RDM 虚拟机群集 VMware HA 和 DRS Storage API - Data Protectio n 本地存储器 是 否 VMFS 否 是 否 是 光纤通道 是 是 VMFS 是 是 是 是 iscsi 是 是 VMFS 是 是 是 是 NFS 上的 NAS 是 是 NFS 否 否 是 是 注意本地存储器支持单个主机上的虚拟机群集 ( 也称为机箱内群集 ) 需要共享的虚拟磁盘 有关此配置的详细信息, 请参见 vsphere 资源管理文档 24 VMware, Inc.

25 将 ESXi 与 SAN 配合使用概览 2 将 ESXi 与 SAN 配合使用可提高灵活性 效率以及可靠性 将 ESXi 与 SAN 配合使用还支持集中式管理 故障切换和负载平衡技术 下面是将 ESXi 与 SAN 配合使用的优点 : 您可安全地存储数据并配置多个指向存储器的路径, 从而避免出现单一故障点 将 SAN 与 ESXi 系统配合使用可将故障恢复能力扩展到服务器 使用 SAN 存储器时, 所有应用程序都可 在原始主机出现故障后在其他主机上立即重新启动 可以使用 VMware vmotion 执行虚拟机的实时迁移 如果虚拟机的主机出现故障, 可将 VMware High Availability (HA) 与 SAN 结合使用, 在另一台服务器上 以虚拟机的最后已知状态重新启动虚拟机 可使用 VMware Fault Tolerance (FT) 复制两台不同主机上的受保护虚拟机 如果首选主机出现故障, 虚拟 机可在辅助主机上继续不间断地运行 使用 VMware Distributed Resource Scheduler (DRS) 将虚拟机从一台主机迁移到另一台主机以实现负载平衡 由于存储器位于共享 SAN 阵列, 因此应用程序可继续无缝运行 如果使用 VMware DRS 群集, 请将 ESXi 主机置于维护模式, 以便系统将所有正在运行的虚拟机迁移到其他 ESXi 主机 随后便可在原始主机上执行升级或其他维护操作 VMware 虚拟机的可移植性和封装与此存储器的共享特性相辅相成 当虚拟机位于基于 SAN 的存储器上时, 您可以快速关闭一台服务器上的虚拟机并在另一台服务器上将其启动, 或在一台服务器上将其挂起并在同一网络上的另一台服务器上恢复操作 此功能可实现在迁移计算资源的同时保持一致的共享访问 本章讨论了以下主题 : 第 26 页, ESXi 和 SAN 用例 第 26 页, 将 SAN 存储器与 ESXi 配合使用的细节 第 26 页, ESXi 主机和多个存储阵列 第 27 页, 决定 LUN 的大小和数目 第 28 页, 选择虚拟机位置 第 28 页, 分层应用程序 第 29 页, 第三方管理应用程序 第 29 页, SAN 存储器备份注意事项 VMware, Inc. 25

26 ESXi 和 SAN 用例 与 SAN 配合使用时,ESXi 可从 Storage vmotion Distributed Resource Scheduler (DRS) High Availability 等多个 vsphere 功能中受益 将 ESXi 与 SAN 配合使用对于以下任务非常有效 : 存储器整合与存储器布局的简化 零停机时间维护 负载平衡 灾难恢复 简化阵列迁移和存储升级 如果使用多台主机, 且每台主机都运行多个虚拟机, 那么当主机上的存储器不再够用时将需要使用外部存储器 选择 SAN 作为外部存储器可使系统架构更为简单, 同时还有其他优点 在执行 ESXi 主机或基础结构维护时, 使用 vmotion 将虚拟机迁移到其他主机 如果共享存储器位于 SAN 上, 您无需中断虚拟机的用户服务便可执行维护 虚拟机工作进程在整个迁移过程中继续执行 可以将主机添加到 DRS 群集, 该主机的资源将成为群集资源的一部分 将持续监控群集内所有主机和虚拟机的 CPU 和内存资源的分布情况和使用情况 DRS 会将这些衡量指标与理想状态下的资源利用率进行比较 理想状态下的利用率会考虑群集内资源池和虚拟机的属性 当前需求以及不平衡目标 然后, 它会相应地执行虚拟机迁移 ( 或提供迁移建议 ) 可以使用 VMware High Availability 将多台 ESXi 主机配置为群集, 为虚拟机中运行的应用程序提供快速中断恢复和具有成本效益的高可用性 如果购买了新的存储系统或阵列, 则可通过 Storage vmotion 执行实时自动迁移, 在不中断虚拟机用户操作的情况下, 将虚拟机磁盘文件从现有存储器迁移到新的目标存储器 将 SAN 存储器与 ESXi 配合使用的细节 将 SAN 与 ESXi 主机一起使用在很多方面有别于传统的 SAN 使用情况 将 SAN 存储器与 ESXi 配合使用时, 请记住以下注意事项 : 您无法使用 SAN 管理工具直接访问使用该存储器的虚拟机操作系统 使用传统工具, 只能监控 VMware ESXi 操作系统 可以使用 vsphere Web Client 监控虚拟机 通过 SAN 管理工具可看到的 HBA 属于 ESXi 系统 ( 而不是属于虚拟机 ) 通常,ESXi 系统会为您执行多路径 ESXi 主机和多个存储阵列 ESXi 主机可访问来自多个存储阵列 ( 包括不同供应商的阵列 ) 的存储设备 使用不同供应商的多个阵列时, 需要考虑以下注意事项 : 如果主机将同一存储阵列类型插件 (SATP) 用于多个阵列, 需要更改该 SATP 的默认路径选择策略 (PSP) 时请多加注意 更改将应用于所有阵列 有关 SATP 和 PSP 的信息, 请参见第 199 页, 第 23 章 了解多路径和故障切换 某些存储阵列会对队列深度及其他设置提出建议 通常, 这些设置在 ESXi 主机级别进行全局配置 对一个阵列进行更改会影响向主机提供 LUN 的其他阵列 有关更改队列深度的信息, 请参见 VMware 知识库文章, 网址为 : 为光纤通道阵列进行 ESXi 主机区域分配时, 请使用单启动器单目标区域分配 采用这种类型的配置, 一个阵列上发生的光纤相关事件不会影响其他阵列 有关区域分配的详细信息, 请参见第 32 页, 将区域分配与光纤通道 SAN 配合使用 26 VMware, Inc.

27 第 2 章将 ESXi 与 SAN 配合使用概览 决定 LUN 的大小和数目 在格式化包含 VMFS 数据存储的 LUN 之前, 必须规划如何设置 ESXi 系统的存储器 决定 LUN 的大小和数目时, 请牢记以下注意事项 : 每个 LUN 应具有正确的 RAID 级别和存储特性, 适用于在使用该 LUN 的虚拟机中运行的应用程序 每个 LUN 必须仅包含一个 VMFS 数据存储 如果多台虚拟机访问同一个 VMFS, 请使用磁盘份额区分虚拟机的优先级 出于以下原因, 您可能需要较少 较大的 LUN: 在不向存储管理员要求更多空间的情况下, 使创建虚拟机的灵活性更大 使调整虚拟磁盘大小 执行快照等等的灵活性更大 使要管理的 VMFS 数据存储变得更少 出于以下原因, 您可能需要较多 较小的 LUN: 减少存储空间浪费 不同的应用程序可能需要不同的 RAID 特性 为每个 LUN 设置多路径策略和磁盘份额, 从而增加灵活性 使用 Microsoft 群集服务要求每个群集磁盘资源位于各自的 LUN 中 由于对单个卷的争用情况较少, 因此性能更佳 当虚拟机的存储特性不可用时, 通常没有简单的方法来确定要置备的 LUN 的数目和大小 可以使用预测性或自适应性方案决定 LUN 大小和数量 使用预测性方案来决定 LUN 的大小和数目 设置 ESXi 系统的存储器时, 必须在创建 VMFS 数据存储之前决定要置备的 LUN 的大小和数目 可以使用预测性方案决定 LUN 的大小和数目 1 置备若干具有不同存储特性的 LUN 2 在每个 LUN 上创建一个 VMFS 数据存储, 并依照相应特性标记各个数据存储 3 创建虚拟磁盘以包含在 LUN 上创建的 VMFS 数据存储中的虚拟机应用程序数据, 这些 LUN 具有满足其 上应用程序要求的 RAID 级别 4 使用磁盘份额来区别高优先级虚拟机与低优先级虚拟机 注意磁盘份额只与给定主机相关 分配给某一主机上虚拟机的份额并不影响其他主机上的虚拟机 5 运行应用程序以确定虚拟机性能是否可接受 使用自适应性方案来决定 LUN 的大小和数目 设置 ESXi 主机的存储器时, 必须在创建 VMFS 数据存储之前决定要置备的 LUN 的大小和数目 可以使用自适应性方案决定 LUN 的大小和数目 1 置备一个较大的 LUN(RAID 1+0 或 RAID 5), 同时启用写入缓存 VMware, Inc. 27

28 2 在该 LUN 上创建 VMFS 3 在 VMFS 上创建四个或五个虚拟磁盘 4 运行应用程序以确定磁盘性能是否可接受 如果性能可接受, 您可以在 VMFS 上再添加虚拟磁盘 如果性能不可接受, 请新建大的 LUN( 可能采用其他 RAID 级别 ) 并重复此过程 使用迁移, 以防止在重新创建 LUN 时丢失虚拟机数据 选择虚拟机位置 如果您要设法优化虚拟机的性能, 存储位置是个重要因素 提供高性能和高可用性但价格昂贵的存储器与性能较低但成本也较低的存储器之间始终存在一个权衡 根据多种因素, 存储器可分为不同级别 : 高端 提供高性能和高可用性 可能提供内置快照, 便于备份及时间点 (PiT) 还原 支持复制 完全存储 处理器冗余和 SAS 驱动器 使用高成本心轴 中端 提供中等程度的性能 较低可用性 部分存储处理器冗余和 SCSI 或 SAS 驱动器 可能提供快照 使用中等成本的心轴 低端 提供低性能及少许内部存储冗余 使用低端 SCSI 驱动器或 SATA( 串行低成本心轴 ) 并非所有应用程序都需要性能最高 可用性最佳的存储器, 至少不是在整个生命周期内一直需要 注意如果需要使用某些高端功能 ( 如快照 ), 但不希望额外支出费用, 则可以在软件中实现某些高性能特性 例如, 您可以在软件中创建快照 决定放置某虚拟机的位置时, 请考虑以下问题 : 该虚拟机的重要程度如何? 有哪些性能及可用性要求? 有哪些 PiT 还原要求? 有哪些备份要求? 有哪些复制要求? 由于重要程度发生改变或技术发展使得目前的较高端功能降为低端功能, 虚拟机在其整个生命周期过程中可能变更级别 重要程度是相对的, 并且可能由于多种原因 ( 包括组织 操作流程 法规要求及灾难规划等方面的变化 ) 而改变 分层应用程序 SAN 管理员通常使用基于阵列的专用软件进行备份 灾难恢复 数据挖掘 取证以及配置测试 存储器供应商通常对 LUN 提供两种类型的高级服务 : 快照和复制 快照将创建包含 LUN 的高效率副本的空间, 这些副本共享公共的数据块 快照通常在主 LUN 所在的同一存储系统上本地执行, 用于快速备份 应用程序测试 取证或数据挖掘 复制将创建 LUN 的完整副本 通常对单独的存储系统或站点进行副本复制, 以防御可使整个阵列或站点 变为不可用或遭破坏的主要故障 将 ESXi 系统与 SAN 一起使用时, 您必须确定是基于阵列的工具还是基于主机的工具更适合特定的情形 28 VMware, Inc.

29 第 2 章将 ESXi 与 SAN 配合使用概览 基于阵列 ( 第三方 ) 的解决方案 将 ESXi 系统与 SAN 一起使用时, 您必须确定基于阵列的工具是否更适合特定的情形 考虑基于阵列的解决方案时, 请记住以下几点 : 基于阵列的解决方案通常可得到更全面的统计信息 使用 RDM, 数据始终采用同一路径, 使得性能管理 更为简单 使用 RDM 和基于阵列的解决方案时, 安全性对于存储管理员而言更为透明, 因为使用 RDM 时虚拟机与 物理机更为相似 如果使用基于阵列的解决方案, 通常会将物理兼容 RDM 用作虚拟机的存储器 如果不打算使用 RDM, 请查看存储器供应商的文档, 确认是否支持在带有 VMFS 卷的 LUN 上进行操作 如果在 VMFS LUN 上使用阵列操作, 请仔细阅读重新签名一节 基于文件 (VMFS) 的解决方案 将 ESXi 系统与 SAN 一起使用时, 您必须确定基于文件的工具是否更适合特定的情形 考虑使用 VMware Tools 和 VMFS( 而非阵列工具 ) 的基于文件的解决方案时, 请注意以下几点 : 使用 VMware Tools 和 VMFS 更利于置备 分配一个较大 LUN, 多个.vmdk 文件可置于该 LUN 上 使用 RDM, 每个虚拟机都需要一个新 LUN 快照服务随 ESXi 主机附送, 无需额外付费 对 ESXi 管理员而言, 使用 VMFS 更容易 ESXi 管理员如使用基于文件的解决方案可减轻对 SAN 管理员的依赖性 第三方管理应用程序 可以将第三方管理应用程序与 ESXi 主机配合使用 大多数 SAN 硬件都附送存储管理软件 在许多情况下, 此软件是一个 Web 应用程序, 可与连接到网络的任何 Web 浏览器配合使用 在其他情况下, 此软件通常在存储系统或单个服务器上运行, 独立于使用 SAN 作为存储器的服务器 此第三方管理软件可用于执行下列任务 : 存储阵列管理 ( 包括 LUN 创建 阵列缓存管理 LUN 映射以及 LUN 安全 ) 设置复制 检查点 快照或镜像 如果决定在虚拟机上运行 SAN 管理软件, 您可享有运行虚拟机的一系列优点, 包括使用 vmotion 和 VMware HA 进行故障切换 但是, 由于附加了间接级别, 管理软件可能无法看到 SAN 在这种情况下, 可以使用 RDM 注意虚拟机能否成功运行管理软件取决于特定的存储系统 SAN 存储器备份注意事项 具有正确的备份策略是 SAN 管理的最重要的方面之一 在 SAN 环境中, 备份有两个目的 第一个目的是将联机数据归档至脱机介质 可对所有联机数据按时间表定期重复执行此过程 第二个目的是提供对脱机数据的访问, 用于从故障中恢复 例如, 数据库恢复通常需要检索当前未联机的已归档日志文件 计划备份取决于多种因素 : 重要应用程序的标识, 这些应用程序在给定的一段时间内需要较频繁地备份 恢复点和恢复时间目标 考虑恢复点所需的精确度, 以及愿意为此而等待的时间长度 VMware, Inc. 29

30 与数据关联的变化率 (Rate of Change, RoC) 例如, 如果使用同步 / 异步复制,RoC 将影响主存储设备与 辅助存储设备间所需带宽的大小 对 SAN 环境 存储器性能 ( 备份时 ) 以及其他应用程序的总体影响 SAN 上高峰流量时段的标识 ( 计划于这些高峰时段执行的备份会降低应用程序和备份过程的运行速度 ) 计划数据中心内所有备份的时间 备份单个应用程序所需的时间 归档数据的资源可用性 ; 通常为脱机介质访问 ( 磁带 ) 设计备份策略时要包括各应用程序的恢复时间目标 也就是考虑执行备份所需的时间和资源 例如, 如果已计划的备份要存储过多数据, 导致恢复需要大量时间, 那么请检查已计划的备份 增加执行备份的频率, 这可减少每次备份的数据, 从而缩短恢复时间 如果特定的应用程序需要在某一期限内恢复, 则备份过程需要提供时间表及特殊数据处理以满足此需求 快速恢复可能需要使用驻留在联机存储器上的恢复卷, 从而尽可能避免通过访问速度较慢的脱机介质来获取缺少的数据组件 使用第三方备份软件包 可以使用第三方备份解决方案来保护虚拟机中的系统 应用程序和用户数据 VMware 提供 Storage API - Data Protection 来与第三方产品一起使用 使用这些 API 时, 第三方软件可以执行备份, 而无需在 ESXi 主机上加载备份任务的处理 使用 Storage API - Data Protection 的第三方产品可以执行以下备份任务 : 对虚拟机执行完整 差异 增量映像备份以及还原 对使用受支持的 Windows 和 Linux 操作系统的虚拟机执行文件级备份 通过对运行受支持的 Microsoft Windows 操作系统的虚拟机使用 Microsoft 卷影复制服务 (VSS), 确保数 据一致性 因为 Storage API - Data Protection 利用 VMFS 的快照功能, 所以执行备份时不需要虚拟机停机 这些备份是不间断的, 可以随时执行, 因此不需要更长的备份时段 有关 Storage API - Data Protection 及与备份产品集成的信息, 请参见 VMware 网站或与备份供应商联系 30 VMware, Inc.

31 将 ESXi 与光纤通道 SAN 配合使用 3 将 ESXi 主机设置为使用 FC SAN 存储阵列时, 必须考虑若干特殊注意事项 本节介绍如何将 ESXi 与 SAN 阵列配合使用 本章讨论了以下主题 : 第 31 页, 光纤通道 SAN 概念 第 32 页, 将区域分配与光纤通道 SAN 配合使用 第 33 页, 虚拟机如何访问光纤通道 SAN 上的数据 光纤通道 SAN 概念 如果您是 ESXi 管理员, 并计划设置主机与 SAN 配合使用, 那么您必须掌握 SAN 概念的相关应用知识 在某些出版资料中和 Internet 上可以找到 SAN 的相关信息 这一领域的发展日新月异, 请时常查看上述资源 如果您对 SAN 技术不甚了解, 请先熟悉基本术语 存储区域网络 (SAN) 是将计算机系统或主机服务器连接到高性能存储子系统的专用高速网络 SAN 组件包括主机服务器中的主机总线适配器 (HBA) 用于路由存储流量的交换机 线缆 存储处理器 (SP) 以及存储磁盘阵列 在网络上至少存在一台交换机的 SAN 拓扑构成了 SAN 架构 为将流量从主机服务器传输到共享存储器,SAN 使用光纤通道 (FC) 协议将 SCSI 命令打包到光纤通道帧中 为限制服务器访问未分配给该服务器的存储阵列,SAN 将使用区域分配 通常会为访问一组共享存储设备和 LUN 的各组服务器创建区域 区域定义了哪些 HBA 可连接哪些 SP 某区域以外的设备对该区域之内的设备不可见 区域分配与 LUN 屏蔽类似, 后者常用于权限管理 LUN 屏蔽是使 LUN 对某些主机可用而对另外一些主机不可用的过程 在主机服务器与存储器之间传输数据时,SAN 将使用一种叫做多路径的技术 使用多路径, 您可以通过多条物理路径从 ESXi 主机到达存储系统上的 LUN 通常, 从主机到 LUN 的单一路径包括 HBA 交换机端口 连接电缆和存储控制器端口 如果路径中的任何组件出现故障, 主机将选择另一条可用路径用于 I/O 检测故障路径并切换到另一条路径的过程称为路径故障切换 VMware, Inc. 31

32 光纤通道 SAN 中的端口 在本文档的上下文中, 端口是指设备与 SAN 的连接 SAN 中的每个节点 ( 例如主机 存储设备或架构组件 ) 均有一个或多个端口, 用于将其连接到 SAN 端口可通过多种方式进行标识 WWPN( 全球端口名称 ) Port_ID( 或端口地址 ) 一种全球唯一的端口标识符, 可允许特定应用程序访问相应端口 FC 交换机会发现设备或主机的 WWPN, 并向该设备分配一个端口地址 在 SAN 中, 各端口具有唯一的端口 ID, 用作端口的 FC 地址 通过这个唯一 ID 可将数据经由 SAN 路由至相应端口 FC 交换机在设备登录到相应架构时为其分配端口 ID 仅当设备登录后端口 ID 才有效 使用 N-Port ID 虚拟化 (NPIV) 时, 单一 FC HBA 端口 (N-port) 可使用多个 WWPN 向架构注册 这个方法允许一个 N-port 声明多个架构地址, 每个地址都显示为一个唯一的实体 当 ESXi 主机使用 SAN 时, 上述多个唯一标识符允许在配置各个虚拟机的过程中为虚拟机分配 WWN 光纤通道存储阵列类型 ESXi 可支持不同的存储系统和阵列 主机支持的存储类型包括主动 - 主动 主动 - 被动和 ALUA 合规 主动 - 主动存储系统 主动 - 被动存储系统 非对称存储系统 允许通过所有可用的存储器端口同时访问多个 LUN, 而不会明显降低性能 所有路径始终保持活动状态, 除非路径发生故障 存储处理器在其中主动提供对给定 LUN 的访问权限的系统 其他处理器用作备用 LUN, 并且可以主动提供对其他 LUN I/O 的访问权限 只能向给定 LUN 的主动端口成功发送 I/O 如果通过主动存储器端口访问失败, 则其中一个被动存储处理器可通过服务器对其进行访问而激活 支持非对称逻辑单元访问 (ALUA) ALUA 合规存储系统对每个端口提供不同级别的访问 ALUA 允许主机确定目标端口的状态, 并区分路径的优先级 主机会将某些活动路径用作主路径, 其他用作辅助路径 将区域分配与光纤通道 SAN 配合使用 区域分配可在 SAN 拓扑中提供访问控制 区域分配定义了哪些 HBA 可连接哪些目标 使用区域分配配置 SAN 后, 某区域以外的设备对该区域之内的设备将不可见 区域分配具有以下作用 : 减少提供给主机的目标和 LUN 的数目 控制和隔离架构中的路径 可以防止非 ESXi 系统访问特定的存储系统, 以及避免 VMFS 数据遭到破坏 可用于分隔不同的环境 ( 例如, 将测试环境与生产环境分开 ) 对于 ESXi 主机, 可使用单启动器区域分配或单启动器单目标区域分配 后者是首选区域分配做法 使用更严格的区域分配可防止出现 SAN 上可能发生的问题和配置错误 有关详细说明和最佳区域分配做法, 请与存储阵列或交换机供应商联系 32 VMware, Inc.

33 第 3 章将 ESXi 与光纤通道 SAN 配合使用 虚拟机如何访问光纤通道 SAN 上的数据 ESXi 会将虚拟机的磁盘文件存储到位于 SAN 存储设备上的 VMFS 数据存储内 当虚拟机客户机操作系统向其虚拟磁盘发出 SCSI 命令时,SCSI 虚拟化层会将这些命令转换成 VMFS 文件操作 虚拟机与其在 SAN 上存储的虚拟磁盘交互时, 将发生以下过程 : 1 虚拟机中的客户机操作系统读写 SCSI 磁盘时, 将向虚拟磁盘发出 SCSI 命令 2 虚拟机操作系统中的设备驱动程序将与虚拟 SCSI 控制器进行通信 3 虚拟 SCSI 控制器将命令转发至 VMkernel 4 VMkernel 将执行以下任务 a b 在 VMFS 卷中查找与客户机虚拟机磁盘对应的文件 将对虚拟磁盘上块的请求映射到相应物理设备上的块 c 将修改后的 I/O 请求从 VMkernel 中的设备驱动程序发送到物理 HBA 5 物理 HBA 可执行以下任务 a 依据 FC 协议的规则将 I/O 请求打包 b 将请求传输至 SAN 6 根据 HBA 用于连接架构的端口, 相应 SAN 交换机会收到请求并将其路由至主机要访问的存储设备 VMware, Inc. 33

34 34 VMware, Inc.

35 配置光纤通道存储器 4 将 ESXi 系统与 SAN 存储器配合使用时, 存在特定的硬件和系统要求 本章讨论了以下主题 : 第 35 页, ESXi 光纤通道 SAN 要求 第 36 页, 安装和设置 第 37 页, N-Port ID 虚拟化 ESXi 光纤通道 SAN 要求 当您准备配置 SAN 并设置 ESXi 系统以使用 SAN 存储器时, 请查看要求和建议 确保支持使用的 SAN 存储硬件和固件组合与 ESXi 系统配合使用 有关最新的列表, 请参见 vsphere 兼容 性指南. 将系统配置为每个 LUN 只有一个 VMFS 卷 除非使用无磁盘服务器, 否则请勿在 SAN LUN 上设置诊断分区 共享的诊断分区适用于从 SAN 引导无磁盘服务器的情况 使用 RDM 访问裸磁盘 有关信息, 请参见第 145 页, 第 17 章 裸设备映射 要使多路径正常工作, 每个 LUN 必须对所有 ESXi 主机呈现相同的 LUN ID 号 确保存储设备驱动程序指定一个足够大的队列 您可以在系统设置过程中设置物理 HBA 的队列深度 有关更改 HBA 和虚拟机的队列深度的信息, 请参见 vsphere 故障排除文档 在运行 Microsoft Windows 的虚拟机上, 将 SCSI TimeoutValue 参数值增加为 60 此增加使 Windows 可以接受因路径故障切换导致的更长 I/O 延迟 有关信息, 请参见第 203 页, 在 Windows 客户机操作系统上设置超时 ESXi 光纤通道 SAN 限制 将 ESXi 与 SAN 配合使用时, 会有一些限制 ESXi 不支持 FC 连接磁带设备 您不能使用虚拟机内的多路径软件对单个物理 LUN 执行 I/O 负载平衡 但是, 此限制不适用于 Microsoft Windows 虚拟机使用动态磁盘的情况 有关配置动态磁盘的信息, 请参见第 139 页, 设置动态磁盘镜像 VMware, Inc. 35

36 设置 LUN 分配 此主题提供了有关 ESXi 与 SAN 配合使用时如何分配 LUN 的常规信息 设置 LUN 分配时, 请注意以下几点 : 存储器置备 为确保 ESXi 系统在启动时识别 LUN, 将 SAN 连接到 ESXi 系统前请将所有 LUN 置备到相应的 HBA VMware 建议您同时将所有 LUN 置备到所有 ESXi HBA 仅当所有 HBA 都看到相同 LUN 时 HBA 故障切换才可行 对于将在多个主机间共享的 LUN, 确保 LUN ID 在所有主机间一致 例如, LUN 5 应作为 LUN 5 映射到主机 1 主机 2 和主机 3 vmotion 和 VMware DRS 主动 - 主动阵列与主动 - 被动阵列之间的比较 当您使用 vcenter Server 以及 vmotion 或 DRS 时, 请确保用于虚拟机的 LUN 已置备到所有 ESXi 主机 这就提供了移动虚拟机的最大能力 将 vmotion 或 DRS 用于主动 - 被动 SAN 存储设备时, 请确保所有 ESXi 系统通向所有存储处理器的路径均一致 否则在进行 vmotion 迁移时可能会导致路径抖动 对于 存储器 /SAN 兼容性指南 中未列出的主动 - 被动存储阵列,VMware 不支持存储器端口故障切换 在上述情况下, 您必须将服务器连接到存储阵列上的主动端口 此配置可确保向 ESXi 主机呈现 LUN 设置光纤通道 HBA 通常, 在 ESXi 主机上使用的 FC HBA 可在默认配置设置下正常工作 应遵循存储阵列供应商提供的配置准则 设置 FC HBA 的过程中, 请考虑以下几个问题 : 不要在单个主机中混合使用不同供应商的 FC HBA 支持拥有相同 HBA 的不同型号, 但单个 LUN 无法通过两个不同类型的 HBA 访问, 只能通过相同类型的 HBA 访问 请确保各 HBA 上的固件级别相同 设置用于检测故障切换的超时值 要确保获得最佳性能, 请不要更改默认值 ESXi 支持 16 GB 端到端光纤通道连接 安装和设置 本主题提供了配置 SAN 环境以使用 ESXi 时所需遵循的安装和设置的概览 请遵循这些来配置 ESXi SAN 环境 1 如果尚未配置 SAN, 请设计 SAN 多数现有的 SAN 只需略微修改即可用于 ESXi 2 检查所有 SAN 组件是否满足要求 3 进行任何必要的存储阵列修改 多数供应商会提供各自的特定文档, 介绍如何设置 SAN 与 VMware ESXi 配合使用 4 为已连接至 SAN 的主机设置 HBA 5 在主机上安装 ESXi 6 创建虚拟机并安装客户机操作系统 7 ( 可选 ) 为实现 VMware HA 故障切换或使用 Microsoft 群集服务而对系统进行设置 36 VMware, Inc.

37 第 4 章配置光纤通道存储器 8 根据需要升级或修改环境 N-Port ID 虚拟化 N-Port ID 虚拟化 (NPIV) 是一个 ANSI T11 标准, 介绍单个光纤通道 HBA 端口如何使用多个全球端口名称 (WWPN) 向架构注册 这将允许架构所连接的 N-port 要求使用多个架构地址 每个地址在光纤通道架构上都显示为唯一的实体 基于 NPIV 的 LUN 访问如何运作 NPIV 使得单一 FC HBA 端口可以向架构注册多个唯一的 WWN, 其中每个 WWN 都可分配给单个虚拟机 可向 SAN 对象 ( 如交换机 HBA 存储设备或虚拟机 ) 分配全球名称 (WWN) 标识符 WWN 在光纤通道架构中唯一标识此类对象 如果虚拟机具有 WWN 分配, 它们将分配的 WWN 用于所有 RDM 流量, 因此虚拟机上任何 RDM 所指向的 LUN 不得针对其 WWN 进行屏蔽 如果虚拟机没有 WWN 分配, 它们将使用主机物理 HBA 的 WWN 访问存储 LUN 但是, 通过使用 NPIV,SAN 管理员可以按虚拟机监控和路由存储访问 下一节将介绍其运作方式 向虚拟机分配了 WWN 后, 该虚拟机的配置文件 (.vmx) 将更新为包含一个 WWN 对 ( 由全球端口名称 (WWPN) 和全球节点名称 (WWNN) 组成 ) 当该虚拟机已打开电源时,VMkernel 将在物理 HBA 上实例化一个虚拟端口 (VPORT), 用于访问 LUN VPORT 是虚拟 HBA, 在 FC 架构中显示为物理 HBA, 也就是说, 它有自己唯一的标识符, 即分配给虚拟机的 WWN 对 每个 VPORT 均特定于虚拟机, 虚拟机关闭电源后,VPORT 便在主机上消失, 并且不会再显示于 FC 架构 当虚拟机从一台主机迁移到另一台主机时,VPORT 会在第一台主机上关闭, 然后在目标主机上打开 如果启用了 NPIV, 在创建时会为每个虚拟机指定 WWN 对 (WWPN 和 WWNN) 打开使用 NPIV 的虚拟机的电源后, 它会依次使用上述各个 WWN 对来尝试发现指向存储器的访问路径 实例化的 VPORT 数量等于主机上存在的物理 HBA 的数量 VPORT 创建于建立了物理路径的各物理 HBA 之上 各条物理路径可用于确定将用来访问 LUN 的虚拟路径 请注意,NPIV 无法识别的 HBA 在此发现过程中将被跳过, 因为其上无法实例化 VPORT 使用 NPIV 的要求 如果计划在虚拟机上启用 NPIV, 则应当了解某些要求 存在以下要求 : NPIV 仅可用于具备 RDM 磁盘的虚拟机 具备常规虚拟磁盘的虚拟机将使用主机物理 HBA 的 WWN 主机上的 HBA 必须支持 NPIV 有关信息, 请参见 vsphere 兼容性指南和供应商文档 应使用相同类型的 HBA, 即, 要么全都为 QLogic, 要么全都为 Emulex VMware 不支持访问相同 LUN 的同一主机上的异构 HBA 如果某台主机使用多个物理 HBA 作为指向存储器的路径, 应将所有物理路径划分到虚拟机 这需要支持多路径, 即使一次只有一条路径处于活动状态 确保主机上的物理 HBA 能够访问在该主机上运行且支持 NPIV 的虚拟机将要访问的所有 LUN 该架构中的交换机必须是 NPIV 可识别的 配置用于在存储器级别访问 NPIV 的 LUN 时, 请确保 NPIV LUN 号和 NPIV 目标 ID 与物理 LUN 和目标 ID 相匹配 VMware, Inc. 37

38 NPIV 功能和限制 了解将 NPIV 与 ESXi 配合使用的特定功能和限制 具有 NPIV 的 ESXi 可支持以下各项 : NPIV 支持 vmotion 使用 vmotion 迁移虚拟机时, 它将保留已分配的 WWN 如果将已启用 NPIV 的虚拟机迁移到不支持 NPIV 的主机, 则 VMkernel 将恢复为使用物理 HBA 来路由 I/O 如果 FC SAN 环境支持主动 - 主动阵列中磁盘上的并行 I/O, 则连接到两个不同的 NPIV 端口的并行 I/O 也受支持 将 ESXi 与 NPIV 配合使用时, 您必须注意以下限制 : 由于 NPIV 技术是 FC 协议的扩展, 因此, 它需要具备 FC 交换机, 且不会在直接连接的 FC 磁盘上工作 对分配了 WWN 的虚拟机或模板进行克隆后, 得到的克隆副本不保留 WWN NPIV 不支持 Storage vmotion 在虚拟机正在运行时, 在 FC 交换机上禁用 NPIV 功能然后重新将其启用可能会导致 FC 链接失败和 I/O 停止 向虚拟机分配 WWN 向带有 RDM 磁盘的虚拟机分配 WWN 设置 可以创建 1-16 个 WWN 对, 它们可以映射到主机上的第 1-16 个物理 FC HBA 前提条件创建带有 RDM 磁盘的虚拟机 请参见第 149 页, 在 vsphere Web Client 中为虚拟机创建 RDM 1 在 vsphere Web Client 中, 浏览到虚拟机 2 右键单击虚拟机, 然后选择编辑设置 3 单击虚拟机选项 4 单击 光纤通道 NPIV 三角符号展开 NPIV 选项 5 取消选择临时禁用此虚拟机的 NPIV 复选框 6 选择生成新的 WWN 7 指定 WWNN 和 WWPN 的数目 要支持通过 NPIV 进行故障切换, 至少需要 2 个 WWPN 通常只为每个虚拟机创建 1 个 WWNN 主机创建了虚拟机的 WWN 分配 下一步注册架构中新创建的 WWN, 以便虚拟机能够登录交换机并向该 WWN 分配存储 LUN 修改 WWN 分配 可以对带有 RDM 的虚拟机修改 WWN 分配 通常不需要更改虚拟机上的现有 WWN 分配 在某些情况下, 例如, 当手动分配的 WWN 在 SAN 上导致冲突时, 可能需要更改或移除 WWN 38 VMware, Inc.

39 第 4 章配置光纤通道存储器 前提条件如果要编辑现有的 WWN, 请确保关闭相应虚拟机的电源 在开始操作前, 请确保 SAN 管理员已置备了存储 LUN ACL, 允许虚拟机的 ESXi 主机进行访问 1 通过对所选虚拟机单击编辑设置链接, 打开 虚拟机属性 对话框 2 单击选项选项卡, 然后选择光纤通道 NPIV 此时将打开 [ 虚拟机属性 (Virtual Machine Properties)] 对话框 3 通过选择以下选项之一编辑 WWN 分配 : 选项 暂时禁用此虚拟机的 NPIV 保留不变 生成新的 WWN 描述 禁用虚拟机的 WWN 分配 保留现有 WWN 分配 此对话框的只读 WWN 分配 部分显示所有现有 WWN 分配的节点和端口值 生成新的 WWN 并分配给虚拟机, 覆盖任何现有 WWN(HBA 自身的 WWN 不受影响 ) 移除 WWN 分配移除向虚拟机分配的 WWN, 虚拟机将使用 HBA WWN 访问存储 LUN 如果创建新的虚拟机, 则此选项不可用 4 单击确定保存更改 VMware, Inc. 39

40 40 VMware, Inc.

41 配置以太网光纤通道 5 要访问光纤通道存储器,ESXi 主机可以使用以太网光纤通道 (FCoE) 协议 FCoE 协议将光纤通道帧封装到以太网帧中 因此, 主机不需要特殊的光纤通道链接来连接到光纤通道存储器, 但可以使用 10 Gbit 无损以太网传输光纤通道流量 本章讨论了以下主题 : 第 41 页, 以太网光纤通道适配器 第 42 页, 软件 FCoE 配置准则 第 42 页, 在 vsphere Web Client 中为软件 FCoE 设置网络连接 第 43 页, 在 vsphere Web Client 中添加软件 FCoE 适配器 以太网光纤通道适配器 若要使用以太网光纤通道 (FCoE), 您需要在主机上安装 FCoE 适配器 VMware 支持的适配器通常可分为两类, 即使用 ESXi 中的本机 FCoE 堆栈的硬件 FCoE 适配器和软件 FCoE 适配器 硬件 FCoE 适配器 此类别包括完全卸载的专用聚合网络适配器 (CNA), 该适配器在同一个卡上包含了网络和光纤通道功能 安装了此类适配器后, 主机可检测并使用两个 CNA 组件 在客户端中, 网络连接组件显示为标准网络适配器 (vmnic), 光纤通道组件显示为 FCoE 适配器 (vmhba) 您无需配置硬件 FCoE 适配器即可进行使用 软件 FCoE 适配器 软件 FCoE 适配器使用 ESXi 中的本机 FCoE 协议堆栈进行协议处理 软件 FCoE 适配器与提供数据中心桥接 (DCB) 和 I/O 卸载功能的网卡配合使用 Intel X520 正是此类网卡的一个示例 有关支持软件 FCoE 的网卡的信息, 请参见 vsphere 兼容性指南 对于软件 FCoE 适配器, 必须正确配置网络连接, 然后才能激活该适配器 注意所激活的软件 FCoE 适配器的数量与物理网卡端口的数量相对应 ESXi 最多支持在一台主机上使用四个软件 FCoE 适配器 VMware, Inc. 41

42 软件 FCoE 配置准则 设置网络环境以使用 ESXi 软件 FCoE 时, 请遵循 VMware 提供的准则和最佳做法 网络交换机准则 配置软件 FCoE 环境的网络交换机时, 请遵循以下准则 : 在与 ESXi 主机通信的端口上, 禁用跨树协议 (STP) 启用 STP 可能会延迟交换机上的 FCoE 初始化协议 (FIP) 响应, 还可能导致出现全部路径异常 (APD) 的情况 FIP 是 FCoE 用来在以太网上发现和初始化 FCoE 实体的协议 打开基于优先级的流控制 (PFC) 并将其设置为 AUTO VMware 建议在 FCoE 交换机上使用以下固件 : Cisco Nexus 5000: 版本 4.1(3)N2 或更高版本 Brocade FCoE 交换机 : 版本 或更高版本 网络适配器最佳做法 如果计划启用软件 FCoE 适配器以便与网络适配器一起工作, 需注意以下特定的注意事项 确保在 FCoE 网络适配器上安装最新的微码 如果网络适配器有多个端口, 配置网络时请将每个端口添加到单独的 vswitch 此操作有助于避免在发生破坏性事件 ( 如 MTU 更改 ) 时出现 APD 的情况 FCoE 流量处于活动状态时, 请勿在不同 vswitch 之间移动网络适配器端口 如果需要进行此更改, 请随后重新引导主机 如果更改网络适配器端口的 vswitch 后引起故障, 将端口移回原始 vswitch 可以解决该问题 在 vsphere Web Client 中为软件 FCoE 设置网络连接 激活软件 FCoE 适配器之前, 需要为主机上安装的所有物理 FCoE 网卡创建 VMkernel 网络适配器 该过程说明了如何创建通过 vsphere 标准交换机连接到单个 FCoE 物理网络适配器的单个 VMkernel 网络适配器 如果主机有多个网络适配器或适配器上有多个端口, 则要将每个 FCoE 网卡连接到单独的标准交换机 有关详细信息, 请参见 vsphere 网络文档 注意 ESXi 最多支持四个网络适配器端口同时用于软件 FCoE 1 在 vsphere Web Client 导航器中, 浏览到主机 2 单击操作, 然后选择所有 vcenter 操作 > 添加网络 3 选择 VMkernel 网络适配器, 然后单击下一步 4 选择新建标准交换机以创建 vsphere 标准交换机 5 在 空闲适配器 下, 选择支持 FCoE 的网络适配器 (vmnic#), 然后单击分配 确保将该适配器分配给活动适配器 6 输入网络标签 网络标签是用于识别所创建的 VMkernel 适配器的友好名称, 如 FCoE 42 VMware, Inc.

43 第 5 章配置以太网光纤通道 7 指定 VLAN ID, 然后单击下一步 由于 FCoE 流量要求隔离的网络, 因此请确保您输入的 VLAN ID 与用于主机上的常规网络不同 有关详细信息, 请参见 vsphere 网络文档 8 完成配置后, 查看信息并单击完成 为主机上安装的物理 FCoE 网络适配器创建了虚拟 VMkernel 适配器 注意为避免 FCoE 流量中断, 设置完 FCoE 网络连接后, 不要从 vsphere 标准交换机中移除 FCoE 网络适配器 (vmnic#) 在 vsphere Web Client 中添加软件 FCoE 适配器 必须先激活软件 FCoE 适配器, 主机才能使用这些适配器访问光纤通道存储器 可以激活的软件 FCoE 适配器的数量与主机上 FCoE 物理网卡端口的数量相对应 ESXi 最多支持在一台主机上使用四个软件 FCoE 适配器 前提条件 设置软件 FCoE 适配器的网络连接 1 在 vsphere Web Client 导航器中, 浏览到主机 2 依次单击管理选项卡和存储器 3 依次单击存储适配器和添加 4 选择软件 FCoE 适配器 5 在 添加软件 FCoE 适配器 对话框中, 从物理网络适配器的下拉列表中选择适当的 vmnic 仅列出尚未用于 FCoE 流量的适配器 6 单击确定 存储适配器列表上将显示软件 FCoE 适配器 激活软件 FCoE 适配器后, 可以查看其属性 如果不使用此适配器, 可以将其从适配器列表中移除 VMware, Inc. 43

44 44 VMware, Inc.

45 修改 ESXi 的光纤通道存储器 6 本节讨论支持与 VMware ESXi 一起使用的几种存储设备 对于每种设备, 本章将列出可能出现的主要已知问题, 指示特定供应商的信息 ( 如果有 ), 并包括来自 VMware 知识库文章的信息 注意特定存储设备相关的信息仅随每个版本更新 新的信息或许已可通过其他途径获取 请参考最新版本的 存储器 /SAN 兼容性指南, 咨询存储阵列供应商, 以及查看 VMware 知识库文章 本章讨论了以下主题 : 第 45 页, 测试 ESXi SAN 配置 第 46 页, 光纤通道 SAN 阵列的常规设置注意事项 第 46 页, 光纤通道 SAN 配置中的 EMC CLARiiON 存储系统 第 47 页, EMC Symmetrix 存储系统 第 47 页, IBM System Storage DS4800 存储系统 第 48 页, IBM Systems Storage 8000 和 IBM ESS800 第 49 页, HP StorageWorks 存储系统 第 49 页, Hitachi Data Systems 存储器 第 49 页, NetApp 存储器 第 50 页, 基于 LSI 的存储系统 测试 ESXi SAN 配置 ESXi 支持各种具有不同配置的 SAN 存储系统 通常,VMware 使用支持的存储系统测试 ESXi, 测试内容包括基本连接 HBA 故障切换等 并非所有存储设备都对 ESXi 的所有特性和功能进行了认证, 供应商可能会对 ESXi 提供特定形式的支持 基本连接 HBA 故障切换存储器端口故障切换从 SAN 引导 测试 ESXi 能否识别存储阵列并与存储阵列共同运行 此配置不允许应用多路径或任何类型的故障切换 服务器配备了多个 HBA, 这些 HBA 与一个或多个 SAN 交换机连接 服务器仅在发生 HBA 和交换机故障时能保证正常运行 服务器与多个存储器端口相连, 并在发生存储器端口故障和交换机故障时能正常运行 主机从 SAN 上配置的 LUN 引导而不是从服务器自身引导 VMware, Inc. 45

46 直接连接 群集 服务器未使用交换机连接到阵列 对于所有其他测试, 使用架构连接 FC 仲裁环路 (AL) 不受支持 通过在虚拟机中运行 Microsoft 群集服务来测试系统 光纤通道 SAN 阵列的常规设置注意事项 当准备要与 ESXi 配合使用的 FC SAN 存储器时, 必须遵循适用于所有存储阵列的特定常规要求 对于所有存储阵列, 请确保满足以下要求 : LUN 对每台主机的每个 HBA 呈现的 LUN ID 号都必须相同 有关如何配置相同 SAN LUN ID 的说明因供应商而异, 因此请参考存储阵列文档了解详细信息 除非是为单个存储阵列指定主机类型, 否则请将向 ESXi 显示的 LUN 的主机类型设置为 Linux Linux Cluster 或者设置为 vmware 或 esx( 如果可用 ) 如果使用了 vmotion DRS 或 HA, 则请确保虚拟机的源主机与目标主机都能看到具有相同 LUN ID 的同 一 LUN 出于对可能出现数据损坏的担心,SAN 管理员可能认为使多个主机看见相同的 LUN 不合常规 但是, VMFS 可防止多个虚拟机同时对同一文件进行写入, 因此给所有需要的 ESXi 系统置备 LUN 是可行的 光纤通道 SAN 配置中的 EMC CLARiiON 存储系统 EMC CLARiiON 存储系统可与采用 SAN 配置的 ESXi 主机配合使用 基本配置包括以下 : 1 安装并配置存储设备 2 在交换机级别配置分区 3 创建 RAID 组 4 创建并绑定 LUN 5 注册 SAN 所连接的服务器 默认情况下, 主机会自动执行此 6 创建包含服务器和 LUN 的存储组 使用 EMC 存储管理软件执行配置 有关信息, 请参见 EMC 文档 ESXi 会自动将主机的名称和 IP 地址发送到阵列, 并在阵列中注册该主机 不再需要手动执行主机注册 但是, 如果更喜欢使用存储管理软件 ( 如 EMC Navisphere) 来执行手动注册, 请关闭 ESXi 自动注册 关闭该功能有助于避免覆盖手动用户注册 有关信息, 请参见第 62 页, 在 vsphere Web Client 中禁用自动主机注册 由于此阵列是主动 - 被动磁盘阵列, 因此适用于以下常规注意事项 不支持 ALUA 的 CLARiiON 阵列的默认多路径策略为 最近使用 对于支持 ALUA 的 CLARiiON 阵列, 默认多路径策略为 VMW_PSP_FIXED ESXi 系统在识别阵列时设置默认策略 要使用从 SAN 引导, 请确保在 HBA BIOS 中选择主动 SP 作为引导 LUN 的目标 重要事项要使 ESXi 支持使用 ALUA 的 EMC CLARiiON, 请检查 HCL 以确保在存储阵列上使用正确的固件版本 有关其他信息, 请与存储器供应商联系 46 VMware, Inc.

47 第 6 章修改 ESXi 的光纤通道存储器 EMC Symmetrix 存储系统 EMC Symmetrix 存储系统可与采用 FC SAN 配置的 ESXi 主机配合使用 通常, 使用 EMC 软件执行配置操作 以下设置在 Symmetrix 网络存储系统上是必需的 有关详细信息, 请参见 EMC 文档 公共序列号 (C) 启用自动协商 (EAN) 在此端口上启用 Fibrepath (VCM) 启用 SCSI 3 (SC3) 集 唯一的全球名称 (UWN) 需要 SPC-2 (Decal) (SPC2) SPC-2 标记 ESXi 主机将所有来自 Symmetrix 存储阵列 容量为 50 MB 或更小的所有 LUN 视作管理 LUN 这些 LUN 也称为伪 LUN 或网关 LUN 这些 LUN 可显示在 EMC Symmetrix Management Interface 中, 并且不应用于保存数据 IBM System Storage DS4800 存储系统 IBM System Storage DS4800 系统曾叫作 IBM FAStT 许多存储阵列供应商 ( 包括 LSI 和 StorageTek) 都生产与 DS4800 兼容的 SAN 存储阵列 对于与 IBM DS4800 和其他兼容系统协同工作的主机, 请确保将主机上的多路径策略设置为 最近使用 配置用于 DS4800 存储服务器 SAN 故障切换的硬件 本主题提供如何对 ESXi 主机和 DS4800 存储设置高可用性 SAN 故障切换配置的相关信息 必须配备以下硬件组件 : 每台 ESXi 计算机上两个 FC HBA, 如 QLogic 或 Emulex 两台 FC 交换机, 将 HBA 连接到 SAN( 例如,FC 交换机 1 和 FC 交换机 2) 两个 SP( 例如,SP1 和 SP2) 每个 SP 必须至少有两个连接 SAN 的端口 使用以下 ESXi 主机连接设置, 如 SAN 故障切换 中所示 : 将每台 ESXi 计算机上的每个 HBA 连接至不同交换机 例如, 使 HBA1 连接 FC 交换机 1,HBA2 连接 FC 交换机 2 图 6 1 SAN 故障切换主机 1 主机 2 HBA1 HBA2 HBA3 HBA4 FC 交换机 1 FC 交换机 2 SP1 SP2 存储器 VMware, Inc. 47

48 此配置对每个 HBA 提供两条路径, 使得每条连接均能在发生故障时切换到冗余路径 此配置中的路径顺序可提供 HBA 和交换机故障切换, 无需触发 SP 故障切换 LUN 所有权必须属于首选路径所连的存储处理器 在上述示例配置中,SP1 拥有 LUN 的所有权 注意上述示例假定交换机并非通过一个架构中的交换机内链路 (ISL) 连接 禁用自动卷传输 为避免发生路径抖动的可能, 请在 SAN 存储处理器上禁用自动卷传输 (AVT) 如果启用了 AVT, 那么两个存储处理器在特定情况下可交替取得 LUN 的所有权, 这会致使性能降低 AVT 也称为 ADT( 自动磁盘传输 ) 要禁用 AVT, 在 DS 4800 Storage Manager 中, 对于包含一台或多台 ESXi 主机的 HBA 的各主机组, 请为其中定义的每个端口将主机类型设置为 LNXCL 或 VMware( 用于更高版本 ) 更改 AVT 配置后必须重新引导主机 配置存储处理器检测数据 将 Windows 作为客户机操作系统运行的 DS4800 SP 在静态时应返回 Not Ready 检测数据 返回 Unit Attention 可能导致 Windows 客户机操作系统在故障切换期间发生故障 1 在 Shell 窗口中, 使用以下命令确定 LNXCL 主机类型的索引号 输入每条命令后均按 Enter SMcli.exe ip-addr-for-spa show hosttopology; Enter SMcli.exe ip-addr-for-spb show hosttopology 以下命令假定 13 是 NVSRAM 主机类型定义中与 LNXCL 对应的索引号 如果存储处理器的 LNXCL 对应的索引号不同, 请用其替换以下命令中的 13 2 对 SPA 执行下述命令使其返回 Not Ready 检测数据 只有在输入所有命令后才按 Enter SMcli.exe ip-addr-for-spa set controller [a] HostNVSRAMBYTE [13,0x12]=0x01; set controller [a] HostNVSRAMBYTE [13,0x13]=0x00; reset Controller [a] 3 对 SPB 执行下述命令使其返回 Not Ready 检测数据 只有在输入所有命令后才按 Enter SMcli.exe ip-addr-for-spb set controller [b] HostNVSRAMBYTE [13,0x12]=0x01; set controller [b] HostNVSRAMBYTE [13,0x13]=0x00; reset Controller [b] 注意如果使用 DS4800 Storage Manager GUI, 请将用于两个存储处理器的配置命令粘贴到单个脚本中, 并同时对二者进行配置 如果使用 SMcli.exe, 请分别连接每个 SP IBM Systems Storage 8000 和 IBM ESS800 IBM Systems Storage 8000 和 IBM ESS800 系统使用主动 - 主动阵列, 无需特殊配置即可与 VMware ESXi 一起使用 使用这些系统时, 需要考虑以下注意事项 : 这些系统不支持自动执行重新签名 要成功使用 RDM, 给定的 LUN 必须对群集中所有 ESXi 主机呈现相同的 LUN ID 在 ESS800 Configuration Management 工具中, 选择对源和目标中的 LUN 使用相同 ID 48 VMware, Inc.

49 第 6 章修改 ESXi 的光纤通道存储器 如果要将主机配置为从这些阵列中使用 SAN 引导, 请在安装完成之前禁用相应刀片服务器的内部光纤端口 HP StorageWorks 存储系统 本节包含用于不同 HP StorageWorks 存储系统的配置信息 有关其他信息, 请参见 HP 网站上有关 VMware ESXi 的 HP ActiveAnswers 部分 HP StorageWorks EVA 要将 HP StorageWorks EVA 系统与 ESXi 配合使用, 必须配置正确的主机模式类型 向主机显示 LUN 时, 请将连接类型设置为 自定义 请采用以下值之一: 对于使用版本低于 的固件的 EVA4000/6000/8000 主动 - 主动阵列, 请使用主机模式类型 E 对于使用 及更高版本固件的 EVA4000/6000/8000 主动 - 主动阵列, 请使用主机模式类型 VMware 对于其他情况,EVA 系统无需特殊的配置更改即可与 ESXi 系统配合使用 请参见 HP 网站上的 VMware Infrastructure 与 HP StorageWorks 最佳配置方案 HP StorageWorks XP 对于 HP StorageWorks XP, 需要将主机模式设置为特定的参数 在 XP128/1024/10000/12000 上, 将主机模式设置为 Windows (0x0C) 在 XP24000/20000 上, 将主机模式设置为 0x01 Hitachi Data Systems 存储器 本节介绍 Hitachi Data Systems 存储器的相关设置 Sun 也可提供此解决方案, 且该方案可由 HP XP 存储器实现 LUN 屏蔽 微码和配置 要屏蔽 ESXi 主机上的 LUN, 请使用 HDS Storage Navigator 软件 请咨询 HDS 代表获取与 ESXi 交互操作所需的准确配置及微码级别 如果微码不受支持, 则通常不能与 ESXi 进行交互 模式模式设置取决于所使用的机型, 例如 : 9900 和 9900v 使用 Netware 主机模式 9500v 系列使用 Hostmode1:standard 及 Hostmode2:SUN Cluster 有关此处未列出机型的主机模式设置, 请咨询 HDS 代表 NetApp 存储器 在配置 NetApp 存储设备时, 首先要为存储阵列设置适当的 LUN 类型和启动器组类型 LUN 类型 VMware( 如果 VMware 类型不可用, 请使用 Linux) 启动器组类型 VMware( 如果 VMware 类型不可用, 请使用 Linux) 随后必须置备存储器 VMware, Inc. 49

50 基于 LSI 的存储系统 安装 ESXi 期间, 不要向主机提供基于 LSI 的阵列中的管理 LUN( 也称为访问 LUN) 否则,ESXi 安装可能失败 50 VMware, Inc.

51 从光纤通道 SAN 引导 ESXi 7 将主机设置为从 SAN 引导时, 主机的引导映像存储在 SAN 存储系统中的一个或多个 LUN 上 主机在启动时, 将从 SAN 上的 LUN 引导, 而不是从其本地磁盘引导 ESXi 支持通过光纤通道主机总线适配器 (HBA) 或以太网上的光纤通道 (FCoE) 聚合网络适配器 (CNA) 引导 本章讨论了以下主题 : 第 51 页, 从 SAN 引导的优点 第 52 页, 从光纤通道 SAN 引导的要求和注意事项 第 52 页, 准备从 SAN 引导 第 53 页, 将 Emulex HBA 配置为从 SAN 引导 第 55 页, 将 QLogic HBA 配置为从 SAN 引导 从 SAN 引导的优点 从 SAN 引导可以给环境带来很多好处 但是, 在某些情况下, 不应该对 ESXi 主机使用从 SAN 引导 设置系统从 SAN 引导之前, 请先判断这是否适合您的环境 小心对多台 ESXi 主机使用从 SAN 引导时, 每台主机都必须拥有自己的引导 LUN 如果将多台主机配置为共享相同引导 LUN, 则 ESXi 映像可能会损坏 如果使用从 SAN 引导, 将为环境带来以下好处 : 服务器成本更低 无需内部存储器, 可更密集地安置服务器, 且运行过程散热也更少 服务器更换更方便 可以更换服务器并将新服务器指向旧的引导位置 减少了空间浪费 没有本地磁盘的服务器通常占用较少空间 备份过程更轻松 可作为 SAN 整体备份过程的一部分来备份 SAN 中的系统引导映像 此外, 还可以使用高级阵列功能, 如引导映像上的快照 改善了管理 创建和管理操作系统映像变得更简单且更高效 可靠性更高 可以通过多条路径访问引导磁盘, 从而防止磁盘成为单一故障点 VMware, Inc. 51

52 从光纤通道 SAN 引导的要求和注意事项 ESXi 引导配置必须满足特定要求 表 7 1 从 SAN 引导的要求 要求 ESXi 系统要求 适配器要求 描述 遵循供应商针对从 SAN 引导服务器提出的建议 启用并正确配置适配器, 以便它可以访问引导 LUN 请参见供应商文档 访问控制 每台主机只能访问其自己的引导 LUN, 不能访问其他主机的引导 LUN 使用存储系统软件确保主机只访问指定的 LUN 多台服务器可以共享一个诊断分区 这点可以通过使用阵列特定的 LUN 屏蔽来实现 多路径支持 SAN 注意事项 特定于硬件的注意事项 由于 BIOS 不支持多路径, 并且无法激活备用路径, 因此不支持多条路径指向主动 / 被动阵列上的引导 LUN 如果阵列未通过直接连接拓扑认证, 则 SAN 必须通过交换拓扑连接 如果阵列已通过直接连接拓扑认证, 则 SAN 可以直接连接到阵列 如果指定阵列的交换拓扑和直接连接拓扑都已通过认证, 则二者都支持从 SAN 引导 如果正在运行 IBM eserver BladeCenter 并使用从 SAN 引导, 您必须禁用刀片服务器上的 IDE 驱动器 准备从 SAN 引导 设置为从 SAN 环境引导时, 需要执行多项任务 本节介绍在机架式安装服务器上启用从 SAN 引导的通用过程 有关在 Cisco Unified Computing System FCoE 刀片服务器上启用从 SAN 引导的信息, 请参阅 Cisco 文档 1 配置 SAN 组件和存储系统第 52 页, 在将 ESXi 主机设置为从 SAN LUN 引导之前, 请先配置 SAN 组件和存储系统 2 将存储适配器配置为从 SAN 引导第 53 页, 将主机设置为从 SAN 引导时, 需要在主机 BIOS 中启用引导适配器 然后, 配置该引导适配器以启动与目标引导 LUN 的原始连接 3 将系统设置为从安装介质引导第 53 页, 将主机设置为从 SAN 引导时, 首先需要从 VMware 安装介质引导主机 为此, 需要在 BIOS 设置中更改系统引导顺序 配置 SAN 组件和存储系统 在将 ESXi 主机设置为从 SAN LUN 引导之前, 请先配置 SAN 组件和存储系统 由于配置 SAN 组件因供应商而异, 因此, 请参阅各组件的产品文档 1 请参见适用于您的设置的任何电缆连接指南, 连接网络电缆 检查交换机接线 ( 如果有 ) 2 配置存储阵列 a b 在 SAN 存储阵列中, 使 ESXi 主机对 SAN 可见 此过程通常叫做创建对象 在 SAN 存储阵列中, 设置主机以将主机适配器的 WWPN 用作端口名称或节点名称 52 VMware, Inc.

53 第 7 章从光纤通道 SAN 引导 ESXi c 创建 LUN d 分配 LUN e 记录交换机和存储阵列的 IP 地址 f 记录各个 SP 的 WWPN 小心如果使用脚本式安装在从 SAN 引导模式下安装 ESXi, 需要执行特殊来避免意外丢失数据 将存储适配器配置为从 SAN 引导 将主机设置为从 SAN 引导时, 需要在主机 BIOS 中启用引导适配器 然后, 配置该引导适配器以启动与目标引导 LUN 的原始连接 前提条件 确定存储适配器的 WWPN u 将存储适配器配置为从 SAN 引导 由于配置引导适配器是特定于供应商的, 请参阅供应商文档 将系统设置为从安装介质引导 将主机设置为从 SAN 引导时, 首先需要从 VMware 安装介质引导主机 为此, 需要在 BIOS 设置中更改系统引导顺序 由于在 BIOS 中更改引导顺序因供应商而异, 因此, 请参考供应商文档来了解相关说明 以下过程说明如何在 IBM 主机上更改引导顺序 1 在系统打开电源过程中, 进入系统的 BIOS 配置 / 设置实用程序 2 选择启动选项, 并按 Enter 3 选择启动顺序选项, 并按 Enter 4 将第一启动设备更改为 CD-ROM 现在可以安装 ESXi 将 Emulex HBA 配置为从 SAN 引导 配置 Emulex HBA BIOS 以从 SAN 引导时, 包括启用 BootBIOS 提示和启用 BIOS 1 启用 BootBIOS 提示第 54 页, 将 Emulex HBA BIOS 配置为从 SAN 引导 ESXi 时, 需要启用 BootBIOS 提示 2 启用 BIOS 第 54 页, 将 Emulex HBA BIOS 配置为从 SAN 引导 ESXi 时, 需要启用 BIOS VMware, Inc. 53

54 启用 BootBIOS 提示 将 Emulex HBA BIOS 配置为从 SAN 引导 ESXi 时, 需要启用 BootBIOS 提示 1 运行 lputil 2 选择 3. 固件维护 3 选择适配器 4 选择 6. 引导 BIOS 维护 5 选择 1. 启用引导 BIOS 启用 BIOS 将 Emulex HBA BIOS 配置为从 SAN 引导 ESXi 时, 需要启用 BIOS 1 重新引导主机 2 要配置适配器参数, 在 Emulex 提示处按 ALT+E 并按照以下执行 a 选择适配器 ( 支持 BIOS) b 选择 2. 配置此适配器的参数 c 选择 1. 启用或禁用 BIOS d 选择 1 启用 BIOS e 选择 x 退出, 选择 Esc 返回上一个菜单 3 要配置引导设备, 在 Emulex 主菜单中按照以下执行 a b c d 选择同一适配器 选择 1. 配置引导设备 选择引导条目的位置 输入表示引导设备的两位数 e 输入表示启动 LUN 的两位数 (HEX)( 例如,08) f 选择引导 LUN g 选择 1. WWPN ( 使用 WWPN 而非 DID 引导此设备 ) h 选择 x 退出, 选择 Y 重新引导 4 进入系统 BIOS, 将 Emulex 移到引导控制器顺序的第一位 5 重新引导并在 SAN LUN 上安装 54 VMware, Inc.

55 第 7 章从光纤通道 SAN 引导 ESXi 将 QLogic HBA 配置为从 SAN 引导 此示例说明了如何配置 QLogic HBA 来从 SAN 引导 ESXi 此包含启用 QLogic HBA BIOS 启用可选式引导和选择引导 LUN 1 引导服务器时, 按 Ctrl+Q 可进入 Fast!UTIL 配置实用程序 2 根据 HBA 的数目执行适当的操作 选项 一个 HBA 描述 如果只有一个主机总线适配器 (HBA), 此时将显示 Fast!UTIL 选项 页面 请跳至 3 多个 HBA 如果有多个 HBA, 请手动选择 HBA a 在 选择主机适配器 页面中, 使用箭头键将光标定位到适当的 HBA 上 b 按 Enter 3 在 Fast!UTIL 选项 页面中, 选择配置设置, 然后按 Enter 4 在 配置设置 页面中, 选择适配器设置, 然后按 Enter 5 设置 BIOS 来搜索 SCSI 设备 a 在 主机适配器设置 页面中, 选择主机适配器 BIOS b 按 Enter 将值切换至 已启用 c 按 Esc 退出 6 启用可选式引导 a 选择可选式引导设置, 然后按 Enter b c 在 可选式引导设置 页面中, 选择可选式引导 按 Enter 将值切换至已启用 7 使用光标键选择存储处理器 (SP) 列表中的 引导端口名称 条目, 然后按 Enter 打开 选择光纤通道设 备 屏幕 8 使用光标键选择特定的 SP, 然后按 Enter 如果使用主动 - 被动存储阵列, 选定的 SP 必须在指向引导 LUN 的首选 ( 主动 ) 路径上 如果不确定哪个 SP 在主动路径上, 请使用存储阵列管理软件进行查找 目标 ID 由 BIOS 创建, 并可能随每次重新引导而变化 9 根据附加到 SP 的 LUN 的数量, 执行相应的操作 选项 一个 LUN 描述 选择此 LUN 作为引导 LUN 无需进入 选择 LUN 屏幕 多个 LUN 选择 LUN 屏幕将打开 使用光标选择引导 LUN, 然后按 Enter 10 如果列表中显示了其他任何存储处理器, 按 C 可清除相应的数据 11 按两次 Esc 可退出, 按 Enter 可保存设置 VMware, Inc. 55

56 56 VMware, Inc.

57 通过软件 FCoE 引导 ESXi 8 ESXi 支持从具有 FCoE 功能的网络适配器引导 从 FCoE LUN 安装并引导 ESXi 时, 主机可以使用 VMware 软件 FCoE 适配器和具有 FCoE 功能的网络适配器 主机不需要专用 FCoE HBA 您可以通过网络适配器的选项 ROM 执行大多数配置 网络适配器必须支持以下格式之一, 这些格式可将有关 FCoE 引导设备的参数传递给 VMkernel FCoE 引导固件表 (FBFT) FBFT 是 Intel 规范 FCoE 引导参数表 (FBPT) FBPT 是 VMware 为第三方供应商定义的, 用于实施软件 FCoE 引导 配置参数在您的适配器的选项 ROM 中设置 在 ESXi 安装或后续引导期间, 这些参数将以 FBFT 格式或 FBPT 格式导出至系统内存 VMkernel 可以读取配置设置, 并使用它们来访问引导 LUN 本章讨论了以下主题 : 第 57 页, 软件 FCoE 引导的要求和注意事项 第 58 页, 软件 FCoE 引导最佳做法 第 58 页, 设置软件 FCoE 引导 第 59 页, 对从软件 FCoE 安装和引导进行故障排除 软件 FCoE 引导的要求和注意事项 使用软件 FCoE 从 SAN 引导 ESXi 主机时, 某些要求和注意事项适用 要求 ESXi 5.1 或更高版本 网络适配器必须具有以下功能 : 支持 FCoE 支持 ESXi 5.x 开放式 FCoE 堆栈 包含能以 FBFT 格式或 FBPT 格式导出引导信息的 FCoE 引导固件 注意事项 您不能从 ESXi 中更改软件 FCoE 引导配置 任何软件 FCoE LUN( 包括引导 LUN) 都不支持 Coredump VMware, Inc. 57

58 预引导时不支持多路径 即使在共享存储上, 也不能与其他主机共享引导 LUN 软件 FCoE 引导最佳做法 VMware 建议了从软件 FCoE LUN 引导系统时可遵循的多个最佳做法 确保主机具有对整个引导 LUN 的访问权限 引导 LUN 不能与其他主机共享, 即使在共享存储器上也是如此 如果将 Intel 10 千兆以太网控制器 (Niantec) 用于 Cisco 交换机, 请通过以下方式配置交换机端口 : 启用跨树协议 (STP) 为用于 FCoE 的 VLAN 禁用 switchport trunk native vlan 设置软件 FCoE 引导 您可使用软件 FCoE 适配器 ( 网络适配器 ) 通过 FCoE LUN 引导 ESXi 主机 对主机进行软件 FCoE 引导配置时, 要执行多项任务 前提条件 网络适配器具有以下功能 : 支持部分 FCoE 卸载 ( 软件 FCoE) 包含 FCoE 引导固件表 (FBFT) 或 FCoE 引导参数表 (FBPT) 有关支持软件 FCoE 引导的网络适配器的信息, 请参见 vsphere 兼容性指南 1 配置软件 FCoE 引导参数第 58 页, 要支持软件 FCoE 引导过程, 主机上的网络适配器必须具有专门配置的 FCoE 引导固件 配置固件时, 为软件 FCoE 引导启用适配器并指定引导 LUN 参数 2 从软件 FCoE LUN 安装并引导 ESXi 第 59 页, 当您将系统设置为从软件 FCoE LUN 引导时, 会将 ESXi 映像安装到目标 LUN 然后您便可以从该 LUN 引导主机 配置软件 FCoE 引导参数 要支持软件 FCoE 引导过程, 主机上的网络适配器必须具有专门配置的 FCoE 引导固件 配置固件时, 为软件 FCoE 引导启用适配器并指定引导 LUN 参数 u 在网络适配器的选项 ROM 中, 指定软件 FCoE 引导参数 这些参数包括引导目标 引导 LUN VLAN ID 等 由于配置网络适配器因供应商而异, 因此, 请查看供应商文档来了解相关说明 58 VMware, Inc.

59 第 8 章通过软件 FCoE 引导 ESXi 从软件 FCoE LUN 安装并引导 ESXi 当您将系统设置为从软件 FCoE LUN 引导时, 会将 ESXi 映像安装到目标 LUN 然后您便可以从该 LUN 引导主机 前提条件 将网络适配器的选项 ROM 配置为指向要用作引导 LUN 的目标 LUN 确保您具备有关可引导 LUN 的信息 将系统 BIOS 中的引导顺序更改为以下顺序 : a b 用于软件 FCoE 引导的网络适配器 ESXi 安装介质 请参见所用系统的供应商文档 1 从 ESXi 安装 CD/DVD 启动交互式安装 ESXi 安装程序确认是否已在 BIOS 中启用 FCoE 引导, 并在需要时为支持 FCoE 的网络适配器创建标准虚拟交换机 vswitch 的名称为 VMware_FCoE_vSwitch 安装程序然后便会使用预配置的 FCoE 引导参数发现和显示所有可用的 FCoE LUN 2 在选择磁盘屏幕中, 选择您在引导参数设置中指定的软件 FCoE LUN 如果引导 LUN 未出现在此菜单中, 请确保您已对网络适配器的选项 ROM 中的引导参数进行了正确配置 3 按照提示完成安装 4 重新引导主机 5 更改系统 BIOS 中的引导顺序, 使 FCoE 引导 LUN 成为首个可引导设备 下一步 ESXi 继续从软件 FCoE LUN 引导, 直至其可以使用 如果需要, 您可以重命名和修改安装程序自动创建的 VMware_FCoE_vSwitch 确保已将 Cisco 发现协议 (CDP) 模式设置为 侦听 或 二者 对从软件 FCoE 安装和引导进行故障排除 如果从软件 FCoE LUN 安装或引导 ESXi 失败, 则可以使用以下多种故障排除的方法 问题 当使用 VMware 软件 FCoE 适配器和包含部分 FCoE 卸载功能的网络适配器从 FCoE 存储器安装或引导 ESXi 时, 安装或引导过程失败 解决方案 确保已对 FCoE 网络适配器的选项 ROM 中的引导参数进行了正确配置 在安装过程中, 监控 FCoE 网络适配器的 BIOS 中的任何错误 如果可能, 检查 VMkernel 日志中的错误 使用 esxcli 命令验证引导 LUN 是否存在 esxcli conn_options hardware bootdevice list VMware, Inc. 59

60 60 VMware, Inc.

61 光纤通道存储最佳做法 9 将 ESXi 与光纤通道 SAN 配合使用时, 请按照 VMware 提供的最佳做法以避免性能问题 vsphere Web Client 提供多种工具用于收集性能信息 这些信息以图表方式显示并时常更新 也可以使用 resxtop 或 esxtop 命令行实用程序 通过这些实用程序, 可以实时详细查看 ESXi 使用资源的情况 有关详细信息, 请参见 vsphere 资源管理文档 请咨询存储代表, 以确定存储系统是否支持 Storage API - Array Integration 硬件加速功能 如果支持硬件加速, 有关如何在存储系统端启用硬件加速支持的信息, 请参阅供应商文档 有关详细信息, 请参见第 219 页, 第 24 章 存储硬件加速 本章讨论了以下主题 : 第 61 页, 防止出现光纤通道 SAN 问题 第 62 页, 在 vsphere Web Client 中禁用自动主机注册 第 62 页, 优化光纤通道 SAN 存储器性能 第 63 页, 光纤通道 SAN 配置对照表 防止出现光纤通道 SAN 问题 将 ESXi 与光纤通道 SAN 一起使用时, 必须依照特定准则才能避免 SAN 问题 应特别留意这些防止出现 SAN 配置问题的提示 : 每个 LUN 上仅放置一个 VMFS 数据存储 不要更改系统为您设置的路径策略, 除非您了解做出此类更改的影响 将所有信息记录在案 其中包括涉及以下项目的信息 : 区域分配 访问控制 存储器 交换机 服务器和 FC HBA 配置 软件和固件版本以及存储器线缆布局 对故障情况进行规划 : 制作多个拓扑映射副本 考虑每一元素发生故障时可能对 SAN 带来的影响 除去不同链接 交换机 HBA 和其他元素, 确保未遗漏设计中的关键故障点 确保根据插槽和总线速度将光纤通道 HBA 安装到主机中的正确插槽 在服务器中的可用总线之间平衡 PCI 总线负载 在所有可视点 ( 包括主机的性能图表 FC 交换机统计信息及存储性能统计信息 ) 熟悉存储网络中的不同 监控点 VMware, Inc. 61

62 对于包含 ESXi 主机正在使用的 VMFS 数据存储的 LUN, 更改其 ID 时, 请务必小心操作 如果您更改此 ID, 则数据存储变为非活动状态, 且其虚拟机失败 可以对数据存储进行重新签名, 使其再次处于活动状态 请参见第 133 页, 管理重复 VMFS 数据存储 如果 VMFS 数据存储上没有正在运行的虚拟机, 则在您更改 LUN 的 ID 后, 必须使用重新扫描在主机上重置 ID 有关使用重新扫描的详细信息, 请参阅第 116 页, 存储刷新和重新扫描操作 在 vsphere Web Client 中禁用自动主机注册 当使用 EMC CLARiiON 或 Invista 阵列进行存储时, 需要在阵列中注册主机 ESXi 通过将主机的名称和 IP 地址发送到阵列来执行自动主机注册 如果更喜欢使用存储管理软件执行手动注册, 请禁用 ESXi 自动注册功能 1 在 vsphere Web Client 导航器中, 浏览到主机 2 依次单击管理选项卡和设置 3 在 系统 下, 单击高级系统设置 4 在 高级系统设置 下, 选择 Disk.EnableNaviReg 参数, 然后单击编辑图标 5 将该值设置为 0 这将禁用默认情况下启用的自动主机注册 优化光纤通道 SAN 存储器性能 要优化典型 SAN 环境, 需要考虑多个因素 如果环境配置正确,SAN 架构组件 ( 特别是 SAN 交换机 ) 对优化的影响较小, 因为这些组件的延迟相对于服务器和存储阵列而言较短 确保经由交换机架构的路径尚未饱和, 即交换机架构未以最高吞吐量运行 存储阵列性能 存储阵列性能是影响整个 SAN 环境性能的主要因素之一 如果存储阵列性能存在问题, 务必参考存储阵列供应商文档了解任何相关信息 请遵循以下常规准则以提高 vsphere 环境中的阵列性能 : 分配 LUN 时, 请记住, 每个 LUN 由多台主机访问, 而且各主机上可运行多台虚拟机 由主机使用的一个 LUN 可向运行于不同操作系统的多个不同应用程序提供 I/O 服务 由于此工作负载并非恒定不变,ESXi LUN 所在的 RAID 组不应包括其他服务器所使用的 LUN, 这些服务器上未运行 ESXi 确保启用了读 / 写缓存 需要不断对 SAN 存储阵列进行重新设计和调试, 以确保所有存储阵列路径间的 I/O 负载平衡 为满足此要求, 请在所有 SP 间分发指向 LUN 的路径以提供最佳负载平衡效果 密切监控可指示何时需要重新平衡 LUN 的分发 调试静态平衡存储阵列即是监控特定性能统计信息 ( 如每秒 I/O 操作数 每秒块数及响应时间 ) 并通过分发 LUN 工作负载将工作负载分散到所有 SP 注意 ESXi 目前尚不支持动态负载平衡 62 VMware, Inc.

63 第 9 章光纤通道存储最佳做法 光纤通道的服务器性能 为确保最佳服务器性能, 必须考虑几个因素 各服务器应用程序访问其专用存储器时必须满足以下条件 : 高 I/O 速率 ( 每秒 I/O 操作数 ) 高吞吐量 ( 每秒兆字节数 ) 最小延迟 ( 响应时间 ) 由于各应用程序的要求不尽相同, 您可以选择存储阵列上的适当 RAID 组来实现上述目标 要实现性能目标, 请执行以下操作 : 将每个 LUN 置于提供必要性能级别的 RAID 组 请注意所分配的 RAID 组中其他 LUN 的活动及资源利用率 对于高性能 RAID 组, 因有过多应用程序对其执行 I/O 操作, 它可能无法满足 ESXi 主机上运行的应用程序所需的性能目标 确保各服务器具有足够多的 HBA, 能满足高峰时段服务器上托管的所有应用程序的最大吞吐量 将 I/O 分散到多个 HBA 可为各应用程序提供更高的吞吐量及更短的延迟 要在 HBA 发生故障时提供冗余, 请确保服务器连接一个双冗余架构 为 ESXi 系统分配 LUN 或 RAID 组时, 多个操作系统将使用和共享该资源 因此, 当您使用 ESXi 系统时, 存储子系统中各个 LUN 所需的性能要远高于使用物理机的情况 例如, 如果计划运行四个 I/O 密集型应用程序, 请为 ESXi LUN 分配四倍大小的性能容量 将多个 ESXi 系统与 vcenter Server 一起使用时, 存储子系统所需的性能将相应增加 ESXi 系统上运行的应用程序所需的待处理 I/O 数目应与 HBA 和存储阵列能处理的 I/O 数目相匹配 光纤通道 SAN 配置对照表 本主题提供不同存储阵列和 ESXi 主机的特殊设置要求对照表 表 9 1 多路径设置要求 组件 所有存储阵列 拓扑 IBM TotalStorage DS 4000 ( 之前称为 FastT) 备注没有备用电池时必须禁用写入缓存 一处故障不会导致 HBA 和 SP 同时进行故障切换, 尤其是使用主动 - 被动存储阵列时 在较高版本中, 主机类型必须为 LNXCL 或 VMware 此主机模式中禁用 AVT( 自动卷传输,Auto Volume Transfer) HDS 99xx 和 95xxV 系列 HDS 9500V 系列 (Thunder) 需要两种主机模式 : 主机模式 1:Standard 主机模式 2:Sun Cluster HDS 99xx 系列 (Lightning) 及 HDS Tabma (USP) 需将主机模式设置为 Netware EMC Symmetrix EMC Clariion 启用 SPC2 和 SC3 设置 请联系 EMC 获取最新设置 将 EMC Clariion 故障切换模式设置为 1 或 4 有关详细信息, 请与 EMC 联系 HP MSA 主机类型必须为 Linux 将每个 HBA 端口的连接类型设置为 Linux HP EVA 对于 EVA4000/6000/8000 固件 和更高版本, 请将主机类型设置为 VMware 否则将主机模式类型设置为 Custom 值为: E HP XP 在 XP128/1024/10000/12000 上, 将主机模式设置为 Windows (0x0C) 在 XP24000/20000 上, 将主机模式设置为 0x01 VMware, Inc. 63

64 表 9 1 多路径设置要求 ( 续 ) 组件 NetApp 备注 无特定要求 ESXi 配置 对于主动 - 被动阵列上托管群集磁盘的所有 LUN, 使用 最近使用的 PSP 对于主动 - 主动阵列上的 LUN, 可以使用 最近使用 PSP 或 固定 PSP 对于主动 - 被动或主动 - 主动阵列, 可以使用 循环 PSP 所有 FC HBA 必须为同一型号 为主机设置以下软件高级设置 : 将 Disk.UseLunReset 设置为 1 64 VMware, Inc.

65 将 ESXi 与 iscsi SAN 配合使用 10 您可以将 ESXi 与存储区域网络 (SAN) 配合使用,SAN 是将计算机系统连接至高性能存储子系统的专用高速网络 将 ESXi 与 SAN 配合使用可提供存储器整合, 提高可靠性, 并在灾难恢复方面提供帮助 要将 ESXi 与 SAN 有效地配合使用, 您必须掌握 ESXi 系统和 SAN 概念的相关应用知识 此外, 将 ESXi 主机设置为使用 Internet SCSI (iscsi) SAN 存储系统时, 必须了解存在的若干特殊注意事项 本章讨论了以下主题 : 第 65 页, iscsi SAN 概念 第 69 页, 虚拟机如何访问 iscsi SAN 上的数据 iscsi SAN 概念 如果您是管理员, 并计划设置 ESXi 主机与 iscsi SAN 配合使用, 那么您必须掌握 iscsi 概念的相关应用知识 iscsi SAN 在计算机系统或主机服务器与高性能存储子系统之间使用以太网连接 SAN 组件包括主机服务器中的 iscsi 主机总线适配器 (HBA) 或网络接口卡 (NIC) 传输存储流量的交换机和路由器 电缆 存储处理器 (SP) 及存储磁盘系统 iscsi SAN 使用客户端 - 服务器架构 客户端 ( 也称为 iscsi 启动器 ) 在主机上操作 它通过发出 SCSI 命令并将封装到 iscsi 协议中的这些命令传输到服务器来启动 iscsi 会话 服务器也称为 iscsi 目标 iscsi 目标表示网络上的物理存储系统 它也可以由虚拟 iscsi SAN( 例如, 正在虚拟机中运行的 iscsi 目标仿真器 ) 提供 iscsi 目标通过传输必需的 iscsi 数据响应启动器的命令 iscsi 多路径 在主机服务器与存储器之间传输数据时,SAN 将使用一种叫做多路径的技术 使用多路径, 您可以通过多条物理路径从 ESXi 主机到达存储系统上的 LUN 通常, 从主机到 LUN 的单一路径包括 iscsi 适配器或网卡 交换机端口 连接电缆和存储控制器端口 如果路径中的任何组件出现故障, 主机将选择另一条可用路径用于 I/O 检测故障路径并切换到另一条路径的过程称为路径故障切换 有关多路径的详细信息, 请参见第 199 页, 第 23 章 了解多路径和故障切换 VMware, Inc. 65