vSphere 可用性指南

Size: px
Start display at page:

Download "vSphere 可用性指南"

Transcription

1 ESX 4.1 ESXi 4.1 vcenter Server 4.1 在 本 文 档 被 更 新 的 版 本 替 代 之 前, 本 文 档 支 持 列 出 的 每 个 产 品 的 版 本 和 所 有 后 续 版 本 要 查 看 本 文 档 的 更 新 版 本, 请 访 问 ZH_CN

2 最 新 的 技 术 文 档 可 以 从 VMware 网 站 下 载 : VMware 网 站 还 提 供 最 近 的 产 品 更 新 信 息 您 如 果 对 本 文 档 有 任 何 意 见 或 建 议, 请 把 反 馈 信 息 提 交 至 : docfeedback@vmware.com 版 权 所 有 2009, 2010 VMware, Inc. 保 留 所 有 权 利 本 产 品 受 美 国 和 国 际 版 权 及 知 识 产 权 法 的 保 护 VMware 产 品 受 一 项 或 多 项 专 利 保 护, 有 关 专 利 详 情, 请 访 问 VMware 是 VMware, Inc. 在 美 国 和 / 或 其 他 法 律 辖 区 的 注 册 商 标 或 商 标 此 处 提 到 的 所 有 其 他 商 标 和 名 称 分 别 是 其 各 自 公 司 的 商 标 VMware, Inc Hillview Ave. Palo Alto, CA 北 京 办 公 室 北 京 市 海 淀 区 科 学 院 南 路 2 号 融 科 资 讯 中 心 C 座 南 8 层 上 海 办 公 室 上 海 市 浦 东 新 区 浦 东 南 路 999 号 新 梅 联 合 广 场 23 楼 广 州 办 公 室 广 州 市 天 河 北 路 233 号 中 信 广 场 7401 室 2 VMware, Inc.

3 目 录 关 于 本 文 档 5 1 业 务 连 续 性 和 最 小 化 停 机 时 间 7 减 少 计 划 的 停 机 时 间 7 防 止 非 计 划 停 机 时 间 8 VMware HA 提 供 快 速 中 断 恢 复 8 VMware 容 错 提 供 连 续 可 用 性 9 2 创 建 和 使 用 VMware HA 群 集 11 VMware HA 的 工 作 方 式 11 VMware HA 接 入 控 制 13 VMware HA 对 照 表 17 创 建 VMware HA 群 集 18 自 定 义 VMware HA 行 为 22 VMware HA 群 集 的 最 佳 做 法 24 3 为 虚 拟 机 提 供 容 错 27 容 错 的 工 作 方 式 27 将 容 错 功 能 与 DRS 配 合 使 用 28 容 错 用 例 28 容 错 对 照 表 29 容 错 互 操 作 性 30 为 容 错 准 备 群 集 和 主 机 31 为 虚 拟 机 提 供 容 错 34 查 看 有 关 容 错 虚 拟 机 的 信 息 36 容 错 最 佳 做 法 37 VMware 容 错 配 置 建 议 39 容 错 故 障 排 除 39 附 录 : 容 错 错 误 消 息 43 索 引 47 VMware, Inc. 3

4 4 VMware, Inc.

5 关 于 本 文 档 目 标 读 者 vsphere 可 用 性 指 南 介 绍 提 供 业 务 连 续 性 的 解 决 方 案, 包 括 如 何 建 立 VMware High Availability (HA) 和 VMware 容 错 本 文 档 专 供 需 要 通 过 VMware HA 和 容 错 解 决 方 案 提 供 业 务 连 续 性 的 用 户 使 用 本 书 的 目 标 读 者 为 熟 悉 虚 拟 机 技 术 和 数 据 中 心 操 作 且 具 有 丰 富 经 验 的 Windows 或 Linux 系 统 管 理 员 VMware 技 术 出 版 物 词 汇 表 文 档 反 馈 VMware 技 术 出 版 物 提 供 了 一 个 词 汇 表, 其 中 包 含 一 些 您 可 能 不 熟 悉 的 术 语 有 关 VMware 技 术 文 档 中 所 使 用 的 术 语 的 定 义, 请 访 问 VMware 欢 迎 您 提 出 宝 贵 建 议, 以 便 改 进 我 们 的 文 档 如 有 意 见, 请 将 反 馈 发 送 到 vsphere 文 档 vsphere 文 档 包 括 VMware vcenter Server 和 ESX/ESXi 文 档 集 vsphere 可 用 性 指 南 涵 盖 了 ESX ESXi 和 vcenter Server VMware, Inc. 5

6 技 术 支 持 和 教 育 资 源 您 可 以 获 取 以 下 技 术 支 持 资 源 有 关 本 文 档 和 其 他 文 档 的 最 新 版 本, 请 访 问 : 在 线 支 持 和 电 话 支 持 要 通 过 在 线 支 持 提 交 技 术 支 持 请 求 查 看 产 品 和 合 同 信 息 以 及 注 册 您 的 产 品, 请 访 问 客 户 只 要 拥 有 相 应 的 支 持 合 同, 就 可 以 通 过 电 话 支 持, 尽 快 获 得 对 优 先 级 高 的 问 题 的 答 复 请 访 问 支 持 服 务 项 目 VMware 专 业 服 务 要 了 解 VMware 支 持 服 务 项 目 如 何 帮 助 您 满 足 业 务 需 求, 请 访 问 VMware 教 育 服 务 课 程 提 供 了 大 量 实 践 操 作 环 境 案 例 研 究 示 例, 以 及 用 作 作 业 参 考 工 具 的 课 程 材 料 这 些 课 程 可 以 通 过 现 场 指 导 教 室 授 课 的 方 式 学 习, 也 可 以 通 过 在 线 直 播 的 方 式 学 习 关 于 现 场 试 点 项 目 及 实 施 的 最 佳 实 践, VMware 咨 询 服 务 可 提 供 多 种 服 务, 协 助 您 评 估 计 划 构 建 和 管 理 虚 拟 环 境 要 了 解 有 关 教 育 课 程 认 证 计 划 和 咨 询 服 务 的 信 息, 请 访 问 6 VMware, Inc.

7 业 务 连 续 性 和 最 小 化 停 机 时 间 1 无 论 是 计 划 停 机 时 间 还 是 非 计 划 停 机 时 间, 都 会 带 来 相 当 大 的 成 本 但 是, 用 于 确 保 更 高 级 别 可 用 性 的 传 统 解 决 方 案 都 需 要 较 大 开 销, 并 且 难 以 实 施 和 管 理 VMware 软 件 可 为 重 要 应 用 程 序 提 供 更 高 级 别 的 可 用 性, 并 且 操 作 更 简 单, 成 本 更 低 使 用 vsphere, 组 织 可 以 轻 松 提 高 为 所 有 应 用 程 序 提 供 的 基 准 级 别, 并 且 以 更 低 成 本 和 更 简 单 的 操 作 来 实 现 更 高 级 别 的 可 用 性 使 用 vsphere, 您 可 以 : 独 立 于 硬 件 操 作 系 统 和 应 用 程 序 提 供 更 高 可 用 性 消 除 常 见 维 护 操 作 的 计 划 停 机 时 间 在 出 现 故 障 时 提 供 自 动 恢 复 vsphere 可 以 减 少 计 划 的 停 机 时 间, 防 止 出 现 非 计 划 停 机, 并 迅 速 从 断 电 中 恢 复 本 章 讨 论 了 以 下 主 题 : 第 7 页, 减 少 计 划 的 停 机 时 间 第 8 页, 防 止 非 计 划 停 机 时 间 第 8 页, VMware HA 提 供 快 速 中 断 恢 复 第 9 页, VMware 容 错 提 供 连 续 可 用 性 减 少 计 划 的 停 机 时 间 计 划 的 停 机 时 间 通 常 占 数 据 中 心 停 机 时 间 的 80% 以 上 硬 件 维 护 服 务 器 迁 移 和 固 件 更 新 均 需 要 将 物 理 服 务 器 停 机 为 最 小 化 此 停 机 时 间 的 影 响, 会 强 制 组 织 延 迟 维 护, 直 到 出 现 不 便 且 难 以 调 度 的 停 机 时 间 段 通 过 vsphere, 组 织 可 以 显 著 减 少 计 划 的 停 机 时 间 由 于 vsphere 环 境 中 的 工 作 负 载 无 需 停 机 或 服 务 中 断 就 可 以 动 态 移 动 到 其 他 物 理 服 务 器, 所 以 服 务 器 维 护 无 需 应 用 程 序 和 服 务 停 机 就 可 以 执 行 通 过 vsphere, 组 织 可 以 执 行 以 下 任 务 : 消 除 常 见 维 护 操 作 的 停 机 时 间 消 除 计 划 的 维 护 时 间 段 随 时 执 行 维 护, 无 需 中 断 用 户 和 服 务 由 于 VMware 环 境 中 的 工 作 负 载 无 需 中 断 服 务 即 可 动 态 移 动 到 不 同 的 物 理 服 务 器 或 基 础 存 储 器, 所 以, 通 过 vsphere 中 的 VMware vmotion 和 Storage vmotion 功 能, 组 织 可 以 减 少 计 划 的 停 机 时 间 管 理 员 可 以 快 速 而 完 整 地 执 行 透 明 的 维 护 操 作, 无 需 强 制 调 度 不 方 便 的 维 护 时 间 段 VMware, Inc. 7

8 防 止 非 计 划 停 机 时 间 在 ESX/ESXi 主 机 为 应 用 程 序 的 运 行 提 供 稳 定 平 台 时, 组 织 还 必 须 保 护 自 身, 避 免 出 现 硬 件 或 应 用 程 序 故 障 所 导 致 的 非 计 划 停 机 时 间 vsphere 将 重 要 功 能 构 建 到 数 据 中 心 基 础 结 构 中, 这 有 助 于 避 免 出 现 非 计 划 停 机 时 间 这 些 vsphere 功 能 是 虚 拟 基 础 结 构 的 一 部 分, 因 此, 对 操 作 系 统 以 及 虚 拟 机 中 运 行 的 应 用 程 序 而 言 是 透 明 的 这 些 功 能 可 以 进 行 配 置, 而 且 可 供 物 理 系 统 上 的 所 有 虚 拟 机 使 用, 从 而 降 低 成 本 并 降 低 实 现 高 可 用 性 的 复 杂 程 度 vsphere 中 内 置 的 关 键 容 错 功 能 : 共 享 存 储 器 通 过 在 共 享 存 储 器 ( 如 光 纤 通 道 iscsi SAN 或 NAS) 上 存 储 虚 拟 机 文 件 来 消 除 单 一 故 障 点 可 以 使 用 SAN 镜 像 和 复 制 功 能 将 虚 拟 磁 盘 的 更 新 副 本 保 留 在 灾 难 恢 复 站 点 网 络 接 口 绑 定 允 许 单 个 网 卡 发 生 故 障 存 储 多 路 径 允 许 存 储 路 径 发 生 故 障 除 了 这 些 功 能 外,VMware HA 和 容 错 功 能 分 别 通 过 提 供 中 断 快 速 恢 复 和 连 续 可 用 性 来 最 小 化 或 消 除 非 计 划 停 机 时 间 VMware HA 提 供 快 速 中 断 恢 复 VMware HA 利 用 配 置 为 群 集 的 多 台 ESX/ESXi 主 机, 为 虚 拟 机 中 运 行 的 应 用 程 序 提 供 快 速 中 断 恢 复 和 具 有 成 本 效 益 的 高 可 用 性 VMware HA 通 过 以 下 方 式 保 护 应 用 程 序 可 用 性 : 通 过 在 群 集 内 的 其 他 主 机 上 重 新 启 动 虚 拟 机, 防 止 服 务 器 故 障 通 过 持 续 监 控 虚 拟 机 并 在 检 测 到 故 障 时 对 其 进 行 重 新 设 置, 防 止 应 用 程 序 故 障 与 其 他 群 集 解 决 方 案 不 同,VMware HA 提 供 基 础 架 构 并 使 用 该 基 础 架 构 保 护 所 有 工 作 负 载 : 无 需 在 应 用 程 序 或 虚 拟 机 内 安 装 特 殊 软 件 所 有 工 作 负 载 均 受 VMware HA 保 护 配 置 VMware HA 之 后, 不 需 要 执 行 操 作 即 可 保 护 新 虚 拟 机 它 们 会 自 动 受 到 保 护 可 以 将 VMware HA 与 VMware Distributed Resource Scheduler (DRS) 结 合 使 用 以 防 止 出 现 故 障, 以 及 在 群 集 内 的 主 机 之 间 提 供 负 载 平 衡 与 传 统 的 故 障 切 换 解 决 方 案 相 比,VMware HA 具 有 多 个 优 势 : 最 小 化 设 置 减 少 了 硬 件 成 本 和 设 置 提 高 了 应 用 程 序 的 可 用 性 DRS 和 vmotion 集 成 设 置 VMware HA 群 集 之 后, 群 集 内 的 所 有 虚 拟 机 无 需 额 外 配 置 即 可 获 得 故 障 切 换 支 持 虚 拟 机 可 充 当 应 用 程 序 的 移 动 容 器, 可 在 主 机 之 间 移 动 管 理 员 会 避 免 在 多 台 计 算 机 上 进 行 重 复 配 置 使 用 VMware HA 时, 必 须 拥 有 足 够 的 资 源 来 对 要 通 过 VMware HA 保 护 的 主 机 数 进 行 故 障 切 换 但 是,vCenter Server 系 统 会 自 动 管 理 资 源 并 配 置 群 集 虚 拟 机 内 运 行 的 任 何 应 用 程 序 的 可 用 性 变 得 更 高 虚 拟 机 可 以 从 硬 件 故 障 中 恢 复, 提 高 了 在 引 导 周 期 内 启 动 的 所 有 应 用 程 序 的 可 用 性, 而 且 没 有 额 外 的 计 算 需 求, 即 使 该 应 用 程 序 本 身 不 是 群 集 应 用 程 序 也 一 样 通 过 监 控 和 响 应 VMware Tools 检 测 信 号 并 重 置 未 响 应 的 虚 拟 机, 可 防 止 客 户 机 操 作 系 统 崩 溃 如 果 主 机 发 生 了 故 障, 并 且 在 其 他 主 机 上 重 新 启 动 了 虚 拟 机, 则 DRS 会 提 出 迁 移 建 议 或 迁 移 虚 拟 机 以 平 衡 资 源 分 配 如 果 迁 移 的 源 主 机 和 目 标 主 机 中 的 一 台 或 者 两 台 发 生 故 障, 则 VMware HA 会 帮 助 从 该 故 障 中 恢 复 8 VMware, Inc.

9 章 1 业 务 连 续 性 和 最 小 化 停 机 时 间 VMware 容 错 提 供 连 续 可 用 性 VMware HA 通 过 在 主 机 出 现 故 障 时 重 新 启 动 虚 拟 机 来 为 虚 拟 机 提 供 基 本 级 别 的 保 护 VMware 容 错 可 提 供 更 高 级 别 的 可 用 性, 允 许 用 户 对 任 何 虚 拟 机 进 行 保 护 以 防 止 主 机 发 生 数 据 事 务 或 连 接 丢 失 等 故 障 容 错 使 用 ESX/ESXi 主 机 平 台 上 的 VMware vlockstep 技 术 以 提 供 连 续 可 用 性 通 过 确 保 主 虚 拟 机 和 辅 助 虚 拟 机 的 状 态 在 虚 拟 机 的 指 令 执 行 的 任 何 时 间 点 均 相 同 来 提 供 连 续 可 用 性 vlockstep 通 过 使 主 虚 拟 机 和 辅 助 虚 拟 机 执 行 相 同 的 x86 指 令 序 列 来 达 到 此 要 求 主 虚 拟 机 捕 获 所 有 输 入 和 事 件 ( 从 处 理 器 到 虚 拟 I/O 设 备 ), 并 在 辅 助 虚 拟 机 上 进 行 重 放 辅 助 虚 拟 机 执 行 与 主 虚 拟 机 相 同 的 指 令 序 列, 而 仅 单 个 虚 拟 机 映 像 ( 主 虚 拟 机 ) 执 行 工 作 负 载 如 果 运 行 主 虚 拟 机 的 主 机 或 运 行 辅 助 虚 拟 机 的 主 机 发 生 故 障, 则 会 发 生 透 明 故 障 切 换 正 常 运 行 的 ESX/ESXi 主 机 将 无 缝 变 成 主 虚 拟 机 的 主 机, 而 不 会 断 开 网 络 连 接 或 中 断 正 在 处 理 的 事 务 使 用 透 明 故 障 切 换, 不 会 有 数 据 损 失, 并 且 可 以 维 护 网 络 连 接 在 进 行 透 明 故 障 切 换 之 后, 将 重 新 生 成 新 的 辅 助 虚 拟 机, 并 将 重 新 建 立 冗 余 整 个 过 程 是 透 明 且 全 自 动 的, 并 且 即 使 vcenter Server 不 可 用, 也 会 发 生 VMware, Inc. 9

10 10 VMware, Inc.

11 创 建 和 使 用 VMware HA 群 集 2 VMware HA 群 集 允 许 ESX/ESXi 主 机 集 合 作 为 一 个 组 协 同 工 作, 这 些 主 机 为 虚 拟 机 提 供 的 可 用 性 级 别 比 ESX/ESXi 主 机 单 独 提 供 的 级 别 要 高 当 规 划 新 VMware HA 群 集 的 创 建 和 使 用 时, 您 选 择 的 选 项 会 影 响 群 集 对 主 机 或 虚 拟 机 故 障 的 响 应 方 式 在 创 建 VMware HA 群 集 之 前, 应 清 楚 VMware HA 标 识 主 机 故 障 和 隔 离 以 及 响 应 这 些 情 况 的 方 式 还 应 了 解 接 入 控 制 的 工 作 方 式 以 便 可 以 选 择 最 适 合 故 障 切 换 需 要 的 策 略 在 建 立 群 集 之 后, 通 过 执 行 下 列 建 议 的 最 佳 做 法, 可 以 使 用 高 级 属 性 自 定 义 其 行 为 并 优 化 其 性 能 本 章 讨 论 了 以 下 主 题 : 第 11 页, VMware HA 的 工 作 方 式 第 13 页, VMware HA 接 入 控 制 第 17 页, VMware HA 对 照 表 第 18 页, 创 建 VMware HA 群 集 第 22 页, 自 定 义 VMware HA 行 为 第 24 页, VMware HA 群 集 的 最 佳 做 法 VMware HA 的 工 作 方 式 VMware HA 可 以 将 虚 拟 机 及 其 所 驻 留 的 主 机 集 中 在 群 集 内, 从 而 为 虚 拟 机 提 供 高 可 用 性 群 集 中 的 主 机 均 会 受 到 监 控, 如 果 发 生 故 障, 故 障 主 机 上 的 虚 拟 机 将 在 备 用 主 机 上 重 新 启 动 VMware HA 群 集 中 的 首 选 主 机 和 辅 助 主 机 在 将 主 机 添 加 到 VMware HA 群 集 时, 代 理 将 上 载 到 主 机, 并 配 置 为 与 群 集 内 的 其 他 代 理 通 信 添 加 到 群 集 的 前 五 台 主 机 将 指 定 为 首 选 主 机, 随 后 的 所 有 主 机 将 指 定 为 辅 助 主 机 首 选 主 机 维 护 和 复 制 所 有 群 集 状 况, 并 用 于 启 动 故 障 切 换 操 作 如 果 从 群 集 内 移 除 某 台 首 选 主 机, 则 VMware HA 会 将 另 一 台 ( 辅 助 ) 主 机 提 升 为 首 选 状 态 如 果 某 台 首 选 主 机 将 长 时 间 处 于 脱 机 状 态, 应 从 群 集 中 移 除 该 主 机, 以 便 它 可 以 被 辅 助 主 机 替 代 VMware, Inc. 11

12 加 入 群 集 的 任 何 主 机 必 须 与 现 有 首 选 主 机 通 信 以 完 成 其 配 置 ( 当 您 正 在 将 第 一 台 主 机 添 加 到 群 集 时 除 外 ) 必 须 至 少 有 一 台 首 选 主 机 运 行 正 常, 以 便 VMware HA 正 确 进 行 操 作 如 果 所 有 首 选 主 机 均 不 可 用 ( 不 响 应 ), 则 无 法 为 VMware HA 成 功 配 置 任 何 主 机 在 规 划 群 集 的 规 模 时, 应 考 虑 每 个 群 集 五 台 首 选 主 机 的 限 制 同 样, 如 果 群 集 是 在 刀 片 服 务 器 环 境 中 实 施 的, 则 一 个 刀 片 机 箱 中 最 多 只 能 容 纳 四 台 首 选 主 机 如 果 所 有 五 台 首 选 主 机 位 于 同 一 机 箱 内, 且 该 机 箱 出 现 了 故 障, 则 群 集 将 失 去 VMware HA 保 护 其 中 一 台 首 选 主 机 还 将 指 定 为 活 动 首 选 主 机, 其 职 责 包 括 : 决 定 在 何 处 重 新 启 动 虚 拟 机 跟 踪 失 败 的 重 新 启 动 尝 试 确 定 尝 试 重 新 启 动 虚 拟 机 的 适 当 时 间 如 果 活 动 首 选 主 机 发 生 故 障, 则 另 一 台 首 选 主 机 会 将 其 替 换 故 障 检 测 和 主 机 网 络 隔 离 代 理 会 相 互 通 信, 并 监 控 群 集 内 各 台 主 机 的 活 跃 度 默 认 情 况 下, 此 通 信 通 过 每 秒 交 换 一 次 检 测 信 号 来 完 成 如 果 15 秒 过 去 后 仍 未 收 到 检 测 信 号, 而 且 ping 不 到 该 主 机, 则 系 统 会 声 明 该 主 机 发 生 故 障 如 果 出 现 了 主 机 故 障, 则 在 该 主 机 上 运 行 的 虚 拟 机 将 进 行 故 障 切 换, 即 在 备 用 主 机 上 重 新 启 动 注 意 主 机 出 现 故 障 时,VMware HA 不 会 将 任 何 虚 拟 机 故 障 切 换 到 维 护 模 式 下 的 主 机 主 机 网 络 隔 离 在 主 机 仍 在 运 行 但 已 经 无 法 再 与 群 集 内 的 其 他 主 机 通 信 时 发 生 在 默 认 设 置 中, 如 果 主 机 停 止 接 收 群 集 内 所 有 其 他 主 机 的 检 测 信 号 的 时 间 超 过 12 秒 钟, 则 将 尝 试 ping 其 隔 离 地 址 如 果 仍 然 失 败, 主 机 将 声 明 自 己 已 与 网 络 隔 离 只 有 在 未 从 群 集 中 的 其 他 任 何 主 机 收 到 检 测 信 号 时, 才 ping 隔 离 地 址 如 果 在 15 秒 或 更 长 的 时 间 内 隔 离 主 机 的 网 络 连 接 仍 未 恢 复, 则 群 集 内 的 其 他 主 机 将 认 定 已 隔 离 主 机 出 现 了 故 障, 并 会 尝 试 对 其 虚 拟 机 进 行 故 障 切 换 但 是, 如 果 隔 离 主 机 保 留 对 共 享 存 储 器 的 访 问 权 限, 则 它 也 会 保 留 虚 拟 机 文 件 上 的 磁 盘 锁 为 避 免 潜 在 数 据 损 坏,VMFS 磁 盘 锁 定 会 阻 止 对 虚 拟 机 磁 盘 文 件 同 时 进 行 写 操 作, 并 尝 试 故 障 切 换 隔 离 主 机 的 虚 拟 机 故 障 默 认 情 况 下, 隔 离 主 机 将 关 闭 其 虚 拟 机, 但 您 可 以 将 主 机 隔 离 响 应 更 改 为 保 持 启 动 或 关 闭 电 源 请 参 见 第 20 页, 虚 拟 机 选 项 注 意 如 果 您 确 保 网 络 基 础 结 构 具 有 足 够 的 冗 余 度 且 至 少 有 一 个 网 络 路 径 始 终 可 用, 则 主 机 网 络 隔 离 应 该 在 极 少 数 情 况 下 才 出 现 结 合 使 用 VMware HA 和 DRS 将 VMware HA 和 Distributed Resource Scheduler (DRS) 一 起 使 用, 可 将 自 动 故 障 切 换 与 负 载 平 衡 相 结 合 这 种 结 合 可 在 VMware HA 将 虚 拟 机 移 至 其 他 主 机 后 更 快 再 平 衡 虚 拟 机 VMware HA 执 行 故 障 切 换 并 在 其 他 主 机 上 重 新 启 动 虚 拟 机 时, 首 要 任 务 就 是 使 所 有 的 虚 拟 机 立 即 可 用 重 新 启 动 虚 拟 机 后, 启 动 这 些 虚 拟 机 的 主 机 可 能 会 负 载 过 重, 而 其 他 主 机 则 相 对 负 载 较 轻 VMware HA 使 用 虚 拟 机 的 CPU 和 内 存 预 留 来 确 定 主 机 是 否 有 足 够 的 空 闲 容 量 容 纳 虚 拟 机 在 结 合 使 用 DRS 和 VMware HA 并 且 启 用 了 接 入 控 制 的 群 集 内, 可 能 不 会 从 正 在 进 入 维 护 模 式 的 主 机 上 撤 出 虚 拟 机 这 种 行 为 的 出 现 是 由 于 用 于 重 新 启 动 虚 拟 机 的 预 留 资 源 出 现 了 故 障 必 须 使 用 vmotion 将 虚 拟 机 手 动 迁 出 主 机 在 某 些 情 况 下,VMware HA 可 能 由 于 资 源 限 制 而 无 法 对 虚 拟 机 进 行 故 障 切 换 这 种 情 况 的 出 现 有 多 种 原 因 禁 用 了 HA 接 入 控 制, 但 启 用 了 Distributed Power Management (DPM) 这 会 导 致 DPM 将 虚 拟 机 整 合 到 较 少 数 量 的 主 机 上, 并 将 空 主 机 置 于 待 机 模 式, 使 得 没 有 足 够 的 已 启 动 容 量 来 执 行 故 障 切 换 虚 拟 机 - 主 机 关 联 性 规 则 ( 必 需 ) 可 能 会 限 制 可 以 容 纳 某 些 虚 拟 机 的 主 机 可 能 有 足 够 多 的 聚 合 资 源, 但 这 些 资 源 在 多 台 主 机 上 是 资 源 碎 片, 因 此 虚 拟 机 无 法 使 用 它 们 进 行 故 障 切 换 在 这 些 情 况 下,VMware HA 将 使 用 DRS 尝 试 调 整 群 集 ( 例 如, 通 过 使 主 机 退 出 待 机 模 式 或 者 迁 移 虚 拟 机 以 整 理 群 集 资 源 碎 片 ), 以 便 HA 可 以 执 行 故 障 切 换 12 VMware, Inc.

13 章 2 创 建 和 使 用 VMware HA 群 集 如 果 DPM 处 于 手 动 模 式, 则 可 能 需 要 确 认 主 机 启 动 建 议 同 样, 如 果 DRS 处 于 手 动 模 式, 可 能 需 要 确 认 迁 移 建 议 如 果 正 在 使 用 必 需 的 虚 拟 机 - 主 机 关 联 性 规 则, 应 了 解 不 能 违 反 这 些 规 则 如 果 执 行 故 障 切 换 违 反 这 种 规 则, VMware HA 将 不 会 执 行 故 障 切 换 有 关 DRS 的 详 细 信 息, 请 参 见 资 源 管 理 指 南 VMware HA 接 入 控 制 vcenter Server 使 用 接 入 控 制 来 确 保 群 集 内 具 有 足 够 的 资 源, 以 便 提 供 故 障 切 换 保 护 并 确 保 考 虑 虚 拟 机 资 源 预 留 有 三 种 类 型 的 接 入 控 制 可 用 主 机 确 保 主 机 有 足 够 资 源 来 满 足 其 上 运 行 的 所 有 虚 拟 机 的 预 留 资 源 池 确 保 资 源 池 有 足 够 资 源 来 满 足 与 其 关 联 的 所 有 虚 拟 机 的 预 留 份 额 和 限 制 VMware HA 确 保 预 留 了 足 够 的 群 集 资 源, 以 便 在 主 机 发 生 故 障 时 恢 复 虚 拟 机 接 入 控 制 对 资 源 使 用 施 加 一 些 限 制, 违 反 这 些 限 制 的 任 何 操 作 将 不 被 允 许 可 能 被 禁 止 的 操 作 的 示 例 包 括 : 启 动 虚 拟 机 将 虚 拟 机 迁 移 到 主 机 群 集 或 资 源 池 中 增 加 虚 拟 机 的 CPU 或 内 存 预 留 对 于 这 三 种 接 入 控 制 类 型, 只 有 VMware HA 接 入 控 制 可 以 被 禁 用 但 是, 如 果 禁 用 VMware HA 接 入 控 制, 将 无 法 保 证 群 集 内 的 所 有 虚 拟 机 能 够 在 主 机 故 障 之 后 重 新 启 动 VMware 建 议 您 不 要 禁 用 接 入 控 制, 但 可 能 由 于 以 下 原 因, 需 要 临 时 将 其 禁 用 : 当 没 有 足 够 资 源 来 支 持 故 障 切 换 操 作 时, 您 需 要 违 反 故 障 切 换 限 制 ( 例 如, 如 果 您 打 算 将 主 机 置 于 待 机 模 式 以 测 试 它 们 能 否 与 DPM 一 起 使 用 ) 如 果 自 动 过 程 需 要 执 行 一 些 操 作, 而 这 些 操 作 可 能 会 暂 时 违 反 故 障 切 换 限 制 ( 例 如, 在 VMware Update Manager 执 行 的 升 级 过 程 中 ) 如 果 需 要 执 行 测 试 或 维 护 操 作 群 集 允 许 的 主 机 故 障 数 目 接 入 控 制 策 略 可 以 将 VMware HA 配 置 为 允 许 指 定 的 主 机 故 障 数 目 使 用 群 集 允 许 的 主 机 故 障 数 目 接 入 控 制 策 略, VMware HA 允 许 指 定 数 目 的 主 机 发 生 故 障, 同 时 可 以 确 保 群 集 内 留 有 足 够 的 资 源 来 对 这 些 主 机 上 的 虚 拟 机 进 行 故 障 切 换 使 用 群 集 允 许 的 主 机 故 障 数 目 策 略,VMware HA 以 下 列 方 式 执 行 接 入 控 制 : 1 计 算 插 槽 大 小 插 槽 是 内 存 和 CPU 资 源 的 逻 辑 表 示 默 认 情 况 下, 会 调 整 插 槽 的 大 小 来 满 足 群 集 中 任 何 已 启 动 虚 拟 机 的 要 求 2 确 定 群 集 内 每 台 主 机 可 以 拥 有 的 插 槽 数 目 3 确 定 群 集 的 当 前 故 障 切 换 容 量 这 是 可 以 发 生 故 障 并 仍 然 有 足 够 插 槽 满 足 所 有 已 启 动 虚 拟 机 的 主 机 的 数 目 4 确 定 当 前 故 障 切 换 容 量 是 否 小 于 配 置 的 故 障 切 换 容 量 ( 由 用 户 提 供 ) 如 果 是, 则 接 入 控 制 不 允 许 执 行 此 操 作 注 意 配 置 的 故 障 切 换 容 量 的 最 大 值 可 以 设 置 为 4 每 个 群 集 内 最 多 可 以 存 在 五 台 首 选 主 机, 如 果 所 有 主 机 同 时 出 现 故 障, 则 所 有 虚 拟 机 的 故 障 切 换 可 能 都 不 会 成 功 VMware, Inc. 13

14 插 槽 大 小 计 算 插 槽 大 小 由 两 个 组 件 (CPU 和 内 存 ) 组 成 VMware HA 计 算 CPU 组 件 的 方 法 是 先 获 取 每 台 已 启 动 虚 拟 机 的 CPU 预 留, 然 后 再 选 择 最 大 值 如 果 没 有 为 虚 拟 机 指 定 CPU 预 留, 则 系 统 会 为 其 分 配 一 个 默 认 值 256 MHz 可 以 使 用 das.vmcpuminmhz 高 级 属 性 更 改 此 值 VMware HA 计 算 内 存 组 件 的 方 法 是 先 获 取 每 台 已 启 动 虚 拟 机 的 内 存 预 留 和 内 存 开 销, 然 后 再 选 择 最 大 值 内 存 预 留 没 有 默 认 值 如 果 群 集 内 虚 拟 机 的 预 留 值 大 小 不 一 致, 则 会 影 响 插 槽 大 小 的 计 算 为 避 免 出 现 这 种 情 况, 可 以 使 用 das.slotcpuinmhz 或 das.slotmeminmb 高 级 属 性 分 别 指 定 插 槽 大 小 的 CPU 或 内 存 组 件 的 上 限 使 用 插 槽 数 目 计 算 当 前 故 障 切 换 容 量 计 算 出 插 槽 大 小 后,VMware HA 会 确 定 每 台 主 机 中 可 用 于 虚 拟 机 的 CPU 和 内 存 资 源 这 些 值 包 含 在 主 机 的 根 资 源 池 中, 而 不 是 主 机 的 总 物 理 资 源 中 不 包 括 用 于 虚 拟 化 目 的 的 资 源 只 有 处 于 连 接 状 态 未 进 入 维 护 模 式 且 没 有 任 何 VMware HA 错 误 的 主 机 才 列 入 计 算 范 畴 然 后, 即 可 确 定 每 台 主 机 可 以 支 持 的 最 大 插 槽 数 目 为 确 定 此 数 目, 请 用 主 机 的 CPU 资 源 数 除 以 插 槽 大 小 的 CPU 组 件, 然 后 将 结 果 化 整 对 主 机 的 内 存 资 源 数 进 行 同 样 的 计 算 然 后, 比 较 这 两 个 数 字, 较 小 的 那 个 数 字 即 为 主 机 可 以 支 持 的 插 槽 数 通 过 确 定 可 以 发 生 故 障 并 仍 然 有 足 够 插 槽 满 足 所 有 已 启 动 虚 拟 机 要 求 的 主 机 的 数 目 ( 从 最 大 值 开 始 ) 来 计 算 当 前 故 障 切 换 容 量 高 级 运 行 时 信 息 如 果 选 择 群 集 允 许 的 主 机 故 障 数 目 接 入 控 制 策 略, 高 级 运 行 时 信 息 链 接 则 会 在 vsphere Client 中 群 集 摘 要 选 项 卡 上 的 VMware HA 区 域 中 显 示 单 击 此 链 接 以 显 示 有 关 群 集 的 下 列 信 息 : 插 槽 大 小 群 集 内 的 插 槽 总 数 群 集 内 正 常 主 机 所 支 持 的 插 槽 总 数 已 使 用 的 插 槽 数 分 配 给 已 启 动 的 虚 拟 机 的 插 槽 数 目 如 果 已 使 用 高 级 选 项 定 义 插 槽 大 小 的 上 限, 则 此 数 目 可 以 大 于 已 启 动 的 虚 拟 机 的 数 目 这 是 因 为 有 些 虚 拟 机 会 占 用 多 个 插 槽 可 用 插 槽 数 可 用 于 启 动 群 集 内 其 他 虚 拟 机 的 插 槽 数 目 VMware HA 会 保 留 故 障 切 换 所 需 的 插 槽 数 剩 余 的 插 槽 可 用 于 启 动 新 虚 拟 机 群 集 中 已 启 动 虚 拟 机 的 总 数 群 集 中 的 主 机 总 数 群 集 中 的 正 常 主 机 总 数 处 于 连 接 状 态 未 进 入 维 护 模 式 而 且 没 有 VMware HA 错 误 的 主 机 数 目 14 VMware, Inc.

15 章 2 创 建 和 使 用 VMware HA 群 集 示 例 2-1 使 用 群 集 允 许 的 主 机 故 障 数 目 策 略 的 接 入 控 制 示 例 中 展 示 了 使 用 此 接 入 控 制 策 略 计 算 和 使 用 插 槽 大 小 的 方 式 对 群 集 进 行 如 下 假 设 : 群 集 包 括 三 台 主 机, 每 台 主 机 上 可 用 的 CPU 和 内 存 资 源 数 各 不 相 同 第 一 台 主 机 (H1) 的 可 用 CPU 资 源 和 可 用 内 存 分 别 为 9 GHz 和 9 GB, 第 二 台 主 机 (H2) 为 9 GHz 和 6 GB, 而 第 三 台 主 机 (H3) 则 为 6 GHz 和 6 GB 群 集 内 存 在 五 个 已 启 动 的 虚 拟 机, 其 CPU 和 内 存 要 求 各 不 相 同 VM1 所 需 的 CPU 资 源 和 内 存 分 别 为 2 GHz 和 1 GB,VM2 为 2 GHz 和 1 GB,VM3 为 1 GHz 和 2 GB,VM4 为 1 GHz 和 1 GB,VM5 则 为 1 GHz 和 1 GB 群 集 允 许 的 主 机 故 障 数 目 设 置 为 1 图 2-1 使 用 群 集 允 许 的 主 机 故 障 数 目 策 略 的 接 入 控 制 示 例 VM1 VM2 VM3 VM4 VM5 2GHz 2GHz 1GHz 1GHz 1GHz 1GB 1GB 2GB 1GB 1GB 插 槽 大 小 2GHz,2GB H1 9GHz 9GB H2 9GHz 6GB H3 6GHz 6GB 4 个 插 槽 3 个 插 槽 3 个 插 槽 如 果 H1 故 障 则 剩 余 6 个 插 槽 1 比 较 虚 拟 机 的 CPU 和 内 存 要 求, 然 后 选 择 最 大 值, 从 而 计 算 出 插 槽 大 小 最 大 CPU 要 求 ( 由 VM1 和 VM2 共 享 ) 为 2 GHz, 而 最 大 内 存 要 求 ( 针 对 VM3) 为 2 GB 根 据 上 述 情 况, 插 槽 大 小 为 2 GHz CPU 和 2 GB 内 存 2 由 此 可 确 定 每 台 主 机 可 以 支 持 的 最 大 插 槽 数 目 H1 可 以 支 持 四 个 插 槽 H2 可 以 支 持 三 个 插 槽 ( 取 9GHz/2GHz 和 6GB/2GB 中 较 小 的 一 个 ),H3 也 可 以 支 持 三 个 插 槽 3 计 算 出 当 前 故 障 切 换 容 量 最 大 的 主 机 是 H1, 如 果 它 发 生 故 障, 群 集 内 还 有 六 个 插 槽, 足 够 供 所 有 五 个 已 启 动 的 虚 拟 机 使 用 如 果 H1 和 H2 都 发 生 故 障, 群 集 内 将 仅 剩 下 三 个 插 槽, 这 是 不 够 用 的 因 此, 当 前 故 障 切 换 容 量 为 1 群 集 内 可 用 插 槽 的 数 目 为 1(H2 和 H3 上 的 六 个 插 槽 减 去 五 个 已 使 用 的 插 槽 ) 预 留 的 群 集 资 源 的 百 分 比 接 入 控 制 策 略 可 以 将 VMware HA 配 置 为 通 过 预 留 特 定 百 分 比 的 群 集 资 源 执 行 接 入 控 制, 用 于 从 主 机 故 障 中 进 行 恢 复 使 用 预 留 的 群 集 资 源 的 百 分 比 接 入 控 制 策 略,VMware HA 可 确 保 预 留 总 群 集 资 源 的 指 定 百 分 比 以 用 于 故 障 切 换 使 用 预 留 的 群 集 资 源 策 略,VMware HA 可 执 行 接 入 控 制 1 计 算 群 集 内 所 有 已 启 动 虚 拟 机 的 总 资 源 要 求 2 计 算 可 用 于 虚 拟 机 的 主 机 资 源 总 数 VMware, Inc. 15

16 3 计 算 群 集 的 当 前 的 CPU 故 障 切 换 容 量 和 当 前 的 内 存 故 障 切 换 容 量 4 确 定 当 前 的 CPU 故 障 切 换 容 量 或 当 前 的 内 存 故 障 切 换 容 量 是 否 小 于 配 置 的 故 障 切 换 容 量 ( 由 用 户 提 供 ) 如 果 是, 则 接 入 控 制 不 允 许 执 行 此 操 作 VMware HA 将 使 用 虚 拟 机 的 实 际 预 留 如 果 虚 拟 机 没 有 预 留 ( 即 预 留 量 为 0), 则 将 应 用 默 认 设 置 (0 MB 内 存 和 256 MHz CPU) 计 算 当 前 故 障 切 换 容 量 已 启 动 虚 拟 机 的 总 资 源 要 求 由 两 个 组 件 组 成, 即 CPU 和 内 存 VMware HA 将 计 算 这 些 值 CPU 组 件 值 的 计 算 方 法 是 : 加 总 已 启 动 虚 拟 机 的 CPU 预 留 如 果 没 有 为 虚 拟 机 指 定 CPU 预 留, 则 系 统 会 为 其 分 配 一 个 默 认 值 256 MHz( 可 以 使 用 das.vmcpuminmhz 高 级 属 性 更 改 此 值 ) 内 存 组 件 值 的 计 算 方 法 是 : 加 总 每 台 已 启 动 虚 拟 机 的 内 存 预 留 ( 以 及 内 存 开 销 ) 计 算 出 主 机 的 CPU 和 内 存 资 源 总 和, 从 而 得 出 虚 拟 机 可 使 用 的 主 机 资 源 总 数 这 些 值 包 含 在 主 机 的 根 资 源 池 中, 而 不 是 主 机 的 总 物 理 资 源 中 不 包 括 用 于 虚 拟 化 目 的 的 资 源 只 有 处 于 连 接 状 态 未 进 入 维 护 模 式 而 且 没 有 VMware HA 错 误 的 主 机 才 列 入 计 算 范 畴 先 用 主 机 CPU 资 源 总 数 减 去 总 CPU 资 源 要 求, 然 后 再 用 这 个 结 果 除 以 主 机 CPU 资 源 总 数, 从 而 计 算 出 当 前 的 CPU 故 障 切 换 容 量 当 前 的 内 存 故 障 切 换 容 量 的 计 算 方 式 与 之 相 似 示 例 2-2 使 用 预 留 的 群 集 资 源 的 百 分 比 策 略 的 接 入 控 制 示 例 中 展 示 了 使 用 此 接 入 控 制 策 略 计 算 和 使 用 当 前 故 障 切 换 容 量 的 方 式 对 群 集 进 行 如 下 假 设 : 群 集 包 括 三 台 主 机, 每 台 主 机 上 可 用 的 CPU 和 内 存 资 源 数 各 不 相 同 第 一 台 主 机 (H1) 的 可 用 CPU 资 源 和 可 用 内 存 分 别 为 9 GHz 和 9 GB, 第 二 台 主 机 (H2) 为 9 GHz 和 6 GB, 而 第 三 台 主 机 (H3) 则 为 6 GHz 和 6 GB 群 集 内 存 在 五 个 已 启 动 的 虚 拟 机, 其 CPU 和 内 存 要 求 各 不 相 同 VM1 所 需 的 CPU 资 源 和 内 存 分 别 为 2 GHz 和 1 GB,VM2 为 2 GHz 和 1 GB,VM3 为 1 GHz 和 2 GB,VM4 为 1 GHz 和 1 GB,VM5 则 为 1 GHz 和 1 GB 配 置 的 故 障 切 换 容 量 设 置 为 25% 图 2-2 使 用 预 留 的 群 集 资 源 的 百 分 比 策 略 的 接 入 控 制 示 例 VM1 VM2 VM3 VM4 VM5 2GHz 2GHz 1GHz 1GHz 1GHz 1GB 1GB 2GB 1GB 1GB 总 资 源 要 求 7GHz,6GB H1 9GHz 9GB H2 9GHz 6GB H3 6GHz 6GB 总 主 机 资 源 24GHz,21GB 已 启 动 虚 拟 机 的 总 资 源 要 求 为 7 GHz CPU 和 6 GB 内 存 可 用 于 虚 拟 机 的 主 机 资 源 总 数 为 24 GHz CPU 和 21 GB 内 存 根 据 上 述 情 况, 当 前 的 CPU 故 障 切 换 容 量 为 70% ((24GHz - 7GHz)/24GHz) 同 样, 当 前 的 内 存 故 障 切 换 容 量 为 71% ((21GB-6GB)/21GB) 由 于 群 集 的 配 置 的 故 障 切 换 容 量 设 置 为 25%, 因 此 仍 然 可 使 用 45% 的 群 集 CPU 资 源 总 数 和 46% 的 群 集 内 存 资 源 启 动 其 他 虚 拟 机 16 VMware, Inc.

17 章 2 创 建 和 使 用 VMware HA 群 集 指 定 故 障 切 换 主 机 接 入 控 制 策 略 在 配 置 VMware HA 时 可 以 将 特 定 主 机 指 定 为 故 障 切 换 主 机 如 果 使 用 指 定 故 障 切 换 主 机 接 入 控 制 策 略, 则 在 主 机 发 生 故 障 时,VMware HA 将 尝 试 在 指 定 的 故 障 切 换 主 机 上 重 新 启 动 其 虚 拟 机 如 果 不 能 使 用 此 方 法 ( 例 如, 故 障 切 换 主 机 本 身 出 现 故 障, 或 资 源 不 足 ), 则 VMware HA 会 尝 试 在 群 集 中 的 其 他 主 机 上 重 新 启 动 这 些 虚 拟 机 为 了 确 保 故 障 切 换 主 机 上 拥 有 可 用 的 空 闲 容 量, 将 阻 止 您 启 动 虚 拟 机 或 使 用 vmotion 将 虚 拟 机 迁 移 到 故 障 切 换 主 机 而 且, 为 了 保 持 负 载 平 衡,DRS 也 不 会 使 用 故 障 切 换 主 机 vsphere Client 中 群 集 的 摘 要 选 项 卡 的 VMware HA 区 域 内 显 示 了 当 前 的 故 障 切 换 主 机 主 机 旁 边 的 状 态 图 标 可 以 是 绿 色 黄 色 或 红 色 绿 色 主 机 处 于 连 接 状 态 未 进 入 维 护 模 式 且 没 有 VMware HA 错 误 主 机 上 没 有 任 何 已 启 动 的 虚 拟 机 黄 色 主 机 处 于 连 接 状 态 未 进 入 维 护 模 式 且 没 有 VMware HA 错 误 但 是, 主 机 上 驻 留 了 已 启 动 的 虚 拟 机 红 色 主 机 已 断 开 连 接 处 于 维 护 模 式 或 存 在 VMware HA 错 误 选 择 接 入 控 制 策 略 应 当 基 于 可 用 性 需 求 和 群 集 的 特 性 选 择 VMware HA 接 入 控 制 策 略 选 择 接 入 控 制 策 略 时, 应 当 考 虑 的 因 素 很 多 避 免 资 源 碎 片 当 总 计 有 足 够 资 源 用 于 虚 拟 机 故 障 切 换 时, 将 出 现 资 源 碎 片 但 是, 这 些 资 源 位 于 多 个 主 机 上 并 且 不 可 用, 因 为 虚 拟 机 一 次 只 能 在 一 个 ESX/ESXi 主 机 上 运 行 通 过 将 插 槽 定 义 为 虚 拟 机 最 大 预 留 值, 群 集 允 许 的 主 机 故 障 数 目 策 略 可 避 免 资 源 碎 片 群 集 资 源 的 百 分 比 策 略 不 解 决 资 源 碎 片 问 题 使 用 指 定 故 障 切 换 主 机 策 略 不 会 出 现 资 源 碎 片, 因 为 该 策 略 会 为 故 障 切 换 预 留 单 台 主 机 故 障 切 换 资 源 预 留 的 灵 活 性 为 故 障 切 换 保 护 预 留 群 集 资 源 时, 接 入 控 制 策 略 所 提 供 的 控 制 粒 度 会 有 所 不 同 群 集 允 许 的 主 机 故 障 数 目 策 略 允 许 设 置 一 台 到 四 台 主 机 作 为 故 障 切 换 级 别 群 集 资 源 的 百 分 比 策 略 最 多 允 许 指 定 50% 的 群 集 资 源 发 生 故 障 指 定 故 障 切 换 主 机 策 略 仅 允 许 指 定 单 个 故 障 切 换 主 机 群 集 的 异 构 性 从 虚 拟 机 资 源 预 留 和 主 机 总 资 源 容 量 方 面 而 言, 群 集 可 以 异 构 在 异 构 群 集 内, 群 集 允 许 的 主 机 故 障 数 目 策 略 可 能 过 于 保 守, 因 为 在 定 义 插 槽 大 小 时 它 仅 考 虑 最 大 虚 拟 机 预 留, 而 在 计 算 当 前 故 障 切 换 容 量 时 也 假 设 最 大 主 机 发 生 故 障 其 他 两 个 接 入 控 制 策 略 不 受 群 集 异 构 性 影 响 注 意 VMware HA 在 执 行 接 入 控 制 计 算 时 会 包 括 容 错 辅 助 虚 拟 机 的 资 源 使 用 情 况 对 于 群 集 允 许 的 主 机 故 障 数 目 策 略, 将 为 辅 助 虚 拟 机 分 配 一 个 插 槽 ; 而 对 于 群 集 资 源 的 百 分 比 策 略, 在 计 算 群 集 的 可 用 容 量 时 将 考 虑 辅 助 虚 拟 机 的 资 源 使 用 情 况 VMware HA 对 照 表 VMware HA 对 照 表 包 含 在 创 建 和 使 用 VMware HA 群 集 之 前 需 要 了 解 的 要 求 VMware HA 群 集 的 要 求 在 设 置 VMware HA 群 集 之 前, 应 查 看 此 列 表 有 关 详 细 信 息, 请 遵 循 相 应 的 交 叉 引 用 或 者 参 见 第 18 页, 创 建 VMware HA 群 集 所 有 主 机 必 须 获 得 VMware HA 许 可 群 集 中 至 少 需 要 有 两 台 主 机 VMware, Inc. 17

18 所 有 主 机 都 需 要 使 用 唯 一 的 主 机 名 需 要 为 所 有 主 机 配 置 静 态 IP 地 址 如 果 使 用 的 是 DHCP, 必 须 确 保 每 台 主 机 的 地 址 在 重 新 引 导 期 间 保 留 所 有 主 机 必 须 能 够 访 问 同 一 管 理 网 络 所 有 主 机 必 须 至 少 有 一 个 公 共 的 管 理 网 络, 最 佳 做 法 则 至 少 需 要 有 两 个 所 使 用 的 主 机 版 本 不 同, 管 理 网 络 也 不 同 ESX 主 机 - 服 务 控 制 台 网 络 版 本 4.0 之 前 的 ESXi 主 机 - VMkernel 网 络 版 本 4.0 及 更 高 版 本 的 ESXi 主 机 - 已 选 中 了 管 理 网 络 复 选 框 的 VMkernel 网 络 请 参 见 第 24 页, 网 络 最 佳 做 法 为 了 确 保 任 何 虚 拟 机 都 可 以 在 群 集 内 的 任 何 主 机 上 运 行, 所 有 主 机 都 应 该 可 以 访 问 相 同 的 虚 拟 机 网 络 和 数 据 存 储 同 样, 虚 拟 机 必 须 位 于 共 享 而 非 本 地 存 储 器 上, 否 则 在 主 机 出 现 故 障 时 它 们 将 无 法 进 行 故 障 切 换 为 了 使 虚 拟 机 监 控 工 作, 必 须 安 装 VMware Tools 请 参 见 第 21 页, 虚 拟 机 和 应 用 程 序 监 控 VMware HA 群 集 中 的 所 有 主 机 都 必 须 配 置 DNS, 以 便 可 以 将 群 集 中 任 何 主 机 的 短 主 机 名 ( 没 有 域 后 缀 ) 通 过 群 集 内 的 任 何 其 他 主 机 解 析 为 相 应 的 IP 地 址 否 则, 配 置 HA 任 务 可 能 失 败 如 果 使 用 IP 地 址 添 加 主 机, 还 需 要 启 用 反 向 DNS 查 询 (IP 地 址 应 可 以 解 析 为 短 主 机 名 ) 注 意 VMware HA 不 支 持 IPv6 创 建 VMware HA 群 集 VMware HA 在 ESX/ESXi 主 机 群 集 的 环 境 中 运 行 必 须 创 建 一 个 群 集, 然 后 用 主 机 填 充 该 群 集, 并 在 建 立 故 障 切 换 保 护 之 前 配 置 VMware HA 设 置 创 建 VMware HA 群 集 时, 必 须 配 置 许 多 可 决 定 功 能 如 何 运 行 的 设 置 在 此 之 前, 请 确 定 群 集 的 节 点 这 些 节 点 是 为 支 持 虚 拟 机 而 提 供 资 源, 并 且 将 由 VMware HA 用 于 故 障 切 换 保 护 的 ESX/ESXi 主 机 然 后 应 当 确 定 如 何 互 相 连 接 这 些 节 点, 以 及 如 何 将 这 些 节 点 连 接 到 虚 拟 机 数 据 所 在 的 共 享 存 储 器 在 建 立 好 网 络 架 构 后, 可 以 将 主 机 添 加 到 群 集 并 完 成 VMware HA 配 置 将 主 机 节 点 添 加 到 群 集 之 前, 可 以 启 用 和 配 置 VMware HA 但 是, 在 将 主 机 添 加 到 群 集 之 前, 群 集 的 所 有 功 能 并 非 都 能 运 行, 部 分 群 集 设 置 不 可 用 例 如, 在 出 现 可 以 指 定 为 故 障 切 换 主 机 的 主 机 之 前, 指 定 故 障 切 换 主 机 接 入 控 制 策 略 不 可 用 注 意 为 处 于 ( 或 移 入 )VMware HA 群 集 的 主 机 上 驻 留 的 所 有 虚 拟 机 禁 用 虚 拟 机 启 动 和 关 机 ( 自 动 启 动 ) 功 能 VMware 建 议 您 不 要 为 任 何 虚 拟 机 手 动 重 新 启 用 此 设 置 这 样 做 会 影 响 群 集 功 能 ( 如 VMware HA 或 容 错 ) 的 操 作 创 建 VMware HA 群 集 可 以 为 群 集 启 用 VMware HA 启 用 了 VMware HA 的 群 集 是 容 错 的 必 备 条 件 VMware 建 议 您 首 先 创 建 空 群 集 在 已 计 划 群 集 的 资 源 和 网 络 架 构 之 后, 可 以 使 用 vsphere Client 将 主 机 添 加 到 群 集, 并 指 定 群 集 的 VMware HA 设 置 使 用 具 有 群 集 管 理 员 权 限 的 帐 户 将 vsphere Client 连 接 到 vcenter Server 前 提 条 件 确 认 所 有 虚 拟 机 及 其 配 置 文 件 都 驻 留 在 共 享 存 储 器 上 确 认 主 机 配 置 为 具 有 该 共 享 存 储 器 的 访 问 权 限, 以 便 您 可 以 使 用 群 集 中 的 不 同 主 机 启 动 虚 拟 机 确 认 VMware HA 群 集 内 的 每 台 主 机 都 分 配 了 主 机 名 称 ( 少 于 或 等 于 26 个 字 符 ), 并 且 具 有 与 每 个 虚 拟 网 卡 相 关 联 的 静 态 IP 地 址 18 VMware, Inc.

19 章 2 创 建 和 使 用 VMware HA 群 集 确 认 主 机 配 置 为 具 有 虚 拟 机 网 络 的 访 问 权 限 注 意 VMware 建 议 为 VMware HA 设 置 冗 余 管 理 网 络 连 接 有 关 设 置 网 络 冗 余 的 信 息, 请 参 见 第 25 页, 网 络 路 径 冗 余 步 骤 1 选 择 主 机 和 群 集 视 图 2 右 键 单 击 清 单 树 中 的 数 据 中 心, 然 后 单 击 新 建 群 集 3 完 成 新 建 群 集 向 导 此 时 不 要 启 用 VMware HA( 或 DRS) 4 单 击 完 成, 关 闭 向 导 并 创 建 群 集 此 时 创 建 了 一 个 空 群 集 5 根 据 您 的 群 集 资 源 和 网 络 架 构 计 划, 使 用 vsphere Client 将 主 机 添 加 到 群 集 6 右 键 单 击 群 集, 然 后 单 击 编 辑 设 置 在 群 集 的 设 置 对 话 框 中, 您 可 以 修 改 群 集 的 VMware HA( 和 其 他 ) 设 置 7 在 群 集 功 能 页 上, 选 择 打 开 VMware HA 8 根 据 需 要 为 群 集 配 置 VMware HA 设 置 主 机 监 控 状 态 接 入 控 制 虚 拟 机 选 项 虚 拟 机 监 控 9 单 击 确 定 关 闭 群 集 的 设 置 对 话 框 您 已 配 置 VMware HA 群 集, 其 中 包 含 可 用 主 机 群 集 功 能 新 建 群 集 向 导 中 的 第 一 个 面 板 可 用 于 为 群 集 指 定 基 本 选 项 在 该 面 板 中, 可 以 指 定 群 集 名 称 并 选 择 一 个 或 两 个 群 集 功 能 名 称 打 开 VMware HA 打 开 VMware DRS 指 定 群 集 的 名 称 该 名 称 显 示 在 vsphere Client 清 单 面 板 中 必 须 指 定 一 个 名 称, 才 能 继 续 创 建 群 集 如 果 选 中 此 复 选 框, 则 在 主 机 出 现 故 障 时, 虚 拟 机 将 在 群 集 内 的 其 他 主 机 上 重 新 启 动 要 在 群 集 内 的 任 何 虚 拟 机 上 启 用 VMware 容 错, 则 必 须 打 开 VMware HA 如 果 选 中 此 复 选 框, 则 DRS 将 平 衡 整 个 群 集 的 虚 拟 机 负 载 即 使 虚 拟 机 受 HA 保 护,DRS 也 会 放 置 并 迁 移 虚 拟 机 以 后 可 更 改 上 面 的 任 何 群 集 功 能 VMware, Inc. 19

20 主 机 监 控 状 态 创 建 群 集 后, 请 启 用 主 机 监 控 以 便 VMware HA 可 以 监 控 由 群 集 内 每 个 主 机 上 的 VMware HA 代 理 发 送 的 检 测 信 号 如 果 选 择 启 用 主 机 监 控, 则 会 检 查 群 集 内 的 每 台 ESX/ESXi 主 机 以 确 保 其 正 在 运 行 如 果 某 台 主 机 出 现 故 障, 则 会 在 另 一 台 主 机 上 重 新 启 动 虚 拟 机 主 机 监 控 还 是 VMware 容 错 恢 复 进 程 正 常 运 行 所 必 需 的 注 意 如 果 需 要 执 行 可 能 会 触 发 主 机 隔 离 响 应 的 网 络 维 护,VMware 建 议 首 先 禁 用 主 机 监 控 以 挂 起 VMware HA 完 成 维 护 后, 请 重 新 启 用 主 机 监 控 启 用 或 禁 用 接 入 控 制 通 过 新 建 群 集 向 导, 可 以 为 VMware HA 群 集 启 用 或 禁 用 接 入 控 制, 并 选 择 有 关 其 执 行 方 式 的 策 略 可 以 为 HA 群 集 启 用 或 禁 用 接 入 控 制 启 用 : 不 启 动 违 反 可 用 性 限 制 的 虚 拟 机 禁 用 : 启 动 违 反 可 用 性 限 制 的 虚 拟 机 启 用 接 入 控 制 并 执 行 可 用 性 限 制, 同 时 保 留 故 障 切 换 容 量 不 允 许 在 虚 拟 机 上 执 行 会 减 少 群 集 内 的 未 预 留 资 源 并 违 反 可 用 性 限 制 的 任 何 操 作 禁 用 接 入 控 制 例 如, 即 使 启 动 虚 拟 机 会 造 成 故 障 切 换 容 量 不 足, 仍 然 可 执 行 该 操 作 执 行 该 操 作 时, 不 会 显 示 任 何 警 告, 而 且 群 集 不 会 变 为 红 色 如 果 群 集 的 故 障 切 换 容 量 不 足,VMware HA 仍 可 以 执 行 故 障 切 换, 并 使 用 虚 拟 机 重 新 启 动 优 先 级 设 置 来 确 定 要 先 启 动 的 虚 拟 机 如 果 启 用 了 接 入 控 制,VMware HA 会 提 供 三 个 强 制 接 入 控 制 的 策 略 群 集 允 许 的 主 机 故 障 数 目 保 留 为 故 障 切 换 空 闲 容 量 占 用 群 集 资 源 的 百 分 比 指 定 故 障 切 换 主 机 注 意 请 参 见 第 17 页, 选 择 接 入 控 制 策 略 获 取 有 关 VMware HA 接 入 控 制 如 何 工 作 的 详 细 信 息 虚 拟 机 选 项 默 认 虚 拟 机 设 置 控 制 在 主 机 之 间 失 去 网 络 连 接 时 ( 主 机 隔 离 响 应 ) 虚 拟 机 的 重 新 启 动 顺 序 ( 虚 拟 机 重 新 启 动 优 先 级 ) 和 VMware HA 的 响 应 方 式 这 些 设 置 适 用 于 主 机 发 生 故 障 或 主 机 隔 离 时 群 集 内 的 所 有 虚 拟 机 此 外, 也 可 以 为 特 定 虚 拟 机 配 置 异 常 请 参 见 第 23 页, 自 定 义 各 个 虚 拟 机 的 VMware HA 行 为 虚 拟 机 重 新 启 动 优 先 级 设 置 虚 拟 机 重 新 启 动 优 先 级 确 定 主 机 发 生 故 障 后 虚 拟 机 的 重 新 启 动 相 对 顺 序 这 些 虚 拟 机 在 新 主 机 上 按 顺 序 重 新 启 动, 首 先 启 动 优 先 级 最 高 的 虚 拟 机, 然 后 是 那 些 低 优 先 级 的 虚 拟 机, 直 到 重 新 启 动 所 有 虚 拟 机 或 者 没 有 更 多 的 可 用 群 集 资 源 为 止 如 果 主 机 故 障 数 目 超 过 了 接 入 控 制 所 允 许 的 数 目, 则 系 统 可 能 会 等 到 有 更 多 资 源 可 用 时 再 重 新 启 动 优 先 级 较 低 的 虚 拟 机 如 果 指 定 了 一 个 故 障 切 换 主 机, 则 虚 拟 机 将 在 该 故 障 切 换 主 机 上 重 新 启 动 此 设 置 的 值 为 : 已 禁 用 低 中 等 ( 默 认 ) 和 高 如 果 选 择 已 禁 用, 则 会 为 虚 拟 机 禁 用 VMware HA, 这 意 味 着 当 其 ESX/ESXi 主 机 出 现 故 障 时 不 会 在 其 他 ESX/ESXi 主 机 上 重 新 启 动 虚 拟 机 已 禁 用 设 置 不 会 对 虚 拟 机 监 控 造 成 影 响, 这 意 味 着 当 正 常 运 行 的 主 机 上 的 某 个 虚 拟 机 出 现 故 障 时, 会 在 同 一 主 机 上 重 置 该 虚 拟 机 您 可 更 改 各 个 虚 拟 机 的 这 种 设 置 虚 拟 机 的 重 新 启 动 优 先 级 设 置 因 用 户 需 求 而 有 所 不 同 VMware 建 议 为 提 供 最 重 要 服 务 的 虚 拟 机 分 配 较 高 的 重 新 启 动 优 先 级 20 VMware, Inc.

21 章 2 创 建 和 使 用 VMware HA 群 集 例 如, 在 多 层 应 用 程 序 中, 可 以 根 据 虚 拟 机 上 所 驻 留 的 功 能 来 对 分 配 进 行 排 序 高 将 为 应 用 程 序 提 供 数 据 的 数 据 库 服 务 器 中 等 使 用 数 据 库 中 的 数 据 并 在 网 页 上 提 供 结 果 的 应 用 程 序 服 务 器 低 接 收 用 户 请 求 将 查 询 传 递 到 应 用 程 序 服 务 器 并 将 结 果 返 回 给 用 户 的 Web 服 务 器 主 机 隔 离 响 应 设 置 主 机 隔 离 响 应 确 定 当 VMware HA 群 集 内 的 某 个 主 机 失 去 其 管 理 网 络 连 接 但 仍 继 续 运 行 时 出 现 的 情 况 主 机 隔 离 响 应 要 求 启 用 主 机 监 控 状 态 如 果 主 机 监 控 状 态 处 于 禁 用 状 态, 则 主 机 隔 离 响 应 将 同 样 被 挂 起 当 某 个 主 机 停 止 接 收 所 有 其 他 主 机 的 检 测 信 号 而 且 通 过 ping 操 作 无 法 获 得 其 隔 离 地 址 时, 可 以 确 定 该 主 机 已 被 隔 离 发 生 这 种 情 况 时, 主 机 会 执 行 其 隔 离 响 应 响 应 包 括 : 保 持 启 动 关 闭 电 源 和 关 机 ( 默 认 值 ) 还 可 以 为 各 个 虚 拟 机 自 定 义 此 属 性 要 使 用 关 机 设 置, 必 须 在 虚 拟 机 的 客 户 机 操 作 系 统 中 安 装 VMware Tools 将 虚 拟 机 关 机 的 优 点 在 于 可 以 保 留 其 状 况 关 机 操 作 优 于 关 闭 虚 拟 机 操 作, 关 闭 虚 拟 机 不 会 将 最 近 的 更 改 刷 新 到 磁 盘 中, 也 不 会 提 交 事 务 在 关 机 完 成 时, 已 关 机 的 虚 拟 机 需 要 更 长 时 间 进 行 故 障 切 换 未 在 300 秒 内 或 在 高 级 属 性 das.isolationshutdowntimeout 中 指 定 的 秒 数 内 关 机 的 虚 拟 机 将 被 关 闭 注 意 创 建 VMware HA 群 集 后, 可 以 替 代 特 定 虚 拟 机 的 重 新 启 动 优 先 级 和 隔 离 响 应 的 默 认 群 集 设 置 此 替 代 操 作 对 于 用 于 特 殊 任 务 的 虚 拟 机 很 有 帮 助 例 如, 可 能 需 要 先 启 动 提 供 基 础 架 构 服 务 ( 如 DNS 或 DHCP) 的 虚 拟 机, 再 启 动 群 集 内 的 其 他 虚 拟 机 虚 拟 机 和 应 用 程 序 监 控 如 果 在 设 置 的 时 间 内 没 有 收 到 单 个 虚 拟 机 的 VMware Tools 检 测 信 号, 虚 拟 机 监 控 将 重 新 启 动 该 虚 拟 机 同 样, 如 果 没 有 收 到 虚 拟 机 正 在 运 行 的 应 用 程 序 的 检 测 信 号, 应 用 程 序 监 控 也 可 以 重 新 启 动 该 虚 拟 机 可 以 启 用 这 些 功 能, 并 配 置 VMware HA 监 控 无 响 应 时 的 敏 感 度 启 用 虚 拟 机 监 控 后, 虚 拟 机 监 控 服 务 ( 使 用 VMware Tools) 将 通 过 检 查 正 在 客 户 机 内 运 行 的 VMware Tools 进 程 的 常 规 检 测 信 号 和 I/O 活 动 来 评 估 群 集 内 的 每 个 虚 拟 机 是 否 正 在 运 行 如 果 没 有 收 到 检 测 信 号 或 I/O 活 动, 则 很 有 可 能 是 客 户 机 操 作 系 统 出 现 故 障, 或 未 分 配 给 VMware Tools 用 来 完 成 任 务 的 时 间 在 这 种 情 况 下, 虚 拟 机 监 控 服 务 会 先 确 定 虚 拟 机 已 发 生 故 障, 然 后 决 定 重 新 引 导 虚 拟 机 以 还 原 服 务 有 时, 仍 然 正 常 工 作 的 虚 拟 机 或 应 用 程 序 会 停 止 发 送 检 测 信 号 为 了 避 免 不 必 要 的 重 置, 虚 拟 机 监 控 服 务 还 监 控 虚 拟 机 的 I/O 活 动 如 果 在 故 障 时 间 间 隔 内 未 收 到 任 何 检 测 信 号, 则 会 检 查 I/O 统 计 间 隔 ( 群 集 级 别 属 性 ) I/O 统 计 间 隔 确 定 在 前 两 分 钟 (120 秒 ) 内 是 否 已 发 生 与 虚 拟 机 有 关 的 任 何 磁 盘 或 网 络 活 动 如 果 没 有, 则 重 置 该 虚 拟 机 可 以 使 用 高 级 属 性 das.iostatsinterval 更 改 此 默 认 值 (120 秒 ) 要 启 用 应 用 程 序 监 控, 必 须 先 获 取 相 应 的 SDK( 或 使 用 可 支 持 VMware 应 用 程 序 监 控 的 应 用 程 序 ), 然 后 使 用 它 来 设 置 要 监 控 的 应 用 程 序 的 自 定 义 检 测 信 号 完 成 此 操 作 后, 应 用 程 序 监 控 的 工 作 方 式 将 与 虚 拟 机 监 控 的 工 作 方 式 大 致 相 同 如 果 在 指 定 时 间 内 没 有 收 到 应 用 程 序 的 检 测 信 号, 将 重 新 启 动 其 虚 拟 机 您 可 以 配 置 监 控 敏 感 度 的 级 别 高 敏 感 度 监 控 可 以 更 快 得 出 已 发 生 故 障 的 结 论 然 而, 如 果 受 监 控 的 虚 拟 机 或 应 用 程 序 实 际 上 仍 在 运 行, 但 由 于 资 源 限 制 等 因 素 导 致 未 收 到 检 测 信 号, 高 敏 感 度 监 控 可 能 会 错 误 地 认 为 此 虚 拟 机 发 生 了 故 障 低 敏 感 度 监 控 会 延 长 实 际 故 障 和 虚 拟 机 重 置 之 间 服 务 中 断 的 时 间 请 选 择 一 个 有 效 折 衷 满 足 需 求 的 选 项 表 2-1 介 绍 了 监 控 敏 感 度 的 默 认 设 置 也 可 以 通 过 选 中 自 定 义 复 选 框 来 指 定 监 控 敏 感 度 和 I/O 统 计 间 隔 的 自 定 义 值 VMware, Inc. 21

22 表 2-1 虚 拟 机 监 控 设 置 设 置 故 障 时 间 间 隔 ( 秒 ) 重 置 期 高 30 1 小 时 中 等 小 时 低 天 检 测 到 故 障 后,VMware HA 会 重 置 虚 拟 机 重 置 可 确 保 这 些 服 务 仍 然 可 用 为 了 避 免 因 非 瞬 态 错 误 而 反 复 重 置 虚 拟 机, 默 认 情 况 下, 在 某 个 可 配 置 的 时 间 间 隔 内 将 对 虚 拟 机 仅 重 置 三 次 在 对 虚 拟 机 执 行 过 三 次 重 置 后, 指 定 的 时 间 结 束 之 前,VMware HA 不 会 在 后 续 故 障 出 现 后 进 一 步 尝 试 重 置 虚 拟 机 可 以 使 用 每 个 虚 拟 机 的 最 大 重 置 次 数 自 定 义 设 置 来 配 置 重 置 次 数 自 定 义 VMware HA 行 为 建 立 群 集 后, 可 以 修 改 会 对 VMware HA 行 为 方 式 造 成 影 响 的 特 定 属 性 还 可 以 更 改 由 单 个 虚 拟 机 继 承 的 群 集 默 认 设 置 检 查 可 用 于 优 化 环 境 中 VMware HA 群 集 的 高 级 设 置 因 为 这 些 属 性 会 影 响 HA 的 运 行, 所 以 更 改 时 请 小 心 谨 慎 设 置 高 级 VMware HA 选 项 要 自 定 义 VMware HA 行 为, 请 设 置 高 级 VMware HA 选 项 前 提 条 件 要 修 改 其 设 置 的 VMware HA 群 集 群 集 管 理 员 特 权 步 骤 1 在 群 集 的 设 置 对 话 框 中, 选 择 VMware HA 2 单 击 高 级 选 项 按 钮, 打 开 高 级 选 项 (HA) 对 话 框 3 输 入 要 在 选 项 列 中 的 文 本 框 中 更 改 的 每 个 高 级 属 性, 并 在 值 列 中 输 入 一 个 值 4 单 击 确 定 群 集 即 可 以 使 用 已 添 加 或 修 改 的 选 项 VMware HA 高 级 属 性 可 以 设 置 影 响 VMware HA 群 集 的 行 为 的 高 级 属 性 表 2-2 VMware HA 高 级 属 性 属 性 das.isolationaddress[...] das.usedefaultisolationaddress 描 述 设 置 为 了 确 定 主 机 是 否 与 网 络 隔 离 而 要 ping 的 地 址 只 有 当 未 从 群 集 内 的 任 何 其 他 主 机 接 收 到 检 测 信 号 时 才 ping 此 地 址 如 果 未 指 定, 则 使 用 管 理 网 络 的 默 认 网 关 此 默 认 网 关 必 须 是 可 用 的 可 靠 地 址, 以 便 主 机 可 以 确 定 它 是 否 与 网 络 隔 离 可 以 为 群 集 指 定 多 个 隔 离 地 址 ( 最 多 10 个 ): das.isolationaddressx, 其 中 X = 1-10 通 常 每 个 管 理 网 络 应 指 定 一 个 隔 离 地 址 如 果 指 定 的 地 址 太 多, 则 进 行 隔 离 检 测 所 需 的 时 间 将 会 较 长 默 认 情 况 下,VMware HA 使 用 控 制 台 网 络 的 默 认 网 关 作 为 隔 离 地 址 此 属 性 指 定 是 否 使 用 此 默 认 设 置 (true false) 22 VMware, Inc.

23 章 2 创 建 和 使 用 VMware HA 群 集 表 2-2 VMware HA 高 级 属 性 ( 续 ) 属 性 描 述 das.failuredetectiontime 更 改 主 机 监 控 的 默 认 故 障 检 测 时 间 默 认 为 毫 秒 (15 秒 ) 这 是 主 机 未 从 其 他 主 机 接 收 到 任 何 检 测 信 号 时 在 声 明 其 出 现 故 障 前 等 待 的 时 间 段 das.failuredetectioninterval 更 改 VMware HA 主 机 间 的 检 测 信 号 时 间 间 隔 默 认 情 况 下, 每 1000 毫 秒 (1 秒 ) 发 生 一 次 das.isolationshutdowntimeout das.slotmeminmb das.slotcpuinmhz das.vmmemoryminmb das.vmcpuminmhz 关 闭 虚 拟 机 之 前, 系 统 等 待 虚 拟 机 关 机 的 时 间 段 只 有 在 主 机 的 隔 离 响 应 为 关 机 时, 此 选 项 才 适 用 默 认 值 为 300 秒 定 义 内 存 插 槽 大 小 的 最 大 限 制 如 果 使 用 此 选 项, 则 插 槽 大 小 小 于 该 值, 或 是 小 于 群 集 内 任 何 已 启 动 虚 拟 机 的 最 大 内 存 预 留 以 及 内 存 开 销 定 义 CPU 插 槽 大 小 的 最 大 限 制 如 果 使 用 此 选 项, 则 插 槽 大 小 小 于 该 值, 或 是 小 于 群 集 内 任 何 已 启 动 虚 拟 机 的 最 大 CPU 预 留 定 义 在 没 有 指 定 虚 拟 机 内 存 预 留 或 者 内 存 预 留 为 零 时, 分 配 给 虚 拟 机 的 默 认 内 存 资 源 值 用 于 群 集 允 许 的 主 机 故 障 数 目 接 入 控 制 策 略 如 果 未 指 定 任 何 值, 则 默 认 值 为 0 MB 定 义 在 没 有 指 定 虚 拟 机 CPU 预 留 或 者 CPU 预 留 为 零 时, 分 配 给 虚 拟 机 的 默 认 CPU 资 源 值 用 于 群 集 允 许 的 主 机 故 障 数 目 接 入 控 制 策 略 如 果 未 指 定 任 何 值, 则 默 认 值 为 256 MHz das.iostatsinterval 更 改 虚 拟 机 监 控 敏 感 度 的 默 认 I/O 统 计 间 隔 默 认 值 为 120 ( 秒 ) 可 以 设 置 为 大 于 等 于 0 的 任 何 值 设 置 为 0 会 禁 用 检 查 注 意 如 果 更 改 以 下 任 一 高 级 属 性 的 值, 则 必 须 先 禁 用 VMware HA, 再 重 新 启 用 它, 更 改 才 会 生 效 das.isolationaddress[...] das.usedefaultisolationaddress das.failuredetectiontime das.failuredetectioninterval das.isolationshutdowntimeout 自 定 义 各 个 虚 拟 机 的 VMware HA 行 为 VMware HA 群 集 中 的 每 个 虚 拟 机 均 分 配 了 虚 拟 机 重 新 启 动 优 先 级 主 机 隔 离 响 应 和 虚 拟 机 监 控 的 群 集 默 认 设 置 可 以 通 过 更 改 这 些 默 认 项 来 指 定 每 个 虚 拟 机 的 特 定 行 为 如 果 虚 拟 机 离 开 该 群 集, 则 将 丢 弃 这 些 设 置 步 骤 1 选 择 群 集 并 在 右 键 菜 单 中 选 择 编 辑 设 置 2 选 择 VMware HA 下 面 的 虚 拟 机 选 项 3 在 虚 拟 机 设 置 窗 格 中, 选 择 虚 拟 机, 并 自 定 义 其 虚 拟 机 重 新 启 动 优 先 级 或 主 机 隔 离 响 应 设 置 4 在 VMware HA 下 方 选 择 虚 拟 机 监 控 5 在 虚 拟 机 设 置 窗 格 中, 选 择 虚 拟 机, 并 自 定 义 其 虚 拟 机 监 控 设 置 6 单 击 确 定 现 在, 虚 拟 机 的 行 为 将 不 同 于 您 更 改 的 每 项 设 置 的 群 集 默 认 设 置 的 行 为 VMware, Inc. 23

24 VMware HA 群 集 的 最 佳 做 法 为 确 保 VMware HA 群 集 性 能 最 佳,VMware 建 议 您 遵 循 一 些 最 佳 做 法 在 设 计 和 实 现 群 集 时, 网 络 配 置 和 冗 余 非 常 重 要 将 警 报 设 置 为 监 控 群 集 更 改 当 VMware HA 或 容 错 执 行 可 用 来 维 护 可 用 性 的 操 作 时 ( 例 如, 虚 拟 机 故 障 切 换 ), 您 可 能 希 望 系 统 向 您 通 知 此 更 改 可 以 将 vcenter Server 中 的 警 报 触 发 设 置 配 置 为 在 执 行 操 作 或 向 指 定 的 一 组 管 理 员 发 送 警 示 ( 如, 电 子 邮 件 ) 时 触 发 监 控 群 集 有 效 性 有 效 群 集 是 尚 未 违 反 接 入 控 制 策 略 的 群 集 当 已 启 动 的 虚 拟 机 数 超 过 了 故 障 切 换 需 求, 即 当 前 故 障 切 换 容 量 小 于 所 配 置 的 故 障 切 换 容 量, 则 已 启 用 VMware HA 的 群 集 将 会 变 为 无 效 ( 红 色 ) 如 果 禁 用 了 接 入 控 制, 则 群 集 不 会 变 为 无 效 vsphere Client 中 的 群 集 的 摘 要 页 面 显 示 群 集 的 配 置 问 题 的 列 表 该 列 表 说 明 了 造 成 群 集 无 效 或 过 载 ( 黄 色 ) 的 原 因 如 果 群 集 是 由 于 VMware HA 问 题 而 变 为 红 色 的, 则 DRS 行 为 不 会 受 到 影 响 检 查 群 集 的 操 作 状 态 群 集 或 其 主 机 可 能 会 出 现 一 些 配 置 问 题 和 其 他 问 题, 这 会 对 VMware HA 的 正 常 运 行 产 生 负 面 影 响 可 以 查 看 群 集 操 作 状 态 屏 幕 来 监 控 这 些 错 误, 能 够 从 vsphere Client 中 群 集 的 摘 要 选 项 卡 的 VMware HA 部 分 访 问 此 屏 幕 您 应 该 解 决 此 屏 幕 上 列 出 的 所 有 问 题 网 络 最 佳 做 法 VMware 就 主 机 网 卡 配 置 和 VMware HA 的 网 络 拓 扑 提 供 某 些 最 佳 做 法 最 佳 做 法 包 括 对 ESX/ESXi 主 机 的 建 议, 以 及 对 电 缆 交 换 机 路 由 器 和 防 火 墙 的 建 议 网 络 配 置 和 维 护 下 列 网 络 维 护 建 议 可 以 帮 助 您 避 免 对 由 于 丢 失 VMware HA 检 测 信 号 而 发 生 故 障 的 主 机 和 网 络 隔 离 的 意 外 检 测 对 群 集 ESX/ESXi 主 机 所 在 的 网 络 进 行 更 改 时,VMware 建 议 您 挂 起 主 机 监 控 功 能 更 改 网 络 硬 件 或 网 络 设 置 会 中 断 VMware HA 用 于 检 测 主 机 故 障 的 检 测 信 号, 并 且 这 可 能 导 致 不 必 要 的 虚 拟 机 故 障 切 换 尝 试 在 ESX/ESXi 主 机 上 更 改 网 络 配 置 时 ( 例 如, 添 加 端 口 组 或 移 除 vswitch),vmware 建 议 除 了 挂 起 主 机 监 控 以 外, 还 应 将 主 机 置 于 维 护 模 式 注 意 由 于 网 络 是 VMware HA 的 一 个 重 要 组 件, 因 此, 如 果 需 要 执 行 网 络 维 护, 请 通 知 VMware HA 管 理 员 用 于 VMware HA 通 信 的 网 络 要 识 别 哪 些 网 络 操 作 可 能 会 中 断 VMware HA 的 运 行, 应 当 了 解 哪 些 管 理 网 络 用 于 检 测 信 号 和 其 他 VMware HA 通 信 在 群 集 中 的 ESX 主 机 上,VMware HA 通 信 通 过 指 定 为 服 务 控 制 台 网 络 的 所 有 网 络 进 行 传 输 这 些 主 机 没 有 将 VMkernel 网 络 用 于 VMware HA 通 信 在 群 集 中 的 ESXi 主 机 上, 默 认 情 况 下,VMware HA 通 信 通 过 VMkernel 网 络 ( 除 了 那 些 标 记 为 用 于 vmotion 的 通 信 ) 进 行 传 输 如 果 仅 有 一 个 VMkernel 网 络, 如 有 必 要,VMware HA 与 vmotion 会 共 享 它 使 用 ESXi 4.0 及 更 高 版 本, 还 必 须 显 式 启 用 管 理 网 络 复 选 框 以 允 许 VMware HA 使 用 此 网 络 24 VMware, Inc.

25 章 2 创 建 和 使 用 VMware HA 群 集 群 集 范 围 的 网 络 注 意 事 项 为 了 使 VMware HA 运 行, 群 集 内 的 所 有 主 机 都 必 须 有 兼 容 网 络 添 加 到 群 集 的 第 一 个 节 点 指 明 为 了 使 所 有 后 续 主 机 成 为 群 集 成 员 还 必 须 拥 有 的 网 络 如 果 IP 地 址 和 子 网 掩 码 的 组 合 生 成 的 网 络 与 其 他 主 机 的 网 络 相 匹 配, 则 将 此 网 络 视 为 兼 容 网 络 如 果 尝 试 添 加 具 有 太 多 或 太 少 管 理 网 络 的 主 机, 或 者 要 添 加 的 主 机 具 有 不 兼 容 的 网 络, 则 配 置 任 务 将 失 败, 而 且 任 务 详 细 信 息 窗 格 中 将 指 定 该 主 机 不 兼 容 例 如, 如 果 添 加 到 群 集 的 第 一 个 主 机 有 两 个 网 络 用 于 VMware HA 通 信, / 和 / , 则 所 有 后 续 主 机 必 须 配 置 相 同 的 两 个 网 络, 并 用 于 VMware HA 通 信 网 络 隔 离 地 址 网 络 隔 离 地 址 是 要 ping 的 IP 地 址, 以 确 定 主 机 是 否 与 网 络 隔 离 只 有 当 主 机 已 停 止 从 群 集 内 的 任 何 其 他 主 机 接 收 检 测 信 号 时 才 ping 此 地 址 如 果 主 机 可 以 ping 其 网 络 隔 离 地 址, 则 说 明 该 主 机 并 未 与 网 络 隔 离, 并 且 群 集 内 的 其 他 主 机 已 发 生 故 障 但 是, 如 果 主 机 无 法 ping 其 隔 离 地 址, 则 可 能 该 主 机 已 与 网 络 隔 离, 并 且 不 会 执 行 故 障 切 换 操 作 默 认 情 况 下, 网 络 隔 离 地 址 是 主 机 的 默 认 网 关 无 论 已 定 义 了 多 少 管 理 网 络, 都 只 指 定 了 一 个 默 认 网 关, 因 此, 应 当 使 用 das.isolationaddress[...] 高 级 属 性 为 其 他 网 络 添 加 隔 离 地 址 请 参 见 第 22 页, VMware HA 高 级 属 性 指 定 额 外 的 隔 离 地 址 时,VMware 建 议 将 das.failuredetectiontime 高 级 属 性 的 设 置 增 加 到 毫 秒 (20 秒 ) 或 更 长 时 间 如 果 主 机 隔 离 响 应 是 为 了 故 障 切 换 虚 拟 机 ( 而 非 将 其 保 持 为 启 动 状 态 ), 则 从 网 络 隔 离 的 节 点 需 要 时 间 释 放 其 虚 拟 机 的 VMFS 锁 必 须 在 其 他 节 点 将 该 节 点 声 明 为 故 障 节 点 之 前 进 行 此 操 作, 以 便 当 它 们 启 动 虚 拟 机 时, 不 会 由 于 虚 拟 机 仍 然 被 此 隔 离 节 点 锁 定 而 收 到 错 误 有 关 VMware HA 高 级 属 性 的 详 细 信 息, 请 参 见 第 22 页, 自 定 义 VMware HA 行 为 其 他 网 络 注 意 事 项 配 置 交 换 机 如 果 连 接 服 务 器 的 物 理 网 络 交 换 机 支 持 PortFast( 或 等 效 ) 设 置, 请 将 其 启 用 此 设 置 可 防 止 主 机 在 执 行 冗 长 的 跨 树 算 法 期 间 误 认 为 网 络 已 被 隔 离 主 机 防 火 墙 在 ESX/ESXi 主 机 上,VMware HA 需 要 并 自 动 打 开 以 下 防 火 墙 端 口 入 站 端 口 :TCP/UDP 出 站 端 口 :TCP/UDP 端 口 组 名 称 和 网 络 标 签 在 VLAN 上 使 用 一 致 的 公 用 网 络 端 口 组 名 称 和 网 络 标 签 端 口 组 名 称 用 于 重 新 配 置 虚 拟 机 对 网 络 的 访 问 如 果 在 原 始 服 务 器 和 故 障 切 换 服 务 器 间 使 用 的 名 称 不 一 致, 虚 拟 机 将 在 故 障 切 换 后 中 断 网 络 连 接 虚 拟 机 使 用 这 些 标 签 在 重 新 启 动 时 重 新 建 立 网 络 连 接 网 络 路 径 冗 余 群 集 节 点 之 间 的 网 络 路 径 冗 余 对 VMware HA 可 靠 性 非 常 重 要 单 个 管 理 网 络 会 最 终 成 为 单 一 故 障 点, 并 且, 尽 管 只 有 该 网 络 出 现 故 障, 仍 可 能 会 导 致 故 障 切 换 如 果 您 只 有 一 个 管 理 网 络, 则 主 机 和 群 集 之 间 的 任 何 故 障 都 可 能 导 致 不 必 要 的 ( 或 错 误 的 ) 故 障 切 换 情 况 可 能 的 故 障 包 括 网 卡 故 障 网 络 电 缆 故 障 网 络 电 缆 移 除 和 交 换 机 重 置 考 虑 主 机 可 能 导 致 故 障 的 上 述 原 因, 然 后 尝 试 减 少 这 些 问 题 ( 通 常 通 过 提 供 网 络 冗 余 来 实 现 此 目 的 ) 可 以 使 用 网 卡 绑 定 在 网 卡 级 别 或 在 管 理 网 络 级 别 实 现 网 络 冗 余 在 大 多 数 实 现 中, 网 卡 绑 定 可 以 提 供 足 够 的 冗 余, 但 如 果 需 要, 可 以 使 用 或 增 加 管 理 网 络 冗 余 冗 余 管 理 网 络 可 以 可 靠 地 检 测 故 障 并 防 止 出 现 隔 离 的 情 况, 因 为 检 测 信 号 可 以 通 过 多 个 网 络 发 送 在 群 集 内 的 服 务 器 之 间 尽 量 少 配 置 硬 件 分 段, 目 的 是 为 了 限 制 单 一 故 障 点 此 外, 跃 点 过 多 的 路 由 可 能 会 导 致 检 测 信 号 的 网 络 数 据 包 延 迟, 并 增 加 潜 在 的 故 障 点 数 目 VMware, Inc. 25

26 使 用 网 卡 绑 定 的 网 络 冗 余 如 果 用 两 个 连 接 到 不 同 物 理 交 换 机 的 网 卡 组 成 一 个 网 卡 组, 则 可 以 提 高 管 理 网 络 的 可 靠 性 因 为 通 过 两 个 网 卡 ( 并 且 通 过 单 独 的 交 换 机 ) 连 接 的 服 务 器 具 有 两 条 独 立 的 路 径 来 发 送 和 接 收 检 测 信 号, 所 以 群 集 具 有 更 好 的 弹 性 要 为 管 理 网 络 配 置 网 卡 组, 请 在 活 动 或 待 机 配 置 的 vswitch 配 置 中 配 置 vnic 推 荐 的 vnic 参 数 设 置 如 下 : 默 认 的 负 载 平 衡 = 基 于 源 虚 拟 端 口 ID 的 路 由 故 障 恢 复 = 否 在 为 VMware HA 群 集 内 的 主 机 添 加 网 卡 后, 必 须 在 该 主 机 上 重 新 配 置 VMware HA 使 用 辅 助 网 络 的 网 络 冗 余 除 了 使 用 网 卡 绑 定 提 供 检 测 信 号 冗 余 之 外, 还 可 以 创 建 一 个 辅 助 管 理 网 络 连 接, 并 将 其 连 接 到 一 个 单 独 的 虚 拟 交 换 机 上 主 管 理 网 络 连 接 用 于 网 络 和 管 理 辅 助 管 理 网 络 连 接 创 建 之 后,VMware HA 会 同 时 通 过 主 管 理 网 络 连 接 和 辅 助 管 理 网 络 连 接 发 送 检 测 信 号 如 果 一 条 路 径 发 生 故 障,VMware HA 仍 可 通 过 另 一 条 路 径 发 送 和 接 收 检 测 信 号 26 VMware, Inc.

27 为 虚 拟 机 提 供 容 错 3 可 以 为 虚 拟 机 启 用 VMware 容 错, 以 获 得 比 VMware HA 所 提 供 的 级 别 更 高 的 可 用 性 和 数 据 保 护, 从 而 确 保 业 务 连 续 性 容 错 基 于 ESX/ESXi 主 机 平 台 构 建 ( 使 用 VMware vlockstep 技 术 ), 它 通 过 在 单 独 主 机 上 以 虚 拟 锁 步 方 式 运 行 相 同 的 虚 拟 机 来 提 供 连 续 可 用 性 要 获 取 容 错 的 最 佳 结 果, 应 先 熟 悉 其 工 作 原 理 如 何 为 群 集 和 虚 拟 机 启 用 它 其 最 佳 使 用 方 法 以 及 故 障 排 除 提 示 本 章 讨 论 了 以 下 主 题 : 第 27 页, 容 错 的 工 作 方 式 第 28 页, 将 容 错 功 能 与 DRS 配 合 使 用 第 28 页, 容 错 用 例 第 29 页, 容 错 对 照 表 第 30 页, 容 错 互 操 作 性 第 31 页, 为 容 错 准 备 群 集 和 主 机 第 34 页, 为 虚 拟 机 提 供 容 错 第 36 页, 查 看 有 关 容 错 虚 拟 机 的 信 息 第 37 页, 容 错 最 佳 做 法 第 39 页, VMware 容 错 配 置 建 议 第 39 页, 容 错 故 障 排 除 容 错 的 工 作 方 式 VMware 容 错 可 通 过 创 建 和 维 护 等 同 于 主 虚 拟 机 并 可 在 发 生 故 障 切 换 时 替 换 主 虚 拟 机 的 辅 助 虚 拟 机 来 为 虚 拟 机 提 供 连 续 可 用 性 可 以 为 大 多 数 任 务 关 键 虚 拟 机 启 用 容 错 并 会 创 建 一 个 重 复 虚 拟 机 ( 称 为 辅 助 虚 拟 机 ), 该 虚 拟 机 会 以 虚 拟 锁 步 方 式 随 主 虚 拟 机 一 起 运 行 VMware vlockstep 可 捕 获 主 虚 拟 机 上 发 生 的 输 入 和 事 件, 并 将 这 些 输 入 和 事 件 发 送 到 正 在 另 一 主 机 上 运 行 的 辅 助 虚 拟 机 使 用 此 信 息, 辅 助 虚 拟 机 的 执 行 将 等 同 于 主 虚 拟 机 的 执 行 因 为 辅 助 虚 拟 机 与 主 虚 拟 机 一 起 以 虚 拟 锁 步 方 式 运 行, 所 以 它 可 以 无 中 断 地 接 管 任 何 点 处 的 执 行, 从 而 提 供 容 错 保 护 VMware, Inc. 27

28 图 3-1 容 错 对 中 的 主 虚 拟 机 和 辅 助 虚 拟 机 主 要 辅 助 应 用 程 序 客 户 机 操 作 系 统 VMware 日 志 记 录 流 量 应 用 程 序 客 户 机 操 作 系 统 VMware 客 户 端 记 录 非 确 定 事 件 输 入 ( 网 络 用 户 ) 异 步 I/O( 磁 盘 设 备 ) CPU 定 时 器 事 件 重 放 非 确 定 事 件 结 果 = 可 重 复 虚 拟 机 执 行 主 虚 拟 机 和 辅 助 虚 拟 机 可 持 续 交 换 检 测 信 号 此 交 换 使 得 虚 拟 机 对 中 的 虚 拟 机 能 够 监 控 彼 此 的 状 态, 以 确 保 持 续 提 供 容 错 保 护 如 果 运 行 主 虚 拟 机 的 主 机 发 生 故 障, 系 统 将 会 执 行 透 明 故 障 切 换, 此 时 会 立 即 启 用 辅 助 虚 拟 机 以 替 换 主 虚 拟 机, 并 将 启 动 新 的 辅 助 虚 拟 机, 同 时 在 几 秒 钟 内 重 新 建 立 容 错 冗 余 如 果 运 行 辅 助 虚 拟 机 的 主 机 发 生 故 障, 则 该 主 机 也 会 立 即 被 替 换 在 任 一 情 况 下, 用 户 都 不 会 遭 遇 服 务 中 断 和 数 据 丢 失 的 情 况 容 错 虚 拟 机 及 其 辅 助 副 本 不 允 许 在 相 同 主 机 上 运 行 此 限 制 可 确 保 主 机 故 障 无 法 导 致 两 个 虚 拟 机 都 丢 失 也 可 以 使 用 虚 拟 机 - 主 机 关 联 性 规 则 来 确 定 要 在 其 上 运 行 指 定 虚 拟 机 的 主 机 如 果 使 用 这 些 规 则, 应 了 解 对 于 受 这 种 规 则 影 响 的 任 何 主 虚 拟 机, 其 关 联 的 辅 助 虚 拟 机 也 受 这 些 规 则 影 响 有 关 关 联 性 规 则 的 详 细 信 息, 请 参 见 资 源 管 理 指 南 容 错 可 避 免 裂 脑 情 况 的 发 生, 此 情 况 可 能 会 导 致 虚 拟 机 在 从 故 障 中 恢 复 后 存 在 两 个 活 动 副 本 共 享 存 储 器 上 锁 定 的 原 子 文 件 用 于 协 调 故 障 切 换, 以 便 只 有 一 端 可 作 为 主 虚 拟 机 继 续 运 行, 并 由 系 统 自 动 重 新 生 成 新 辅 助 虚 拟 机 注 意 系 统 会 在 主 虚 拟 机 启 动 后 执 行 反 关 联 性 检 查 当 主 虚 拟 机 和 辅 助 虚 拟 机 都 处 于 关 闭 状 态 时, 它 们 可 能 会 位 于 相 同 主 机 上 但 这 是 正 常 行 为, 辅 助 虚 拟 机 会 在 主 虚 拟 机 启 动 时 在 其 他 主 机 上 启 动 将 容 错 功 能 与 DRS 配 合 使 用 容 错 用 例 启 用 了 增 强 型 vmotion 兼 容 性 (EVC) 功 能 时, 可 以 将 VMware 容 错 与 VMware Distributed Resource Scheduler (DRS) 配 合 使 用 此 过 程 不 但 可 使 容 错 虚 拟 机 受 益 于 更 好 的 初 始 放 置 位 置, 还 可 以 将 其 纳 入 群 集 的 负 载 平 衡 计 算 中 当 群 集 启 用 了 EVC 时,DRS 将 为 容 错 虚 拟 机 提 出 初 始 放 置 位 置 建 议 在 重 新 平 衡 群 集 负 载 期 间 移 动 这 些 虚 拟 机, 并 允 许 您 为 主 虚 拟 机 分 配 DRS 自 动 化 级 别 ( 辅 助 虚 拟 机 总 是 采 用 与 其 关 联 的 主 虚 拟 机 相 同 的 设 置 ) 有 关 EVC 的 信 息, 请 参 见 VMware vsphere 数 据 中 心 管 理 指 南 在 初 始 放 置 或 负 载 平 衡 期 间,DRS 放 置 在 主 机 上 的 主 虚 拟 机 或 辅 助 虚 拟 机 的 数 目 不 会 超 过 一 个 固 定 的 数 目 此 限 制 由 高 级 选 项 das.maxftvmsperhost 控 制 此 选 项 的 默 认 值 为 4 但 是, 如 果 将 此 选 项 设 置 为 0,DRS 将 忽 略 此 限 制 将 VMware 容 错 用 于 禁 用 了 EVC 的 群 集 中 的 虚 拟 机 时, 将 为 容 错 虚 拟 机 指 定 DRS 自 动 化 级 别 已 禁 用 在 这 种 群 集 中, 每 个 主 虚 拟 机 只 在 其 注 册 的 主 机 上 启 动, 其 辅 助 虚 拟 机 被 自 动 放 置, 并 且 不 会 移 动 主 或 辅 助 容 错 虚 拟 机 以 进 行 负 载 平 衡 如 果 将 关 联 性 规 则 用 于 一 对 容 错 虚 拟 机, 则 虚 拟 机 - 虚 拟 机 关 联 性 规 则 仅 适 用 于 主 虚 拟 机, 而 虚 拟 机 - 主 机 关 联 性 规 则 适 用 于 主 虚 拟 机 及 其 辅 助 虚 拟 机 几 种 典 型 情 况 可 以 受 益 于 VMware 容 错 的 使 用 容 错 可 提 供 比 VMware HA 更 高 级 别 的 业 务 连 续 性 当 调 用 辅 助 虚 拟 机 以 替 换 与 其 对 应 的 主 虚 拟 机 时, 辅 助 虚 拟 机 会 立 即 取 代 主 虚 拟 机 的 角 色, 并 会 保 存 其 整 个 状 况 应 用 程 序 已 在 运 行, 并 且 不 需 要 重 新 输 入 或 重 新 加 载 内 存 中 存 储 的 数 据 这 不 同 于 VMware HA 提 供 的 故 障 切 换, 故 障 切 换 会 重 新 启 动 受 故 障 影 响 的 虚 拟 机 28 VMware, Inc.

29 章 3 为 虚 拟 机 提 供 容 错 更 高 的 连 续 性 级 别 以 及 增 加 的 状 况 信 息 和 数 据 保 护 功 能 可 在 您 要 部 署 容 错 时 提 供 方 案 信 息 需 要 始 终 保 持 可 用 的 应 用 程 序, 尤 其 是 那 些 具 有 长 时 间 客 户 端 连 接 的 应 用 程 序, 用 户 希 望 在 硬 件 故 障 期 间 保 持 这 些 连 接 不 能 通 过 任 何 其 他 方 式 实 现 群 集 功 能 的 自 定 义 应 用 程 序 可 以 通 过 自 定 义 群 集 解 决 方 案 提 供 高 可 用 性, 但 这 些 解 决 方 案 太 复 杂, 很 难 进 行 配 置 和 维 护 的 情 况 按 需 容 错 用 容 错 保 护 虚 拟 机 的 另 一 个 关 键 用 例 可 以 描 述 为 按 需 容 错 在 这 种 情 况 中, 虚 拟 机 在 正 常 操 作 期 间 受 到 VMware HA 的 充 分 保 护 在 某 些 关 键 期 间, 您 可 能 希 望 增 强 虚 拟 机 的 保 护 例 如, 您 可 能 正 在 执 行 季 末 报 告, 如 果 发 生 中 断, 则 可 能 会 延 迟 任 务 关 键 信 息 的 可 用 性 使 用 VMware 容 错, 可 以 在 运 行 此 报 告 之 前 保 护 此 虚 拟 机, 然 后 在 生 成 报 告 之 后 关 闭 或 禁 用 容 错 可 以 在 关 键 时 间 段 使 用 按 需 容 错 保 护 虚 拟 机, 然 后 在 非 关 键 操 作 期 间 将 资 源 置 回 正 常 状 态 容 错 对 照 表 以 下 对 照 表 包 含 在 使 用 VMware 容 错 之 前 需 要 了 解 的 群 集 主 机 和 虚 拟 机 要 求 在 设 置 容 错 之 前, 应 查 看 此 列 表 您 也 可 以 使 用 VMware SiteSurvey 实 用 程 序 ( 从 下 载 ), 更 好 地 了 解 与 要 用 于 VMware 容 错 的 群 集 主 机 和 虚 拟 机 相 关 的 配 置 问 题 容 错 的 群 集 要 求 在 使 用 容 错 之 前, 必 须 满 足 以 下 群 集 要 求 主 机 证 书 检 查 功 能 已 启 用 请 参 见 第 31 页, 启 用 主 机 证 书 检 查 至 少 有 两 台 通 过 容 错 认 证 的 主 机 运 行 相 同 的 容 错 版 本 号 或 主 机 内 部 版 本 号 容 错 版 本 号 显 示 在 vsphere Client 中 主 机 的 摘 要 选 项 卡 上 注 意 对 于 ESX/ESXi 4.1 之 前 的 主 机, 此 选 项 卡 列 出 的 是 主 机 内 部 版 本 号 修 补 程 序 可 能 会 导 致 ESX 和 ESXi 安 装 之 间 的 主 机 内 部 版 本 号 不 同 为 了 确 保 主 机 与 容 错 兼 容, 请 不 要 在 容 错 对 中 混 合 使 用 ESX 和 ESXi 主 机 ESX/ESXi 主 机 可 以 访 问 相 同 的 虚 拟 机 数 据 存 储 和 网 络 请 参 见 第 37 页, 容 错 最 佳 做 法 配 置 了 容 错 日 志 记 录 和 vmotion 网 络 请 参 见 第 32 页, 为 主 机 配 置 网 络 VMware HA 群 集 已 创 建 并 启 用 请 参 见 第 18 页, 创 建 VMware HA 群 集 启 动 容 错 虚 拟 机 或 者 将 主 机 添 加 到 已 支 持 容 错 虚 拟 机 的 群 集 之 前, 必 须 启 用 VMware HA 容 错 的 主 机 要 求 在 使 用 容 错 之 前, 必 须 满 足 以 下 主 机 要 求 主 机 上 的 处 理 器 必 须 来 自 与 容 错 兼 容 的 处 理 器 组 此 外, 强 烈 建 议 主 机 的 处 理 器 之 间 也 相 互 兼 容 有 关 受 支 持 处 理 器 的 信 息, 请 参 见 VMware 知 识 库 文 章, 网 址 为 主 机 必 须 获 得 VMware 容 错 许 可 主 机 必 须 已 通 过 容 错 认 证 请 参 见 并 选 择 按 与 容 错 兼 容 的 集 合 搜 索, 确 定 主 机 是 否 已 通 过 认 证 在 配 置 每 台 主 机 时, 都 必 须 在 BIOS 中 启 用 硬 件 虚 拟 化 (HV) VMware, Inc. 29

30 要 确 认 群 集 内 的 主 机 是 否 兼 容, 从 而 判 断 其 是 否 支 持 容 错, 还 可 以 按 第 34 页, 创 建 VMware HA 群 集 和 检 查 合 规 性 中 所 说 明 的 那 样 运 行 配 置 文 件 合 规 性 检 查 注 意 当 主 机 无 法 支 持 VMware 容 错 时, 可 在 vsphere Client 中 主 机 的 摘 要 选 项 卡 上 查 看 原 因 单 击 已 配 置 容 错 的 主 机 字 段 旁 边 的 蓝 色 标 题 图 标, 查 看 主 机 不 符 合 的 容 错 要 求 的 列 表 容 错 的 虚 拟 机 要 求 在 使 用 容 错 之 前, 必 须 满 足 以 下 虚 拟 机 要 求 没 有 不 受 支 持 的 设 备 连 接 到 虚 拟 机 请 参 见 第 30 页, 容 错 互 操 作 性 虚 拟 机 必 须 存 储 在 虚 拟 RDM 或 厚 置 备 的 虚 拟 机 磁 盘 (VMDK) 文 件 中 如 果 虚 拟 机 存 储 在 精 简 置 备 的 VMDK 文 件 中, 则 在 尝 试 启 用 容 错 时 将 会 出 现 一 则 指 示 必 须 转 换 VMDK 文 件 的 消 息 要 执 行 该 转 换, 必 须 关 闭 虚 拟 机 不 兼 容 的 功 能 一 定 不 能 与 容 错 虚 拟 机 一 起 运 行 请 参 见 第 30 页, 容 错 互 操 作 性 虚 拟 机 文 件 必 须 存 储 在 共 享 存 储 器 上 可 接 受 共 享 的 存 储 解 决 方 案 包 括 光 纤 通 道 ( 硬 件 和 软 件 )iscsi NFS 和 NAS 只 有 带 有 单 个 vcpu 的 虚 拟 机 才 能 与 容 错 功 能 兼 容 虚 拟 机 必 须 在 一 个 受 支 持 的 客 户 机 操 作 系 统 上 运 行 有 关 详 细 信 息, 请 参 见 VMware 知 识 库 文 章, 网 址 为 容 错 互 操 作 性 在 配 置 VMware 容 错 之 前, 应 当 了 解 容 错 不 能 与 之 交 互 操 作 的 功 能 和 产 品 容 错 不 支 持 的 vsphere 功 能 容 错 虚 拟 机 不 支 持 以 下 vsphere 功 能 快 照 在 虚 拟 机 上 启 用 容 错 前, 必 须 移 除 或 提 交 快 照 此 外, 不 可 能 对 已 启 用 容 错 的 虚 拟 机 执 行 快 照 Storage vmotion 不 能 为 已 启 用 容 错 的 虚 拟 机 调 用 Storage vmotion 要 迁 移 存 储 器, 应 当 先 暂 时 关 闭 容 错, 然 后 再 执 行 Storage vmotion 操 作 在 完 成 迁 移 之 后, 可 以 重 新 打 开 容 错 链 接 克 隆 不 能 在 为 链 接 克 隆 的 虚 拟 机 上 启 用 容 错, 也 不 能 从 启 用 了 容 错 的 虚 拟 机 创 建 链 接 克 隆 VMware Consolidated Backup (VCB) 不 能 使 用 VCB 用 于 数 据 保 护 的 vstorage API VMware Data Recovery 或 需 要 使 用 虚 拟 机 快 照 ( 如 ESX/ESXi 所 执 行 的 那 样 ) 的 类 似 备 份 产 品 来 备 份 启 用 了 容 错 的 虚 拟 机 要 以 这 种 方 式 备 份 容 错 虚 拟 机, 首 先 必 须 禁 用 容 错, 然 后 在 执 行 备 份 后 重 新 启 用 容 错 基 于 存 储 阵 列 的 快 照 不 影 响 容 错 不 与 容 错 兼 容 的 功 能 和 设 备 要 使 虚 拟 机 与 容 错 功 能 兼 容, 虚 拟 机 不 能 使 用 以 下 功 能 或 设 备 表 3-1 不 与 容 错 兼 容 的 功 能 和 设 备 以 及 纠 正 操 作 不 兼 容 的 功 能 或 设 备 对 称 多 处 理 器 (SMP) 虚 拟 机 只 有 带 有 单 个 vcpu 的 虚 拟 机 才 能 与 容 错 功 能 兼 容 物 理 裸 磁 盘 映 射 (RDM) 由 物 理 或 远 程 设 备 支 持 的 CD-ROM 或 虚 拟 软 盘 设 备 纠 正 操 作 将 虚 拟 机 重 新 配 置 为 单 个 vcpu 配 置 为 单 vcpu 后, 许 多 工 作 负 载 均 有 较 好 的 性 能 表 现 请 重 新 配 置 具 有 支 持 物 理 RDM 的 虚 拟 设 备 的 虚 拟 机 以 使 用 虚 拟 RDM 移 除 CD-ROM 或 虚 拟 软 盘 设 备, 或 使 用 共 享 存 储 器 上 安 装 的 ISO 重 新 配 置 备 用 功 能 30 VMware, Inc.

31 章 3 为 虚 拟 机 提 供 容 错 表 3-1 不 与 容 错 兼 容 的 功 能 和 设 备 以 及 纠 正 操 作 ( 续 ) 不 兼 容 的 功 能 或 设 备 准 虚 拟 化 客 户 机 纠 正 操 作 如 果 准 虚 拟 化 不 是 必 需 的, 请 重 新 配 置 不 带 VMI ROM 的 虚 拟 机 USB 和 声 音 设 备 从 虚 拟 机 移 除 这 些 设 备 N_Port ID 虚 拟 化 (NPIV) 禁 用 虚 拟 机 的 NPIV 配 置 网 卡 直 通 容 错 不 支 持 此 功 能, 因 此 必 须 将 其 关 闭 vlance 网 络 驱 动 程 序 容 错 不 支 持 配 置 了 vlance 虚 拟 网 卡 的 虚 拟 机 但 是, vmxnet2 vmxnet3 和 e1000 完 全 受 支 持 使 用 精 简 置 备 的 存 储 器 或 未 启 用 群 集 功 能 的 厚 置 备 磁 盘 备 份 的 虚 拟 磁 盘 热 插 拔 设 备 当 您 打 开 容 错 时, 系 统 会 默 认 执 行 到 适 当 磁 盘 格 式 的 转 换 必 须 先 关 闭 虚 拟 机, 才 能 触 发 此 转 换 容 错 虚 拟 机 的 热 插 拔 功 能 将 自 动 禁 用 要 热 插 拔 设 备 ( 添 加 或 移 除 ), 必 须 临 时 关 闭 容 错, 完 成 热 插 拔 操 作, 然 后 重 新 启 用 容 错 注 意 使 用 容 错 时, 如 果 在 虚 拟 机 正 在 运 行 过 程 中 更 改 虚 拟 网 卡 的 设 置, 该 操 作 即 为 热 插 拔 操 作, 因 为 它 要 求 先 拔 出 网 卡, 然 后 重 新 插 入 例 如, 当 正 在 运 行 的 虚 拟 机 使 用 虚 拟 网 卡 时, 如 果 更 改 虚 拟 网 卡 所 连 接 到 的 网 络, 必 须 首 先 关 闭 容 错 扩 展 页 表 / 快 速 虚 拟 化 索 引 (EPT/RVI) EPT/RVI 在 启 用 了 容 错 的 虚 拟 机 上 将 自 动 禁 用 串 行 或 并 行 端 口 从 虚 拟 机 移 除 这 些 设 备 IPv6 将 IPv4 地 址 与 容 错 配 合 使 用 为 容 错 准 备 群 集 和 主 机 要 为 群 集 启 用 VMware 容 错, 必 须 满 足 此 功 能 的 必 备 条 件, 然 后 在 主 机 上 执 行 特 定 的 配 置 步 骤 完 成 这 些 步 骤 并 创 建 群 集 后, 还 可 以 检 查 配 置 是 否 符 合 启 用 容 错 的 要 求 尝 试 为 群 集 启 用 容 错 之 前, 应 当 完 成 的 任 务 包 括 : 启 用 主 机 证 书 检 查 ( 如 果 您 要 从 先 前 版 本 的 vcenter Server 升 级 ) 为 每 台 主 机 配 置 网 络 创 建 VMware HA 群 集, 添 加 主 机, 并 检 查 合 规 性 在 为 群 集 和 主 机 准 备 好 容 错 之 后, 便 可 为 虚 拟 机 打 开 容 错 请 参 见 第 36 页, 为 虚 拟 机 打 开 容 错 启 用 主 机 证 书 检 查 使 用 主 机 证 书 检 查, 可 以 将 ESX/ESXi 主 机 配 置 为 相 互 验 证 身 份, 确 保 维 护 一 个 更 安 全 的 环 境 对 于 容 错 虚 拟 机 所 在 的 ESX/ESXi 主 机 来 说, 主 机 证 书 检 查 是 必 需 的 如 果 安 装 了 VMware vcenter Server 4.1 版 本, 系 统 会 自 动 启 用 主 机 证 书 检 查 如 果 所 用 版 本 是 从 上 一 版 本 升 级 的 版 本, 则 必 须 手 动 执 行 此 过 程 在 此 过 程 中, 您 会 看 到 主 机 及 其 待 验 证 的 证 书 的 列 表 您 可 以 在 启 用 证 书 检 查 之 前 验 证 主 机 证 书 必 须 以 手 动 方 式 对 未 在 此 步 骤 中 验 证 的 主 机 进 行 验 证 和 重 新 连 接 步 骤 1 将 vsphere Client 连 接 到 vcenter Server 2 选 择 系 统 管 理, 然 后 选 择 vcenter Server 设 置 此 时 会 出 现 vcenter Server 设 置 窗 口 3 在 左 窗 格 中 单 击 SSL 设 置 VMware, Inc. 31

32 4 选 中 vcenter 需 要 已 验 证 的 主 机 SSL 证 书 框 5 单 击 确 定 为 主 机 配 置 网 络 在 要 添 加 到 VMware HA 群 集 的 每 台 主 机 上, 必 须 配 置 两 个 不 同 的 网 络 交 换 机, 以 便 让 主 机 也 能 支 持 VMware 容 错 要 为 主 机 启 用 容 错, 您 必 须 完 成 此 步 骤 两 次, 即 为 每 个 端 口 组 选 项 各 进 行 一 次, 以 确 保 有 足 够 的 带 宽 可 供 容 错 日 志 记 录 使 用 选 择 一 个 选 项, 完 成 该 过 程, 然 后 选 择 另 一 个 端 口 组 选 项, 再 执 行 一 次 该 过 程 前 提 条 件 需 要 多 个 千 兆 位 网 络 接 口 卡 (NIC) 对 于 支 持 容 错 功 能 的 每 台 主 机, 最 少 需 要 两 个 物 理 千 兆 位 网 卡 例 如, 您 需 要 一 个 网 卡 专 门 用 于 容 错 日 志 记 录, 另 一 个 则 专 门 用 于 vmotion VMware 建 议 具 备 三 个 或 更 多 网 卡 来 确 保 可 用 性 vmotion 和 容 错 日 志 记 录 网 卡 必 须 位 于 不 同 子 网 上 步 骤 1 将 vsphere Client 连 接 到 vcenter Server 2 在 vcenter Server 清 单 中, 选 择 主 机, 然 后 单 击 配 置 选 项 卡 3 选 择 硬 件 下 的 网 络, 然 后 单 击 添 加 网 络 链 接 此 时 会 出 现 添 加 网 络 向 导 4 选 择 连 接 类 型 下 的 VMkernel, 然 后 单 击 下 一 步 5 选 择 创 建 虚 拟 交 换 机, 然 后 单 击 下 一 步 6 提 供 交 换 机 的 标 签 7 选 择 将 此 端 口 组 用 于 vmotion 或 将 此 端 口 组 用 于 容 错 日 志 记 录, 然 后 单 击 下 一 步 8 提 供 IP 地 址 和 子 网 掩 码, 然 后 单 击 下 一 步 9 单 击 完 成 在 创 建 vmotion 和 容 错 日 志 记 录 虚 拟 交 换 机 后, 可 以 根 据 需 要 创 建 其 他 虚 拟 交 换 机 然 后, 应 该 将 主 机 添 加 到 群 集, 并 完 成 打 开 容 错 所 需 的 步 骤 下 一 步 要 确 认 是 否 在 主 机 上 成 功 启 用 了 vmotion 和 容 错, 请 在 vsphere Client 中 查 看 该 主 机 的 摘 要 选 项 卡 在 常 规 窗 格 中,vMotion 已 启 用 和 已 配 置 容 错 的 主 机 字 段 均 应 显 示 为 是 注 意 如 果 将 网 络 配 置 为 可 支 持 容 错, 但 随 后 又 禁 用 了 容 错 日 志 记 录 端 口, 则 已 启 动 的 容 错 虚 拟 机 对 将 保 持 启 动 状 态 但 是, 如 果 出 现 了 故 障 切 换 情 况, 那 么, 当 主 虚 拟 机 被 其 辅 助 虚 拟 机 替 换 时, 将 不 会 启 动 新 的 辅 助 虚 拟 机, 这 会 导 致 新 的 主 虚 拟 机 以 不 受 保 护 状 态 运 行 32 VMware, Inc.

I

I 机 电 一 级 注 册 建 造 师 继 续 教 育 培 训 广 东 培 训 点 网 上 报 名 操 作 使 用 手 册 (2013 年 1 月, 第 一 版 ) 第 一 章 个 人 注 册 与 个 人 信 息 管 理 1. 个 人 注 册 ( 请 每 人 只 申 请 一 个 注 册 号, 如 果 单 位 批 量 报 班 单 位 帮 申 请 注 册, 不 需 个 人 再 注 册 ) 首 次 报 班,

More information

说 明 为 了 反 映 教 运 行 的 基 本 状 态, 为 校 和 院 制 定 相 关 政 策 和 进 行 教 建 设 与 改 革 提 供 据 依 据, 校 从 程 资 源 ( 开 类 别 开 量 规 模 ) 教 师 结 构 程 考 核 等 维 度, 对 2015 年 春 季 期 教 运 行 基

说 明 为 了 反 映 教 运 行 的 基 本 状 态, 为 校 和 院 制 定 相 关 政 策 和 进 行 教 建 设 与 改 革 提 供 据 依 据, 校 从 程 资 源 ( 开 类 别 开 量 规 模 ) 教 师 结 构 程 考 核 等 维 度, 对 2015 年 春 季 期 教 运 行 基 内 部 资 料 东 北 师 范 大 教 运 行 基 本 状 态 据 报 告 2015 年 春 季 期 教 务 处 2015 年 10 月 27 日 说 明 为 了 反 映 教 运 行 的 基 本 状 态, 为 校 和 院 制 定 相 关 政 策 和 进 行 教 建 设 与 改 革 提 供 据 依 据, 校 从 程 资 源 ( 开 类 别 开 量 规 模 ) 教 师 结 构 程 考 核 等 维 度,

More information

<433A5C446F63756D656E747320616E642053657474696E67735C41646D696E6973747261746F725CD7C0C3E65CC2DBCEC4CFB5CDB3CAB9D3C3D6B8C4CFA3A8BCF2BBAFA3A95CCAB9D3C3D6B8C4CF31302D31392E646F63>

<433A5C446F63756D656E747320616E642053657474696E67735C41646D696E6973747261746F725CD7C0C3E65CC2DBCEC4CFB5CDB3CAB9D3C3D6B8C4CFA3A8BCF2BBAFA3A95CCAB9D3C3D6B8C4CF31302D31392E646F63> ( 一 ) 系 统 整 体 操 作 流 程 简 述 3 ( 二 ) 系 统 中 各 角 色 操 作 功 能 说 明 5 1. 学 院 管 理 员 5 2. 教 学 院 长 8 3. 指 导 教 师 10 4. 答 辩 组 组 长 12 5. 学 生 12 6. 系 统 管 理 员 15 ( 一 ) 论 文 系 统 常 见 问 题 16 ( 二 ) 论 文 查 重 常 见 问 题 22 1 2 主

More information

评 委 : 李 炎 斌 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单

评 委 : 李 炎 斌 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单 评 委 : 李 炎 斌 - 个 人 清 标 评 审 明 细 表 评 审 因 素 序 号 投 标 单 位 清 标 评 审 1 深 圳 市 创 捷 科 技 有 限 合 格 2 四 川 川 大 智 胜 软 件 股 份 有 限 合 格 3 北 京 航 天 长 峰 科 技 工 业 集 团 有 限 公 司 合 格 4 深 圳 中 兴 力 维 技 术 有 限 合 格 5 深 圳 键 桥 通 讯 技 术 股 份 有

More information

评 委 : 徐 岩 宇 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单

评 委 : 徐 岩 宇 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单 评 委 : 徐 岩 宇 - 个 人 清 标 评 审 明 细 表 评 审 因 素 序 号 投 标 单 位 清 标 评 审 1 深 圳 市 创 捷 科 技 有 限 合 格 2 四 川 川 大 智 胜 软 件 股 份 有 限 合 格 3 北 京 航 天 长 峰 科 技 工 业 集 团 有 限 公 司 合 格 4 深 圳 中 兴 力 维 技 术 有 限 合 格 5 深 圳 键 桥 通 讯 技 术 股 份 有

More information

何 秋 琳 张 立 春 视 觉 学 习 研 究 进 展 视 觉 注 意 视 觉 感 知

何 秋 琳 张 立 春 视 觉 学 习 研 究 进 展 视 觉 注 意 视 觉 感 知 第 卷 第 期 年 月 开 放 教 育 研 究 何 秋 琳 张 立 春 华 南 师 范 大 学 未 来 教 育 研 究 中 心 广 东 广 州 随 着 图 像 化 技 术 和 电 子 媒 体 的 发 展 视 觉 学 习 也 逐 步 发 展 为 学 习 科 学 的 一 个 研 究 分 支 得 到 研 究 人 员 和 教 育 工 作 者 的 广 泛 关 注 基 于 此 作 者 试 图 对 视 觉 学 习

More information

修改版-操作手册.doc

修改版-操作手册.doc 职 称 信 息 系 统 升 级 指 南 须 使 用 IE9 及 其 以 上 版 本 浏 览 器 或 谷 歌 浏 览 器 登 录 www.njrs.gov.cn 南 京 市 职 称 ( 职 业 资 格 ) 工 作 领 导 小 组 办 公 室 2016 年 5 月 目 录 一 申 报 人 员 操 作 指 南...1 1.1 职 称 初 定 申 报...1 1.1.1 职 称 初 定 基 础 信 息 填

More information

0 年 上 半 年 评 价 与 考 核 细 则 序 号 部 门 要 素 值 考 核 内 容 考 核 方 式 考 核 标 准 考 核 ( 扣 原 因 ) 考 评 得 3 安 全 生 产 目 30 无 同 等 责 任 以 上 道 路 交 通 亡 人 事 故 无 轻 伤 责 任 事 故 无 重 大 质 量

0 年 上 半 年 评 价 与 考 核 细 则 序 号 部 门 要 素 值 考 核 内 容 考 核 方 式 考 核 标 准 考 核 ( 扣 原 因 ) 考 评 得 3 安 全 生 产 目 30 无 同 等 责 任 以 上 道 路 交 通 亡 人 事 故 无 轻 伤 责 任 事 故 无 重 大 质 量 0 年 上 半 年 评 价 与 考 核 细 则 序 号 部 门 要 素 值 考 核 内 容 考 核 方 式 考 核 标 准 无 同 等 责 任 以 上 道 路 交 通 亡 人 事 故 3 无 轻 伤 责 任 事 故 目 标 30 及 事 无 重 大 质 量 工 作 过 失 故 管 无 其 他 一 般 责 任 事 故 理 在 公 司 文 明 环 境 创 建 中, 无 工 作 过 失 及 被 追 究 的

More information

18 上 报 该 学 期 新 生 数 据 至 阳 光 平 台 第 一 学 期 第 四 周 至 第 六 周 19 督 促 学 习 中 心 提 交 新 增 专 业 申 请 第 一 学 期 第 四 周 至 第 八 周 20 编 制 全 国 网 络 统 考 十 二 月 批 次 考 前 模 拟 题 第 一 学

18 上 报 该 学 期 新 生 数 据 至 阳 光 平 台 第 一 学 期 第 四 周 至 第 六 周 19 督 促 学 习 中 心 提 交 新 增 专 业 申 请 第 一 学 期 第 四 周 至 第 八 周 20 编 制 全 国 网 络 统 考 十 二 月 批 次 考 前 模 拟 题 第 一 学 1 安 排 组 织 全 国 网 络 统 考 九 月 批 次 网 上 考 前 辅 导 第 一 学 期 第 一 周 统 考 考 前 半 个 月 2 下 发 全 国 网 络 统 考 九 月 批 次 准 考 证 第 一 学 期 第 一 周 导 出 下 半 年 成 人 本 科 学 士 学 位 英 语 统 一 考 试 报 考 3 信 息 第 一 学 期 第 一 周 4 教 学 计 划 和 考 试 计 划 上 网,

More information

深圳市新亚电子制程股份有限公司

深圳市新亚电子制程股份有限公司 证 券 代 码 :002388 证 券 简 称 : 新 亚 制 程 公 告 编 号 :2016-053 深 圳 市 新 亚 电 子 制 程 股 份 有 限 公 司 2016 年 第 二 次 临 时 股 东 大 会 决 议 公 告 本 公 司 及 董 事 会 全 体 成 员 保 证 公 告 内 容 真 实 准 确 和 完 整, 不 存 在 虚 假 记 载 误 导 性 陈 述 或 者 重 大 遗 漏 特

More information

目 录 关 于 图 标... 3 登 陆 主 界 面... 3 工 单 管 理... 5 工 单 列 表... 5 搜 索 工 单... 5 工 单 详 情... 6 创 建 工 单... 9 设 备 管 理 巡 检 计 划 查 询 详 情 销 售 管

目 录 关 于 图 标... 3 登 陆 主 界 面... 3 工 单 管 理... 5 工 单 列 表... 5 搜 索 工 单... 5 工 单 详 情... 6 创 建 工 单... 9 设 备 管 理 巡 检 计 划 查 询 详 情 销 售 管 宝 汇 德 Turbocare 微 服 务 系 统 客 户 操 作 手 册 Version 2.0 北 京 宝 汇 德 技 术 服 务 器 有 限 公 司 技 术 研 发 部 目 录 关 于 图 标... 3 登 陆 主 界 面... 3 工 单 管 理... 5 工 单 列 表... 5 搜 索 工 单... 5 工 单 详 情... 6 创 建 工 单... 9 设 备 管 理... 10 巡

More information

国债回购交易业务指引

国债回购交易业务指引 附 件 1 上 海 证 券 交 易 所 新 质 押 式 国 债 回 购 交 易 业 务 指 引 一 总 述 根 据 上 海 证 券 交 易 所 债 券 交 易 实 施 细 则, 上 证 所 将 于 2006 年 5 月 8 日 起 推 出 新 质 押 式 国 债 回 购 新 质 押 式 回 购 与 现 行 质 押 式 回 购 相 比 区 别 主 要 在 以 下 几 个 方 面 :1 新 质 押 式

More information

珠江钢琴股东大会

珠江钢琴股东大会 证 券 代 码 :002678 证 券 简 称 : 珠 江 钢 琴 公 告 编 号 :2015-038 广 州 珠 江 钢 琴 集 团 股 份 有 限 公 司 2015 年 年 度 股 东 大 会 决 议 公 告 本 公 司 及 董 事 会 全 体 成 员 保 证 信 息 披 露 的 内 容 真 实 准 确 完 整, 没 有 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏 特 别 提 示 :

More information

金 不 少 于 800 万 元, 净 资 产 不 少 于 960 万 元 ; (3) 近 五 年 独 立 承 担 过 单 项 合 同 额 不 少 于 1000 万 元 的 智 能 化 工 程 ( 设 计 或 施 工 或 设 计 施 工 一 体 ) 不 少 于 2 项 ; (4) 近 三 年 每 年

金 不 少 于 800 万 元, 净 资 产 不 少 于 960 万 元 ; (3) 近 五 年 独 立 承 担 过 单 项 合 同 额 不 少 于 1000 万 元 的 智 能 化 工 程 ( 设 计 或 施 工 或 设 计 施 工 一 体 ) 不 少 于 2 项 ; (4) 近 三 年 每 年 工 程 设 计 与 施 工 资 质 标 准 一 总 则 建 筑 智 能 化 工 程 设 计 与 施 工 资 质 标 准 ( 一 ) 为 了 加 强 对 从 事 建 筑 智 能 化 工 程 设 计 与 施 工 企 业 的 管 理, 维 护 建 筑 市 场 秩 序, 保 证 工 程 质 量 和 安 全, 促 进 行 业 健 康 发 展, 结 合 建 筑 智 能 化 工 程 的 特 点, 制 定 本 标

More information

上海证券交易所会议纪要

上海证券交易所会议纪要 附 件 上 海 市 场 首 次 公 开 发 行 股 票 网 下 发 行 实 施 细 则 第 一 章 总 则 第 一 条 为 规 范 拟 在 上 海 证 券 交 易 所 ( 以 下 简 称 上 交 所 ) 上 市 的 公 司 首 次 公 开 发 行 股 票 网 下 发 行 业 务, 提 高 首 次 公 开 发 行 股 票 网 下 申 购 及 资 金 结 算 效 率, 根 据 证 券 发 行 与 承 销

More information

全国建筑市场注册执业人员不良行为记录认定标准(试行).doc

全国建筑市场注册执业人员不良行为记录认定标准(试行).doc - 1 - - 2 - 附 件 全 国 建 筑 市 场 注 册 执 业 人 员 不 良 记 录 认 定 标 准 ( 试 行 ) 说 明 为 了 完 善 建 筑 市 场 注 册 执 业 人 员 诚 信 体 系 建 设, 规 范 执 业 和 市 场 秩 序, 依 据 相 关 法 律 法 规 和 部 门 规 章, 根 据 各 行 业 特 点, 我 部 制 订 了 全 国 建 筑 市 场 注 册 执 业 人

More information

自 服 务 按 钮 无 法 访 问 新 系 统 的 自 服 务 页 面 因 此 建 议 用 户 从 信 网 中 心 (http://nc.tju.edu.cn) 主 页, 右 下 角 位 置 的 常 用 下 载, 或 校 园 网 用 户 自 服 务 (http://g.tju.edu.cn) 首 页

自 服 务 按 钮 无 法 访 问 新 系 统 的 自 服 务 页 面 因 此 建 议 用 户 从 信 网 中 心 (http://nc.tju.edu.cn) 主 页, 右 下 角 位 置 的 常 用 下 载, 或 校 园 网 用 户 自 服 务 (http://g.tju.edu.cn) 首 页 校 园 网 认 证 计 费 系 统 变 更 说 明 及 使 用 帮 助 为 提 高 校 园 网 的 可 靠 性 和 可 用 性, 提 升 用 户 的 上 网 体 验, 同 时 也 为 解 决 近 期 校 园 网 无 法 认 证 或 登 录 页 面 弹 出 缓 慢 的 问 题, 信 网 中 心 于 近 期 对 校 园 网 认 证 计 费 系 统 进 行 升 级 切 换 现 将 升 级 后 新 系 统

More information

<4D F736F F D D323630D6D0B9FAD3A6B6D4C6F8BAF2B1E4BBAFB5C4D5FEB2DFD3EBD0D0B6AF C4EAB6C8B1A8B8E6>

<4D F736F F D D323630D6D0B9FAD3A6B6D4C6F8BAF2B1E4BBAFB5C4D5FEB2DFD3EBD0D0B6AF C4EAB6C8B1A8B8E6> 中 国 应 对 气 候 变 化 的 政 策 与 行 动 2013 年 度 报 告 国 家 发 展 和 改 革 委 员 会 二 〇 一 三 年 十 一 月 100% 再 生 纸 资 源 目 录 前 言... 1 一 应 对 气 候 变 化 面 临 的 形 势... 3 二 完 善 顶 层 设 计 和 体 制 机 制... 4 三 减 缓 气 候 变 化... 8 四 适 应 气 候 变 化... 20

More information

<4D6963726F736F667420576F7264202D20B9D8D3DAB0BABBAAA3A8C9CFBAA3A3A9D7D4B6AFBBAFB9A4B3CCB9C9B7DDD3D0CFDEB9ABCBBE32303132C4EAC4EAB6C8B9C9B6ABB4F3BBE1B7A8C2C9D2E2BCFBCAE92E646F6378>

<4D6963726F736F667420576F7264202D20B9D8D3DAB0BABBAAA3A8C9CFBAA3A3A9D7D4B6AFBBAFB9A4B3CCB9C9B7DDD3D0CFDEB9ABCBBE32303132C4EAC4EAB6C8B9C9B6ABB4F3BBE1B7A8C2C9D2E2BCFBCAE92E646F6378> 上 海 德 载 中 怡 律 师 事 务 所 关 于 昂 华 ( 上 海 ) 自 动 化 工 程 股 份 有 限 公 司 二 〇 一 二 年 年 度 股 东 大 会 法 律 意 见 书 上 海 德 载 中 怡 律 师 事 务 所 上 海 市 银 城 中 路 168 号 上 海 银 行 大 厦 1705 室 (200120) 电 话 :8621-5012 2258 传 真 :8621-5012 2257

More information

龚 亚 夫 在 重 新 思 考 基 础 教 育 英 语 教 学 的 理 念 一 文 中 援 引 的 观 点 认 为 当 跳 出 本 族 语 主 义 的 思 维 定 式 后 需 要 重 新 思 考 许 多 相 连 带 的 问 题 比 如 许 多 发 音 的 细 微 区 别 并 不 影 响 理 解 和

龚 亚 夫 在 重 新 思 考 基 础 教 育 英 语 教 学 的 理 念 一 文 中 援 引 的 观 点 认 为 当 跳 出 本 族 语 主 义 的 思 维 定 式 后 需 要 重 新 思 考 许 多 相 连 带 的 问 题 比 如 许 多 发 音 的 细 微 区 别 并 不 影 响 理 解 和 语 音 语 篇 语 感 语 域 林 大 津 毛 浩 然 改 革 开 放 以 来 的 英 语 热 引 发 了 大 中 小 学 英 语 教 育 整 体 规 划 问 题 在 充 分 考 虑 地 区 学 校 和 个 体 差 异 以 及 各 家 观 点 的 基 础 上 遵 循 实 事 求 是 逐 级 定 位 逐 层 分 流 因 材 施 教 的 原 则 本 研 究 所 倡 导 的 语 音 语 篇 语 感 语 域

More information

2006年顺德区高中阶段学校招生录取分数线

2006年顺德区高中阶段学校招生录取分数线 2014 年 顺 德 区 高 中 阶 段 学 校 考 试 提 前 批 第 一 批 第 二 批 学 校 录 取 根 据 佛 山 市 办 提 供 的 考 生 数 据, 现 将 我 区 2014 年 高 中 阶 段 学 校 考 试 提 前 批 第 一 批 第 二 批 学 校 的 录 取 公 布 如 下 : 一 顺 德 一 中 录 取 分 第 1 志 愿, 总 分 585, 综 合 表 现 评 价 A, 考

More information

《C语言基础入门》课程教学大纲

《C语言基础入门》课程教学大纲 C 语 言 开 发 入 门 教 程 课 程 教 学 大 纲 课 程 编 号 :201409210011 学 分 :5 学 分 学 时 :58 学 时 ( 其 中 : 讲 课 学 时 :39 学 时 上 机 学 时 :19 学 时 ) 先 修 课 程 : 计 算 机 导 论 后 续 课 程 :C++ 程 序 设 计 适 用 专 业 : 信 息 及 其 计 算 机 相 关 专 业 开 课 部 门 : 计

More information

( 二 ) 现 行 统 一 高 考 制 度 不 利 于 培 养 人 的 创 新 精 神,,,,,,,,,,,,, [ ],,,,,,,,,,, :, ;,,,,,,? ( 三 ) 现 行 统 一 高 考 制 度 不 利 于 全 体 学 生 都 获 得 全 面 发 展,, [ ],,,,,,,,,,,

( 二 ) 现 行 统 一 高 考 制 度 不 利 于 培 养 人 的 创 新 精 神,,,,,,,,,,,,, [ ],,,,,,,,,,, :, ;,,,,,,? ( 三 ) 现 行 统 一 高 考 制 度 不 利 于 全 体 学 生 都 获 得 全 面 发 展,, [ ],,,,,,,,,,, ( ) ( )... 李 雪 岩, 龙 耀 (. 广 西 民 族 大 学 商 学 院, 广 西 南 宁 ;. 中 山 大 学 教 育 学 院, 广 东 广 州 ) : 高 等 教 育 是 专 业 教 育 高 考 是 为 高 等 教 育 服 务 的, 是 为 高 等 专 业 教 育 选 拔 有 专 业 培 养 潜 质 的 人 才 现 行 高 考 制 度 忽 略 专 业 潜 质 的 因 素, 过 份 强

More information

云信Linux SSH认证代理用户手册

云信Linux SSH认证代理用户手册 Windows 主 机 登 录 保 护 (RDP) 管 理 员 配 置 手 册 V1.0 云 信 事 业 部 飞 天 诚 信 科 技 股 份 有 限 公 司 www.cloudentify.com 章 节 目 录 第 1 章 管 理 平 台 配 置 说 明... 1 1.1 注 册... 1 1.2 登 录... 3 1.3 添 加 应 用... 4 1.4 添 加 用 户... 7 1.5 激 活

More information

Microsoft Word - 文件汇编.doc

Microsoft Word - 文件汇编.doc 北 京 市 中 医 管 理 局 二 一 五 年 四 月 ... 1... 18 2015... 30 京 中 医 政 字 [2014]160 号 1 2 一 充 分 认 识 中 医 健 康 乡 村 建 设 工 作 的 重 要 意 义 二 建 立 健 全 工 作 保 障 机 制 2014 12 15 三 做 好 工 作 启 动 的 准 备 事 宜 1 2014 12 15 5-10 2014 12 15

More information

文 化 记 忆 传 统 创 新 与 节 日 遗 产 保 护 根 据 德 国 学 者 阿 斯 曼 的 文 化 记 忆 理 论 仪 式 与 文 本 是 承 载 文 化 记 忆 的 两 大 媒 体 在 各 种 仪 式 行 为 中 节 日 以 其 高 度 的 公 共 性 有 组 织 性 和 历 史 性 而 特 别 适 用 于 文 化 记 忆 的 储 存 和 交 流 节 日 的 文 化 功 能 不 仅 在 于

More information

科 学 出 版 社 科 学 出 版 社 前 言 本 书 是 针 对 普 通 高 等 院 校 经 济 类 和 工 商 管 理 类 本 科 专 业 财 务 管 理 学 的 教 学 需 求, 结 合 教 育 部 经 济 管 理 类 本 科 财 务 管 理 学 课 程 教 学 大 纲 编 写 而 成 的 本 书 执 笔 者 都 是 长 期 工 作 在 财 务 管 理 教 学 一 线 的 专 业 教 师,

More information

 编号:

 编号: 编 号 : 企 业 内 高 技 能 人 才 培 养 评 价 实 施 方 案 ( 仅 适 用 于 企 业 特 有 行 业 特 有 工 种 ) 实 施 单 位 ( 公 章 ) 申 报 日 期 年 _ 月 日 1 企 业 内 高 技 能 人 才 培 养 评 价 项 目 实 施 方 案 申 报 表 项 目 名 称 等 级 项 目 性 质 课 时 申 报 单 位 联 系 人 通 讯 地 址 电 话 手 机 电

More information

目 录 一 系 统 访 问... 1 二 门 户 首 页 申 报 用 户 审 核 用 户... 2 三 系 统 登 录 用 户 名 密 码 登 录 新 用 户 注 册 用 户 登 录 已 注 册 用

目 录 一 系 统 访 问... 1 二 门 户 首 页 申 报 用 户 审 核 用 户... 2 三 系 统 登 录 用 户 名 密 码 登 录 新 用 户 注 册 用 户 登 录 已 注 册 用 水 路 运 输 建 设 综 合 管 理 信 息 系 统 - 门 户 系 统 用 户 手 册 二 零 一 五 年 十 一 月 目 录 一 系 统 访 问... 1 二 门 户 首 页... 1 1. 申 报 用 户... 1 2. 审 核 用 户... 2 三 系 统 登 录... 4 1. 用 户 名 密 码 登 录... 4 1.1 新 用 户 注 册... 4 1.2 用 户 登 录... 7

More information

1600 1000 40 50 2030 2000 采 取 行 动 的 机 会 90% 开 拓 成 功 的 道 路 2

1600 1000 40 50 2030 2000 采 取 行 动 的 机 会 90% 开 拓 成 功 的 道 路 2 简 略 版 本 :2015 3 10 2016 2021 全 球 卫 生 部 门 病 毒 性 肝 炎 战 略 2016 2021 2015 3 12 2012 2010 2014 2015 2016 2021 140 55% 35% 5 15% 5 20% 2.4 1.3 1.5 1 1600 1000 40 50 2030 2000 采 取 行 动 的 机 会 90% 开 拓 成 功 的 道 路

More information

Template BR_Rec_2005.dot

Template BR_Rec_2005.dot ITU-R BT.1789 建 议 书 1 ITU-R BT.1789 建 议 书 在 分 组 视 频 传 输 中 利 用 传 输 误 码 信 息 重 建 接 收 视 频 的 方 法 (ITU-R 44/6 和 ITU-R 109/6 课 题 ) (2007 年 ) 范 围 本 建 议 书 对 业 务 提 供 商 重 建 接 收 视 频 的 方 法 做 了 详 细 介 绍, 以 便 利 用 传 输

More information

HSK( 一 级 ) 考 查 考 生 的 日 常 汉 语 应 用 能 力, 它 对 应 于 国 际 汉 语 能 力 标 准 一 级 欧 洲 语 言 共 同 参 考 框 架 (CEF) A1 级 通 过 HSK( 一 级 ) 的 考 生 可 以 理 解 并 使 用 一 些 非 常 简 单 的 汉 语

HSK( 一 级 ) 考 查 考 生 的 日 常 汉 语 应 用 能 力, 它 对 应 于 国 际 汉 语 能 力 标 准 一 级 欧 洲 语 言 共 同 参 考 框 架 (CEF) A1 级 通 过 HSK( 一 级 ) 的 考 生 可 以 理 解 并 使 用 一 些 非 常 简 单 的 汉 语 新 汉 语 水 平 考 试 HSK 为 使 汉 语 水 平 考 试 (HSK) 更 好 地 服 务 于 汉 语 学 习 者, 中 国 国 家 汉 办 组 织 中 外 汉 语 教 学 语 言 学 心 理 学 和 教 育 测 量 学 等 领 域 的 专 家, 在 充 分 调 查 了 解 海 外 实 际 汉 语 教 学 情 况 的 基 础 上, 吸 收 原 有 HSK 的 优 点, 借 鉴 近 年 来 国

More information

登录、注册功能的测试用例设计.doc

登录、注册功能的测试用例设计.doc 注 册 登 陆 测 试 用 例 和 修 改 密 码 测 试 用 例 完 整 版 摘 自 网 络, 狗 狗 整 理 zqh139@126.com 修 改 历 史 日 期 版 本 作 者 修 改 内 容 评 审 号 变 更 控 制 号 2010-11-25 1.0 初 稿 2011-09-17 2.0 整 理 一 注 册 测 试 用 例 序 号 : 1 控 件 名 称 : 功 能 描 述 : 注 册 编

More information

(2015-2016-2)-0004186-04205-1 140242 信 号 与 系 统 Ⅰ 学 科 基 础 必 修 课 37 37 1 教 203 17 周 2016 年 06 月 13 日 (08:00-09:35) (2015-2016-2)-0004186-04205-1 141011

(2015-2016-2)-0004186-04205-1 140242 信 号 与 系 统 Ⅰ 学 科 基 础 必 修 课 37 37 1 教 203 17 周 2016 年 06 月 13 日 (08:00-09:35) (2015-2016-2)-0004186-04205-1 141011 关 于 2015-2016 学 年 第 二 学 期 期 末 周 内 考 试 时 间 地 点 安 排 选 课 课 号 班 级 名 称 课 程 名 称 课 程 性 质 合 考 人 数 实 际 人 数 考 试 教 室 考 试 段 考 试 时 间 (2015-2016-2)-0006178-04247-1 130101 测 试 技 术 基 础 学 科 基 础 必 修 课 35 35 1 教 401 17 周

More information

3 月 30 日 在 中 国 证 券 报 上 海 证 券 报 证 券 时 报 证 券 日 报 和 上 海 证 券 交 易 所 网 站 上 发 出 召 开 本 次 股 东 大 会 公 告, 该 公 告 中 载 明 了 召 开 股 东 大 会 的 日 期 网 络 投 票 的 方 式 时 间 以 及 审

3 月 30 日 在 中 国 证 券 报 上 海 证 券 报 证 券 时 报 证 券 日 报 和 上 海 证 券 交 易 所 网 站 上 发 出 召 开 本 次 股 东 大 会 公 告, 该 公 告 中 载 明 了 召 开 股 东 大 会 的 日 期 网 络 投 票 的 方 式 时 间 以 及 审 北 京 市 君 致 律 师 事 务 所 关 于 浪 潮 软 件 股 份 有 限 公 司 2015 年 度 股 东 大 会 的 法 律 意 见 书 致 : 浪 潮 软 件 股 份 有 限 公 司 北 京 市 君 致 律 师 事 务 所 ( 以 下 简 称 本 所 ) 受 浪 潮 软 件 股 份 有 限 公 司 ( 以 下 简 称 公 司 ) 的 委 托, 指 派 律 师 出 席 2016 年 4 月

More information

世华财讯模拟操作手册

世华财讯模拟操作手册 第 一 部 分 : 股 票 模 拟 操 作 部 分 1. 登 录 与 主 界 面 1.1 登 录 学 生 在 桌 面 上, 打 开 世 华 文 件 夹, 直 接 双 击 文 件 夹 中 的 快 捷 图 标, 系 统 弹 出 世 华 财 讯 模 拟 股 票 交 易 系 统 ( 客 户 端 ) 窗 口, 如 图 1.1 所 示 图 1.1 请 输 入 登 录 名 称 及 密 码, 单 击 确 认 登 录

More information

证券代码:000066 证券简称:长城电脑 公告编号:2014-000

证券代码:000066         证券简称:长城电脑        公告编号:2014-000 证 券 代 码 :000066 证 券 简 称 : 长 城 电 脑 公 告 编 号 :2016-092 中 国 长 城 计 算 机 深 圳 股 份 有 限 公 司 2016 年 度 第 三 次 临 时 股 东 大 会 决 议 公 告 本 公 司 及 其 董 事 会 全 体 成 员 保 证 信 息 披 露 内 容 的 真 实 准 确 完 整, 没 有 虚 假 记 载 误 导 性 陈 述 或 重 大 遗

More information

2 2015 年 8 月 11 日, 公 司 召 开 2015 年 第 五 次 临 时 股 东 大 会, 审 议 通 过 了 关 于 公 司 <2015 年 股 票 期 权 激 励 计 划 ( 草 案 )> 及 其 摘 要 的 议 案 关 于 提 请 股 东 大 会 授 权 董 事 会 办 理 公

2 2015 年 8 月 11 日, 公 司 召 开 2015 年 第 五 次 临 时 股 东 大 会, 审 议 通 过 了 关 于 公 司 <2015 年 股 票 期 权 激 励 计 划 ( 草 案 )> 及 其 摘 要 的 议 案 关 于 提 请 股 东 大 会 授 权 董 事 会 办 理 公 证 券 代 码 :300017 证 券 简 称 : 网 宿 科 技 公 告 编 号 :2016-053 网 宿 科 技 股 份 有 限 公 司 关 于 调 整 公 司 2015 年 股 票 期 权 激 励 计 划 激 励 对 象 股 票 期 权 数 量 和 行 权 价 格 的 公 告 本 公 司 及 董 事 会 全 体 成 员 保 证 公 告 内 容 真 实 准 确 和 完 整, 没 有 虚 假 记

More information

全国教师资格认定管理信息系统

全国教师资格认定管理信息系统 操 作 说 明 一 教 师 资 格 认 定 申 请 人 1 : 1. 未 参 加 全 国 统 考 申 请 人 2.1 登 录 未 参 加 全 国 统 考 申 请 人 网 上 报 名 系 统 登 录 中 国 教 师 资 格 网 (http://www.jszg.edu.cn), 未 参 加 全 国 统 考 申 请 人 有 两 种 途 径 进 入 报 名 系 统 第 一 种 途 径 : 点 击 网 站

More information

教师上报成绩流程图

教师上报成绩流程图 教 务 管 理 系 统 使 用 说 明 学 生 端 用 户 1 在 校 内 任 何 一 台 连 接 校 园 网 的 计 算 机 上 登 录 教 务 处 主 页 教 务 处 主 页 地 址 : http://jw.stdu.edu.cn/homepage 随 后 点 击 按 钮 ( 见 下 图 所 示 ), 即 可 进 入 综 合 教 务 管 理 系 统 2 在 综 合 教 务 管 理 区 域 内 键

More information

,,,,, :,, (.,, );, (, : ), (.., ;. &., ;.. &.., ;, ;, ),,,,,,, ( ) ( ),,,,.,,,,,, : ;, ;,.,,,,, (., : - ),,,, ( ),,,, (, : ),, :,

,,,,, :,, (.,, );, (, : ), (.., ;. &., ;.. &.., ;, ;, ),,,,,,, ( ) ( ),,,,.,,,,,, : ;, ;,.,,,,, (., : - ),,,, ( ),,,, (, : ),, :, : 周 晓 虹 : - -., - - - -. :( ), -,.( ),,, -. - ( ).( ) ', -,,,,, ( ).( ),,, -., '.,, :,,,, :,,,, ,,,,, :,, (.,, );, (, : ), (.., ;. &., ;.. &.., ;, ;, ),,,,,,, ( ) ( ),,,,.,,,,,, : ;, ;,.,,,,, (., : - ),,,,

More information

Microsoft Word - 第7章 图表反转形态.doc

Microsoft Word - 第7章 图表反转形态.doc 第 七 章 图 表 反 转 形 态 我 们 知 道 市 场 趋 势 共 有 三 种 : 上 升 趋 势 下 降 趋 势 和 横 向 整 理 市 场 的 价 格 波 动 都 是 运 行 在 这 三 种 趋 势 中, 所 有 的 走 势 都 是 这 三 种 趋 势 的 排 列 组 合 如 图 市 场 趋 势 结 构 示 意 图 7-1 所 示 市 场 趋 势 结 构 示 意 图 7-1 图 市 场 趋

More information

<4D6963726F736F667420576F7264202D20D0A3B7A2A1B232303135A1B3313135BAC5B9D8D3DAD7E9D6AFBFAAD5B9C8ABD0A3BDCCD6B0B9A4B8DACEBBC6B8D3C3B1E4B6AFB9A4D7F7B5C4CDA8D6AA2E646F63>

<4D6963726F736F667420576F7264202D20D0A3B7A2A1B232303135A1B3313135BAC5B9D8D3DAD7E9D6AFBFAAD5B9C8ABD0A3BDCCD6B0B9A4B8DACEBBC6B8D3C3B1E4B6AFB9A4D7F7B5C4CDA8D6AA2E646F63> 广 西 科 技 大 学 文 件 校 发 2015 115 号 关 于 组 织 开 展 全 校 教 职 工 岗 位 聘 用 变 动 工 作 的 通 知 校 属 各 单 位 : 我 校 首 次 岗 位 聘 用 聘 期 已 满, 根 据 上 级 有 关 岗 位 设 置 与 聘 用 管 理 文 件 精 神, 为 进 一 步 促 进 学 校 人 才 资 源 的 科 学 合 理 配 置, 深 化 岗 位 聘 用

More information

抗 战 时 期 国 民 政 府 的 银 行 监 理 体 制 探 析 % # % % % ) % % # # + #, ) +, % % % % % % % %

抗 战 时 期 国 民 政 府 的 银 行 监 理 体 制 探 析 % # % % % ) % % # # + #, ) +, % % % % % % % % 抗 战 时 期 国 民 政 府 的 银 行 监 理 体 制 探 析 王 红 曼 抗 战 时 期 国 民 政 府 为 适 应 战 时 经 济 金 融 的 需 要 实 行 由 财 政 部 四 联 总 处 中 央 银 行 等 多 家 机 构 先 后 共 同 参 与 的 多 元 化 银 行 监 理 体 制 对 战 时 状 态 下 的 银 行 发 展 与 经 营 安 全 进 行 了 大 规 模 的 设 计 与

More information

i 1) 系 统 运 作 前 设 定 *1. [2.1 网 页 主 机 名 称 设 定 ] -- 设 定 校 务 系 统 的 主 机 IP 地 址, 以 供 其 他 个 人 电 脑 连 接 及 使 用 该 系 统 *2. [2.3.1 输 入 / 修 改 学 校 资 料 ] -- 输 入 系 统 使

i 1) 系 统 运 作 前 设 定 *1. [2.1 网 页 主 机 名 称 设 定 ] -- 设 定 校 务 系 统 的 主 机 IP 地 址, 以 供 其 他 个 人 电 脑 连 接 及 使 用 该 系 统 *2. [2.3.1 输 入 / 修 改 学 校 资 料 ] -- 输 入 系 统 使 校 务 系 统 使 用 步 骤 说 明 手 册 简 介 此 手 册 是 配 合 校 务 系 统 使 用 手 册 编 辑 的, 因 此 必 须 同 时 参 考 校 务 系 统 使 用 手 册, 以 获 知 更 详 细 的 使 用 说 明 此 手 册 主 要 记 载 几 项 较 为 复 杂 事 务 的 处 理 步 骤 及 说 明, 以 让 使 用 者 更 容 易 掌 握 及 使 用 校 务 系 统 其

More information

上海证券交易所会议纪要

上海证券交易所会议纪要 附 件 上 海 市 场 首 次 公 开 发 行 股 票 网 上 发 行 实 施 细 则 第 一 章 总 则 第 一 条 为 规 范 上 海 市 场 首 次 公 开 发 行 股 票 网 上 发 行 行 为, 根 据 证 券 发 行 与 承 销 管 理 办 法 及 相 关 规 定, 制 定 本 细 则 第 二 条 通 过 上 海 证 券 交 易 所 ( 以 下 简 称 上 交 所 ) 交 易 系 统 并

More information

<433A5C55736572735C6B73625C4465736B746F705CB9FABCCAD6D0D2BDD2A9D7A8D2B5B8DFBCB6BCBCCAF5D6B0B3C6C6C0C9F3C9EAC7EBD6B8C4CFA3A832303136CDA8D3C3B0E6A3A92E646F63>

<433A5C55736572735C6B73625C4465736B746F705CB9FABCCAD6D0D2BDD2A9D7A8D2B5B8DFBCB6BCBCCAF5D6B0B3C6C6C0C9F3C9EAC7EBD6B8C4CFA3A832303136CDA8D3C3B0E6A3A92E646F63> 附 件 1 国 际 中 药 专 业 高 级 技 术 职 称 评 审 条 件 及 报 名 材 料 一 系 列 ( 一 ) 中 1 高 级 专 科 ( 副 ) 高 级 专 科 ( 副 ) 1 取 得 中 专 科 职 称 后, 独 立 从 事 中 临 床 实 践 5 年 以 上 2 取 得 中 博 士 学 位 后, 临 床 实 践 2 年 以 上 3 取 得 中 硕 士 学 位 后, 临 床 实 践 7

More information

正 规 培 训 达 规 定 标 准 学 时 数, 并 取 得 结 业 证 书 二 级 可 编 程 师 ( 具 备 以 下 条 件 之 一 者 ) (1) 连 续 从 事 本 职 业 工 作 13 年 以 上 (2) 取 得 本 职 业 三 级 职 业 资 格 证 书 后, 连 续 从 事 本 职 业

正 规 培 训 达 规 定 标 准 学 时 数, 并 取 得 结 业 证 书 二 级 可 编 程 师 ( 具 备 以 下 条 件 之 一 者 ) (1) 连 续 从 事 本 职 业 工 作 13 年 以 上 (2) 取 得 本 职 业 三 级 职 业 资 格 证 书 后, 连 续 从 事 本 职 业 1. 职 业 概 况 1.1 职 业 名 称 可 编 程 师 1.2 职 业 定 义 可 编 程 师 国 家 职 业 标 准 从 事 可 编 程 序 控 制 器 (PLC) 选 型 编 程, 并 对 应 用 进 行 集 成 和 运 行 管 理 的 人 员 1.3 职 业 等 级 本 职 业 共 设 四 个 等 级, 分 别 为 : 四 级 可 编 程 师 ( 国 家 职 业 资 格 四 级 ) 三

More information

光明乳业股份有限公司

光明乳业股份有限公司 光 明 乳 业 股 份 有 限 公 司 非 公 开 发 行 A 股 股 票 募 集 资 金 存 放 与 实 际 使 用 情 况 的 专 项 报 告 及 审 核 报 告 截 至 2012 年 12 月 31 日 止 审 核 报 告 光 明 乳 业 股 份 有 限 公 司 全 体 股 东 : 德 师 报 ( 核 ) 字 (13) 第 E0019 号 我 们 审 核 了 后 附 的 光 明 乳 业 股 份

More information

上证指数

上证指数 上 证 与 修 正 方 法 一 ( 一 ) 计 算 公 式 1. 上 证 指 数 系 列 均 采 用 派 许 加 权 综 合 价 格 指 数 公 式 计 算 2. 上 证 180 指 数 上 证 50 指 数 等 以 成 份 股 的 调 整 股 本 数 为 权 数 进 行 加 权 计 算, 计 算 公 式 为 : 报 告 期 指 数 =( 报 告 期 样 本 股 的 调 整 市 值 / 基 期 )

More information

Cybozu Garoon 3 管理员手册

Cybozu Garoon 3 管理员手册 附 录 D 数 据 的 输 入 样 式 数 据 的 种 类 和 输 入 字 符 的 值 等, 在 Garoon3 的 页 面 输 入 的 数 据 样 式 如 下 所 示 基 本 系 统 客 户 信 息 法 人 姓 名 字 符 串 ( 00 法 人 姓 名 ( 拼 音 ) 字 符 串 ( 00 图 标 (URL) 字 符 串 ( 255 应 用 程 序 新 名 称 字 符 串 ( 00 用 户 姓 名

More information

2. 本 次 修 改 后, 投 资 者 申 购 新 股 的 持 有 市 值 要 求 市 值 计 算 规 则 及 证 券 账 户 使 用 的 相 关 规 定 是 否 发 生 了 变 化? 答 : 未 发 生 变 化 投 资 者 申 购 新 股 的 持 有 市 值 是 指, 以 投 资 者 为 单 位

2. 本 次 修 改 后, 投 资 者 申 购 新 股 的 持 有 市 值 要 求 市 值 计 算 规 则 及 证 券 账 户 使 用 的 相 关 规 定 是 否 发 生 了 变 化? 答 : 未 发 生 变 化 投 资 者 申 购 新 股 的 持 有 市 值 是 指, 以 投 资 者 为 单 位 新 股 网 上 网 下 发 行 实 施 细 则 问 答 上 交 所 2016-01-05 一 网 上 发 行 业 务 问 答 1. 本 次 修 改 的 主 要 内 容 是 什 么? 答 : 本 次 修 改 的 主 要 内 容 包 括 : 一 是 取 消 了 投 资 者 在 申 购 委 托 时 应 全 额 缴 纳 申 购 资 金 的 规 定, 明 确 了 投 资 者 应 根 据 最 终 确 定 的 发

More information

一 公 共 卫 生 硕 士 专 业 学 位 论 文 的 概 述 学 位 论 文 是 对 研 究 生 进 行 科 学 研 究 或 承 担 专 门 技 术 工 作 的 全 面 训 练, 是 培 养 研 究 生 创 新 能 力, 综 合 运 用 所 学 知 识 发 现 问 题, 分 析 问 题 和 解 决

一 公 共 卫 生 硕 士 专 业 学 位 论 文 的 概 述 学 位 论 文 是 对 研 究 生 进 行 科 学 研 究 或 承 担 专 门 技 术 工 作 的 全 面 训 练, 是 培 养 研 究 生 创 新 能 力, 综 合 运 用 所 学 知 识 发 现 问 题, 分 析 问 题 和 解 决 上 海 市 公 共 卫 生 硕 士 专 业 学 位 论 文 基 本 要 求 和 评 价 指 标 体 系 ( 试 行 ) 上 海 市 学 位 委 员 会 办 公 室 二 O 一 二 年 三 月 一 公 共 卫 生 硕 士 专 业 学 位 论 文 的 概 述 学 位 论 文 是 对 研 究 生 进 行 科 学 研 究 或 承 担 专 门 技 术 工 作 的 全 面 训 练, 是 培 养 研 究 生 创

More information

证监会行政审批事项目录

证监会行政审批事项目录 事 项 目 录 项 目 对 象 中 华 人 民 共 和 国 证 券 法 第 十 一 条 : 保 荐 人 的 资 格 及 其 管 理 办 法 由 国 务 院 证 券 监 督 管 理 机 构 规 定 44001 保 荐 机 构 注 册 国 务 院 对 确 需 要 保 留 的 项 目 设 定 的 决 定 ( 国 务 院 令 第 412 号 ) 附 件 第 383 项 保 荐 机 构 和 保 荐 代 表 人

More information

<4D6963726F736F667420576F7264202D20B6C0C1A2B6ADCAC2D0ECCCFABEFDCFC8C9FABCB0CCE1C3FBC8CBC9F9C3F72E646F63>

<4D6963726F736F667420576F7264202D20B6C0C1A2B6ADCAC2D0ECCCFABEFDCFC8C9FABCB0CCE1C3FBC8CBC9F9C3F72E646F63> 证 券 代 码 :000420 证 券 简 称 : 吉 林 化 纤 公 告 编 号 :2010-20 吉 林 化 纤 股 份 有 限 公 司 第 六 届 董 事 会 独 立 董 事 提 名 人 声 明 提 名 人 吉 林 化 纤 股 份 有 限 公 司 董 事 会 现 提 名 徐 铁 君 先 生 为 本 公 司 第 六 届 董 事 会 独 立 董 事 候 选 人, 并 发 表 公 开 声 明, 被

More information

一 开 放 性 的 政 策 与 法 规 二 两 岸 共 同 的 文 化 传 承 三 两 岸 高 校 各 自 具 有 专 业 优 势 远 见 杂 志 年 月 日

一 开 放 性 的 政 策 与 法 规 二 两 岸 共 同 的 文 化 传 承 三 两 岸 高 校 各 自 具 有 专 业 优 势 远 见 杂 志 年 月 日 河 北 师 范 大 学 学 报 新 时 期 海 峡 两 岸 高 校 开 放 招 生 问 题 探 讨 郑 若 玲 王 晓 勇 海 峡 两 岸 高 校 开 放 招 生 是 新 时 期 推 进 海 峡 两 岸 高 等 教 育 交 流 与 合 作 的 重 要 尝 试 系 统 梳 理 改 革 开 放 以 来 两 岸 招 生 政 策 与 就 学 人 数 发 展 变 化 的 历 史 进 程 可 发 现 促 进 两

More information

张 荣 芳 中 山 大 学 历 史 系 广 东 广 州 张 荣 芳 男 广 东 廉 江 人 中 山 大 学 历 史 系 教 授 博 士 生 导 师 我 们 要 打 破 以 前 学 术 界 上 的 一 切 偶 像 以 前 学 术 界 的 一 切 成 见 屏 除 我 们 要 实 地 搜 罗 材 料 到 民 众 中 寻 方 言 到 古 文 化 的 遗 址 去 发 掘 到 各 种 的 人 间 社 会 去

More information

GB 17859-1999

GB 17859-1999 ICS35.020 L 09 中 华 人 民 共 和 国 国 家 标 准 GB 17859-1999 计 算 机 信 息 系 统 安 全 保 护 等 级 划 分 准 则 Classified criteria for security protection of Computer information system 1999-09-13 发 布 2001-01-01 实 施 国 家 质 量 技 术

More information

目 录 1 简 介 1 2 产 品 规 格 1 3 配 置 前 提 1 4 配 置 环 境 2 4.1 服 务 器 2 4.2 软 件 2 5 配 置 指 导 2 5.1 组 网 拓 扑 2 5.2 测 试 步 骤 3 5.2.1 移 除 虚 拟 机 3 5.2.2 删 除 虚 拟 机 6 5.2.

目 录 1 简 介 1 2 产 品 规 格 1 3 配 置 前 提 1 4 配 置 环 境 2 4.1 服 务 器 2 4.2 软 件 2 5 配 置 指 导 2 5.1 组 网 拓 扑 2 5.2 测 试 步 骤 3 5.2.1 移 除 虚 拟 机 3 5.2.2 删 除 虚 拟 机 6 5.2. H3C CAS 虚 拟 机 回 收 站 操 作 指 导 书 Copyright 2015 杭 州 华 三 通 信 技 术 有 限 公 司 版 权 所 有, 保 留 一 切 权 利 非 经 本 公 司 书 面 许 可, 任 何 单 位 和 个 人 不 得 擅 自 摘 抄 复 制 本 文 档 内 容 的 部 分 或 全 部, 并 不 得 以 任 何 形 式 传 播 本 文 档 中 的 信 息 可 能 变

More information

中 国 软 科 学 年 第 期!!!

中 国 软 科 学 年 第 期!!! 山 寨 模 式 的 形 成 机 理 及 其 对 组 织 创 新 的 启 示 山 寨 模 式 的 形 成 机 理 及 其 对 组 织 创 新 的 启 示 陶 厚 永 李 燕 萍 骆 振 心 武 汉 大 学 经 济 与 管 理 学 院 武 汉 大 学 中 国 产 学 研 合 作 问 题 研 究 中 心 湖 北 武 汉 北 京 大 学 经 济 研 究 所 光 华 天 成 博 士 后 工 作 站 北 京 本

More information

三门峡市质量技术监督局清单公示

三门峡市质量技术监督局清单公示 附 件 4 卢 氏 县 财 政 局 行 政 职 权 运 行 流 程 图 一 行 政 处 罚 类 1. 第 1 项 一 般 程 序 流 程 图 案 件 来 源 初 步 确 认 违 法 事 实, 责 令 停 止 违 法 行 为 县 财 政 局 立 案 审 批 综 合 股 登 记 立 案 调 查 取 证 不 予 立 案 综 合 股 撰 写 调 查 终 结 报 告 移 送 有 关 部 门 综 合 股 提 出

More information

合 并 计 算 配 售 对 象 持 有 多 个 证 券 账 户 的, 多 个 证 券 账 户 市 值 合 并 计 算 确 认 多 个 证 券 账 户 为 同 一 配 售 对 象 持 有 的 原 则 为 证 券 账 户 注 册 资 料 中 的 账 户 持 有 人 名 称 有 效 身 份 证 明 文 件

合 并 计 算 配 售 对 象 持 有 多 个 证 券 账 户 的, 多 个 证 券 账 户 市 值 合 并 计 算 确 认 多 个 证 券 账 户 为 同 一 配 售 对 象 持 有 的 原 则 为 证 券 账 户 注 册 资 料 中 的 账 户 持 有 人 名 称 有 效 身 份 证 明 文 件 深 圳 市 场 首 次 公 开 发 行 股 票 网 下 发 行 实 施 细 则 ( 征 求 意 见 稿 ) 第 一 章 总 则 第 一 条 为 规 范 深 圳 市 场 首 次 公 开 发 行 股 票 网 下 发 行 行 为, 根 据 证 券 发 行 与 承 销 管 理 办 法 及 相 关 规 定, 制 定 本 细 则 第 二 条 本 细 则 所 称 网 下 发 行 是 指 首 次 公 开 发 行 股

More information

全国艺术科学规划项目

全国艺术科学规划项目 全 国 艺 术 科 学 规 划 项 目 网 上 申 报 常 见 问 题 及 解 决 方 法 目 录 一 申 报 流 程...4 二 立 项 流 程...5 三 常 见 问 题 与 处 理...6 (1). 如 何 注 册...6 (2). 系 统 中 没 有 我 的 单 位 怎 么 办?...7 (3). 在 注 册 时 写 错 身 份 证 号 名 字 而 系 统 中 不 能 修 改 怎 么 办?...

More information

<4D6963726F736F667420576F7264202D20BFC9B1E0B3CCD0F2BFD8D6C6CFB5CDB3C9E8BCC6CAA6B9FABCD2D6B0D2B5B1EAD7BC2E646F63>

<4D6963726F736F667420576F7264202D20BFC9B1E0B3CCD0F2BFD8D6C6CFB5CDB3C9E8BCC6CAA6B9FABCD2D6B0D2B5B1EAD7BC2E646F63> 国 家 职 业 标 准 1 可 编 程 序 控 制 系 统 设 计 师 国 家 职 业 标 准 1. 职 业 概 况 1.1 职 业 名 称 可 编 程 序 控 制 系 统 设 计 师 1.2 职 业 定 义 从 事 可 编 程 序 控 制 器 (PLC) 选 型 编 程, 并 对 应 用 系 统 进 行 设 计 集 成 和 运 行 管 理 的 人 员 1.3 职 业 等 级 本 职 业 共 设 四

More information

四川省卫生厅关于开展医疗美容主诊医师资格考试及换证工作的通知

四川省卫生厅关于开展医疗美容主诊医师资格考试及换证工作的通知 四 川 省 医 学 会 文 件 川 学 会 医 字 [2014]161 号 四 川 省 医 学 会 关 于 开 展 医 疗 美 容 主 诊 医 师 资 格 考 试 及 换 证 工 作 的 通 知 各 市 ( 州 ) 卫 生 局 医 学 会 省 卫 生 和 计 划 生 育 委 员 会 直 属 医 疗 机 构 国 家 卫 生 和 计 划 生 育 委 员 会 驻 川 医 疗 机 构 : 根 据 四 川 省

More information

附 件 : 上 海 市 建 筑 施 工 企 业 施 工 现 场 项 目 管 理 机 构 关 键 岗 位 人 员 配 备 指 南 二 一 四 年 九 月 十 一 日 2

附 件 : 上 海 市 建 筑 施 工 企 业 施 工 现 场 项 目 管 理 机 构 关 键 岗 位 人 员 配 备 指 南 二 一 四 年 九 月 十 一 日 2 公 开 上 海 市 城 乡 建 设 和 管 理 委 员 会 文 件 沪 建 管 2014 758 号 上 海 市 城 乡 建 设 和 管 理 委 员 会 关 于 印 发 上 海 市 建 筑 施 工 企 业 施 工 现 场 项 目 管 理 机 构 关 键 岗 位 人 员 配 备 指 南 的 通 知 各 区 县 建 设 和 交 通 委 员 会 : 为 进 一 步 加 强 对 建 设 工 程 施 工 现

More information

四川省农村义务教育学生

四川省农村义务教育学生 四 川 省 农 村 义 务 教 育 学 生 营 养 改 善 计 划 协 调 小 组 办 公 室 川 学 生 营 养 办 函 2015 7 号 关 于 填 报 2015 年 农 村 义 务 教 育 学 生 营 养 改 善 计 划 受 益 学 生 数 据 的 通 知 各 相 关 市 ( 州 ) 学 生 营 养 办 : 为 了 贯 彻 落 实 国 务 院 办 公 厅 关 于 实 施 农 村 义 务 教 育

More information

工 程 造 价 咨 询 企 业 管 理 系 统 操 作 手 册 目 录 1 造 价 企 业 登 录... 1 2 企 业 基 本 信 息 查 看... 3 3 企 业 人 员 信 息 查 看... 4 4 企 业 基 本 信 息 操 作... 5 4.1 企 业 简 介... 5 4.2 企 业 章

工 程 造 价 咨 询 企 业 管 理 系 统 操 作 手 册 目 录 1 造 价 企 业 登 录... 1 2 企 业 基 本 信 息 查 看... 3 3 企 业 人 员 信 息 查 看... 4 4 企 业 基 本 信 息 操 作... 5 4.1 企 业 简 介... 5 4.2 企 业 章 工 程 造 价 咨 询 企 业 管 理 系 统 操 作 手 册 工 程 造 价 咨 询 企 业 管 理 系 统 ( 造 价 企 业 ) 用 户 手 册 工 程 造 价 咨 询 企 业 管 理 系 统 操 作 手 册 目 录 1 造 价 企 业 登 录... 1 2 企 业 基 本 信 息 查 看... 3 3 企 业 人 员 信 息 查 看... 4 4 企 业 基 本 信 息 操 作... 5 4.1

More information

一 从 分 封 制 到 郡 县 制 一 从 打 虎 亭 汉 墓 说 起

一 从 分 封 制 到 郡 县 制 一 从 打 虎 亭 汉 墓 说 起 县 乡 两 级 的 政 治 体 制 改 革 如 何 建 立 民 主 的 合 作 新 体 制 县 乡 人 大 运 行 机 制 研 究 课 题 组 引 言 一 从 分 封 制 到 郡 县 制 一 从 打 虎 亭 汉 墓 说 起 二 密 县 在 周 初 是 两 个 小 国 密 国 和 郐 国 三 密 县 的 第 一 任 县 令 卓 茂 四 明 清 时 代 的 密 县 二 从 集 中 的 动 员 体

More information

一、资质申请

一、资质申请 二 工 程 监 理 企 业 资 质 有 关 问 答 111 什 么 样 的 企 业 可 以 在 本 省 申 请 工 程 监 理 企 业 资 质? 答 : 在 鄂 取 得 法 人 营 业 执 照 或 合 伙 企 业 营 业 执 照 的 企 业, 都 可 依 法 向 工 商 注 册 所 在 省 或 市 建 设 行 政 主 管 部 门 行 政 审 批 部 门 申 请 工 程 监 理 企 业 资 质 取 得

More information

公 开 刊 物 须 有 国 内 统 一 刊 (CN), 发 表 文 章 的 刊 物 需 要 在 国 家 新 闻 出 版 广 电 总 局 (www.gapp.gov.cn 办 事 服 务 便 民 查 询 新 闻 出 版 机 构 查 询 ) 上 能 够 查 到 刊 凡 在 有 中 国 标 准 书 公 开

公 开 刊 物 须 有 国 内 统 一 刊 (CN), 发 表 文 章 的 刊 物 需 要 在 国 家 新 闻 出 版 广 电 总 局 (www.gapp.gov.cn 办 事 服 务 便 民 查 询 新 闻 出 版 机 构 查 询 ) 上 能 够 查 到 刊 凡 在 有 中 国 标 准 书 公 开 杭 教 人 2014 7 杭 州 市 教 育 局 关 于 中 小 学 教 师 系 列 ( 含 实 验 教 育 管 理 ) 晋 升 高 级 专 业 技 术 资 格 有 关 论 文 要 求 的 通 知 各 区 县 ( 市 ) 教 育 局 ( 社 发 局 ), 直 属 学 校 ( 单 位 ), 委 托 单 位 : 为 进 一 步 规 范 杭 州 市 中 小 学 教 师 系 列 ( 含 实 验 教 育 管

More information

名 称 生 命 科 学 学 院 083001 环 境 科 学 1 生 物 学 仅 接 收 院 内 调 剂, 初 试 分 数 满 足 我 院 生 物 学 复 试 最 低 分 数 线 生 命 科 学 学 院 071300 生 态 学 5 生 态 学 或 生 物 学 生 命 科 学 学 院 040102

名 称 生 命 科 学 学 院 083001 环 境 科 学 1 生 物 学 仅 接 收 院 内 调 剂, 初 试 分 数 满 足 我 院 生 物 学 复 试 最 低 分 数 线 生 命 科 学 学 院 071300 生 态 学 5 生 态 学 或 生 物 学 生 命 科 学 学 院 040102 华 中 师 范 大 学 2016 年 接 收 校 内 外 优 秀 硕 士 研 究 生 调 剂 信 息 表 名 称 经 济 与 工 商 管 理 学 院 020101 政 治 经 济 学 1 经 济 学 类 毕 业 学 校 与 报 考 学 校 不 低 于 我 校 办 学 层 次 经 济 与 工 商 管 理 学 院 020105 世 界 经 济 学 1 经 济 学 类 毕 业 学 校 与 报 考 学 校

More information

5 436060469-B-002 行 政 处 罚 在 气 象 探 测 环 境 保 护 范 围 内 从 事 危 害 气 象 探 测 环 境 活 动 的 处 罚 中 华 人 民 共 和 国 气 象 法 第 三 十 五 条 第 一 款 第 二 项 6 436060469-B-003 行 政 处 罚 在

5 436060469-B-002 行 政 处 罚 在 气 象 探 测 环 境 保 护 范 围 内 从 事 危 害 气 象 探 测 环 境 活 动 的 处 罚 中 华 人 民 共 和 国 气 象 法 第 三 十 五 条 第 一 款 第 二 项 6 436060469-B-003 行 政 处 罚 在 权 力 清 单 目 录 部 门 ( 公 章 ): 填 表 日 期 :2015-8-10 代 码 权 力 类 型 职 权 名 称 法 定 依 据 工 作 流 程 工 作 时 限 实 施 主 体 承 办 科 室 1 436060469-A-001 行 政 许 可 防 雷 装 置 设 计 审 核 和 竣 工 验 收 国 务 院 对 确 需 保 留 的 行 政 审 批 项 目 设 定 行 政 许 可 的 决

More information

4 进 入 交 互 区 设 置 的 组 件 管 理, 在 组 件 管 理 中, 教 师 可 以 选 择 课 程 空 间 中 的 所 有 组 件, 并 通 过 点 击 启 用 或 不 启 用 选 定 组 件 在 课 程 空 间 中 的 显 示 5 进 入 工 作 室 管 理 的 工 作 室 首 页,

4 进 入 交 互 区 设 置 的 组 件 管 理, 在 组 件 管 理 中, 教 师 可 以 选 择 课 程 空 间 中 的 所 有 组 件, 并 通 过 点 击 启 用 或 不 启 用 选 定 组 件 在 课 程 空 间 中 的 显 示 5 进 入 工 作 室 管 理 的 工 作 室 首 页, 网 络 教 育 新 平 台 教 师 使 用 简 易 手 册 一 登 录 教 师 工 作 室 1 打 开 西 南 科 技 大 学 网 络 教 育 教 学 教 务 新 平 台 主 页 面 :http://www.swust.net.cn/ 2 在 主 页 面 左 边 的 登 陆 区 中, 用 户 名 和 密 码 处 分 别 输 入 自 己 的 用 户 名 ( 教 师 ID 号 ) 和 密 码 ( 初 始

More information

2 熟 悉 Visual Basic 的 集 成 开 发 环 境 3 了 解 可 视 化 面 向 对 象 编 程 事 件 驱 动 交 互 式 开 发 等 基 本 概 念 4 了 解 Visual Basic 的 特 点 环 境 要 求 与 安 装 方 法 1 Visual Basic 开 发 应 用

2 熟 悉 Visual Basic 的 集 成 开 发 环 境 3 了 解 可 视 化 面 向 对 象 编 程 事 件 驱 动 交 互 式 开 发 等 基 本 概 念 4 了 解 Visual Basic 的 特 点 环 境 要 求 与 安 装 方 法 1 Visual Basic 开 发 应 用 Visual Basic 程 序 设 计 A 级 分 级 班 教 学 大 纲 ( 供 计 算 机 与 信 息 技 术 基 础 课 程 分 级 教 学 A 级 班 使 用 ) I 前 言 Visual Basic 程 序 设 计 课 程 是 一 门 计 算 机 语 言 基 础 课 程 通 过 对 该 课 程 的 学 习, 使 学 生 初 步 掌 握 Visual Basic 的 语 言 特 点, 掌

More information

现 场 会 议 时 间 为 :2016 年 5 月 19 日 网 络 投 票 时 间 为 :2016 年 5 月 18 日 -2016 年 5 月 19 日 其 中 通 过 深 圳 证 券 交 易 所 交 易 系 统 进 行 网 络 投 票 的 时 间 为 2016 年 5 月 19 日 9:30-

现 场 会 议 时 间 为 :2016 年 5 月 19 日 网 络 投 票 时 间 为 :2016 年 5 月 18 日 -2016 年 5 月 19 日 其 中 通 过 深 圳 证 券 交 易 所 交 易 系 统 进 行 网 络 投 票 的 时 间 为 2016 年 5 月 19 日 9:30- 证 券 代 码 :300439 证 券 简 称 : 美 康 生 物 公 告 编 号 :2016-046 宁 波 美 康 生 物 科 技 股 份 有 限 公 司 2015 年 度 股 东 大 会 决 议 公 告 公 司 及 董 事 会 全 体 成 员 保 证 信 息 披 露 的 内 容 真 实 准 确 完 整, 没 有 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏 特 别 提 示 : 1 2016

More information

新, 各 地 各 部 门 ( 单 位 ) 各 文 化 事 业 单 位 要 高 度 重 视, 切 实 加 强 领 导, 精 心 组 织 实 施 要 根 据 事 业 单 位 岗 位 设 置 管 理 的 规 定 和 要 求, 在 深 入 调 查 研 究 广 泛 听 取 意 见 的 基 础 上, 研 究 提

新, 各 地 各 部 门 ( 单 位 ) 各 文 化 事 业 单 位 要 高 度 重 视, 切 实 加 强 领 导, 精 心 组 织 实 施 要 根 据 事 业 单 位 岗 位 设 置 管 理 的 规 定 和 要 求, 在 深 入 调 查 研 究 广 泛 听 取 意 见 的 基 础 上, 研 究 提 广 西 壮 族 自 治 区 人 事 厅 广 西 壮 族 自 治 区 文 化 厅 文 件 桂 人 发 2009 42 号 关 于 印 发 广 西 壮 族 自 治 区 文 化 事 业 单 位 岗 位 设 置 结 构 比 例 指 导 标 准 的 通 知 各 市 人 事 局 文 化 局, 区 直 各 部 门 ( 单 位 ): 根 据 人 事 部 印 发 的 事 业 单 位 岗 位 设 置 管 理 试 行 办

More information

·岗位设置管理流程

·岗位设置管理流程 实 施 岗 位 设 置 岗 位 设 置 编 码 受 控 状 态 执 行 心 门 行 政 人 力 资 控 制 门 总 经 办 源 各 职 能 门 行 政 人 力 资 源 总 经 办 总 经 理 根 据 公 司 发 展 战 略 进 行 职 能 分 解 和 机 构 设 置 工 作 分 析 根 据 人 力 资 源 规 划 确 定 编 制 意 见 职 责 划 分 与 岗 位 设 置 制 作 职 务 说 明 书

More information

第 一 部 分 MagiCAD for Revit 安 装 流 程

第 一 部 分 MagiCAD for Revit 安 装 流 程 MagiCAD 软 件 安 装 流 程 MagiCAD v2015.4 for Revit 广 联 达 软 件 股 份 有 限 公 司 BIM 中 心 编 写 2015 年 06 月 第 一 部 分 MagiCAD for Revit 安 装 流 程 一 安 装 前 需 要 确 认 的 内 容 安 装 MagiCAD 程 序 之 前, 请 您 先 确 定 以 下 事 宜 1. 当 前 用 户 账 户

More information

<4D6963726F736F667420576F7264202D20C6F3D2B5C5E0D1B5CAA6B9FABCD2D6B0D2B5B1EAD7BC2E646F63>

<4D6963726F736F667420576F7264202D20C6F3D2B5C5E0D1B5CAA6B9FABCD2D6B0D2B5B1EAD7BC2E646F63> 企 业 培 训 师 国 家 职 业 标 准 1. 职 业 概 况 1.1 职 业 名 称 企 业 培 训 师 1.2 职 业 定 义 指 能 够 结 合 经 济 技 术 发 展 和 就 业 要 求, 研 究 开 发 针 对 新 职 业 ( 工 种 ) 的 培 训 项 目, 以 及 根 据 企 业 生 产 经 营 需 要, 掌 握 并 运 用 现 代 培 训 理 念 和 手 段, 策 划 开 发 培

More information

01

01 Zebra Technologies 利 用 移 动 技 术 提 高 货 运 公 司 工 作 效 率 和 成 本 效 益 货 运 物 流 自 动 化 案 例 在 当 前 严 峻 的 经 济 形 势 下, 公 路 货 运 公 司 开 始 寻 求 提 高 效 率 降 低 运 营 开 支 和 保 留 客 户 的 有 效 途 径 然 而, 他 们 面 临 的 冷 酷 现 实 是 燃 料 价 格 难 以 预

More information

关于修订《沪市股票上网发行资金申购

关于修订《沪市股票上网发行资金申购 关 于 修 订 沪 市 股 票 上 网 发 行 资 金 申 购 实 施 办 法 的 通 知 各 有 关 单 位 : 沪 市 股 票 上 网 发 行 资 金 申 购 实 施 办 法 ( 修 订 稿 ) ( 见 附 件 ) 已 经 中 国 证 券 监 督 管 理 委 员 会 批 准, 现 将 修 订 所 涉 主 要 内 容 公 布 如 下 一 第 二 条 ( 二 ) 申 购 单 位 及 上 限 修 改

More information

2 根 据 广 东 省 交 通 建 设 工 程 施 工 现 场 开 工 前 考 核 评 表 或 根 据 广 东 省 交 通 建 设 工 程 施 工 现 场 实 施 过 程 考 核 评 表 的 和 内 容 进 行 核 查 ; 3 现 场 抽 查 具 有 代 表 性 的 各 岗 位 人 员 ( 从 事

2 根 据 广 东 省 交 通 建 设 工 程 施 工 现 场 开 工 前 考 核 评 表 或 根 据 广 东 省 交 通 建 设 工 程 施 工 现 场 实 施 过 程 考 核 评 表 的 和 内 容 进 行 核 查 ; 3 现 场 抽 查 具 有 代 表 性 的 各 岗 位 人 员 ( 从 事 1.6 广 东 省 交 通 建 设 工 程 施 工 现 场 考 核 实 施 细 则 ( 试 行 ) 第 一 条 为 加 强 我 省 交 通 建 设 工 程 市 场 动 态 管, 健 全 行 业 的 督 管 体 系, 规 范 行 为, 提 高 工 作 质 量, 根 据 交 通 部 公 路 工 程 施 工 现 场 考 核 办 法 水 运 工 程 施 工 现 场 检 查 评 价 办 法 ( 试 行 ) 及

More information

收 入 支 出 项 目 2016 年 预 算 项 目 2016 年 预 算 预 算 01 表 单 位 : 万 元 ( 保 留 两 位 小 数 ) 一 公 共 财 政 预 算 拨 款 50.06 一 人 员 经 费 23.59 1 一 般 财 力 50.06 1 人 员 支 出 21.95 2 成 品

收 入 支 出 项 目 2016 年 预 算 项 目 2016 年 预 算 预 算 01 表 单 位 : 万 元 ( 保 留 两 位 小 数 ) 一 公 共 财 政 预 算 拨 款 50.06 一 人 员 经 费 23.59 1 一 般 财 力 50.06 1 人 员 支 出 21.95 2 成 品 100.12 2016 年 龙 岩 市 部 门 预 算 表 报 送 日 期 : 年 月 日 单 位 负 责 人 签 章 : 财 务 负 责 人 签 章 : 制 表 人 签 章 : 收 入 支 出 项 目 2016 年 预 算 项 目 2016 年 预 算 预 算 01 表 单 位 : 万 元 ( 保 留 两 位 小 数 ) 一 公 共 财 政 预 算 拨 款 50.06 一 人 员 经 费 23.59

More information

目 录 第 一 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 硬 件 使 用 介 绍... 3 第 二 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 管 理 员 端 功 能 使 用 介 绍... 4 2.1 系 统 管 理 员 登 陆... 4 2.2 班

目 录 第 一 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 硬 件 使 用 介 绍... 3 第 二 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 管 理 员 端 功 能 使 用 介 绍... 4 2.1 系 统 管 理 员 登 陆... 4 2.2 班 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 使 用 说 明 书 制 作 : 北 京 博 导 前 程 信 息 技 术 有 限 公 司 目 录 第 一 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 硬 件 使 用 介 绍... 3 第 二 章 博 星 卓 越 电 子 商 务 营 销 策 划 实 践 平 台 管 理 员 端 功 能 使 用 介 绍... 4 2.1

More information

工 程 勘 察 资 质 标 准 根 据 建 设 工 程 勘 察 设 计 管 理 条 例 和 建 设 工 程 勘 察 设 计 资 质 管 理 规 定, 制 定 本 标 准 一 总 则 ( 一 ) 本 标 准 包 括 工 程 勘 察 相 应 专 业 类 型 主 要 专 业 技 术 人 员 配 备 技 术

工 程 勘 察 资 质 标 准 根 据 建 设 工 程 勘 察 设 计 管 理 条 例 和 建 设 工 程 勘 察 设 计 资 质 管 理 规 定, 制 定 本 标 准 一 总 则 ( 一 ) 本 标 准 包 括 工 程 勘 察 相 应 专 业 类 型 主 要 专 业 技 术 人 员 配 备 技 术 住 房 和 城 乡 建 设 部 关 于 印 发 工 程 勘 察 资 质 标 准 的 通 知 建 市 [2013]9 号 各 省 自 治 区 住 房 和 城 乡 建 设 厅, 北 京 市 规 划 委, 天 津 上 海 市 建 设 交 通 委, 重 庆 市 城 乡 建 设 委, 新 疆 生 产 建 设 兵 团 建 设 局, 总 后 基 建 营 房 部 工 程 局, 国 务 院 有 关 部 门 建 设 司,

More information

黄 金 原 油 总 持 仓 增 长, 同 比 增 幅 分 别 为 4.2% 和 4.1% 而 铜 白 银 以 及 玉 米 则 出 现 减 持, 减 持 同 比 减 少 分 别 为 9.4%,9.4% 以 及 6.5% 大 豆, 豆 粕 结 束 连 续 4 周 总 持 仓 量 增 长, 出 现 小 幅

黄 金 原 油 总 持 仓 增 长, 同 比 增 幅 分 别 为 4.2% 和 4.1% 而 铜 白 银 以 及 玉 米 则 出 现 减 持, 减 持 同 比 减 少 分 别 为 9.4%,9.4% 以 及 6.5% 大 豆, 豆 粕 结 束 连 续 4 周 总 持 仓 量 增 长, 出 现 小 幅 小 麦 净 多 持 仓 增 加, 豆 油 豆 粕 净 多 持 仓 减 少 美 国 CFTC 持 仓 报 告 部 门 : 市 场 研 究 与 开 发 部 类 型 : 量 化 策 略 周 报 日 期 :212 年 5 月 7 日 电 话 :592-5678753 网 址 :www.jinyouqh.com 主 要 内 容 : 根 据 美 国 CFTC 公 布 的 数 据, 本 报 告 中 的 11 个

More information

物 流 从 业 人 员 职 业 能 力 等 级 证 书 分 为 四 个 级 别, 分 别 为 初 级 助 理 级 中 级 和 高 级 ; 采 购 从 业 人 员 职 业 能 力 等 级 证 书 分 为 三 个 级 别, 分 别 为 中 级 高 级 和 注 册 级 请 各 有 关 单 位 按 照 通

物 流 从 业 人 员 职 业 能 力 等 级 证 书 分 为 四 个 级 别, 分 别 为 初 级 助 理 级 中 级 和 高 级 ; 采 购 从 业 人 员 职 业 能 力 等 级 证 书 分 为 三 个 级 别, 分 别 为 中 级 高 级 和 注 册 级 请 各 有 关 单 位 按 照 通 物 联 培 字 2016 16 号 各 有 关 单 位 : 为 适 应 国 家 一 带 一 路 战 略 实 施 和 物 流 产 业 转 型 升 级 对 人 才 的 新 要 求, 确 保 物 流 采 购 人 才 培 养 工 作 有 序 衔 接 和 持 续 健 康 发 展, 参 照 国 际 惯 例, 中 国 物 流 与 采 购 联 合 会 ( 以 下 简 称 中 物 联 ) 经 研 究 决 定, 以 物

More information

<443A5C6D B5C30312EB9A4D7F7CEC4B5B55C30322EBACFCDACCEC4B5B55C C30342EC8CBC9E7CCFC5C31332ECFEEC4BFC5E0D1B55C E30385C322EB2D9D7F7CAD6B2E12E646F63>

<443A5C6D B5C30312EB9A4D7F7CEC4B5B55C30322EBACFCDACCEC4B5B55C C30342EC8CBC9E7CCFC5C31332ECFEEC4BFC5E0D1B55C E30385C322EB2D9D7F7CAD6B2E12E646F63> 浙 江 职 业 能 力 建 设 信 息 系 统 职 业 技 能 鉴 定 考 务 管 理 用 户 操 作 手 册 二 〇 一 五 年 八 月 目 录 0. 系 统 概 述...3 0.0. 简 要 概 述...3 0.1. 业 务 流 程 图... 3 1. 考 生 网 上 报 名... 3 1.0. 考 生 用 户 注 册 登 录... 5 1.1. 报 名 及 下 载 打 印 报 名 申 请 表...7

More information

Microsoft Word - 中节能_工业项目节能评估审查导则Draft.doc

Microsoft Word - 中节能_工业项目节能评估审查导则Draft.doc 0 -------------------------------------------------------------------------------- 2 ----------------------------------------------------------------------------- 2 节 评 ----------------------------------------------------------------------------------------------------

More information

第2章 数据类型、常量与变量

第2章  数据类型、常量与变量 第 2 章 数 据 类 型 常 量 与 变 量 在 计 算 机 程 序 中 都 是 通 过 值 (value) 来 进 行 运 算 的, 能 够 表 示 并 操 作 值 的 类 型 为 数 据 类 型 在 本 章 里 将 会 介 绍 JavaScript 中 的 常 量 (literal) 变 量 (variable) 和 数 据 类 型 (data type) 2.1 基 本 数 据 类 型 JavaScript

More information

Microsoft Word - 第3章.doc

Microsoft Word - 第3章.doc 52 5 天 通 过 职 称 计 算 机 考 试 ( 考 点 视 频 串 讲 + 全 真 模 拟 ) Word 2003 中 文 字 处 理 ( 第 2 版 ) 第 3 章 3 字 符 格 式 需 要 掌 握 的 考 点 字 体 字 形 和 字 号 的 设 置 ; 上 标 下 标 空 心 字 等 字 体 效 果 的 使 用 ; 字 符 间 距 的 调 整 ; 改 变 字 符 颜 色 底 纹 添 加

More information

øÕªß∂À≤Ÿ◊˜ ÷≤·

øÕªß∂À≤Ÿ◊˜ ÷≤· 用 户 使 用 手 册 ( 版 本 号 :4.0) 目 录 第 一 章 软 件 安 装... 1 第 二 章 软 件 的 运 行... 4 第 三 章 新 建 文 档... 7 3.1 第 一 部 分 简 表... 7 3.1.1 基 本 信 息... 7 3.1.2 从 事 专 业 关 键 词... 8 3.1.3 教 育 经 历... 8 3.1.4 工 作 经 历... 9 3.1.5 教 育

More information

( 此 页 无 正 文, 为 广 东 东 方 精 工 科 技 股 份 有 限 公 司 关 于 提 供 资 料 真 实 准 确 和 完 整 的 承 诺 函 之 签 署 页 ) 广 东 东 方 精 工 科 技 股 份 有 限 公 司 法 定 代 表 人 : 唐 灼 林 2016 年 7 月 28 日

( 此 页 无 正 文, 为 广 东 东 方 精 工 科 技 股 份 有 限 公 司 关 于 提 供 资 料 真 实 准 确 和 完 整 的 承 诺 函 之 签 署 页 ) 广 东 东 方 精 工 科 技 股 份 有 限 公 司 法 定 代 表 人 : 唐 灼 林 2016 年 7 月 28 日 广 东 东 方 精 工 科 技 股 份 有 限 公 司 关 于 提 供 资 料 真 实 准 确 和 完 整 的 承 诺 函 鉴 于 广 东 东 方 精 工 科 技 股 份 有 限 公 司 ( 以 下 简 称 本 公 司 ) 拟 收 购 北 京 普 莱 德 新 能 源 电 池 科 技 有 限 公 司 股 权, 为 保 证 本 次 交 易 的 顺 利 完 成, 按 照 中 国 证 券 监 管 部 门 相

More information

浙 江 天 册 律 师 事 务 所 关 于 杭 州 电 缆 股 份 有 限 公 司 2015 年 年 度 股 东 大 会 的 法 律 意 见 书 发 文 号 :TCYJS2016H0228 致 : 杭 州 电 缆 股 份 有 限 公 司 根 据 中 华 人 民 共 和 国 证 券 法 ( 下 称 证

浙 江 天 册 律 师 事 务 所 关 于 杭 州 电 缆 股 份 有 限 公 司 2015 年 年 度 股 东 大 会 的 法 律 意 见 书 发 文 号 :TCYJS2016H0228 致 : 杭 州 电 缆 股 份 有 限 公 司 根 据 中 华 人 民 共 和 国 证 券 法 ( 下 称 证 关 于 杭 州 电 缆 股 份 有 限 公 司 2015 年 年 度 股 东 大 会 的 法 律 意 见 书 浙 江 天 册 律 师 事 务 所 浙 江 省 杭 州 市 杭 大 路 1 号 黄 龙 世 纪 广 场 A 座 11 楼 电 话 :+86 571 87901111 传 真 :+86 571 87901501 浙 江 天 册 律 师 事 务 所 关 于 杭 州 电 缆 股 份 有 限 公 司

More information

2016 年 荔 湾 区 财 政 核 定 支 出 汇 总 表 表 二 单 位 名 称 : 广 州 文 化 公 园 基 本 支 出 项 目 支 出 科 目 编 码 预 算 科 目 名 称 一 般 公 共 预 算 5,800.54 4,695.54 3,092.96 1,481.18 121.40 1,

2016 年 荔 湾 区 财 政 核 定 支 出 汇 总 表 表 二 单 位 名 称 : 广 州 文 化 公 园 基 本 支 出 项 目 支 出 科 目 编 码 预 算 科 目 名 称 一 般 公 共 预 算 5,800.54 4,695.54 3,092.96 1,481.18 121.40 1, 表 一 2016 年 荔 湾 区 收 支 预 算 总 表 单 位 名 称 : 广 州 文 化 公 园 预 算 收 入 预 算 支 出 项 目 预 算 数 项 目 预 算 数 一 一 般 公 共 预 算 拨 款 5,800.54 一 基 本 支 出 4,695.54 工 资 福 利 支 出 3,092.96 二 政 府 性 基 金 预 算 拨 款 商 品 和 服 务 支 出 121.40 三 国 有

More information

21 业 余 制 -- 高 起 专 (12 级 ) 75 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 江 西 化 校 工 科 22 业 余 制 -- 高 起 专 (12 级 ) 70 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 吉

21 业 余 制 -- 高 起 专 (12 级 ) 75 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 江 西 化 校 工 科 22 业 余 制 -- 高 起 专 (12 级 ) 70 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 吉 1 普 通 高 校 学 费 5000 元 / 学 年 一 般 专 业 2 普 通 高 校 学 费 5500 元 / 学 年 特 殊 专 业 3 普 通 高 校 学 费 10000 元 / 学 年 艺 术 专 业 4 中 德 合 作 办 学 15000 元 / 学 年 本 科 生 本 科 学 费 5 ( 含 港 澳 修 读 第 二 专 业 辅 修 专 业 及 学 位 学 费 不 超 过 选 读 专 业

More information

生产支援功能 使用说明书(IP-110 篇)

生产支援功能 使用说明书(IP-110 篇) 生 产 支 援 功 能 使 用 说 明 书 (IP-110 篇 ) 目 录!. 前 言...1 1. 概 要...1 2. 基 本 操 作 方 法...3 2-1. 信 息 模 式 和 通 常 缝 制 模 式 的 变 换...3 2-2. 信 息 模 式...4 2-3. 通 常 缝 制 模 式...5 @. 设 定 篇...6 1. 首 次 使 用 生 产 支 援 功 能 时 的 设 定 方 法...6

More information

2015-2016 学 年 第 二 学 期 集 中 考 试 安 排 (18 周 ) 考 试 日 期 :6 月 27 日 星 期 一 8:10-9:50 第 二 公 共 教 学 楼 A 区 A303 10811046 高 等 数 学 ( 理 二 2) 复 材 1501-2 材 料 科 学 与 工 程

2015-2016 学 年 第 二 学 期 集 中 考 试 安 排 (18 周 ) 考 试 日 期 :6 月 27 日 星 期 一 8:10-9:50 第 二 公 共 教 学 楼 A 区 A303 10811046 高 等 数 学 ( 理 二 2) 复 材 1501-2 材 料 科 学 与 工 程 考 试 时 间 2015-2016 学 年 第 二 学 期 集 中 考 试 安 排 (18 周 ) 考 试 日 期 :6 月 27 日 星 期 一 考 场 所 在 教 学 楼 ( 教 学 区 ) 考 试 教 室 课 程 号 课 程 名 考 生 所 在 专 业 ( 班 级 ) 考 生 所 属 学 院 8:10-9:50 第 二 公 共 教 学 楼 A 区 A101 10811026 高 等 数 学 (

More information