集群模式 Data ONTAP 8.3 使用 SnapMirror® 的 7-模式数据过渡
|
|
- 螗豫 符
- 7 years ago
- Views:
Transcription
1 集 群 模 式 Data ONTAP 8.3 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 NetApp 北 京 北 京 市 朝 阳 区 东 大 桥 路 9 号 侨 福 芳 草 地 C 座 6 层 606 室 邮 编 : 电 话 : 传 真 : 支 持 电 话 : 网 址 : 意 见 反 馈 :ng-gpso-china-documents@netapp.com 部 件 号 : _A 年 1 月
2
3 目 录 3 目 录 使 用 SnapMirror 过 渡 7- 模 式 卷... 4 规 划 过 渡... 5 过 渡 不 支 持 的 功 能 和 卷... 5 过 渡 操 作 对 7- 模 式 版 本 的 要 求... 6 使 用 SnapMirror 进 行 过 渡 的 注 意 事 项... 7 过 渡 SAN 卷 时 的 空 间 注 意 事 项... 8 过 渡 准 备 工 作... 8 过 渡 许 可 证 要 求... 9 准 备 7- 模 式 系 统 以 进 行 过 渡... 9 准 备 集 群 以 进 行 过 渡 创 建 过 渡 对 等 关 系 过 渡 卷 过 渡 独 立 卷 过 渡 卷 SnapMirror 关 系 解 决 使 用 SnapMirror 时 的 过 渡 问 题 恢 复 失 败 的 SnapMirror 基 线 传 输 从 失 败 的 LUN 过 渡 中 恢 复 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 手 动 过 渡 独 立 卷 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 版 权 信 息 商 标 信 息 意 见 反 馈 及 更 新 通 知 索 引... 48
4 4 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 使 用 SnapMirror 过 渡 7- 模 式 卷 您 可 以 使 用 集 群 模 式 Data ONTAP SnapMirror 命 令 将 NAS 和 SAN 环 境 中 的 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 卷 过 渡 完 成 后, 您 必 须 在 集 群 上 设 置 协 议 服 务 和 其 他 配 置 关 于 本 任 务 此 过 程 总 体 介 绍 了 使 用 SnapMirror 实 施 过 渡 时 必 须 执 行 的 任 务 步 骤 1. 确 认 过 渡 操 作 支 持 要 过 渡 到 卷 2. 准 备 7- 模 式 系 统 以 进 行 过 渡 3. 准 备 集 群 以 进 行 过 渡 4. 创 建 以 7- 模 式 系 统 为 源 SVM 为 目 标 的 过 渡 对 等 关 系 5. 通 过 在 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 创 建 SnapMirror 关 系 将 数 据 从 前 者 复 制 到 后 者 完 成 之 后 数 据 迁 移 完 成 后, 您 必 须 执 行 以 下 任 务 : 可 选 : 在 SVM 上 创 建 数 据 LIF 以 启 用 客 户 端 访 问 有 关 此 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 在 SVM 上 配 置 协 议 网 络 和 服 务 有 关 上 述 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 适 用 于 NFS 的 集 群 模 式 Data ONTAP 文 件 访 问 管 理 指 南 和 适 用 于 CIFS 的 集 群 模 式 Data ONTAP 文 件 访 问 管 理 指 南 创 建 igroup 并 映 射 LUN 有 关 这 些 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP SAN 管 理 指 南 如 果 要 过 渡 包 含 LUN 的 卷, 则 必 须 对 主 机 执 行 必 要 的 过 渡 后 任 务, 然 后 再 还 原 对 过 渡 后 的 集 群 模 式 Data ONTAP 卷 的 访 问 7- 模 式 过 渡 工 具 2.0 数 据 和 配 置 过 渡 补 充 指 南 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档
5 使 用 SnapMirror 过 渡 7- 模 式 卷 5 规 划 过 渡 将 7- 模 式 卷 中 的 数 据 复 制 到 集 群 模 式 Data ONTAP 卷 之 前, 您 必 须 了 解 何 时 使 用 SnapMirror 执 行 过 渡, 并 查 看 有 关 过 渡 所 支 持 的 7- 模 式 版 本 和 卷 的 信 息 您 还 必 须 注 意 某 些 过 渡 相 关 事 项 注 : 您 必 须 查 看 适 用 于 过 渡 目 标 版 本 的 集 群 模 式 Data ONTAP 发 行 说 明 来 了 解 各 种 过 渡 问 题 在 以 下 场 景 中, 您 可 以 使 用 SnapMirror 对 数 据 进 行 过 渡 : 7- 模 式 过 渡 工 具 不 满 足 您 的 过 渡 要 求, 例 如, 您 的 环 境 中 可 能 无 法 使 用 7- 模 式 过 渡 工 具 所 需 的 Windows 主 机 建 议 使 用 7- 模 式 过 渡 工 具 来 过 渡 7- 模 式 卷, 因 为 该 工 具 可 通 过 预 检 查 来 确 认 过 渡 是 否 可 行, 并 且 随 数 据 一 起 迁 移 所 有 协 议 网 络 和 服 务 配 置 您 可 以 安 装 并 使 用 7- 模 式 过 渡 工 具 来 执 行 过 渡 预 检 查, 然 后 使 用 SnapMirror 命 令 执 行 从 7- 模 式 卷 到 集 群 模 式 Data ONTAP 卷 的 数 据 迁 移 集 群 和 Storage Virtual Machine (SVM) 已 配 置 完 成, 只 需 将 数 据 从 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 卷 过 渡 不 支 持 的 功 能 和 卷 您 无 法 过 渡 某 些 7- 模 式 卷 ( 例 如 传 统 卷 或 SnapLock 卷 ) 和 某 些 7- 模 式 功 能 ( 例 如 同 步 SnapMirror 关 系 ), 因 为 某 些 功 能 在 集 群 模 式 Data ONTAP 中 可 能 不 可 用 不 支 持 将 7- 模 式 卷 过 渡 到 非 默 认 IP 空 间 中 的 SVM 您 可 以 将 非 默 认 IP 空 间 中 的 vfiler 单 元 过 渡 到 默 认 IP 空 间 中 的 SVM 注 : 您 只 能 将 7- 模 式 卷 过 渡 到 包 含 FlexVol 卷 的 SVM, 不 能 将 其 过 渡 到 包 含 无 限 卷 的 SVM 您 不 能 过 渡 以 下 7- 模 式 卷 或 配 置 : 受 限 卷 或 脱 机 卷 传 统 卷 包 含 NFS 到 CIFS 字 符 映 射 (charmap) 的 卷 包 含 存 储 级 别 访 问 防 护 配 置 的 卷 SnapLock 卷 FlexCache 卷 32 位 卷 和 具 有 32 位 Snapshot 副 本 的 卷 - 如 果 目 标 集 群 运 行 的 是 Data ONTAP 8.3
6 6 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 FlexClone 卷 FlexClone 卷 可 以 作 为 FlexVol 卷 进 行 过 渡, 但 克 隆 层 次 结 构 和 存 储 效 率 将 丢 失 vfiler 单 元 的 根 卷, 其 中 该 根 卷 基 于 属 于 默 认 vfiler 单 元 的 qtree 同 步 SnapMirror 配 置 qtree SnapMirror 关 系 IPv6 配 置 SnapVault 关 系 SnapMirror 的 网 络 压 缩 将 目 标 卷 恢 复 到 特 定 Snapshot 副 本 (SnapMirror break -s 命 令 ) 卷 移 动 操 作 属 于 非 默 认 IP 空 间 的 LIF 不 支 持 的 7- 模 式 SAN 功 能 您 应 了 解 集 群 模 式 Data ONTAP 中 不 支 持 的 Data ONTAP 7- 模 式 SAN 功 能, 以 便 在 过 渡 之 前 采 取 任 何 必 要 的 措 施 在 集 群 模 式 Data ONTAP 中 不 支 持 以 下 7- 模 式 SAN 功 能 : Snapshot 备 份 的 LUN 克 隆 在 过 渡 之 前, 必 须 拆 分 或 删 除 Snapshot 备 份 的 LUN 克 隆 ostype 为 vld 和 image 的 LUN 在 过 渡 之 前, 必 须 删 除 ostype 为 vld 或 image 的 LUN LUN 克 隆 拆 分 必 须 完 成 或 中 止 活 动 LUN 克 隆 拆 分 lun share 命 令 在 集 群 模 式 Data ONTAP 中 不 支 持 通 过 NAS 协 议 共 享 LUN SnapValidator 过 渡 操 作 对 7- 模 式 版 本 的 要 求 您 应 当 了 解 支 持 将 哪 些 版 本 的 7- 模 式 Data ONTAP 过 渡 到 集 群 模 式 Data ONTAP 8.3 如 果 7- 模 式 系 统 只 包 含 64 位 聚 合 和 卷, 则 可 以 将 卷 从 运 行 以 下 7- 模 式 版 本 的 系 统 过 渡 到 集 群 模 式 Data ONTAP 8.3: Data ONTAP 8.0
7 使 用 SnapMirror 过 渡 7- 模 式 卷 7 Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP 8.1 Data ONTAP Data ONTAP Data ONTAP Data ONTAP 8.2 Data ONTAP 如 果 7- 模 式 系 统 运 行 Data ONTAP 8.0.x 8.1.x 或 8.2 且 包 含 32 位 聚 合 或 具 有 32 位 Snapshot 副 本 的 卷, 则 必 须 升 级 到 P4 或 升 级 之 后, 必 须 将 32 位 聚 合 扩 展 到 64 位, 然 后 查 找 并 删 除 所 有 32 位 数 据 在 过 渡 到 集 群 模 式 Data ONTAP 8.3 之 前, 必 须 将 以 下 7- 模 式 版 本 升 级 到 Data ONTAP P4: Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP 使 用 SnapMirror 进 行 过 渡 的 注 意 事 项 如 果 7- 模 式 系 统 在 进 行 SnapMirror 或 SnapVault 操 作 的 同 时 运 行 过 渡 操 作, 则 必 须 了 解 某 些 注 意 事 项, 例 如 并 发 SnapMirror 传 输 数 量 上 限 数 据 复 制 计 划 以 及 使 用 多 个 路 径 进 行 过 渡 并 发 SnapMirror 传 输 数 量 上 限 过 渡 期 间,7- 模 式 和 集 群 模 式 Data ONTAP 系 统 上 支 持 的 并 发 SnapMirror 传 输 数 量 上 限 取 决 于 允 许 特 定 存 储 系 统 型 号 执 行 的 卷 SnapMirror 复 制 操 作 的 数 量 有 关 您 的 系 统 型 号 的 并 发 卷 SnapMirror 传 输 数 量 上 限 的 信 息, 请 参 见 Data ONTAP 7- 模 式 数 据 保 护 联 机 备 份 和 恢 复 指 南
8 8 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 数 据 复 制 计 划 用 于 过 渡 操 作 的 数 据 复 制 计 划 不 应 与 用 于 7- 模 式 系 统 上 运 行 的 SnapMirror 或 SnapVault 操 作 的 现 有 计 划 发 生 重 叠 使 用 多 个 路 径 进 行 过 渡 您 可 以 通 过 使 用 数 据 复 制 IP 地 址 和 多 路 径 IP 地 址 为 过 渡 指 定 两 个 路 径 但 是, 这 两 个 路 径 只 能 用 于 负 载 平 衡, 不 能 用 于 故 障 转 移 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 过 渡 SAN 卷 时 的 空 间 注 意 事 项 过 渡 期 间, 必 须 确 保 源 卷 和 目 标 卷 上 有 足 够 的 可 用 空 间 除 了 用 于 存 储 数 据 和 Snapshot 副 本 的 空 间 以 外, 过 渡 过 程 还 需 要 为 每 个 LUN 提 供 1 MB 的 空 间, 用 于 更 新 某 些 文 件 系 统 元 数 据 转 换 之 前, 可 以 对 7- 模 式 卷 使 用 df -h 命 令 来 验 证 卷 中 是 否 为 每 个 LUN 提 供 了 1 MB 的 可 用 空 间 如 果 卷 不 能 提 供 足 够 的 可 用 空 间, 则 必 须 为 7- 模 式 卷 添 加 所 需 的 空 间 量 如 果 因 目 标 卷 上 的 空 间 不 足 导 致 无 法 过 渡 LUN, 则 会 生 成 以 下 EMS 消 息 : LUN.vol.proc.fail.no.space: Processing for LUNs in volume vol1 failed due to lack of space 在 这 种 情 况 下, 您 必 须 在 目 标 卷 上 将 filesys-size-fixed 属 性 设 置 为 false, 然 后 在 卷 上 为 每 个 LUN 添 加 1 MB 的 可 用 空 间 如 果 某 些 卷 包 含 空 间 预 留 的 LUN, 则 增 加 该 卷 的 大 小 不 会 提 供 足 够 的 空 间 在 此 类 情 况 下, 需 要 添 加 的 空 间 量 为 该 卷 的 Snapshot 预 留 空 间 大 小 在 目 标 卷 中 添 加 空 间 之 后, 您 可 以 使 用 lun transition start 命 令 过 渡 LUN 过 渡 准 备 工 作 在 开 始 过 渡 之 前, 必 须 先 准 备 7- 模 式 存 储 系 统 和 集 群, 然 后 才 能 将 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 此 外, 还 必 须 创 建 7- 模 式 系 统 与 Storage Virtual Machine (SVM) 之 间 的 过 渡 对 等 关 系
9 使 用 SnapMirror 过 渡 7- 模 式 卷 9 过 渡 许 可 证 要 求 将 卷 从 7- 模 式 过 渡 到 集 群 模 式 Data ONTAP 之 前, 必 须 先 确 认 SnapMirror 在 7- 模 式 存 储 系 统 上 已 获 得 许 可 如 果 要 过 渡 7- 模 式 卷 SnapMirror 关 系, 还 需 要 在 源 集 群 和 目 标 集 群 上 提 供 SnapMirror 许 可 证 如 果 在 7- 模 式 系 统 上 已 获 得 SnapMirror 许 可, 则 可 以 使 用 相 同 的 许 可 证 进 行 过 渡 如 果 没 有 7- 模 式 SnapMirror 许 可 证, 您 可 以 从 销 售 代 表 处 获 得 临 时 SnapMirror 许 可 证 进 行 过 渡 必 须 将 在 7- 模 式 系 统 上 启 用 的 功 能 许 可 证 添 加 到 集 群 有 关 在 集 群 上 获 得 功 能 许 可 证 的 信 息, 请 参 见 适 用 于 集 群 管 理 员 的 集 群 模 式 Data ONTAP 系 统 管 理 指 南 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 准 备 7- 模 式 系 统 以 进 行 过 渡 开 始 过 渡 之 前, 您 必 须 在 7- 模 式 系 统 中 完 成 一 些 特 定 任 务, 例 如, 启 用 SnapMirror 和 7- 模 式 系 统 以 与 目 标 集 群 建 立 通 信 开 始 之 前 所 有 要 过 渡 的 7- 模 式 卷 必 须 处 于 联 机 状 态 关 于 本 任 务 有 关 所 有 这 些 命 令 的 详 细 信 息, 请 参 见 手 册 页 步 骤 1. 在 7- 模 式 系 统 中 添 加 并 启 用 SnapMirror 许 可 证 a. 使 用 以 下 命 令 在 7- 模 式 系 统 中 添 加 SnapMirror 许 可 证 : license add xxxxxxx xxxxxxx 是 您 购 买 的 许 可 证 代 码 b. 输 入 以 下 命 令 启 用 SnapMirror: options snapmirror.enable on 2. 选 择 以 下 其 中 一 个 选 项, 对 7- 模 式 系 统 与 目 标 集 群 进 行 配 置, 使 二 者 之 间 建 立 通 信 : 将 snapmirror.access 选 项 设 置 为 all 将 snapmirror.access 选 项 的 值 设 置 为 集 群 上 所 有 LIF 的 IP 地 址 如 果 将 snapmirror.access 选 项 设 置 为 legacy 并 将 snapmirror.checkip.enable 设 置 为 off, 则 应 将 SVM 名 称 添 加 到 /etc/snapmirror.allow 文 件
10 10 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 如 果 将 snapmirror.access 选 项 设 置 为 legacy 并 将 snapmirror.checkip.enable 设 置 为 on, 则 应 将 LIF 的 IP 地 址 添 加 到 /etc/snapmirror.allow 文 件 3. 根 据 7- 模 式 系 统 的 具 体 Data ONTAP 版 本, 执 行 以 下 步 骤 : a. 通 过 输 入 以 下 命 令 支 持 所 有 接 口 上 的 SnapMirror 流 量 : options interface.snapmirror.blocked "" b. 如 果 运 行 的 是 Data ONTAP 或 8.1 并 使 用 接 口 e0m 的 IP 地 址 作 为 管 理 IP 地 址 与 7- 模 式 过 渡 工 具 进 行 交 互, 则 输 入 以 下 命 令 以 支 持 通 过 接 口 e0m 进 行 数 据 通 信 : options interface.blocked.mgmt_data_traffic off 4. 如 果 在 卷 上 设 置 了 I2P 读 分 配 或 NVFAIL 选 项, 请 执 行 以 下 步 骤 : a. 确 认 禁 用 上 述 选 项 时 其 他 操 作 不 会 受 到 影 响 b. 通 过 使 用 以 下 命 令 禁 用 各 选 项 : vol options vol_name no_i2p off vol options vol_name read_realloc off vol options vol_name nvfail off 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 准 备 集 群 以 进 行 过 渡 过 渡 7- 模 式 系 统 之 前, 您 必 须 先 设 置 集 群, 并 且 确 保 集 群 满 足 相 关 要 求, 例 如, 设 置 集 群 间 LIF 并 确 认 网 络 连 接 可 用 于 过 渡 开 始 之 前 SVM 必 须 已 设 置 好 有 关 设 置 集 群 和 SVM 的 信 息, 请 参 见 集 群 模 式 Data ONTAP 软 件 设 置 指 南 通 过 使 用 集 群 管 理 LIF 可 以 对 集 群 进 行 访 问 集 群 必 须 运 行 状 况 良 好, 任 何 节 点 都 不 能 处 于 接 管 模 式 用 于 将 过 渡 的 卷 存 放 在 SVM 中 的 聚 合 必 须 具 有 SFO 策 略 聚 合 必 须 位 于 尚 未 达 到 卷 上 限 的 节 点 上 过 渡 卷 SnapMirror 关 系 时, 为 了 建 立 SVM 对 等 关 系, 必 须 满 足 以 下 条 件 : 二 级 集 群 不 应 具 有 与 主 SVM 名 称 相 同 的 SVM
11 使 用 SnapMirror 过 渡 7- 模 式 卷 11 主 集 群 不 应 具 有 与 辅 助 SVM 名 称 相 同 的 SVM 源 7- 模 式 系 统 的 名 称 不 应 与 任 何 本 地 SVM 或 已 建 立 对 等 关 系 的 SVM 相 冲 突 关 于 本 任 务 您 可 以 在 每 个 集 群 节 点 上 的 默 认 IP 空 间 中 设 置 集 群 间 LIF 或 本 地 LIF, 以 便 在 集 群 Data ONTAP 和 7- 模 式 存 储 系 统 之 间 建 立 通 信 如 果 设 置 了 本 地 LIF, 则 不 必 设 置 集 群 间 LIF 如 果 同 时 设 置 了 集 群 间 LIF 和 本 地 LIF, 则 优 先 采 用 本 地 LIF 步 骤 1. 在 每 个 集 群 节 点 上 创 建 集 群 间 LIF, 以 便 在 集 群 和 7- 模 式 系 统 之 间 建 立 通 信 : a. 使 用 network interface create 命 令 创 建 集 群 间 LIF cluster1::> network interface create -vserver cluster1-01 -lif intercluster_lif -role intercluster -home-node cluster1-01 -homeport e0c -address netmask b. 使 用 network route create 命 令 创 建 集 群 间 LIF 的 静 态 路 由 cluster1::> network route create -vserver vs0 -destination /0 -gateway c. 使 用 network ping 命 令 确 认 您 可 以 使 用 集 群 间 LIF 对 7- 模 式 系 统 执 行 ping 操 作 cluster1::> network ping -lif intercluster_lif -lif-owner cluster1-01 -destination system7mode system7mode is alive 对 于 多 路 径, 每 个 节 点 上 必 须 具 有 两 个 集 群 间 LIF 有 关 网 络 接 口 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 相 关 任 务 创 建 过 渡 对 等 关 系 ( 第 12 页 )
12 12 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 创 建 过 渡 对 等 关 系 您 必 须 先 创 建 过 渡 对 等 关 系, 之 后 才 能 为 7- 模 式 系 统 和 集 群 之 间 的 过 渡 设 置 SnapMirror 关 系 作 为 集 群 管 理 员, 您 可 以 使 用 vserver peer transition create 命 令 在 SVM 和 7- 模 式 系 统 之 间 创 建 过 渡 对 等 关 系 开 始 之 前 您 必 须 确 保 源 7- 模 式 系 统 的 名 称 与 任 何 本 地 SVM 或 已 建 立 对 等 关 系 的 SVM 不 冲 突 您 必 须 已 经 创 建 一 个 类 型 为 DP 的 集 群 模 式 Data ONTAP 卷 作 为 7- 模 式 数 据 的 过 渡 目 标 该 集 群 模 式 Data ONTAP 卷 的 大 小 必 须 大 于 或 等 于 7- 模 式 卷 的 大 小 您 必 须 确 保 SVM 名 称 不 包 含. 如 果 使 用 的 是 本 地 LIF, 则 您 必 须 确 保 以 下 几 项 : 在 默 认 IP 空 间 中 创 建 了 本 地 LIF 在 卷 所 在 的 节 点 上 配 置 了 本 地 LIF LIF 迁 移 策 略 与 卷 节 点 相 同, 以 便 两 者 可 以 迁 移 到 同 一 个 目 标 节 点 关 于 本 任 务 创 建 过 渡 对 等 关 系 时, 您 还 可 以 指 定 一 个 多 路 径 FQDN 或 IP 地 址, 用 来 平 衡 数 据 传 输 负 载 步 骤 1. 使 用 vserver peer transition create 命 令 创 建 过 渡 对 等 关 系 2. 使 用 vserver peer transition show 确 认 过 渡 对 等 关 系 已 创 建 成 功 创 建 与 查 看 过 渡 对 等 关 系 的 以 下 命 令 使 用 多 路 径 地 址 src1-e0d 以 及 本 地 LIF lif1 和 lif2 在 SVM vs1 和 7- 模 式 系 统 src1 之 间 创 建 过 渡 对 等 关 系 : cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src1 -multi-path-address src1-e0d -local-lifs lif1,lif2 以 下 显 示 了 一 个 SVM (vs1) 与 多 个 7- 模 式 系 统 之 间 的 过 渡 对 等 关 系 : cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src3 Transition peering created
13 使 用 SnapMirror 过 渡 7- 模 式 卷 13 cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src2 Transition peering created 以 下 输 出 显 示 了 SVM vs1 的 过 渡 对 等 关 系 : cluster1::> vserver peer transition show Vserver Source Filer Multi Path Address Local LIFs vs1 src2 - - vs1 src3 - - 过 渡 卷 您 可 以 采 用 SnapMirror 技 术 过 渡 独 立 卷 或 数 据 保 护 关 系 中 的 卷 ( 即 卷 SnapMirror 关 系 中 的 卷 ) 关 于 本 任 务 如 果 正 在 进 行 的 计 划 内 更 新 因 NDO 操 作 ( 接 管 或 聚 合 重 新 定 位 ) 而 中 止, 则 NDO 操 作 完 成 后, 此 更 新 将 自 动 恢 复 完 成 之 后 如 果 过 渡 独 立 卷 或 包 含 LUN 的 卷 SnapMirror 关 系, 则 必 须 创 建 igroup 并 映 射 LUN 然 后, 必 须 对 主 机 执 行 必 要 的 过 渡 后 任 务, 再 配 置 对 过 渡 后 的 集 群 模 式 Data ONTAP 卷 的 访 问 7- 模 式 过 渡 工 具 2.0 数 据 和 配 置 过 渡 补 充 指 南 选 择 过 渡 独 立 卷 ( 第 14 页 ) 过 渡 卷 SnapMirror 关 系 ( 第 19 页 ) 相 关 任 务 使 用 SnapMirror 过 渡 7- 模 式 卷 ( 第 4 页 )
14 14 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 过 渡 独 立 卷 过 渡 独 立 卷 包 括 以 下 操 作 : 创 建 SnapMirror 关 系, 执 行 基 线 传 输, 执 行 增 量 更 新, 监 控 数 据 复 制 操 作, 中 断 SnapMirror 关 系, 将 客 户 端 访 问 从 7- 模 式 卷 移 动 到 集 群 模 式 Data ONTAP 卷 开 始 之 前 必 须 已 设 置 集 群 和 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 cluster1::> snapmirror create -source-path system7mode:datavol20 - destination-path vs1:dst_vol -type TDP Operation succeeded: snapmirror create the relationship with destination vs1:dst_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 cluster1::> snapmirror initialize -destination-path vs1:dst_vol Operation is queued: snapmirror initialize of destination vs1:dst_vol. c. 使 用 snapmirror show 命 令 监 控 状 态 cluster1::>snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault
15 使 用 SnapMirror 过 渡 7- 模 式 卷 15 Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.1 Newest Snapshot Timestamp: 10/16 02:49:03 Exported Snapshot: vs1( )_dst_vol.1 Exported Snapshot Timestamp: 10/16 02:49:03 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: initialize Last Transfer Error: - Last Transfer Size: 152KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:43:53 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 0 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 6 d. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :
16 16 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 cluster1::> snapmirror update -destination-path vs1:dst_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步
17 使 用 SnapMirror 过 渡 7- 模 式 卷 17 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 cluster1::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 :
18 18 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 cluster1::> snapmirror quiesce -destination-path vs1:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 cluster1::> snapmirror resume -destination-path vs1:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 cluster1::> snapmirror update -destination-path vs1:dst_vol Operation is queued: snapmirror update of destination vs1:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 cluster1::> snapmirror break -destination-path vs1:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系
19 使 用 SnapMirror 过 渡 7- 模 式 卷 19 cluster1::> snapmirror delete -destination-path vs1:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 相 关 任 务 恢 复 失 败 的 SnapMirror 基 线 传 输 ( 第 33 页 ) 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 ) 过 渡 卷 SnapMirror 关 系 您 可 以 通 过 先 过 渡 二 级 卷 再 过 渡 主 卷 来 过 渡 7- 模 式 卷 SnapMirror 关 系 并 保 留 数 据 保 护 关 系 开 始 之 前 主 集 群 和 二 级 集 群 以 及 SVM 必 须 已 设 置 完 成 过 渡 卷 SnapMirror 关 系 时, 为 了 建 立 SVM 对 等 关 系, 必 须 满 足 以 下 条 件 : 二 级 集 群 不 应 具 有 与 主 SVM 名 称 相 同 的 SVM 主 集 群 不 应 具 有 与 辅 助 SVM 名 称 相 同 的 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 过 渡 二 级 卷 ( 第 20 页 ) 2. 过 渡 主 卷 ( 第 25 页 ) 相 关 任 务 恢 复 失 败 的 SnapMirror 基 线 传 输 ( 第 33 页 )
20 20 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 过 渡 二 级 卷 过 渡 二 级 卷 包 括 以 下 操 作 : 创 建 SnapMirror 关 系, 执 行 基 线 传 输, 执 行 增 量 备 份, 设 置 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 开 始 之 前 必 须 已 设 置 二 级 集 群 和 SVM 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror create -source-path sec_system:dst_7_vol -destination-path dst_vserver:dst_c_vol -type TDP Operation succeeded: snapmirror create the relationship with destination dst_vserver:dst_c_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 sec_cluster::> snapmirror initialize -destination-path dst_vserver:dst_c_vol Operation is queued: snapmirror initialize of destination dst_vserver:dst_c_vol. c. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :
21 使 用 SnapMirror 过 渡 7- 模 式 卷 21 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 sec_cluster::> snapmirror update -destination-path dst_vserver:dst_c_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 sec_cluster::> snapmirror show -destination-path dst_vserver:dst_c_vol Source Path: sec_system:dst_7_vol Destination Path: dst_vserver:dst_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: dst_vserver ( )_dst_c_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: dst_vserver ( )_dst_c_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: sec_cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: sec_system:dst_7_vol Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步
22 22 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 sec_cluster::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 sec_cluster::> snapmirror modify -destination-path dst_vserver:dst_c_vol - schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 sec_cluster::> snapmirror show -destination-path dst_vserver:dst_c_vol Source Path: sec_system:dst_7_vol Destination Path: dst_vserver:dst_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: dst_vserver ( )_dst_c_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: dst_vserver ( )_dst_c_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: sec_cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: sec_system:dst_7_vol Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11
23 2. 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 : a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 使 用 SnapMirror 过 渡 7- 模 式 卷 23 sec_cluster::> snapmirror quiesce -destination-path dst_vserver:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 sec_cluster::> snapmirror modify -destination-path dst_vserver:dst_vol - schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 sec_cluster::> snapmirror resume -destination-path dst_vserver:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 sec_cluster::> snapmirror update -destination-path dst_vserver:dst_vol Operation is queued: snapmirror update of destination dst_vserver:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 二 级 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡
24 24 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 二 级 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 10. 建 立 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 : a. 使 用 vserver peer transition create 命 令 在 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 创 建 SVM 对 等 关 系 sec_cluster::> vserver peer transition create -local-vserver dst_vserver -src-filer-name src_system Transition peering created b. 使 用 job schedule cron create 命 令 创 建 作 业 计 划, 该 计 划 与 为 7- 模 式 SnapMirror 关 系 配 置 的 计 划 匹 配 sec_cluster::> job schedule cron create -name 15_minute_sched - minute 15 c. 使 用 snapmirror create 命 令 创 建 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror create -source-path src_system:src_7_vol -destination-path dst_vserver:dst_c_vol -type TDP -schedule 15_minute_sched Operation succeeded: snapmirror create the relationship with destination dst_vserver:dst_c_vol.
25 使 用 SnapMirror 过 渡 7- 模 式 卷 25 d. 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 二 级 卷 要 成 功 实 现 重 新 同 步,7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 必 须 存 在 一 个 通 用 7- 模 式 Snapshot 副 本 sec_cluster::> snapmirror resync -destination-path dst_vserver:dst_c_vol 注 意 : 只 有 在 过 渡 原 始 主 卷 之 后, 才 应 该 映 射 目 标 二 级 卷 上 的 LUN 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 删 除 辅 助 7- 模 式 系 统 与 辅 助 SVM 之 间 的 SVM 对 等 关 系 删 除 7- 模 式 主 系 统 与 7- 模 式 辅 助 系 统 之 间 的 SnapMirror 关 系 过 渡 主 卷 相 关 任 务 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 ) 过 渡 主 卷 包 括 以 下 操 作 : 将 7- 模 式 主 卷 中 的 数 据 复 制 到 集 群 模 式 Data ONTAP 主 卷, 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系, 建 立 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系 开 始 之 前 必 须 已 设 置 主 集 群 和 SVM 关 于 本 任 务 如 果 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 处 于 活 动 状 态, 则 不 应 映 射 集 群 模 式 Data ONTAP 目 标 二 级 卷 上 的 LUN 进 行 只 读 访 问 应 在 7- 模 式 主 卷 出 现 灾 难 时 或 在 过 渡 7- 模 式 主 卷 之 后 映 射 目 标 二 级 卷 上 的 LUN 步 骤 1. 将 7- 模 式 主 卷 上 的 数 据 复 制 到 集 群 模 式 Data ONTAP 主 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系
26 26 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 pri_cluster::> snapmirror create -source-path src_system:finance - destination-path src_vserver:src_c_vol -type TDP Operation succeeded: snapmirror create the relationship with destination src_vserver:src_c_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 pri_cluster::> snapmirror initialize -destination-path src_vserver:src_c_vol Operation is queued: snapmirror initialize of destination src_vserver:src_c_vol. c. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :
27 使 用 SnapMirror 过 渡 7- 模 式 卷 27 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 pri_cluster::> snapmirror show -destination-path src_vserver:src_c_vol Source Path: pri_system:src_7_vol Destination Path: src_vserver:src_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: src_vserver( )_src_c_vol.1 Newest Snapshot Timestamp: 02/13 08:10:46 Exported Snapshot: src_vserver( )_src_c_vol.1 Exported Snapshot Timestamp: 02/13 08:10:46 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: e106827a-75b3-11e2- add Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 580KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: pri_system:src_7_vol Last Transfer End Timestamp: 09/30 08:05:06 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: iii. 转 至 第 3 步
28 28 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 pri_cluster::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 pri_cluster::> snapmirror modify -destination-path src_vserver:src_c_vol - schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 pri_cluster::> snapmirror show -destination-path src_vserver:src_c_vol Source Path: pri_system:src_7_vol Destination Path: src_vserver:src_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: src_vserver( )_src_c_vol.1 Newest Snapshot Timestamp: 02/13 08:10:46 Exported Snapshot: src_vserver( )_src_c_vol.1 Exported Snapshot Timestamp: 02/13 08:10:46 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: e106827a-75b3-11e2- add Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 580KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: pri_system:src_7_vol Last Transfer End Timestamp: 09/30 08:05:06 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 43405
29 2. 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 : a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 使 用 SnapMirror 过 渡 7- 模 式 卷 29 pri_cluster::> snapmirror quiesce -destination-path src_vserver:src_c_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 pri_cluster::> snapmirror modify -destination-path src_vserver:src_c_vol - schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 pri_cluster::> snapmirror resume -destination-path src_vserver:src_c_vol 3. 在 集 群 模 式 Data ONTAP 二 级 卷 与 主 SVM 之 间 创 建 SVM 对 等 关 系 a. 使 用 cluster peer create 命 令 创 建 集 群 对 等 关 系 pri_cluster::> cluster peer create -peer-addrs cluster2-d2, timeout 60 Notice: Choose a passphrase of 8 or more characters. To ensure the authenticity of the peering relationship, use a phrase or sequence of characters that would be hard to guess. Enter the passphrase: ******** Confirm the passphrase: ******** b. 在 源 集 群 中, 使 用 vserver peer create 命 令 创 建 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SVM 对 等 关 系 pri_cluster::> vserver peer create -vserver src_vserver - peervserver src_c_vserver -applications snapmirror -peer-cluster sec_cluster
30 30 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 c. 在 目 标 集 群 中, 使 用 vserver peer accept 命 令 接 受 SVM 对 等 请 求 并 建 立 SVM 对 等 关 系 sec_cluster::> vserver peer accept -vserver dst_vserver - peervserver src_vserver 4. 如 果 为 更 新 传 输 设 置 了 计 划, 请 从 目 标 集 群 使 用 snapmirror quiesce 命 令, 暂 停 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 所 有 数 据 传 输 sec_cluster::> snapmirror quiesce -destination-path dst_vserver:dst_c_vol 5. 监 控 数 据 复 制 操 作 并 启 动 转 换 : a. 等 待 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 主 卷 及 集 群 模 式 Data ONTAP 二 级 卷 之 间 所 有 正 在 进 行 的 传 输 完 成, 然 后 断 开 7- 模 式 主 卷 的 客 户 端 访 问 以 启 动 转 换 b. 使 用 snapmirror update 命 令 执 行 从 7- 模 式 主 卷 到 集 群 模 式 Data ONTAP 主 卷 的 最 终 数 据 更 新 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol c. 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 主 卷 之 间 的 SnapMirror 关 系 pri_cluster::> snapmirror break -destination-path src_vserver:src_c_vol [Job 1485] Job is queued: snapmirror break for destination src_vserver:src_c_vol. d. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN e. 使 用 snapmirror delete 命 令 删 除 该 关 系
31 使 用 SnapMirror 过 渡 7- 模 式 卷 31 pri_cluster::> snapmirror delete -destination-path src_vserver:src_c_vol f. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 6. 从 目 标 集 群 中 断 并 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 a. 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_c_vol [Job 1485] Job is queued: snapmirror break for destination dst_vserver:dst_c_vol. b. 使 用 snapmirror delete 命 令 删 除 该 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_c_vol c. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 7. 从 目 标 集 群 建 立 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系 : a. 使 用 snapmirror create 命 令 创 建 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系
32 32 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 sec_cluster::> snapmirror create -source-path src_vserver:src_c_vol -destination-path dst_vserver:dst_c_vol - type DP -schedule 15_minute_sched b. 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 要 成 功 实 现 重 新 同 步, 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 必 须 存 在 一 个 通 用 Snapshot 副 本 sec_cluster::> snapmirror resync -destination-path dst_vserver:dst_c_vol c. 使 用 snapmirror show 命 令 确 认 SnapMirror 重 新 同 步 状 态 显 示 SnapMirrored 注 : 您 必 须 确 保 成 功 完 成 SnapMirror 重 新 同 步, 才 能 对 集 群 模 式 Data ONTAP 二 级 卷 进 行 只 读 访 问 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 相 关 任 务 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 )
33 33 解 决 使 用 SnapMirror 时 的 过 渡 问 题 以 下 故 障 排 除 信 息 有 助 于 您 确 定 并 解 决 使 用 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 时 出 现 的 问 题 恢 复 失 败 的 SnapMirror 基 线 传 输 过 渡 期 间,SnapMirror 基 线 传 输 会 因 为 多 种 原 因 而 失 败, 例 如, 网 络 连 接 中 断 传 输 中 止 或 者 控 制 器 故 障 转 移 更 正 失 败 原 因 后, 如 果 重 新 启 动 检 查 点 可 用, 则 可 恢 复 SnapMirror 传 输 关 于 本 任 务 如 果 用 于 基 线 传 输 的 重 新 启 动 检 查 点 不 可 用, 则 必 须 删 除 卷 并 重 新 进 行 创 建 重 新 建 立 SnapMirror 关 系, 并 再 次 启 动 过 渡 步 骤 1. 在 目 标 集 群 中, 使 用 带 有 -snapshot-checkpoint 参 数 的 snapmirror show 命 令 查 看 基 线 传 输 的 状 态 和 重 新 启 动 检 查 点 cluster2::> snapmirror show -destination-path dest_vserver:vol3 - fields snapshot-checkpoint source-path destination-path snapshot-checkpoint src_system:vol3 dest_vserver:vol3 50MB 2. 如 果 存 在 SnapMirror 检 查 点, 则 使 用 snapmirror initialize 命 令 恢 复 基 线 传 输 cluster2::> snapmirror initialize -destination-path dest_vserver:vol3
34 34 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 从 失 败 的 LUN 过 渡 中 恢 复 如 果 包 含 LUN 的 卷 在 过 渡 时 失 败, 则 可 使 用 lun transition 7-mode show 命 令 查 看 哪 些 LUN 未 过 渡 到 集 群 模 式 Data ONTAP, 然 后 确 定 更 正 措 施 步 骤 1. 使 用 lun transition 7-mode show 命 令 查 看 失 败 的 LUN 2. 检 查 EMS 日 志 并 确 定 必 须 采 取 的 更 正 操 作 3. 采 取 必 要 的 步 骤 来 更 正 失 败 问 题 4. 使 用 lun transition start 命 令 完 成 过 渡 5. 使 用 lun show 命 令 确 认 失 败 的 LUN 已 成 功 过 渡 此 命 令 仅 显 示 已 成 功 过 渡 到 集 群 模 式 Data ONTAP 的 LUN 相 关 概 念 过 渡 SAN 卷 时 的 空 间 注 意 事 项 ( 第 8 页 )
35 35 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 如 果 在 7- 模 式 主 卷 和 集 群 模 式 Data ONTAP 二 级 卷 之 间 建 立 了 SnapMirror 灾 难 恢 复 (DR) 关 系, 并 且 7- 模 式 主 站 点 发 生 灾 难, 您 可 以 将 客 户 端 访 问 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 待 7- 模 式 主 卷 恢 复 联 机 后, 您 必 须 额 外 执 行 一 些 步 骤 来 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 关 于 本 任 务 要 在 发 生 灾 难 后 保 留 写 入 到 集 群 模 式 Data ONTAP 二 级 卷 上 的 任 何 数 据, 您 必 须 在 7- 模 式 主 卷 恢 复 联 机 后 过 渡 7- 模 式 主 卷, 并 在 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 建 立 SnapMirror 关 系 然 后, 您 可 以 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 SnapMirror 不 支 持 从 集 群 模 式 Data ONTAP 卷 重 新 同 步 到 7- 模 式 卷 因 此, 发 生 灾 难 后, 如 果 在 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 重 新 建 立 DR 关 系, 写 入 集 群 模 式 Data ONTAP 二 级 卷 上 的 所 有 数 据 都 将 丢 失 注 : 当 7- 模 式 主 卷 上 发 生 DR 事 件 时, 您 可 以 映 射 目 标 二 级 卷 上 的 LUN; 但 是, 当 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 处 于 活 动 状 态 时, 不 应 映 射 目 标 二 级 卷 上 的 LUN 步 骤 1. 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 ( 第 36 页 ) 当 7- 模 式 主 卷 上 发 生 灾 难 时, 您 可 以 将 客 户 端 从 7- 模 式 主 卷 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 2. 将 7- 模 式 主 卷 作 为 独 立 卷 进 行 过 渡 ( 第 36 页 ) 如 果 7- 模 式 主 卷 在 发 生 灾 难 后 恢 复 联 机, 您 必 须 过 渡 7- 模 式 主 卷 因 为 在 此 阶 段 会 中 断 和 删 除 与 7- 模 式 主 卷 的 所 有 SnapMirror 关 系, 因 此 您 可 以 在 此 类 过 渡 中 过 渡 一 个 独 立 卷 3. 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 ( 第 42 页 ) 过 渡 到 集 群 模 式 Data ONTAP 主 卷 之 后, 您 可 以 针 对 在 集 群 模 式 Data ONTAP 二 级 卷 上 写 入 的 数 据 重 新 同 步 集 群 模 式 Data ONTAP 主 卷 然 后, 您 可 以 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷
36 36 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 如 果 在 7- 模 式 主 卷 和 集 群 模 式 Data ONTAP 二 级 卷 之 间 建 立 了 SnapMirror 灾 难 恢 复 (DR) 关 系, 并 且 7- 模 式 主 站 点 发 生 灾 难, 则 必 须 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 步 骤 1. 在 二 级 集 群 中, 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_c_vol 2. 在 二 级 集 群 中, 使 用 snapmirror delete 命 令 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_c_vol 3. 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 有 关 在 集 群 模 式 Data ONTAP 中 设 置 客 户 端 访 问 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 文 件 访 问 和 协 议 管 理 指 南 过 渡 独 立 卷 如 果 7- 模 式 主 卷 在 发 生 灾 难 后 恢 复 联 机, 您 必 须 过 渡 7- 模 式 主 卷 因 为 在 此 阶 段 会 中 断 和 删 除 与 7- 模 式 主 卷 的 所 有 SnapMirror 关 系, 因 此 您 可 以 在 此 类 过 渡 中 过 渡 一 个 独 立 卷 开 始 之 前 必 须 已 设 置 集 群 和 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 :
37 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 37 a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 cluster1::> snapmirror create -source-path system7mode:datavol20 - destination-path vs1:dst_vol -type TDP Operation succeeded: snapmirror create the relationship with destination vs1:dst_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 cluster1::> snapmirror initialize -destination-path vs1:dst_vol Operation is queued: snapmirror initialize of destination vs1:dst_vol. c. 使 用 snapmirror show 命 令 监 控 状 态 cluster1::>snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.1 Newest Snapshot Timestamp: 10/16 02:49:03 Exported Snapshot: vs1( )_dst_vol.1 Exported Snapshot Timestamp: 10/16 02:49:03 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID:
38 38 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: initialize Last Transfer Error: - Last Transfer Size: 152KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:43:53 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 0 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 6 d. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :
39 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 39 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 cluster1::> snapmirror update -destination-path vs1:dst_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步
40 40 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 cluster1::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 :
41 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 41 a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 cluster1::> snapmirror quiesce -destination-path vs1:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 cluster1::> snapmirror resume -destination-path vs1:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 cluster1::> snapmirror update -destination-path vs1:dst_vol Operation is queued: snapmirror update of destination vs1:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 cluster1::> snapmirror break -destination-path vs1:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系
42 42 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 cluster1::> snapmirror delete -destination-path vs1:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 在 7- 模 式 主 卷 恢 复 联 机 后, 您 可 以 过 渡 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 建 立 SnapMirror 关 系, 以 及 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 步 骤 1. 在 主 SVM 和 辅 助 SVM 之 间 创 建 SVM 对 等 关 系 a. 使 用 cluster peer create 命 令 创 建 集 群 对 等 关 系 pri_cluster::> cluster peer create -peer-addrs cluster2-d2, timeout 60 Notice: Choose a passphrase of 8 or more characters. To ensure the authenticity of the peering relationship, use a phrase or sequence of characters that would be hard to guess. Enter the passphrase: ******** Confirm the passphrase: ******** b. 在 源 集 群 中, 使 用 vserver peer create 命 令 在 集 群 模 式 Data ONTAP 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 创 建 SVM 对 等 关 系
43 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 43 pri_cluster::> vserver peer create -vserver src_vserver - peervserver src_c_vserver -applications snapmirror -peer-cluster sec_cluster c. 在 目 标 集 群 中, 使 用 vserver peer accept 命 令 接 受 SVM 对 等 请 求 并 建 立 SVM 对 等 关 系 sec_cluster::> vserver peer accept -vserver dst_vserver - peervserver src_vserver 2. 使 用 snapmirror create 命 令 创 建 以 集 群 模 式 Data ONTAP 二 级 卷 为 源 以 集 群 模 式 Data ONTAP 主 卷 为 目 标 的 SnapMirror 关 系 pri_cluster::> snapmirror create -source-path dst_vserver:dst_c_vol - destination-path src_vserver:src_c_vol 3. 在 主 集 群 中, 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 二 级 卷 pri_cluster::> snapmirror resync -source-path dst_vserver:dst_c_vol - destination-path src_vserver:src_c_vol 您 必 须 等 到 重 新 同 步 结 束 重 新 同 步 完 成 后,SnapMirror 的 状 态 变 为 SnapMirrored 4. 准 备 好 切 换 到 集 群 模 式 Data ONTAP 主 卷 后, 从 集 群 模 式 Data ONTAP 二 级 卷 断 开 客 户 端 访 问 5. 在 主 集 群 中, 使 用 snapmirror update 命 令 更 新 主 卷 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol 6. 在 主 集 群 中, 使 用 snapmirror break 命 令 中 断 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系
Simulator By SunLingxi 2003
Simulator By SunLingxi sunlingxi@sina.com 2003 windows 2000 Tornado ping ping 1. Tornado Full Simulator...3 2....3 3. ping...6 4. Tornado Simulator BSP...6 5. VxWorks simpc...7 6. simulator...7 7. simulator
More information¶C¶L§§¬_™¨ A.PDF
1 9 3 1 9 4 / 7.1 / 1 9 5 7.2 % netstat -rn Routing tables Destination Gateway Flags Refcnt Use Interface 127.0.0.1 127.0.0.1 UH 1 132 lo0 172.16.12.0 172.16.12.2 U 26 49041 le0 1 9 6 / % ping -s almond
More informationARP ICMP
ARP ICMP 2 9-1 ARP 9-2 ARP 9-3 ARP 9-4 ICMP 9-5 ICMP 9-6 ICMP 9-7 ICMP 3 ARP ICMP TCP / IP, IP ARP ICMP 3 IP, ARP ICMP IP ARP ICMP 2, 4 9-1 ARP, MAC, IP IP, MAC ARP Address Resolution Protocol, OSI ARP,,
More informationRAID RAID 0 RAID 1 RAID 5 RAID * ( -1)* ( /2)* No Yes Yes Yes A. B. BIOS SATA C. RAID BIOS RAID ( ) D. SATA RAID/AHCI ( ) SATA M.2 SSD ( )
RAID RAID 0 RAID 1 RAID 5 RAID 10 2 2 3 4 * (-1)* (/2)* No Yes Yes Yes A. B. BIOS SATA C. RAID BIOS RAID ( ) D. SATA RAID/AHCI ( ) SATA M.2 SSD ( ) ( ) ( ) Windows USB 1 SATA A. SATASATAIntel SATA (SATA3
More information一.NETGEAR VPN防火墙产品介绍
NETGEAR VPN NETGEAR 6 http://www.netgear.com.cn - 1 - NETGEAR VPN... 4 1.1 VPN...4 1.2 Dynamic Domain Name Service...4 1.3 Netgear VPN...4 Netgear VPN... 6 2.1 FVS318 to FVS318 IKE Main...7 2.1.1 A VPN
More informationIP505SM_manual_cn.doc
IP505SM 1 Introduction 1...4...4...4...5 LAN...5...5...6...6...7 LED...7...7 2...9...9...9 3...11...11...12...12...12...14...18 LAN...19 DHCP...20...21 4 PC...22...22 Windows...22 TCP/IP -...22 TCP/IP
More informationK7VT2_QIG_v3
............ 1 2 3 4 5 [R] : Enter Raid setup utility 6 Press[A]keytocreateRAID RAID Type: JBOD RAID 0 RAID 1: 2 7 RAID 0 Auto Create Manual Create: 2 RAID 0 Block Size: 16K 32K
More information2015 2002 2 11 2002 2 11 346 2005 1 1 2015 4 10 2015 3 10 2015 4 10 2005 1 1 2015 4 10 2015 4 10 86 2000 7 25 2000 9 1 100,000 87 2012 6 18 50% 1995 3 18 2015 12 27 2016 6 1 2003 9 1 2013 6 29 2004 4 1
More informationuntitled
V3049A-EXD IP-SAN/NAS Infinova Infinova Infinova Infinova www.infinova.com.cn Infinova Infinova Infinova 1 2 1 2 V3049A-EXD-R16 V3049A-EXD-R24 ... 1 1.1... 1 1.2... 1 1.3... 1... 2 2.1... 2 2.2... 3...
More informationMicrosoft Word - template.doc
HGC efax Service User Guide I. Getting Started Page 1 II. Fax Forward Page 2 4 III. Web Viewing Page 5 7 IV. General Management Page 8 12 V. Help Desk Page 13 VI. Logout Page 13 Page 0 I. Getting Started
More informationuntitled
V3041A-J/V3042A-J IP-SAN/NAS Infinova Infinova Infinova Infinova www.infinova.com.cn Infinova Infinova Infinova 1 2 1 2 V3041A-16R-J V3041A-24R-J V3042A-16R-J V3042A-24R-J V3049-EXD-R16 V3049-EXD-R24 ...
More informationJunos Pulse Mobile Security R1 2012, Juniper Networks, Inc.
Junos Pulse Mobile Security 4.0 2012 6 R1 2012, Juniper Networks, Inc. Junos Pulse Mobile Security Juniper Networks, Inc. 1194 North Mathilda Avenue Sunnyvale, California 94089 408-745-2000 www.juniper.net
More informationC10_ppt.PDF
C11-101 101 ( ) 1 15 2000 20% 20MB 170000 19 7% 3% 14% 32% 44% Disaster Recovery Journal ( ) UPS - (Fault Tolerance Capability) (Avoid Single point of failure) (High Availability) (RAID) (Cluster) (Backup)
More informationAL-M200 Series
NPD4754-00 TC ( ) Windows 7 1. [Start ( )] [Control Panel ()] [Network and Internet ( )] 2. [Network and Sharing Center ( )] 3. [Change adapter settings ( )] 4. 3 Windows XP 1. [Start ( )] [Control Panel
More information计算机网络概论
1 repeater bridge router gateway V.S OSI Repeater(Hub) 1 Repeater 2 3 ( Hub 4 Bridge 1 Bridge 2 N N DL1 DL1 DL2 DL2 Ph1 Ph1 Ph2 Ph2 1 2 Bridge 3 MAC Ethernet FDDI MAC MAC Bridge 4 5 6 7 50873EA6, 00123456
More informationP4i45GL_GV-R50-CN.p65
1 Main Advanced Security Power Boot Exit System Date System Time Floppy Drives IDE Devices BIOS Version Processor Type Processor Speed Cache Size Microcode Update Total Memory DDR1 DDR2 Dec 18 2003 Thu
More informationSymantec™ Sygate Enterprise Protection 防护代理安装使用指南
Symantec Sygate Enterprise Protection 防 护 代 理 安 装 使 用 指 南 5.1 版 版 权 信 息 Copyright 2005 Symantec Corporation. 2005 年 Symantec Corporation 版 权 所 有 All rights reserved. 保 留 所 有 权 利 Symantec Symantec 徽 标 Sygate
More informationVolume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number
More information附件9 电梯运行安全监测管理信息平台技术规范 第11部分:系统信息安全技术规范(征求意见稿)
ICS 35.240.01 M 63 备 案 号 : - 北 京 市 地 方 标 准 DB11/ XXX.1 XXXX 电 梯 运 行 安 全 监 测 管 理 信 息 平 台 技 术 规 范 第 11 部 分 : 系 统 信 息 安 全 规 范 Technical Specification for Management Information Platform of Elevator Operation
More informationIBM Rational ClearQuest Client for Eclipse 1/ IBM Rational ClearQuest Client for Ecl
1/39 Balaji Krish,, IBM Nam LeIBM 2005 4 15 IBM Rational ClearQuest ClearQuest Eclipse Rational ClearQuest / Eclipse Clien Rational ClearQuest Rational ClearQuest Windows Web Rational ClearQuest Client
More informationDOS下常用的网络命令.PDF
DOS .... 1.1... 1.2... DOS... 2.1 ARP... 2.2 Finger... 2.3 Ftp... 2.4 Nbtstat... 2.5 Netstat... 2.6 Ping... 2.7 Rcp... 2.8 Rexec... 2.9 Route... 2.10 Rsh... 2.11 Tftp... 2.12 Tracert... 1 1 1 1 1 2 3 4
More informationC H A P T E R 7 Windows Vista Windows Vista Windows Vista FAT16 FAT32 NTFS NTFS New Technology File System NTFS
C H P T E R 7 Windows Vista Windows Vista Windows VistaFT16 FT32NTFS NTFSNew Technology File System NTFS 247 6 7-1 Windows VistaTransactional NTFS TxFTxF Windows Vista MicrosoftTxF CIDatomicity - Consistency
More information未命名 -1
BV8188M 使 用 说 明 INSTRUCTIONS 使 用 之 前 请 仔 细 阅 读 此 手 册 Please read before using this manual 深 圳 市 碧 维 视 科 技 有 限 公 司 2013 年 碧 维 视 印 刷, 版 权 所 有, 翻 版 必 究, 本 手 册 内 所 有 图 文, 未 经 授 权, 严 谨 与 任 何 方 式 之 全 面 或 部 分
More informationWebSphere Studio Application Developer IBM Portal Toolkit... 2/21 1. WebSphere Portal Portal WebSphere Application Server stopserver.bat -configfile..
WebSphere Studio Application Developer IBM Portal Toolkit... 1/21 WebSphere Studio Application Developer IBM Portal Toolkit Portlet Doug Phillips (dougep@us.ibm.com),, IBM Developer Technical Support Center
More information家装知识(六)
I...1 SHOW...5...7...9...13...14...17...18...21...24...26...29...31...33...36 2003...37...39...41...42...43...45...48...50 ...52...54...58...60...61...63 10...66...68...73...74...77...81...85...89...91...93...97
More informationch08.PDF
8-1 CCNA 8.1 CLI 8.1.1 8-2 8-3 8.1.21600 2500 1600 2500 / IOS 8-4 8.2 8.2.1 A 5 IP CLI 1600 2500 8-5 8.1.2-15 Windows 9598NT 2000 HyperTerminal Hilgraeve Microsoft Cisco HyperTerminal Private Edition (PE)
More informationChapter 2
2 (Setup) ETAP PowerStation ETAP ETAP PowerStation PowerStation PowerPlot ODBC SQL Server Oracle SQL Server Oracle Windows SQL Server Oracle PowerStation PowerStation PowerStation PowerStation ETAP PowerStation
More informationRAID RAID 0 RAID 1 RAID 5 RAID * (-1)* (/ 2)* No Yes Yes Yes SATA A. B. BIOS SATA C. RAID BIOS RAID ( ) D. RAID/AHCI ( ) S ATA S S D ( ) (
SATA... 2 RAID/AHCI... 16 Intel Optane... 19 Intel Virtual RAID on CPU (Intel VROC)... 21 RAID RAID 0 RAID 1 RAID 5 RAID 10 2 2 3 4 * (-1)* (/ 2)* No Yes Yes Yes SATA A. B. BIOS SATA C. RAID BIOS RAID
More informationPL600 IPPBX 用户手册_V2.0_.doc
VoIP 网 络 交 换 机 PL-600 IPPBX 用 户 手 册 深 圳 普 联 讯 电 子 科 技 有 限 公 司 版 权 所 有 2009 深 圳 市 普 联 讯 电 子 科 技 有 限 公 司 第 1 共 1 目 录 1. 前 言...3 2. 安 装 前 准 备...3 3. 硬 件 安 装...4 4. 登 陆 及 一 般 操 作 介 绍...4 5. 基 本 配 置...6 6.
More informationSDS 1.3
Applied Biosystems 7300 Real-Time PCR System (With RQ Study) SDS 1.3 I. ~ I. 1. : Dell GX280 2.8GHz with Dell 17 Flat monitor 256 MB RAM 40 GB hard drive DVD-RW drive Microsoft Windows XP Operating System
More information1 公 司 简 介 2 VRRP 原 理 和 应 用 3 新 产 品 和 创 业 计 划 及 赠 书 活 动
RouterOS VRRP 应 用 案 例 Application case ISSUE 1.0 Nanning YONGYI Network Technology Co., Ltd. www.mikrotik.cn www.routeros.com.cn www.routerboard.com.cn 陈 家 迁 CHEN JIA QIAN 手 机 Phone:13077766825 E-MAIL:gx18598@126.com
More informationMicrosoft Word - Pac-R61_Chapter 3 _full_.doc
A. 引 言 審 計 署 曾 就 公 共 租 住 房 屋 (" 公 屋 ") 單 位 的 編 配 及 運 用 進 行 審 查 背 景 2. 香 港 房 屋 委 員 會 (" 房 委 會 ") 是 根 據 房 屋 條 例 ( 第 283 章 ) 成 立 的 法 定 機 構, 負 責 制 訂 和 推 行 公 營 房 屋 計 劃, 以 達 致 政 府 的 政 策 目 標, 為 沒 有 能 力 租 住 私
More information资源管理软件TORQUE与作业调度软件Maui的安装、设置及使用
TORQUE Maui hmli@ustc.edu.cn 2008 1 1 TORQUE 2 1.1 TORQUE........................... 2 1.2 TORQUE...................... 2 1.3 TORQUE.......................... 4 1.4 TORQUE........................... 4
More information<4D6963726F736F667420576F7264202D2032303133C4EA3131D4C23133C8D520D7DBBACFD2BDD4BAD6D0D2BDD2A9B9A4D7F7CEC4BCFEBBE3B1E02E646F63>
综 合 医 院 中 医 药 工 作 文 件 汇 编 国 家 中 医 药 管 理 局 国 家 卫 生 计 生 委 总 后 勤 部 卫 生 部 2013 年 11 月 目 录 1. 国 务 院 关 于 扶 持 和 促 进 中 医 药 事 业 发 展 的 若 干 意 见 (1) 2. 国 务 院 关 于 促 进 健 康 服 务 业 发 展 的 若 干 意 见 (8) 3. 国 家 中 医 药 管 理 局
More informationUser ID 150 Password - User ID 150 Password Mon- Cam-- Invalid Terminal Mode No User Terminal Mode No User Mon- Cam-- 2
Terminal Mode No User User ID 150 Password - User ID 150 Password Mon- Cam-- Invalid Terminal Mode No User Terminal Mode No User Mon- Cam-- 2 Mon1 Cam-- Mon- Cam-- Prohibited M04 Mon1 Cam03 Mon1 Cam03
More information<55342D323637CBB5C3F7CAE92E786C73>
U4-267 / 1 U4-267 / : CF PowerPoint, TCP/IP Internet Explorer 2 ..2..3..4..5..5..5..9 PC...10 11 12 14 14....15....15....16....16....17....17....18....18....20 23....27 27 PC...27....28 3 CF SanDisk CompactFlash)
More information第 7 章 下 一 代 网 际 协 议 IPv6 141 足 的 措 施 只 能 是 权 宜 之 计 (3) 路 由 表 膨 胀 早 期 IPv4 的 地 址 结 构 也 造 成 了 路 由 表 的 容 量 过 大 IPv4 地 址 早 期 为 网 络 号 + 主 机 号 结 构, 后 来 引 入
第 7 章 下 一 代 网 际 协 议 IPv6 本 章 是 有 关 下 一 代 网 际 协 议 IPv6 的 描 述, 重 点 介 绍 IPv6 的 产 生 原 因 IPv6 的 地 址 与 IPv6 首 部 格 式 等 通 过 本 章 的 学 习, 读 者 应 重 点 掌 握 和 理 解 以 下 内 容 : IPv4 向 IPv6 发 展 的 必 然 性 IPv6 的 新 特 性 IPv6 地
More informationMicrosoft Word - om388-rnt _excl Items 16 & 38_ 23.1.09 _final_for uploading_.doc
城 市 規 劃 委 員 會 鄉 郊 及 新 市 鎮 規 劃 小 組 委 員 會 二 零 零 九 年 一 月 二 十 三 日 下 午 二 時 三 十 分 舉 第 3 8 8 次 會 議 記 錄 行 的 出 席 者 規 劃 署 署 長 伍 謝 淑 瑩 女 士 主 席 陳 偉 明 先 生 簡 松 年 先 生 梁 廣 灝 先 生 吳 祖 南 博 士 鄭 恩 基 先 生 鄺 心 怡 女 士 陳 漢 雲 教 授
More information% 25% (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 2
01165 2016 12 30 (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 1 14.22 14.07 5% 25% 14 14 2016 12 30 (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 2 2016 12 30 (i) (ii)
More information¨Æ·~½g¡ã¾·~¤ÀÃþ
事 業 篇 年 級 課 題 名 稱 目 標 1. 讀 書 時 讀 書 遊 戲 時 遊 戲 生 活 計 劃 初 2. 一 寸 光 陰 一 寸 金 處 事 態 度 3. 職 業 分 類 職 業 資 訊 1. 個 人 每 天 生 活 時 間 表 生 活 計 劃 中 2. 誰 的 工 作 處 事 態 度 3. 十 條 問 題 猜 一 猜 職 業 資 訊 1. 時 間 投 資 大 拍 賣 生 活 計 劃 高
More information國立中山大學學位論文典藏.PDF
I II ..1.1.1.1.4. 4.....5...11.13... 13...23.........31........42....42 57.......70...70... 75.......83......83......88....100..115.115.127.130..137.137.138..141 III 1979 860 1 1979 1980 4 1987 1979 34
More informationMicrosoft Word - 405-mpc-min-chi.doc
城 市 規 劃 委 員 會 都 會 規 劃 小 組 委 員 會 二 零 零 九 年 十 月 九 日 上 午 九 時 舉 行 的 第 4 0 5 次 會 議 記 錄 出 席 者 規 劃 署 署 長 伍 謝 淑 瑩 女 士 黃 遠 輝 先 生 主 席 副 主 席 陳 華 裕 先 生 陳 弘 志 先 生 梁 乃 江 教 授 林 雲 峰 教 授 杜 本 文 博 士 邱 小 菲 女 士 陳 家 樂 先 生 陳
More information穨cwht.PDF
1 3 3 4 5 6 6 8 10 12 13 13 14 15 16 ii 17 17 18 19 20 21 21 22 22 23 24 25 25 26 26 27 27 28 28 iii 29 29 29 30 30 31 31 32 33 1 85 000 70% 2 1 1 41 3 1 1 1 2 1 3 (a) 4 (b) (c) (d) 1 4 1 5 1.6% 457 000
More information900502_Oasis.indb
2010 1 22 93 1996 4 1 2009 8 27 2015 4 24 2005 5 1 94 12 95 2013 5 15 2 2005 12 1 2015 5 30 1993 11 12011 1 8 96 1994 10 11 1996 2005 3 28 2005 5 1 2009 10 11 97 98 (i) (ii) (iii) 2002 11 1 2014 8 31 2015
More informationbnb.PDF
- 1 - - 2 - - 3 - - 4 - - 5 - 1 2 3 4 5 6 7 8 9 10-6 - 5 5 900,000,000 2 10 10 10 10-7 - - 8 - - 9 - -14,833.25 (%) (%) - 10 - - 11 - 277.84 0 21,003.87 6668.57 355.99 18,421.47 405.7290.67 0 0 399.79-12
More informationuntitled
2016 3 175,688 163,875 510,091 493,725 (85,912) (81,373) (253,533) (262,191) 89,776 82,502 256,558 231,534 3 611 827 3,158 7,011 3 656 326 2,768 1,480 (53,355) (48,544) (148,127) (120,526) (12,592) (14,056)
More informationMicrosoft Word - 75413980_4
中 国 资 产 管 理 业 翘 首 等 待 修 订 后 的 证 券 投 资 基 金 法 及 配 套 法 规 的 施 行 2012 年 12 月 28 日, 业 内 期 盼 已 久 的 中 华 人 民 共 和 国 证 券 投 资 基 金 法 ( 新 基 金 法 ) 修 订 通 过, 自 2013 年 6 月 1 日 起 施 行 为 了 支 持 新 基 金 法 的 实 施, 有 关 监 管 部 门, 主
More information郑州大学(下).doc
...1...10 ( )...12...14...18...20...24...26...30...33...37...39...42...45...48...52...53 I ...57...63...65...74...82...84...85...87...91...95...97... 101... 103... 106... 109... 115... 124... 126... 128
More information厨房小知识(六)
...1...1...2...2...4...6...7...8...9...10...13...14...17...18...20...20...21...23...24...24...26...27...28 I II...31...32...32...35...36...39...40...41...41...42...43...44...47?...49...50...52...53...54...54...60...67...68...69
More information广 东 纺 织 职 业 技 术 学 院 发 展 党 员 公 示 制 实 施 办 法...189 关 于 推 荐 优 秀 团 员 作 为 党 的 发 展 对 象 工 作 的 意 见...192 后 勤 管 理 工 作 广 东 纺 织 职 业 技 术 学 院 新 引 进 教 职 工 周 转 房 管 理
目 党 政 工 作 广 东 纺 织 职 业 技 术 学 院 党 委 理 论 中 心 组 学 习 制 度...1 广 东 纺 织 职 业 技 术 学 院 教 职 工 政 治 理 论 学 习 制 度...4 广 东 纺 织 职 业 技 术 学 院 党 风 廉 政 建 设 责 任 制 实 施 办 法 ( 试 行 )...6 广 东 纺 织 职 业 技 术 学 院 党 风 廉 政 建 设 暂 行 规 定...18
More information2005 2005 12
2005 2005 http://www.nsfc.gov.cn 2005 12 2005...1 1-1 2005...1 1-2 2005...2 1-3 2005...5 1-4 2005...6 1-5 2005...7 1-6 2005...8 1-7 2005...9 1-8 2005...10 1-9 2005 200...11 1-10 2005...21 1-11 2005...61
More information游戏攻略大全(五十).doc
I...1...2...18...32...37...39...40...40...41...41...41...42...42...42...43...44...44...44...45...45...45...46 ...46...46...47...47...47...47...48...48...48...49...51...72...80...82...85...86...91...94...97
More information金融英语证书考试大纲
金 融 英 语 证 书 考 试 大 纲 第 一 部 分 考 试 说 明 一 考 试 目 的 金 融 英 语 证 书 考 试 是 国 家 级 行 业 性 专 业 外 语 水 平 考 试, 旨 在 通 过 统 一 的 标 准 化 考 试 程 序 和 测 试 标 准, 为 中 国 金 融 业 提 供 金 融 英 语 水 平 行 业 参 考 标 准, 测 试 并 认 定 应 试 人 员 的 金 融 英 语
More informationI...1...2...3...4...6...7...8...10... 11...12...13...14...16...17...18...20...21...22...23...25...26...27...28...30 II...31...33...34...35...37...38...39...41...43...44...45...47...49...50...52...54...55...56...57...59...60...61...62...63...64...65
More information健康知识(二)
I...1...6...7...8...10...12...14...15...17...19...22...26...28...29...30...31...32...34...36...37...38...39...40 II...41...42...43...46 7...47...48...49...53...55...56...57...58...60...66...67...68...69...69...70...73...73...74...75...78...79...79
More information中南财经大学(二).doc
2004...1...3 2004...5...9 2004...10 2004...13...16...18...19...23...35...39...42...44...46...50 I ...53...54 ( )...57...58...62... 121... 124... 149 ( )... 151... 152... 154... 157... 158... 159... 163...
More information广西大学(一).doc
.....1... 11...14...15...16...17...19...19...22 ( )...30 ( )...32...34...39...44 ( )...63...64...67...69 I ...75...77...79...81...87 ( )...88...92...93...95...98... 100... 104... 114... 116... 124 ( )...
More information根据学校教学工作安排,2011年9月19日正式开课,也是我校迁址蓬莱的第一学期开学
济 南 大 学 泉 城 学 院 2014 届 毕 业 生 就 业 质 量 年 度 报 告 前 言 济 南 大 学 泉 城 学 院 是 国 家 教 育 部 和 山 东 省 人 民 政 府 正 式 批 准 成 立, 实 施 本 科 层 次 学 历 教 育 的 综 合 性 高 等 院 校 自 2005 年 建 校 以 来, 学 院 依 托 济 南 大 学 雄 厚 的 办 学 实 力, 坚 持 以 学 生
More information山东大学(一).doc
...1...8...23...27...30 ( )...33...36...40...44...46...52 ( )...53...54...54 I ...55...56...58...59...60 ( )...63...75...88...92...99 ( )... 110... 118... 138... 142... 148 ( )... 152 2004 2006... 156
More information主 编 : 杨 林 副 主 编 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 评 审 顾 问 : 杨 林 张 新 民 评 审 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 李 忆 萍 徐 如 雪 文 字 编 辑 : 曹 纯 纯 邹 兰 李 雅 清
主 编 : 杨 林 副 主 编 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 评 审 顾 问 : 杨 林 张 新 民 评 审 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 李 忆 萍 徐 如 雪 文 字 编 辑 : 曹 纯 纯 邹 兰 李 雅 清 周 秋 婷 李 忆 萍 徐 如 雪 何 雯 技 术 编 辑 : 李 雅 清 曹 纯 纯 薛 莞 陈 敏
More information最新文物管理执法全书(十四).doc
I...1...3...5...8...12...15...19...23...25...28...30...34...37...39...43...47...50...52...55...59...60...63...67...70 ...75...79...82...83...85...90...92...95...99... 103... 106... 113... 117... 119...
More information园林常识(二).doc
I...1...1...1...2...32...33...36...38...41...42...43...43...43...44...45...45...46...48...49...56...62...65 ...68...77...84...98... 103 :... 104... 105 :... 107 :... 109... 110...111... 126... 127... 130
More information前 言 二 一 六 年 四 月 四 日, 兒 童 節, 誕 生 了 一 件 美 事 : 中 國 作 家 曹 文 軒 在 意 大 利 博 洛 尼 亞 國 際 童 書 展 榮 獲 國 際 安 徒 生 文 學 獎, 是 該 獎 創 設 六 十 年 來, 第 一 位 摘 桂 的 中 國 作 家, 意 義 重
目 錄 前 言 i 童 年 1 關 於 肥 肉 的 歷 史 記 憶 ( 節 錄 ) 7 疲 民 15 水 邊 的 文 字 屋 23 海 邊 的 屋 29 紅 葫 蘆 37 追 隨 永 恆 ( 草 房 子 代 跋 一 ) 53 因 水 而 生 草 房 子 寫 作 札 記 59 書 香 人 家 73 朗 讀 的 意 義 79 知 無 涯, 書 為 馬 85 讀 是 誰 91 給 孩 子 講 課 文 學
More information湖 南 科 技 大 学
I 目 录 第 一 章 2015 年 度 培 训 概 况 1 1 基 本 情 况 1 1.1 项 目 申 报 情 况 1 1.2 项 目 实 施 情 况 3 1.3 学 员 来 源 情 况 5 1.4 项 目 经 费 情 况 7 2 组 织 管 理 9 2.1 学 校 设 立 培 训 项 目 实 施 工 作 领 导 小 组 9 2.2 施 训 学 院 设 立 项 目 实 施 办 公 室 9 3 培
More information上海外国语大学(二).doc
...1...3...4...9...10 ( )... 11...12...16...31...33...34...50...56...58...60...62 I II...63...65...68...74...75...75...76...76...78...87...92...96 ( )...96 ( )...97 ( )...98 ( )...99... 100 ( )... 101
More information2009 陳 敦 德
前 言 : 發 掘 香 港 歷 史 獨 有 的 寶 藏 2010 2009 陳 敦 德 目 錄 前 言 發 掘 香 港 歷 史 獨 有 的 寶 藏 / i 第 一 章 香 港 設 立 八 路 軍 辦 事 處, 青 年 廖 承 志 為 主 任 /1 一 毛 澤 東 認 為, 八 路 軍 駐 香 港 辦 事 處, 是 個 獨 特 的 辦 事 處 /10 二 毛 澤 東 親 自 點 將, 為 小 廖 舉
More information切 实 加 强 职 业 院 校 学 生 实 践 能 力 和 职 业 技 能 的 培 养 周 济 在 职 业 教 育 实 训 基 地 建 设 工 作 会 议 上 的 讲 话 深 化 教 育 教 学 改 革 推 进 体 制 机 制 创 新 全 面 提 高 高 等 职 业 教 育 质 量 在
目 录 中 华 人 民 共 和 国 职 业 教 育 法... 1 国 务 院 关 于 大 力 推 进 职 业 教 育 改 革 与 发 展 的 决 定... 7 国 务 院 关 于 大 力 发 展 职 业 教 育 的 决 定... 17 教 育 部 财 政 部 关 于 实 施 国 家 示 范 性 高 等 职 业 院 校 建 设 计 划 加 快 高 等 职 业 教 育 改 革 与 发 展 的 意 见...
More information鸽子(三)
...1...3...5...7....9...12...20...28...30...33...39...52....53...56...60...61...64...67....86 I ...88...90...95.... 102... 107... 112... 115... 125... 127... 128... 134... 139... 149... 151... 152... 156...
More information兽药基础知识(四)
...1...1...3...4...9...10... 11...13...14...15...16...18...19...23...24...26...29...32...34 I ...36...38...39...40...41...43...45...47...49...50...52...53...54...55...57...59...61...64 E...68...69...72
More information园林植物卷(十).doc
I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67
More information园林植物卷(十七).doc
I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67
More information临床手术应用(三)
...1...5...5... 11...16...16...24...30...34...36...38...42...49...49...51...53...55...57...58...58...61 I ...63...65...67...69...73...73...75...80...83...85...86...88...92...94...94...98... 101... 102...
More information家装知识(二十)
I..1...2...5...7...10... 11...12...14...17...19...20...21...25...26...27...30...32...33...37...40...42...44...45 II...49...50...53...54...56...61...62...63...64...67...68...69...71...74...75...76...79...80...81...81...82...83...87...90...91...93
More information医疗知识小百科
...1...3...4...7...8...9... 10... 12... 13... 13... 14... 15... 17... 19... 29... 30... 32... 34... 37... 38... 39... 42 I ... 47... 48... 52... 53... 57... 58... 59... 61... 63... 65... 66... 67... 69...
More information家庭万事通(一)
I...1...2...3...5...7...9...10... 11...12...14...14...16...18...19...21...22...24...27...28...29...31...32...34 II...36...37...38...39...41...45...46...46...49...50...51...52...54...56...58...59...67...69...71...72...73...75...77...78...80...83
More information家装知识(三)
I...1...2...3...4...7...8... 11...13...16...18...19...20...21...23 10...25...26...30...31...33...35...38...42...44 II...45...47...49...51...53...54...56...57...59...62...64...66...68...69...71...75...77...80...81...82...83...85...85...88...90...91
More information园林绿化(一)
( 20 010010) 7871092 32 162.50 2004 12 1 2004 12 1 11 000 495.00 ( 19.80 ) ...1...2 605...5 84K...7 9...9...12...15...17...18...20...30...32...36...40...40...43...45...50 ( )...52 I ... 106... 113... 121...
More information园林植物卷(十五).doc
I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67
More information最新监察执法全书(一百五十).doc
................................ I ............................. 2000.................. II ...... III [2002]5 1 2 3 4 5 6 1 2 3 1993 8 14 () () () () () () () () () () () () () () () () () ()
More information兽药基础知识(三)
...1...2...5...8...10... 11...16...18...20...24...26...27...30...31...35...39...43...45...46 I ...49...50...52...53...54...54...57...61...62 ()...64...65...67...68...71...73...75...77...77...78.....80...81
More information奥运档案(四).doc
...1 2012...1...2 (2004.3.22 28)...2 (2004 3 15 21)...8 (2004.3.8 14)...14 (2004.3.1 3.7)...21 (2004.2.23 29)...28 (2004.3.8 14)...34...41 2012...45...48...50 1964...51 1968...59 1972...69 1976...79 1980...90
More information最新监察执法全书(五十).doc
............................ ( )... I ................................. II ..................... III @ 3 12 2 2 1 ( ) ( [1999]9 ) ( [2001]21 ) 1. 2. 3.
More information最新执法工作手册(三百八十四)
[1999 2 5 1999 7 ]............... I ... 1998... 1998................... II ....................... III [1999 2 5 1999 7 ] 30 30 2 1 15 30 30 B 15 1 1 2 2 l 2 1 5 12 5 10 18 10 24 1 1 2 1 l 24 1 12 13 24
More information中华美食大全4
I...1...1...2...3...5...6...8...9...12...13...14...16...17...19...20...21...23...24...26...27...28...30...31...33 II...35...37...39...40...41...43...44...45...47...48...49...50...52...54...55...56...57...58...60...62...63...65...66...67...69...70
More information动物杂谈_二_.doc
I...1...2...4...5...6...7...12...13...14 :...16...18 10...19...21...23...24...24 50...25...26...27 :...28...29...30 :...31...32 II...33...34...35...35...36...37 -...43...44...45...49...50 8000...54...54...57...58...60...61...63...65...68...77...78...79...90...93
More information抗非典英雄赞歌(三)
...1...8... 16... 25... 30... 34... 38... 45... 48 15... 50... 51... 53... 54 :... 56 309... 61... 64 I ... 67.. 70... 73... 76... 80... 85... 87... 91... 94... 98... 100... 103... 106 80...116...118...
More information新时期共青团工作实务全书(三十五)
....................................... I ................................. II ...... 90 90... III ' ' 1 2 3 4 1 2 3 30 90 02 0.15 1 2 3 4 5 6 7 8 9 10 11 12 13 14 1 2 3 4 5 6 7 8 9 10 2 11 12
More information经济法法律法规第十九卷
...1...6...12...18...29 ( )...34...39...53...62...67...76...83...87 (2001 )...92...99 I ...111... 118... 120... 122... 128... 134... 137... 140... 141... 144... 151... 152 II ... 153... 158... 163 ()...
More information游戏攻略大全(五十九).doc
...1 ----...15...41 2...41...41...42...43...43...44...45...46...47...48...49...50...51...52...53...54...55...57...58...59 I II...60...61...63...64...65...66...66...67...69...70...70...71...72...73 ---...78...79...79...79...80...80...80...80...81...81...82...82
More information火灾安全实例
...1...2...3...4... 19... 21... 26... 30... 40... 41... 43... 45... 51... 58... 61... 63... 66... 73... 79... 95... 97 I ... 98... 103... 105...113 ( )... 126... 135... 137... 144... 149... 157... 161...
More information兽药基础知识(七)
...1...4...5...7...9... 11...14...15...17...19...21...24...27.....28...29...31...32...38...39 I ...42...43...46...47...48...50...52...54...56...57...62...64...65...66...69...71...78...79...82...83...87
More information实用玉米技术(二)
1...1...6...10...16...18...20...22...24...26...26...31...32...32...34...35...37...42...43...44...46 I ...47...50...52...53...54...55...57...58...59...62...63...66...67...69...72...80...80...81...82...84...85...87
More information中国政法大学(一).doc
...1...6...7...31...32...35...36...40...45...53...60...67...79...82 () I ...88...96... 108... 120 ()... 124... 126... 128 ( )... 132... 134... 143 ( )... 143 ( )... 146... 160... 163... 166 II ... 169
More information水产知识(一)
I...1...2...4...5...6...7...10...12...13...19...20...22...23...25...28...30...31...32...33 :...36 ...37...38...40...42...44...47...48...51...51...55...57...58...59...59...61...70...73...74...76...76...78
More information招行2002年半年度报告全文.PDF
2 2 12 13 13 16 19 19 1 2 7088 518040 14,444 2,744-370 -1,955-864 14,889 3 4 8% 16.38 14.01 10.26 11.39 11.93 11.61 4% 10.73 9.69 4.23 10.89 11.11 11.30 15% 6.43 7.59 8.15 10.64 9.28 11.44 75% 55.67 57.74
More information(Microsoft Word - outline for Genesis 9\243\2721\243\25529.doc)
創 世 紀 9:1-29; 神 的 憐 憫 及 與 挪 亞 立 約 韋 江 傳 道 暖 身 問 題 : 當 別 人 無 意 識 地 踩 到 你 的 腳, 確 一 句 話 不 說 就 走 開 的 時 候, 你 會 怎 麼 樣 做? 注 意 : 大 綱 中 問 題 較 多, 但 顯 然 不 是 所 有 的 都 需 要 討 論 到, 比 較 多 的 是 供 你 們 參 考 所 以, 每 一 個 帶 領 者
More information穨Shuk-final.PDF
: : ( ( ( ( ( D : 20 25 -, -, - :, D ( ( ((,! ( ( ( 15 20 ( - - - ( ( ( 1985 33 ( ( ( 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 - - - - - ( ( ( - --- ( - ( - - - - ( ( ( ( ( ( ( ( 1985 35 1. ( ( ( ( ( 2.
More information