集群模式 Data ONTAP 8.3 使用 SnapMirror® 的 7-模式数据过渡

Size: px
Start display at page:

Download "集群模式 Data ONTAP 8.3 使用 SnapMirror® 的 7-模式数据过渡"

Transcription

1 集 群 模 式 Data ONTAP 8.3 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 NetApp 北 京 北 京 市 朝 阳 区 东 大 桥 路 9 号 侨 福 芳 草 地 C 座 6 层 606 室 邮 编 : 电 话 : 传 真 : 支 持 电 话 : 网 址 : 意 见 反 馈 :ng-gpso-china-documents@netapp.com 部 件 号 : _A 年 1 月

2

3 目 录 3 目 录 使 用 SnapMirror 过 渡 7- 模 式 卷... 4 规 划 过 渡... 5 过 渡 不 支 持 的 功 能 和 卷... 5 过 渡 操 作 对 7- 模 式 版 本 的 要 求... 6 使 用 SnapMirror 进 行 过 渡 的 注 意 事 项... 7 过 渡 SAN 卷 时 的 空 间 注 意 事 项... 8 过 渡 准 备 工 作... 8 过 渡 许 可 证 要 求... 9 准 备 7- 模 式 系 统 以 进 行 过 渡... 9 准 备 集 群 以 进 行 过 渡 创 建 过 渡 对 等 关 系 过 渡 卷 过 渡 独 立 卷 过 渡 卷 SnapMirror 关 系 解 决 使 用 SnapMirror 时 的 过 渡 问 题 恢 复 失 败 的 SnapMirror 基 线 传 输 从 失 败 的 LUN 过 渡 中 恢 复 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 手 动 过 渡 独 立 卷 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 版 权 信 息 商 标 信 息 意 见 反 馈 及 更 新 通 知 索 引... 48

4 4 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 使 用 SnapMirror 过 渡 7- 模 式 卷 您 可 以 使 用 集 群 模 式 Data ONTAP SnapMirror 命 令 将 NAS 和 SAN 环 境 中 的 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 卷 过 渡 完 成 后, 您 必 须 在 集 群 上 设 置 协 议 服 务 和 其 他 配 置 关 于 本 任 务 此 过 程 总 体 介 绍 了 使 用 SnapMirror 实 施 过 渡 时 必 须 执 行 的 任 务 步 骤 1. 确 认 过 渡 操 作 支 持 要 过 渡 到 卷 2. 准 备 7- 模 式 系 统 以 进 行 过 渡 3. 准 备 集 群 以 进 行 过 渡 4. 创 建 以 7- 模 式 系 统 为 源 SVM 为 目 标 的 过 渡 对 等 关 系 5. 通 过 在 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 创 建 SnapMirror 关 系 将 数 据 从 前 者 复 制 到 后 者 完 成 之 后 数 据 迁 移 完 成 后, 您 必 须 执 行 以 下 任 务 : 可 选 : 在 SVM 上 创 建 数 据 LIF 以 启 用 客 户 端 访 问 有 关 此 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 在 SVM 上 配 置 协 议 网 络 和 服 务 有 关 上 述 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 适 用 于 NFS 的 集 群 模 式 Data ONTAP 文 件 访 问 管 理 指 南 和 适 用 于 CIFS 的 集 群 模 式 Data ONTAP 文 件 访 问 管 理 指 南 创 建 igroup 并 映 射 LUN 有 关 这 些 任 务 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP SAN 管 理 指 南 如 果 要 过 渡 包 含 LUN 的 卷, 则 必 须 对 主 机 执 行 必 要 的 过 渡 后 任 务, 然 后 再 还 原 对 过 渡 后 的 集 群 模 式 Data ONTAP 卷 的 访 问 7- 模 式 过 渡 工 具 2.0 数 据 和 配 置 过 渡 补 充 指 南 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档

5 使 用 SnapMirror 过 渡 7- 模 式 卷 5 规 划 过 渡 将 7- 模 式 卷 中 的 数 据 复 制 到 集 群 模 式 Data ONTAP 卷 之 前, 您 必 须 了 解 何 时 使 用 SnapMirror 执 行 过 渡, 并 查 看 有 关 过 渡 所 支 持 的 7- 模 式 版 本 和 卷 的 信 息 您 还 必 须 注 意 某 些 过 渡 相 关 事 项 注 : 您 必 须 查 看 适 用 于 过 渡 目 标 版 本 的 集 群 模 式 Data ONTAP 发 行 说 明 来 了 解 各 种 过 渡 问 题 在 以 下 场 景 中, 您 可 以 使 用 SnapMirror 对 数 据 进 行 过 渡 : 7- 模 式 过 渡 工 具 不 满 足 您 的 过 渡 要 求, 例 如, 您 的 环 境 中 可 能 无 法 使 用 7- 模 式 过 渡 工 具 所 需 的 Windows 主 机 建 议 使 用 7- 模 式 过 渡 工 具 来 过 渡 7- 模 式 卷, 因 为 该 工 具 可 通 过 预 检 查 来 确 认 过 渡 是 否 可 行, 并 且 随 数 据 一 起 迁 移 所 有 协 议 网 络 和 服 务 配 置 您 可 以 安 装 并 使 用 7- 模 式 过 渡 工 具 来 执 行 过 渡 预 检 查, 然 后 使 用 SnapMirror 命 令 执 行 从 7- 模 式 卷 到 集 群 模 式 Data ONTAP 卷 的 数 据 迁 移 集 群 和 Storage Virtual Machine (SVM) 已 配 置 完 成, 只 需 将 数 据 从 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 卷 过 渡 不 支 持 的 功 能 和 卷 您 无 法 过 渡 某 些 7- 模 式 卷 ( 例 如 传 统 卷 或 SnapLock 卷 ) 和 某 些 7- 模 式 功 能 ( 例 如 同 步 SnapMirror 关 系 ), 因 为 某 些 功 能 在 集 群 模 式 Data ONTAP 中 可 能 不 可 用 不 支 持 将 7- 模 式 卷 过 渡 到 非 默 认 IP 空 间 中 的 SVM 您 可 以 将 非 默 认 IP 空 间 中 的 vfiler 单 元 过 渡 到 默 认 IP 空 间 中 的 SVM 注 : 您 只 能 将 7- 模 式 卷 过 渡 到 包 含 FlexVol 卷 的 SVM, 不 能 将 其 过 渡 到 包 含 无 限 卷 的 SVM 您 不 能 过 渡 以 下 7- 模 式 卷 或 配 置 : 受 限 卷 或 脱 机 卷 传 统 卷 包 含 NFS 到 CIFS 字 符 映 射 (charmap) 的 卷 包 含 存 储 级 别 访 问 防 护 配 置 的 卷 SnapLock 卷 FlexCache 卷 32 位 卷 和 具 有 32 位 Snapshot 副 本 的 卷 - 如 果 目 标 集 群 运 行 的 是 Data ONTAP 8.3

6 6 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 FlexClone 卷 FlexClone 卷 可 以 作 为 FlexVol 卷 进 行 过 渡, 但 克 隆 层 次 结 构 和 存 储 效 率 将 丢 失 vfiler 单 元 的 根 卷, 其 中 该 根 卷 基 于 属 于 默 认 vfiler 单 元 的 qtree 同 步 SnapMirror 配 置 qtree SnapMirror 关 系 IPv6 配 置 SnapVault 关 系 SnapMirror 的 网 络 压 缩 将 目 标 卷 恢 复 到 特 定 Snapshot 副 本 (SnapMirror break -s 命 令 ) 卷 移 动 操 作 属 于 非 默 认 IP 空 间 的 LIF 不 支 持 的 7- 模 式 SAN 功 能 您 应 了 解 集 群 模 式 Data ONTAP 中 不 支 持 的 Data ONTAP 7- 模 式 SAN 功 能, 以 便 在 过 渡 之 前 采 取 任 何 必 要 的 措 施 在 集 群 模 式 Data ONTAP 中 不 支 持 以 下 7- 模 式 SAN 功 能 : Snapshot 备 份 的 LUN 克 隆 在 过 渡 之 前, 必 须 拆 分 或 删 除 Snapshot 备 份 的 LUN 克 隆 ostype 为 vld 和 image 的 LUN 在 过 渡 之 前, 必 须 删 除 ostype 为 vld 或 image 的 LUN LUN 克 隆 拆 分 必 须 完 成 或 中 止 活 动 LUN 克 隆 拆 分 lun share 命 令 在 集 群 模 式 Data ONTAP 中 不 支 持 通 过 NAS 协 议 共 享 LUN SnapValidator 过 渡 操 作 对 7- 模 式 版 本 的 要 求 您 应 当 了 解 支 持 将 哪 些 版 本 的 7- 模 式 Data ONTAP 过 渡 到 集 群 模 式 Data ONTAP 8.3 如 果 7- 模 式 系 统 只 包 含 64 位 聚 合 和 卷, 则 可 以 将 卷 从 运 行 以 下 7- 模 式 版 本 的 系 统 过 渡 到 集 群 模 式 Data ONTAP 8.3: Data ONTAP 8.0

7 使 用 SnapMirror 过 渡 7- 模 式 卷 7 Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP 8.1 Data ONTAP Data ONTAP Data ONTAP Data ONTAP 8.2 Data ONTAP 如 果 7- 模 式 系 统 运 行 Data ONTAP 8.0.x 8.1.x 或 8.2 且 包 含 32 位 聚 合 或 具 有 32 位 Snapshot 副 本 的 卷, 则 必 须 升 级 到 P4 或 升 级 之 后, 必 须 将 32 位 聚 合 扩 展 到 64 位, 然 后 查 找 并 删 除 所 有 32 位 数 据 在 过 渡 到 集 群 模 式 Data ONTAP 8.3 之 前, 必 须 将 以 下 7- 模 式 版 本 升 级 到 Data ONTAP P4: Data ONTAP Data ONTAP Data ONTAP Data ONTAP Data ONTAP 使 用 SnapMirror 进 行 过 渡 的 注 意 事 项 如 果 7- 模 式 系 统 在 进 行 SnapMirror 或 SnapVault 操 作 的 同 时 运 行 过 渡 操 作, 则 必 须 了 解 某 些 注 意 事 项, 例 如 并 发 SnapMirror 传 输 数 量 上 限 数 据 复 制 计 划 以 及 使 用 多 个 路 径 进 行 过 渡 并 发 SnapMirror 传 输 数 量 上 限 过 渡 期 间,7- 模 式 和 集 群 模 式 Data ONTAP 系 统 上 支 持 的 并 发 SnapMirror 传 输 数 量 上 限 取 决 于 允 许 特 定 存 储 系 统 型 号 执 行 的 卷 SnapMirror 复 制 操 作 的 数 量 有 关 您 的 系 统 型 号 的 并 发 卷 SnapMirror 传 输 数 量 上 限 的 信 息, 请 参 见 Data ONTAP 7- 模 式 数 据 保 护 联 机 备 份 和 恢 复 指 南

8 8 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 数 据 复 制 计 划 用 于 过 渡 操 作 的 数 据 复 制 计 划 不 应 与 用 于 7- 模 式 系 统 上 运 行 的 SnapMirror 或 SnapVault 操 作 的 现 有 计 划 发 生 重 叠 使 用 多 个 路 径 进 行 过 渡 您 可 以 通 过 使 用 数 据 复 制 IP 地 址 和 多 路 径 IP 地 址 为 过 渡 指 定 两 个 路 径 但 是, 这 两 个 路 径 只 能 用 于 负 载 平 衡, 不 能 用 于 故 障 转 移 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 过 渡 SAN 卷 时 的 空 间 注 意 事 项 过 渡 期 间, 必 须 确 保 源 卷 和 目 标 卷 上 有 足 够 的 可 用 空 间 除 了 用 于 存 储 数 据 和 Snapshot 副 本 的 空 间 以 外, 过 渡 过 程 还 需 要 为 每 个 LUN 提 供 1 MB 的 空 间, 用 于 更 新 某 些 文 件 系 统 元 数 据 转 换 之 前, 可 以 对 7- 模 式 卷 使 用 df -h 命 令 来 验 证 卷 中 是 否 为 每 个 LUN 提 供 了 1 MB 的 可 用 空 间 如 果 卷 不 能 提 供 足 够 的 可 用 空 间, 则 必 须 为 7- 模 式 卷 添 加 所 需 的 空 间 量 如 果 因 目 标 卷 上 的 空 间 不 足 导 致 无 法 过 渡 LUN, 则 会 生 成 以 下 EMS 消 息 : LUN.vol.proc.fail.no.space: Processing for LUNs in volume vol1 failed due to lack of space 在 这 种 情 况 下, 您 必 须 在 目 标 卷 上 将 filesys-size-fixed 属 性 设 置 为 false, 然 后 在 卷 上 为 每 个 LUN 添 加 1 MB 的 可 用 空 间 如 果 某 些 卷 包 含 空 间 预 留 的 LUN, 则 增 加 该 卷 的 大 小 不 会 提 供 足 够 的 空 间 在 此 类 情 况 下, 需 要 添 加 的 空 间 量 为 该 卷 的 Snapshot 预 留 空 间 大 小 在 目 标 卷 中 添 加 空 间 之 后, 您 可 以 使 用 lun transition start 命 令 过 渡 LUN 过 渡 准 备 工 作 在 开 始 过 渡 之 前, 必 须 先 准 备 7- 模 式 存 储 系 统 和 集 群, 然 后 才 能 将 7- 模 式 卷 过 渡 到 集 群 模 式 Data ONTAP 此 外, 还 必 须 创 建 7- 模 式 系 统 与 Storage Virtual Machine (SVM) 之 间 的 过 渡 对 等 关 系

9 使 用 SnapMirror 过 渡 7- 模 式 卷 9 过 渡 许 可 证 要 求 将 卷 从 7- 模 式 过 渡 到 集 群 模 式 Data ONTAP 之 前, 必 须 先 确 认 SnapMirror 在 7- 模 式 存 储 系 统 上 已 获 得 许 可 如 果 要 过 渡 7- 模 式 卷 SnapMirror 关 系, 还 需 要 在 源 集 群 和 目 标 集 群 上 提 供 SnapMirror 许 可 证 如 果 在 7- 模 式 系 统 上 已 获 得 SnapMirror 许 可, 则 可 以 使 用 相 同 的 许 可 证 进 行 过 渡 如 果 没 有 7- 模 式 SnapMirror 许 可 证, 您 可 以 从 销 售 代 表 处 获 得 临 时 SnapMirror 许 可 证 进 行 过 渡 必 须 将 在 7- 模 式 系 统 上 启 用 的 功 能 许 可 证 添 加 到 集 群 有 关 在 集 群 上 获 得 功 能 许 可 证 的 信 息, 请 参 见 适 用 于 集 群 管 理 员 的 集 群 模 式 Data ONTAP 系 统 管 理 指 南 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 准 备 7- 模 式 系 统 以 进 行 过 渡 开 始 过 渡 之 前, 您 必 须 在 7- 模 式 系 统 中 完 成 一 些 特 定 任 务, 例 如, 启 用 SnapMirror 和 7- 模 式 系 统 以 与 目 标 集 群 建 立 通 信 开 始 之 前 所 有 要 过 渡 的 7- 模 式 卷 必 须 处 于 联 机 状 态 关 于 本 任 务 有 关 所 有 这 些 命 令 的 详 细 信 息, 请 参 见 手 册 页 步 骤 1. 在 7- 模 式 系 统 中 添 加 并 启 用 SnapMirror 许 可 证 a. 使 用 以 下 命 令 在 7- 模 式 系 统 中 添 加 SnapMirror 许 可 证 : license add xxxxxxx xxxxxxx 是 您 购 买 的 许 可 证 代 码 b. 输 入 以 下 命 令 启 用 SnapMirror: options snapmirror.enable on 2. 选 择 以 下 其 中 一 个 选 项, 对 7- 模 式 系 统 与 目 标 集 群 进 行 配 置, 使 二 者 之 间 建 立 通 信 : 将 snapmirror.access 选 项 设 置 为 all 将 snapmirror.access 选 项 的 值 设 置 为 集 群 上 所 有 LIF 的 IP 地 址 如 果 将 snapmirror.access 选 项 设 置 为 legacy 并 将 snapmirror.checkip.enable 设 置 为 off, 则 应 将 SVM 名 称 添 加 到 /etc/snapmirror.allow 文 件

10 10 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 如 果 将 snapmirror.access 选 项 设 置 为 legacy 并 将 snapmirror.checkip.enable 设 置 为 on, 则 应 将 LIF 的 IP 地 址 添 加 到 /etc/snapmirror.allow 文 件 3. 根 据 7- 模 式 系 统 的 具 体 Data ONTAP 版 本, 执 行 以 下 步 骤 : a. 通 过 输 入 以 下 命 令 支 持 所 有 接 口 上 的 SnapMirror 流 量 : options interface.snapmirror.blocked "" b. 如 果 运 行 的 是 Data ONTAP 或 8.1 并 使 用 接 口 e0m 的 IP 地 址 作 为 管 理 IP 地 址 与 7- 模 式 过 渡 工 具 进 行 交 互, 则 输 入 以 下 命 令 以 支 持 通 过 接 口 e0m 进 行 数 据 通 信 : options interface.blocked.mgmt_data_traffic off 4. 如 果 在 卷 上 设 置 了 I2P 读 分 配 或 NVFAIL 选 项, 请 执 行 以 下 步 骤 : a. 确 认 禁 用 上 述 选 项 时 其 他 操 作 不 会 受 到 影 响 b. 通 过 使 用 以 下 命 令 禁 用 各 选 项 : vol options vol_name no_i2p off vol options vol_name read_realloc off vol options vol_name nvfail off 相 关 信 息 NetApp 支 持 站 点 (mysupport.netapp.com) 上 的 文 档 准 备 集 群 以 进 行 过 渡 过 渡 7- 模 式 系 统 之 前, 您 必 须 先 设 置 集 群, 并 且 确 保 集 群 满 足 相 关 要 求, 例 如, 设 置 集 群 间 LIF 并 确 认 网 络 连 接 可 用 于 过 渡 开 始 之 前 SVM 必 须 已 设 置 好 有 关 设 置 集 群 和 SVM 的 信 息, 请 参 见 集 群 模 式 Data ONTAP 软 件 设 置 指 南 通 过 使 用 集 群 管 理 LIF 可 以 对 集 群 进 行 访 问 集 群 必 须 运 行 状 况 良 好, 任 何 节 点 都 不 能 处 于 接 管 模 式 用 于 将 过 渡 的 卷 存 放 在 SVM 中 的 聚 合 必 须 具 有 SFO 策 略 聚 合 必 须 位 于 尚 未 达 到 卷 上 限 的 节 点 上 过 渡 卷 SnapMirror 关 系 时, 为 了 建 立 SVM 对 等 关 系, 必 须 满 足 以 下 条 件 : 二 级 集 群 不 应 具 有 与 主 SVM 名 称 相 同 的 SVM

11 使 用 SnapMirror 过 渡 7- 模 式 卷 11 主 集 群 不 应 具 有 与 辅 助 SVM 名 称 相 同 的 SVM 源 7- 模 式 系 统 的 名 称 不 应 与 任 何 本 地 SVM 或 已 建 立 对 等 关 系 的 SVM 相 冲 突 关 于 本 任 务 您 可 以 在 每 个 集 群 节 点 上 的 默 认 IP 空 间 中 设 置 集 群 间 LIF 或 本 地 LIF, 以 便 在 集 群 Data ONTAP 和 7- 模 式 存 储 系 统 之 间 建 立 通 信 如 果 设 置 了 本 地 LIF, 则 不 必 设 置 集 群 间 LIF 如 果 同 时 设 置 了 集 群 间 LIF 和 本 地 LIF, 则 优 先 采 用 本 地 LIF 步 骤 1. 在 每 个 集 群 节 点 上 创 建 集 群 间 LIF, 以 便 在 集 群 和 7- 模 式 系 统 之 间 建 立 通 信 : a. 使 用 network interface create 命 令 创 建 集 群 间 LIF cluster1::> network interface create -vserver cluster1-01 -lif intercluster_lif -role intercluster -home-node cluster1-01 -homeport e0c -address netmask b. 使 用 network route create 命 令 创 建 集 群 间 LIF 的 静 态 路 由 cluster1::> network route create -vserver vs0 -destination /0 -gateway c. 使 用 network ping 命 令 确 认 您 可 以 使 用 集 群 间 LIF 对 7- 模 式 系 统 执 行 ping 操 作 cluster1::> network ping -lif intercluster_lif -lif-owner cluster1-01 -destination system7mode system7mode is alive 对 于 多 路 径, 每 个 节 点 上 必 须 具 有 两 个 集 群 间 LIF 有 关 网 络 接 口 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 网 络 管 理 指 南 相 关 任 务 创 建 过 渡 对 等 关 系 ( 第 12 页 )

12 12 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 创 建 过 渡 对 等 关 系 您 必 须 先 创 建 过 渡 对 等 关 系, 之 后 才 能 为 7- 模 式 系 统 和 集 群 之 间 的 过 渡 设 置 SnapMirror 关 系 作 为 集 群 管 理 员, 您 可 以 使 用 vserver peer transition create 命 令 在 SVM 和 7- 模 式 系 统 之 间 创 建 过 渡 对 等 关 系 开 始 之 前 您 必 须 确 保 源 7- 模 式 系 统 的 名 称 与 任 何 本 地 SVM 或 已 建 立 对 等 关 系 的 SVM 不 冲 突 您 必 须 已 经 创 建 一 个 类 型 为 DP 的 集 群 模 式 Data ONTAP 卷 作 为 7- 模 式 数 据 的 过 渡 目 标 该 集 群 模 式 Data ONTAP 卷 的 大 小 必 须 大 于 或 等 于 7- 模 式 卷 的 大 小 您 必 须 确 保 SVM 名 称 不 包 含. 如 果 使 用 的 是 本 地 LIF, 则 您 必 须 确 保 以 下 几 项 : 在 默 认 IP 空 间 中 创 建 了 本 地 LIF 在 卷 所 在 的 节 点 上 配 置 了 本 地 LIF LIF 迁 移 策 略 与 卷 节 点 相 同, 以 便 两 者 可 以 迁 移 到 同 一 个 目 标 节 点 关 于 本 任 务 创 建 过 渡 对 等 关 系 时, 您 还 可 以 指 定 一 个 多 路 径 FQDN 或 IP 地 址, 用 来 平 衡 数 据 传 输 负 载 步 骤 1. 使 用 vserver peer transition create 命 令 创 建 过 渡 对 等 关 系 2. 使 用 vserver peer transition show 确 认 过 渡 对 等 关 系 已 创 建 成 功 创 建 与 查 看 过 渡 对 等 关 系 的 以 下 命 令 使 用 多 路 径 地 址 src1-e0d 以 及 本 地 LIF lif1 和 lif2 在 SVM vs1 和 7- 模 式 系 统 src1 之 间 创 建 过 渡 对 等 关 系 : cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src1 -multi-path-address src1-e0d -local-lifs lif1,lif2 以 下 显 示 了 一 个 SVM (vs1) 与 多 个 7- 模 式 系 统 之 间 的 过 渡 对 等 关 系 : cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src3 Transition peering created

13 使 用 SnapMirror 过 渡 7- 模 式 卷 13 cluster1::> vserver peer transition create -local-vserver vs1 -srcfiler-name src2 Transition peering created 以 下 输 出 显 示 了 SVM vs1 的 过 渡 对 等 关 系 : cluster1::> vserver peer transition show Vserver Source Filer Multi Path Address Local LIFs vs1 src2 - - vs1 src3 - - 过 渡 卷 您 可 以 采 用 SnapMirror 技 术 过 渡 独 立 卷 或 数 据 保 护 关 系 中 的 卷 ( 即 卷 SnapMirror 关 系 中 的 卷 ) 关 于 本 任 务 如 果 正 在 进 行 的 计 划 内 更 新 因 NDO 操 作 ( 接 管 或 聚 合 重 新 定 位 ) 而 中 止, 则 NDO 操 作 完 成 后, 此 更 新 将 自 动 恢 复 完 成 之 后 如 果 过 渡 独 立 卷 或 包 含 LUN 的 卷 SnapMirror 关 系, 则 必 须 创 建 igroup 并 映 射 LUN 然 后, 必 须 对 主 机 执 行 必 要 的 过 渡 后 任 务, 再 配 置 对 过 渡 后 的 集 群 模 式 Data ONTAP 卷 的 访 问 7- 模 式 过 渡 工 具 2.0 数 据 和 配 置 过 渡 补 充 指 南 选 择 过 渡 独 立 卷 ( 第 14 页 ) 过 渡 卷 SnapMirror 关 系 ( 第 19 页 ) 相 关 任 务 使 用 SnapMirror 过 渡 7- 模 式 卷 ( 第 4 页 )

14 14 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 过 渡 独 立 卷 过 渡 独 立 卷 包 括 以 下 操 作 : 创 建 SnapMirror 关 系, 执 行 基 线 传 输, 执 行 增 量 更 新, 监 控 数 据 复 制 操 作, 中 断 SnapMirror 关 系, 将 客 户 端 访 问 从 7- 模 式 卷 移 动 到 集 群 模 式 Data ONTAP 卷 开 始 之 前 必 须 已 设 置 集 群 和 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 cluster1::> snapmirror create -source-path system7mode:datavol20 - destination-path vs1:dst_vol -type TDP Operation succeeded: snapmirror create the relationship with destination vs1:dst_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 cluster1::> snapmirror initialize -destination-path vs1:dst_vol Operation is queued: snapmirror initialize of destination vs1:dst_vol. c. 使 用 snapmirror show 命 令 监 控 状 态 cluster1::>snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault

15 使 用 SnapMirror 过 渡 7- 模 式 卷 15 Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.1 Newest Snapshot Timestamp: 10/16 02:49:03 Exported Snapshot: vs1( )_dst_vol.1 Exported Snapshot Timestamp: 10/16 02:49:03 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: initialize Last Transfer Error: - Last Transfer Size: 152KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:43:53 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 0 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 6 d. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :

16 16 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 cluster1::> snapmirror update -destination-path vs1:dst_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步

17 使 用 SnapMirror 过 渡 7- 模 式 卷 17 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 cluster1::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 :

18 18 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 cluster1::> snapmirror quiesce -destination-path vs1:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 cluster1::> snapmirror resume -destination-path vs1:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 cluster1::> snapmirror update -destination-path vs1:dst_vol Operation is queued: snapmirror update of destination vs1:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 cluster1::> snapmirror break -destination-path vs1:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系

19 使 用 SnapMirror 过 渡 7- 模 式 卷 19 cluster1::> snapmirror delete -destination-path vs1:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 相 关 任 务 恢 复 失 败 的 SnapMirror 基 线 传 输 ( 第 33 页 ) 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 ) 过 渡 卷 SnapMirror 关 系 您 可 以 通 过 先 过 渡 二 级 卷 再 过 渡 主 卷 来 过 渡 7- 模 式 卷 SnapMirror 关 系 并 保 留 数 据 保 护 关 系 开 始 之 前 主 集 群 和 二 级 集 群 以 及 SVM 必 须 已 设 置 完 成 过 渡 卷 SnapMirror 关 系 时, 为 了 建 立 SVM 对 等 关 系, 必 须 满 足 以 下 条 件 : 二 级 集 群 不 应 具 有 与 主 SVM 名 称 相 同 的 SVM 主 集 群 不 应 具 有 与 辅 助 SVM 名 称 相 同 的 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 过 渡 二 级 卷 ( 第 20 页 ) 2. 过 渡 主 卷 ( 第 25 页 ) 相 关 任 务 恢 复 失 败 的 SnapMirror 基 线 传 输 ( 第 33 页 )

20 20 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 过 渡 二 级 卷 过 渡 二 级 卷 包 括 以 下 操 作 : 创 建 SnapMirror 关 系, 执 行 基 线 传 输, 执 行 增 量 备 份, 设 置 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 开 始 之 前 必 须 已 设 置 二 级 集 群 和 SVM 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror create -source-path sec_system:dst_7_vol -destination-path dst_vserver:dst_c_vol -type TDP Operation succeeded: snapmirror create the relationship with destination dst_vserver:dst_c_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 sec_cluster::> snapmirror initialize -destination-path dst_vserver:dst_c_vol Operation is queued: snapmirror initialize of destination dst_vserver:dst_c_vol. c. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :

21 使 用 SnapMirror 过 渡 7- 模 式 卷 21 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 sec_cluster::> snapmirror update -destination-path dst_vserver:dst_c_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 sec_cluster::> snapmirror show -destination-path dst_vserver:dst_c_vol Source Path: sec_system:dst_7_vol Destination Path: dst_vserver:dst_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: dst_vserver ( )_dst_c_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: dst_vserver ( )_dst_c_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: sec_cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: sec_system:dst_7_vol Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步

22 22 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 sec_cluster::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 sec_cluster::> snapmirror modify -destination-path dst_vserver:dst_c_vol - schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 sec_cluster::> snapmirror show -destination-path dst_vserver:dst_c_vol Source Path: sec_system:dst_7_vol Destination Path: dst_vserver:dst_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: dst_vserver ( )_dst_c_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: dst_vserver ( )_dst_c_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: sec_cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: sec_system:dst_7_vol Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11

23 2. 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 : a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 使 用 SnapMirror 过 渡 7- 模 式 卷 23 sec_cluster::> snapmirror quiesce -destination-path dst_vserver:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 sec_cluster::> snapmirror modify -destination-path dst_vserver:dst_vol - schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 sec_cluster::> snapmirror resume -destination-path dst_vserver:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 sec_cluster::> snapmirror update -destination-path dst_vserver:dst_vol Operation is queued: snapmirror update of destination dst_vserver:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 二 级 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡

24 24 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 二 级 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 10. 建 立 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 : a. 使 用 vserver peer transition create 命 令 在 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 创 建 SVM 对 等 关 系 sec_cluster::> vserver peer transition create -local-vserver dst_vserver -src-filer-name src_system Transition peering created b. 使 用 job schedule cron create 命 令 创 建 作 业 计 划, 该 计 划 与 为 7- 模 式 SnapMirror 关 系 配 置 的 计 划 匹 配 sec_cluster::> job schedule cron create -name 15_minute_sched - minute 15 c. 使 用 snapmirror create 命 令 创 建 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror create -source-path src_system:src_7_vol -destination-path dst_vserver:dst_c_vol -type TDP -schedule 15_minute_sched Operation succeeded: snapmirror create the relationship with destination dst_vserver:dst_c_vol.

25 使 用 SnapMirror 过 渡 7- 模 式 卷 25 d. 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 二 级 卷 要 成 功 实 现 重 新 同 步,7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 必 须 存 在 一 个 通 用 7- 模 式 Snapshot 副 本 sec_cluster::> snapmirror resync -destination-path dst_vserver:dst_c_vol 注 意 : 只 有 在 过 渡 原 始 主 卷 之 后, 才 应 该 映 射 目 标 二 级 卷 上 的 LUN 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 删 除 辅 助 7- 模 式 系 统 与 辅 助 SVM 之 间 的 SVM 对 等 关 系 删 除 7- 模 式 主 系 统 与 7- 模 式 辅 助 系 统 之 间 的 SnapMirror 关 系 过 渡 主 卷 相 关 任 务 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 ) 过 渡 主 卷 包 括 以 下 操 作 : 将 7- 模 式 主 卷 中 的 数 据 复 制 到 集 群 模 式 Data ONTAP 主 卷, 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系, 建 立 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系 开 始 之 前 必 须 已 设 置 主 集 群 和 SVM 关 于 本 任 务 如 果 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 处 于 活 动 状 态, 则 不 应 映 射 集 群 模 式 Data ONTAP 目 标 二 级 卷 上 的 LUN 进 行 只 读 访 问 应 在 7- 模 式 主 卷 出 现 灾 难 时 或 在 过 渡 7- 模 式 主 卷 之 后 映 射 目 标 二 级 卷 上 的 LUN 步 骤 1. 将 7- 模 式 主 卷 上 的 数 据 复 制 到 集 群 模 式 Data ONTAP 主 卷 : a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系

26 26 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 pri_cluster::> snapmirror create -source-path src_system:finance - destination-path src_vserver:src_c_vol -type TDP Operation succeeded: snapmirror create the relationship with destination src_vserver:src_c_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 pri_cluster::> snapmirror initialize -destination-path src_vserver:src_c_vol Operation is queued: snapmirror initialize of destination src_vserver:src_c_vol. c. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :

27 使 用 SnapMirror 过 渡 7- 模 式 卷 27 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 pri_cluster::> snapmirror show -destination-path src_vserver:src_c_vol Source Path: pri_system:src_7_vol Destination Path: src_vserver:src_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: src_vserver( )_src_c_vol.1 Newest Snapshot Timestamp: 02/13 08:10:46 Exported Snapshot: src_vserver( )_src_c_vol.1 Exported Snapshot Timestamp: 02/13 08:10:46 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: e106827a-75b3-11e2- add Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 580KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: pri_system:src_7_vol Last Transfer End Timestamp: 09/30 08:05:06 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: iii. 转 至 第 3 步

28 28 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 pri_cluster::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 pri_cluster::> snapmirror modify -destination-path src_vserver:src_c_vol - schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 pri_cluster::> snapmirror show -destination-path src_vserver:src_c_vol Source Path: pri_system:src_7_vol Destination Path: src_vserver:src_c_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: src_vserver( )_src_c_vol.1 Newest Snapshot Timestamp: 02/13 08:10:46 Exported Snapshot: src_vserver( )_src_c_vol.1 Exported Snapshot Timestamp: 02/13 08:10:46 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: e106827a-75b3-11e2- add Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 580KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: pri_system:src_7_vol Last Transfer End Timestamp: 09/30 08:05:06 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 43405

29 2. 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 : a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 使 用 SnapMirror 过 渡 7- 模 式 卷 29 pri_cluster::> snapmirror quiesce -destination-path src_vserver:src_c_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 pri_cluster::> snapmirror modify -destination-path src_vserver:src_c_vol - schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 pri_cluster::> snapmirror resume -destination-path src_vserver:src_c_vol 3. 在 集 群 模 式 Data ONTAP 二 级 卷 与 主 SVM 之 间 创 建 SVM 对 等 关 系 a. 使 用 cluster peer create 命 令 创 建 集 群 对 等 关 系 pri_cluster::> cluster peer create -peer-addrs cluster2-d2, timeout 60 Notice: Choose a passphrase of 8 or more characters. To ensure the authenticity of the peering relationship, use a phrase or sequence of characters that would be hard to guess. Enter the passphrase: ******** Confirm the passphrase: ******** b. 在 源 集 群 中, 使 用 vserver peer create 命 令 创 建 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SVM 对 等 关 系 pri_cluster::> vserver peer create -vserver src_vserver - peervserver src_c_vserver -applications snapmirror -peer-cluster sec_cluster

30 30 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 c. 在 目 标 集 群 中, 使 用 vserver peer accept 命 令 接 受 SVM 对 等 请 求 并 建 立 SVM 对 等 关 系 sec_cluster::> vserver peer accept -vserver dst_vserver - peervserver src_vserver 4. 如 果 为 更 新 传 输 设 置 了 计 划, 请 从 目 标 集 群 使 用 snapmirror quiesce 命 令, 暂 停 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 所 有 数 据 传 输 sec_cluster::> snapmirror quiesce -destination-path dst_vserver:dst_c_vol 5. 监 控 数 据 复 制 操 作 并 启 动 转 换 : a. 等 待 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 主 卷 及 集 群 模 式 Data ONTAP 二 级 卷 之 间 所 有 正 在 进 行 的 传 输 完 成, 然 后 断 开 7- 模 式 主 卷 的 客 户 端 访 问 以 启 动 转 换 b. 使 用 snapmirror update 命 令 执 行 从 7- 模 式 主 卷 到 集 群 模 式 Data ONTAP 主 卷 的 最 终 数 据 更 新 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol c. 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 主 卷 之 间 的 SnapMirror 关 系 pri_cluster::> snapmirror break -destination-path src_vserver:src_c_vol [Job 1485] Job is queued: snapmirror break for destination src_vserver:src_c_vol. d. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN e. 使 用 snapmirror delete 命 令 删 除 该 关 系

31 使 用 SnapMirror 过 渡 7- 模 式 卷 31 pri_cluster::> snapmirror delete -destination-path src_vserver:src_c_vol f. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 6. 从 目 标 集 群 中 断 并 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 a. 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 灾 难 恢 复 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_c_vol [Job 1485] Job is queued: snapmirror break for destination dst_vserver:dst_c_vol. b. 使 用 snapmirror delete 命 令 删 除 该 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_c_vol c. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 7. 从 目 标 集 群 建 立 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系 : a. 使 用 snapmirror create 命 令 创 建 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系

32 32 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 sec_cluster::> snapmirror create -source-path src_vserver:src_c_vol -destination-path dst_vserver:dst_c_vol - type DP -schedule 15_minute_sched b. 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 要 成 功 实 现 重 新 同 步, 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 必 须 存 在 一 个 通 用 Snapshot 副 本 sec_cluster::> snapmirror resync -destination-path dst_vserver:dst_c_vol c. 使 用 snapmirror show 命 令 确 认 SnapMirror 重 新 同 步 状 态 显 示 SnapMirrored 注 : 您 必 须 确 保 成 功 完 成 SnapMirror 重 新 同 步, 才 能 对 集 群 模 式 Data ONTAP 二 级 卷 进 行 只 读 访 问 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 相 关 任 务 从 失 败 的 LUN 过 渡 中 恢 复 ( 第 34 页 )

33 33 解 决 使 用 SnapMirror 时 的 过 渡 问 题 以 下 故 障 排 除 信 息 有 助 于 您 确 定 并 解 决 使 用 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 时 出 现 的 问 题 恢 复 失 败 的 SnapMirror 基 线 传 输 过 渡 期 间,SnapMirror 基 线 传 输 会 因 为 多 种 原 因 而 失 败, 例 如, 网 络 连 接 中 断 传 输 中 止 或 者 控 制 器 故 障 转 移 更 正 失 败 原 因 后, 如 果 重 新 启 动 检 查 点 可 用, 则 可 恢 复 SnapMirror 传 输 关 于 本 任 务 如 果 用 于 基 线 传 输 的 重 新 启 动 检 查 点 不 可 用, 则 必 须 删 除 卷 并 重 新 进 行 创 建 重 新 建 立 SnapMirror 关 系, 并 再 次 启 动 过 渡 步 骤 1. 在 目 标 集 群 中, 使 用 带 有 -snapshot-checkpoint 参 数 的 snapmirror show 命 令 查 看 基 线 传 输 的 状 态 和 重 新 启 动 检 查 点 cluster2::> snapmirror show -destination-path dest_vserver:vol3 - fields snapshot-checkpoint source-path destination-path snapshot-checkpoint src_system:vol3 dest_vserver:vol3 50MB 2. 如 果 存 在 SnapMirror 检 查 点, 则 使 用 snapmirror initialize 命 令 恢 复 基 线 传 输 cluster2::> snapmirror initialize -destination-path dest_vserver:vol3

34 34 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 从 失 败 的 LUN 过 渡 中 恢 复 如 果 包 含 LUN 的 卷 在 过 渡 时 失 败, 则 可 使 用 lun transition 7-mode show 命 令 查 看 哪 些 LUN 未 过 渡 到 集 群 模 式 Data ONTAP, 然 后 确 定 更 正 措 施 步 骤 1. 使 用 lun transition 7-mode show 命 令 查 看 失 败 的 LUN 2. 检 查 EMS 日 志 并 确 定 必 须 采 取 的 更 正 操 作 3. 采 取 必 要 的 步 骤 来 更 正 失 败 问 题 4. 使 用 lun transition start 命 令 完 成 过 渡 5. 使 用 lun show 命 令 确 认 失 败 的 LUN 已 成 功 过 渡 此 命 令 仅 显 示 已 成 功 过 渡 到 集 群 模 式 Data ONTAP 的 LUN 相 关 概 念 过 渡 SAN 卷 时 的 空 间 注 意 事 项 ( 第 8 页 )

35 35 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 如 果 在 7- 模 式 主 卷 和 集 群 模 式 Data ONTAP 二 级 卷 之 间 建 立 了 SnapMirror 灾 难 恢 复 (DR) 关 系, 并 且 7- 模 式 主 站 点 发 生 灾 难, 您 可 以 将 客 户 端 访 问 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 待 7- 模 式 主 卷 恢 复 联 机 后, 您 必 须 额 外 执 行 一 些 步 骤 来 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 关 于 本 任 务 要 在 发 生 灾 难 后 保 留 写 入 到 集 群 模 式 Data ONTAP 二 级 卷 上 的 任 何 数 据, 您 必 须 在 7- 模 式 主 卷 恢 复 联 机 后 过 渡 7- 模 式 主 卷, 并 在 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 建 立 SnapMirror 关 系 然 后, 您 可 以 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 SnapMirror 不 支 持 从 集 群 模 式 Data ONTAP 卷 重 新 同 步 到 7- 模 式 卷 因 此, 发 生 灾 难 后, 如 果 在 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 重 新 建 立 DR 关 系, 写 入 集 群 模 式 Data ONTAP 二 级 卷 上 的 所 有 数 据 都 将 丢 失 注 : 当 7- 模 式 主 卷 上 发 生 DR 事 件 时, 您 可 以 映 射 目 标 二 级 卷 上 的 LUN; 但 是, 当 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 处 于 活 动 状 态 时, 不 应 映 射 目 标 二 级 卷 上 的 LUN 步 骤 1. 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 ( 第 36 页 ) 当 7- 模 式 主 卷 上 发 生 灾 难 时, 您 可 以 将 客 户 端 从 7- 模 式 主 卷 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 2. 将 7- 模 式 主 卷 作 为 独 立 卷 进 行 过 渡 ( 第 36 页 ) 如 果 7- 模 式 主 卷 在 发 生 灾 难 后 恢 复 联 机, 您 必 须 过 渡 7- 模 式 主 卷 因 为 在 此 阶 段 会 中 断 和 删 除 与 7- 模 式 主 卷 的 所 有 SnapMirror 关 系, 因 此 您 可 以 在 此 类 过 渡 中 过 渡 一 个 独 立 卷 3. 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 ( 第 42 页 ) 过 渡 到 集 群 模 式 Data ONTAP 主 卷 之 后, 您 可 以 针 对 在 集 群 模 式 Data ONTAP 二 级 卷 上 写 入 的 数 据 重 新 同 步 集 群 模 式 Data ONTAP 主 卷 然 后, 您 可 以 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷

36 36 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 发 生 灾 难 后 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 如 果 在 7- 模 式 主 卷 和 集 群 模 式 Data ONTAP 二 级 卷 之 间 建 立 了 SnapMirror 灾 难 恢 复 (DR) 关 系, 并 且 7- 模 式 主 站 点 发 生 灾 难, 则 必 须 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 步 骤 1. 在 二 级 集 群 中, 使 用 snapmirror break 命 令 中 断 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror break -destination-path dst_vserver:dst_c_vol 2. 在 二 级 集 群 中, 使 用 snapmirror delete 命 令 删 除 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 的 SnapMirror 关 系 sec_cluster::> snapmirror delete -destination-path dst_vserver:dst_c_vol 3. 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 二 级 卷 有 关 在 集 群 模 式 Data ONTAP 中 设 置 客 户 端 访 问 的 详 细 信 息, 请 参 见 集 群 模 式 Data ONTAP 文 件 访 问 和 协 议 管 理 指 南 过 渡 独 立 卷 如 果 7- 模 式 主 卷 在 发 生 灾 难 后 恢 复 联 机, 您 必 须 过 渡 7- 模 式 主 卷 因 为 在 此 阶 段 会 中 断 和 删 除 与 7- 模 式 主 卷 的 所 有 SnapMirror 关 系, 因 此 您 可 以 在 此 类 过 渡 中 过 渡 一 个 独 立 卷 开 始 之 前 必 须 已 设 置 集 群 和 SVM 您 必 须 已 经 查 看 过 渡 准 备 中 的 信 息 步 骤 1. 将 数 据 从 7- 模 式 卷 复 制 到 集 群 模 式 Data ONTAP 卷 :

37 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 37 a. 使 用 关 系 类 型 为 TDP 的 snapmirror create 命 令 创 建 7- 模 式 系 统 与 SVM 之 间 的 SnapMirror 关 系 cluster1::> snapmirror create -source-path system7mode:datavol20 - destination-path vs1:dst_vol -type TDP Operation succeeded: snapmirror create the relationship with destination vs1:dst_vol. b. 使 用 snapmirror initialize 命 令 启 动 基 线 传 输 cluster1::> snapmirror initialize -destination-path vs1:dst_vol Operation is queued: snapmirror initialize of destination vs1:dst_vol. c. 使 用 snapmirror show 命 令 监 控 状 态 cluster1::>snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.1 Newest Snapshot Timestamp: 10/16 02:49:03 Exported Snapshot: vs1( )_dst_vol.1 Exported Snapshot Timestamp: 10/16 02:49:03 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID:

38 38 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: initialize Last Transfer Error: - Last Transfer Size: 152KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:6 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:43:53 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 0 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 6 d. 根 据 您 是 要 手 动 更 新 集 群 模 式 Data ONTAP 卷 还 是 要 通 过 设 置 SnapMirror 计 划 来 更 新 该 卷, 执 行 相 应 的 操 作 :

39 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 39 目 的 手 动 更 新 传 输 操 作 i. 使 用 snapmirror update 命 令 cluster1::> snapmirror update -destination-path vs1:dst_vol ii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: - SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 11 iii. 转 至 第 3 步

40 40 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 目 的 执 行 计 划 的 更 新 传 输 操 作 i. 使 用 job schedule cron create 命 令 为 更 新 传 输 创 建 一 个 计 划 cluster1::> job schedule cron create -name 15_minute_sched -minute 15 ii. 使 用 snapmirror modify 命 令 将 该 计 划 应 用 到 SnapMirror 关 系 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule 15_minute_sched iii. 使 用 snapmirror show 命 令 监 控 数 据 复 制 状 态 cluster1::> snapmirror show -destination-path vs1:dst_vol Source Path: system7mode:datavol20 Destination Path: vs1:dst_vol Relationship Type: TDP Relationship Group Type: none SnapMirror Schedule: 15_minute_sched SnapMirror Policy Type: async-mirror SnapMirror Policy: DPDefault Tries Limit: - Throttle (KB/sec): unlimited Mirror State: Snapmirrored Relationship Status: Idle File Restore File Count: - File Restore File List: - Transfer Snapshot: - Snapshot Progress: - Total Progress: - Network Compression Ratio: - Snapshot Checkpoint: - Newest Snapshot: vs1( )_dst_vol.2 Newest Snapshot Timestamp: 10/16 02:52:45 Exported Snapshot: vs1( )_dst_vol.2 Exported Snapshot Timestamp: 10/16 02:52:45 Healthy: true Unhealthy Reason: - Constituent Relationship: false Destination Volume Node: cluster1-01 Relationship ID: 97b205a1-54ff-11e4-9f a68289 Current Operation ID: - Transfer Type: - Transfer Error: - Current Throttle: - Current Transfer Priority: - Last Transfer Type: update Last Transfer Error: - Last Transfer Size: 120KB Last Transfer Network Compression Ratio: 1:1 Last Transfer Duration: 0:0:5 Last Transfer From: system7mode:datavol20 Last Transfer End Timestamp: 10/16 02:47:34 Progress Last Updated: - Relationship Capability: 8.2 and above Lag Time: - Number of Successful Updates: 1 Number of Failed Updates: 0 Number of Successful Resyncs: 0 Number of Failed Resyncs: 0 Number of Successful Breaks: 0 Number of Failed Breaks: 0 Total Transfer Bytes: Total Transfer Time in Seconds: 如 果 您 计 划 增 量 传 输, 请 在 准 备 好 执 行 转 换 时 执 行 以 下 步 骤 :

41 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 41 a. 可 选 : 使 用 snapmirror quiesce 命 令 禁 用 所 有 后 续 更 新 传 输 cluster1::> snapmirror quiesce -destination-path vs1:dst_vol b. 使 用 snapmirror modify 命 令 删 除 SnapMirror 计 划 cluster1::> snapmirror modify -destination-path vs1:dst_vol -schedule "" c. 可 选 : 如 果 之 前 暂 停 了 SnapMirror 传 输, 请 使 用 snapmirror resume 命 令 启 用 SnapMirror 传 输 cluster1::> snapmirror resume -destination-path vs1:dst_vol 3. 等 待 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 正 在 进 行 的 所 有 传 输 完 成, 然 后 断 开 7- 模 式 卷 的 客 户 端 访 问 以 启 动 转 换 4. 使 用 snapmirror update 命 令 对 集 群 模 式 Data ONTAP 卷 执 行 最 终 数 据 更 新 cluster1::> snapmirror update -destination-path vs1:dst_vol Operation is queued: snapmirror update of destination vs1:dst_vol. 5. 使 用 snapmirror show 命 令 确 认 已 成 功 执 行 上 次 传 输 6. 使 用 snapmirror break 命 令 中 断 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系 cluster1::> snapmirror break -destination-path vs1:dst_vol [Job 60] Job succeeded: SnapMirror Break Succeeded 7. 如 果 您 的 卷 配 置 了 LUN, 请 在 高 级 权 限 级 别 使 用 lun transition 7-mode show 命 令 确 认 LUN 已 过 渡 您 还 可 以 针 对 集 群 模 式 Data ONTAP 卷 使 用 lun show 命 令 查 看 已 成 功 过 渡 的 所 有 LUN 8. 使 用 snapmirror delete 命 令 删 除 7- 模 式 卷 与 集 群 模 式 Data ONTAP 卷 之 间 的 SnapMirror 关 系

42 42 使 用 SnapMirror 的 7- 模 式 数 据 过 渡 cluster1::> snapmirror delete -destination-path vs1:dst_vol 9. 使 用 snapmirror release 命 令 从 7- 模 式 系 统 中 删 除 SnapMirror 关 系 信 息 system7mode> snapmirror release datavol20 vs1:dst_vol 完 成 之 后 将 7- 模 式 系 统 中 所 有 必 需 卷 过 渡 到 SVM 之 后, 必 须 删 除 7- 模 式 系 统 与 SVM 之 间 的 SVM 对 等 关 系 将 客 户 端 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 在 7- 模 式 主 卷 恢 复 联 机 后, 您 可 以 过 渡 7- 模 式 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 建 立 SnapMirror 关 系, 以 及 将 客 户 端 访 问 重 定 向 到 集 群 模 式 Data ONTAP 主 卷 步 骤 1. 在 主 SVM 和 辅 助 SVM 之 间 创 建 SVM 对 等 关 系 a. 使 用 cluster peer create 命 令 创 建 集 群 对 等 关 系 pri_cluster::> cluster peer create -peer-addrs cluster2-d2, timeout 60 Notice: Choose a passphrase of 8 or more characters. To ensure the authenticity of the peering relationship, use a phrase or sequence of characters that would be hard to guess. Enter the passphrase: ******** Confirm the passphrase: ******** b. 在 源 集 群 中, 使 用 vserver peer create 命 令 在 集 群 模 式 Data ONTAP 主 卷 与 集 群 模 式 Data ONTAP 二 级 卷 之 间 创 建 SVM 对 等 关 系

43 过 渡 期 间 在 7- 模 式 站 点 进 行 灾 难 恢 复 43 pri_cluster::> vserver peer create -vserver src_vserver - peervserver src_c_vserver -applications snapmirror -peer-cluster sec_cluster c. 在 目 标 集 群 中, 使 用 vserver peer accept 命 令 接 受 SVM 对 等 请 求 并 建 立 SVM 对 等 关 系 sec_cluster::> vserver peer accept -vserver dst_vserver - peervserver src_vserver 2. 使 用 snapmirror create 命 令 创 建 以 集 群 模 式 Data ONTAP 二 级 卷 为 源 以 集 群 模 式 Data ONTAP 主 卷 为 目 标 的 SnapMirror 关 系 pri_cluster::> snapmirror create -source-path dst_vserver:dst_c_vol - destination-path src_vserver:src_c_vol 3. 在 主 集 群 中, 使 用 snapmirror resync 命 令 重 新 同 步 集 群 模 式 Data ONTAP 二 级 卷 pri_cluster::> snapmirror resync -source-path dst_vserver:dst_c_vol - destination-path src_vserver:src_c_vol 您 必 须 等 到 重 新 同 步 结 束 重 新 同 步 完 成 后,SnapMirror 的 状 态 变 为 SnapMirrored 4. 准 备 好 切 换 到 集 群 模 式 Data ONTAP 主 卷 后, 从 集 群 模 式 Data ONTAP 二 级 卷 断 开 客 户 端 访 问 5. 在 主 集 群 中, 使 用 snapmirror update 命 令 更 新 主 卷 pri_cluster::> snapmirror update -destination-path src_vserver:src_c_vol 6. 在 主 集 群 中, 使 用 snapmirror break 命 令 中 断 集 群 模 式 Data ONTAP 主 卷 与 二 级 卷 之 间 的 SnapMirror 关 系

Simulator By SunLingxi 2003

Simulator By SunLingxi 2003 Simulator By SunLingxi sunlingxi@sina.com 2003 windows 2000 Tornado ping ping 1. Tornado Full Simulator...3 2....3 3. ping...6 4. Tornado Simulator BSP...6 5. VxWorks simpc...7 6. simulator...7 7. simulator

More information

¶C¶L§§¬_™¨ A.PDF

¶C¶L§§¬_™¨ A.PDF 1 9 3 1 9 4 / 7.1 / 1 9 5 7.2 % netstat -rn Routing tables Destination Gateway Flags Refcnt Use Interface 127.0.0.1 127.0.0.1 UH 1 132 lo0 172.16.12.0 172.16.12.2 U 26 49041 le0 1 9 6 / % ping -s almond

More information

ARP ICMP

ARP ICMP ARP ICMP 2 9-1 ARP 9-2 ARP 9-3 ARP 9-4 ICMP 9-5 ICMP 9-6 ICMP 9-7 ICMP 3 ARP ICMP TCP / IP, IP ARP ICMP 3 IP, ARP ICMP IP ARP ICMP 2, 4 9-1 ARP, MAC, IP IP, MAC ARP Address Resolution Protocol, OSI ARP,,

More information

RAID RAID 0 RAID 1 RAID 5 RAID * ( -1)* ( /2)* No Yes Yes Yes A. B. BIOS SATA C. RAID BIOS RAID ( ) D. SATA RAID/AHCI ( ) SATA M.2 SSD ( )

RAID RAID 0 RAID 1 RAID 5 RAID * ( -1)* ( /2)* No Yes Yes Yes A. B. BIOS SATA C. RAID BIOS RAID ( ) D. SATA RAID/AHCI ( ) SATA M.2 SSD ( ) RAID RAID 0 RAID 1 RAID 5 RAID 10 2 2 3 4 * (-1)* (/2)* No Yes Yes Yes A. B. BIOS SATA C. RAID BIOS RAID ( ) D. SATA RAID/AHCI ( ) SATA M.2 SSD ( ) ( ) ( ) Windows USB 1 SATA A. SATASATAIntel SATA (SATA3

More information

一.NETGEAR VPN防火墙产品介绍

一.NETGEAR VPN防火墙产品介绍 NETGEAR VPN NETGEAR 6 http://www.netgear.com.cn - 1 - NETGEAR VPN... 4 1.1 VPN...4 1.2 Dynamic Domain Name Service...4 1.3 Netgear VPN...4 Netgear VPN... 6 2.1 FVS318 to FVS318 IKE Main...7 2.1.1 A VPN

More information

IP505SM_manual_cn.doc

IP505SM_manual_cn.doc IP505SM 1 Introduction 1...4...4...4...5 LAN...5...5...6...6...7 LED...7...7 2...9...9...9 3...11...11...12...12...12...14...18 LAN...19 DHCP...20...21 4 PC...22...22 Windows...22 TCP/IP -...22 TCP/IP

More information

K7VT2_QIG_v3

K7VT2_QIG_v3 ............ 1 2 3 4 5 [R] : Enter Raid setup utility 6 Press[A]keytocreateRAID RAID Type: JBOD RAID 0 RAID 1: 2 7 RAID 0 Auto Create Manual Create: 2 RAID 0 Block Size: 16K 32K

More information

2015 2002 2 11 2002 2 11 346 2005 1 1 2015 4 10 2015 3 10 2015 4 10 2005 1 1 2015 4 10 2015 4 10 86 2000 7 25 2000 9 1 100,000 87 2012 6 18 50% 1995 3 18 2015 12 27 2016 6 1 2003 9 1 2013 6 29 2004 4 1

More information

untitled

untitled V3049A-EXD IP-SAN/NAS Infinova Infinova Infinova Infinova www.infinova.com.cn Infinova Infinova Infinova 1 2 1 2 V3049A-EXD-R16 V3049A-EXD-R24 ... 1 1.1... 1 1.2... 1 1.3... 1... 2 2.1... 2 2.2... 3...

More information

Microsoft Word - template.doc

Microsoft Word - template.doc HGC efax Service User Guide I. Getting Started Page 1 II. Fax Forward Page 2 4 III. Web Viewing Page 5 7 IV. General Management Page 8 12 V. Help Desk Page 13 VI. Logout Page 13 Page 0 I. Getting Started

More information

untitled

untitled V3041A-J/V3042A-J IP-SAN/NAS Infinova Infinova Infinova Infinova www.infinova.com.cn Infinova Infinova Infinova 1 2 1 2 V3041A-16R-J V3041A-24R-J V3042A-16R-J V3042A-24R-J V3049-EXD-R16 V3049-EXD-R24 ...

More information

Junos Pulse Mobile Security R1 2012, Juniper Networks, Inc.

Junos Pulse Mobile Security R1 2012, Juniper Networks, Inc. Junos Pulse Mobile Security 4.0 2012 6 R1 2012, Juniper Networks, Inc. Junos Pulse Mobile Security Juniper Networks, Inc. 1194 North Mathilda Avenue Sunnyvale, California 94089 408-745-2000 www.juniper.net

More information

C10_ppt.PDF

C10_ppt.PDF C11-101 101 ( ) 1 15 2000 20% 20MB 170000 19 7% 3% 14% 32% 44% Disaster Recovery Journal ( ) UPS - (Fault Tolerance Capability) (Avoid Single point of failure) (High Availability) (RAID) (Cluster) (Backup)

More information

AL-M200 Series

AL-M200 Series NPD4754-00 TC ( ) Windows 7 1. [Start ( )] [Control Panel ()] [Network and Internet ( )] 2. [Network and Sharing Center ( )] 3. [Change adapter settings ( )] 4. 3 Windows XP 1. [Start ( )] [Control Panel

More information

计算机网络概论

计算机网络概论 1 repeater bridge router gateway V.S OSI Repeater(Hub) 1 Repeater 2 3 ( Hub 4 Bridge 1 Bridge 2 N N DL1 DL1 DL2 DL2 Ph1 Ph1 Ph2 Ph2 1 2 Bridge 3 MAC Ethernet FDDI MAC MAC Bridge 4 5 6 7 50873EA6, 00123456

More information

P4i45GL_GV-R50-CN.p65

P4i45GL_GV-R50-CN.p65 1 Main Advanced Security Power Boot Exit System Date System Time Floppy Drives IDE Devices BIOS Version Processor Type Processor Speed Cache Size Microcode Update Total Memory DDR1 DDR2 Dec 18 2003 Thu

More information

Symantec™ Sygate Enterprise Protection 防护代理安装使用指南

Symantec™ Sygate Enterprise Protection 防护代理安装使用指南 Symantec Sygate Enterprise Protection 防 护 代 理 安 装 使 用 指 南 5.1 版 版 权 信 息 Copyright 2005 Symantec Corporation. 2005 年 Symantec Corporation 版 权 所 有 All rights reserved. 保 留 所 有 权 利 Symantec Symantec 徽 标 Sygate

More information

Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number 5.2007 Volume 2.Number

More information

附件9 电梯运行安全监测管理信息平台技术规范 第11部分:系统信息安全技术规范(征求意见稿)

附件9 电梯运行安全监测管理信息平台技术规范 第11部分:系统信息安全技术规范(征求意见稿) ICS 35.240.01 M 63 备 案 号 : - 北 京 市 地 方 标 准 DB11/ XXX.1 XXXX 电 梯 运 行 安 全 监 测 管 理 信 息 平 台 技 术 规 范 第 11 部 分 : 系 统 信 息 安 全 规 范 Technical Specification for Management Information Platform of Elevator Operation

More information

IBM Rational ClearQuest Client for Eclipse 1/ IBM Rational ClearQuest Client for Ecl

IBM Rational ClearQuest Client for Eclipse   1/ IBM Rational ClearQuest Client for Ecl 1/39 Balaji Krish,, IBM Nam LeIBM 2005 4 15 IBM Rational ClearQuest ClearQuest Eclipse Rational ClearQuest / Eclipse Clien Rational ClearQuest Rational ClearQuest Windows Web Rational ClearQuest Client

More information

DOS下常用的网络命令.PDF

DOS下常用的网络命令.PDF DOS .... 1.1... 1.2... DOS... 2.1 ARP... 2.2 Finger... 2.3 Ftp... 2.4 Nbtstat... 2.5 Netstat... 2.6 Ping... 2.7 Rcp... 2.8 Rexec... 2.9 Route... 2.10 Rsh... 2.11 Tftp... 2.12 Tracert... 1 1 1 1 1 2 3 4

More information

C H A P T E R 7 Windows Vista Windows Vista Windows Vista FAT16 FAT32 NTFS NTFS New Technology File System NTFS

C H A P T E R 7 Windows Vista Windows Vista Windows Vista FAT16 FAT32 NTFS NTFS New Technology File System NTFS C H P T E R 7 Windows Vista Windows Vista Windows VistaFT16 FT32NTFS NTFSNew Technology File System NTFS 247 6 7-1 Windows VistaTransactional NTFS TxFTxF Windows Vista MicrosoftTxF CIDatomicity - Consistency

More information

未命名 -1

未命名 -1 BV8188M 使 用 说 明 INSTRUCTIONS 使 用 之 前 请 仔 细 阅 读 此 手 册 Please read before using this manual 深 圳 市 碧 维 视 科 技 有 限 公 司 2013 年 碧 维 视 印 刷, 版 权 所 有, 翻 版 必 究, 本 手 册 内 所 有 图 文, 未 经 授 权, 严 谨 与 任 何 方 式 之 全 面 或 部 分

More information

WebSphere Studio Application Developer IBM Portal Toolkit... 2/21 1. WebSphere Portal Portal WebSphere Application Server stopserver.bat -configfile..

WebSphere Studio Application Developer IBM Portal Toolkit... 2/21 1. WebSphere Portal Portal WebSphere Application Server stopserver.bat -configfile.. WebSphere Studio Application Developer IBM Portal Toolkit... 1/21 WebSphere Studio Application Developer IBM Portal Toolkit Portlet Doug Phillips (dougep@us.ibm.com),, IBM Developer Technical Support Center

More information

家装知识(六)

家装知识(六) I...1 SHOW...5...7...9...13...14...17...18...21...24...26...29...31...33...36 2003...37...39...41...42...43...45...48...50 ...52...54...58...60...61...63 10...66...68...73...74...77...81...85...89...91...93...97

More information

ch08.PDF

ch08.PDF 8-1 CCNA 8.1 CLI 8.1.1 8-2 8-3 8.1.21600 2500 1600 2500 / IOS 8-4 8.2 8.2.1 A 5 IP CLI 1600 2500 8-5 8.1.2-15 Windows 9598NT 2000 HyperTerminal Hilgraeve Microsoft Cisco HyperTerminal Private Edition (PE)

More information

Chapter 2

Chapter 2 2 (Setup) ETAP PowerStation ETAP ETAP PowerStation PowerStation PowerPlot ODBC SQL Server Oracle SQL Server Oracle Windows SQL Server Oracle PowerStation PowerStation PowerStation PowerStation ETAP PowerStation

More information

RAID RAID 0 RAID 1 RAID 5 RAID * (-1)* (/ 2)* No Yes Yes Yes SATA A. B. BIOS SATA C. RAID BIOS RAID ( ) D. RAID/AHCI ( ) S ATA S S D ( ) (

RAID RAID 0 RAID 1 RAID 5 RAID * (-1)* (/ 2)* No Yes Yes Yes SATA A. B. BIOS SATA C. RAID BIOS RAID ( ) D. RAID/AHCI ( ) S ATA S S D ( ) ( SATA... 2 RAID/AHCI... 16 Intel Optane... 19 Intel Virtual RAID on CPU (Intel VROC)... 21 RAID RAID 0 RAID 1 RAID 5 RAID 10 2 2 3 4 * (-1)* (/ 2)* No Yes Yes Yes SATA A. B. BIOS SATA C. RAID BIOS RAID

More information

PL600 IPPBX 用户手册_V2.0_.doc

PL600 IPPBX 用户手册_V2.0_.doc VoIP 网 络 交 换 机 PL-600 IPPBX 用 户 手 册 深 圳 普 联 讯 电 子 科 技 有 限 公 司 版 权 所 有 2009 深 圳 市 普 联 讯 电 子 科 技 有 限 公 司 第 1 共 1 目 录 1. 前 言...3 2. 安 装 前 准 备...3 3. 硬 件 安 装...4 4. 登 陆 及 一 般 操 作 介 绍...4 5. 基 本 配 置...6 6.

More information

SDS 1.3

SDS 1.3 Applied Biosystems 7300 Real-Time PCR System (With RQ Study) SDS 1.3 I. ~ I. 1. : Dell GX280 2.8GHz with Dell 17 Flat monitor 256 MB RAM 40 GB hard drive DVD-RW drive Microsoft Windows XP Operating System

More information

1 公 司 简 介 2 VRRP 原 理 和 应 用 3 新 产 品 和 创 业 计 划 及 赠 书 活 动

1 公 司 简 介 2 VRRP 原 理 和 应 用 3 新 产 品 和 创 业 计 划 及 赠 书 活 动 RouterOS VRRP 应 用 案 例 Application case ISSUE 1.0 Nanning YONGYI Network Technology Co., Ltd. www.mikrotik.cn www.routeros.com.cn www.routerboard.com.cn 陈 家 迁 CHEN JIA QIAN 手 机 Phone:13077766825 E-MAIL:gx18598@126.com

More information

Microsoft Word - Pac-R61_Chapter 3 _full_.doc

Microsoft Word - Pac-R61_Chapter 3 _full_.doc A. 引 言 審 計 署 曾 就 公 共 租 住 房 屋 (" 公 屋 ") 單 位 的 編 配 及 運 用 進 行 審 查 背 景 2. 香 港 房 屋 委 員 會 (" 房 委 會 ") 是 根 據 房 屋 條 例 ( 第 283 章 ) 成 立 的 法 定 機 構, 負 責 制 訂 和 推 行 公 營 房 屋 計 劃, 以 達 致 政 府 的 政 策 目 標, 為 沒 有 能 力 租 住 私

More information

资源管理软件TORQUE与作业调度软件Maui的安装、设置及使用

资源管理软件TORQUE与作业调度软件Maui的安装、设置及使用 TORQUE Maui hmli@ustc.edu.cn 2008 1 1 TORQUE 2 1.1 TORQUE........................... 2 1.2 TORQUE...................... 2 1.3 TORQUE.......................... 4 1.4 TORQUE........................... 4

More information

<4D6963726F736F667420576F7264202D2032303133C4EA3131D4C23133C8D520D7DBBACFD2BDD4BAD6D0D2BDD2A9B9A4D7F7CEC4BCFEBBE3B1E02E646F63>

<4D6963726F736F667420576F7264202D2032303133C4EA3131D4C23133C8D520D7DBBACFD2BDD4BAD6D0D2BDD2A9B9A4D7F7CEC4BCFEBBE3B1E02E646F63> 综 合 医 院 中 医 药 工 作 文 件 汇 编 国 家 中 医 药 管 理 局 国 家 卫 生 计 生 委 总 后 勤 部 卫 生 部 2013 年 11 月 目 录 1. 国 务 院 关 于 扶 持 和 促 进 中 医 药 事 业 发 展 的 若 干 意 见 (1) 2. 国 务 院 关 于 促 进 健 康 服 务 业 发 展 的 若 干 意 见 (8) 3. 国 家 中 医 药 管 理 局

More information

User ID 150 Password - User ID 150 Password Mon- Cam-- Invalid Terminal Mode No User Terminal Mode No User Mon- Cam-- 2

User ID 150 Password - User ID 150 Password Mon- Cam-- Invalid Terminal Mode No User Terminal Mode No User Mon- Cam-- 2 Terminal Mode No User User ID 150 Password - User ID 150 Password Mon- Cam-- Invalid Terminal Mode No User Terminal Mode No User Mon- Cam-- 2 Mon1 Cam-- Mon- Cam-- Prohibited M04 Mon1 Cam03 Mon1 Cam03

More information

<55342D323637CBB5C3F7CAE92E786C73>

<55342D323637CBB5C3F7CAE92E786C73> U4-267 / 1 U4-267 / : CF PowerPoint, TCP/IP Internet Explorer 2 ..2..3..4..5..5..5..9 PC...10 11 12 14 14....15....15....16....16....17....17....18....18....20 23....27 27 PC...27....28 3 CF SanDisk CompactFlash)

More information

第 7 章 下 一 代 网 际 协 议 IPv6 141 足 的 措 施 只 能 是 权 宜 之 计 (3) 路 由 表 膨 胀 早 期 IPv4 的 地 址 结 构 也 造 成 了 路 由 表 的 容 量 过 大 IPv4 地 址 早 期 为 网 络 号 + 主 机 号 结 构, 后 来 引 入

第 7 章 下 一 代 网 际 协 议 IPv6 141 足 的 措 施 只 能 是 权 宜 之 计 (3) 路 由 表 膨 胀 早 期 IPv4 的 地 址 结 构 也 造 成 了 路 由 表 的 容 量 过 大 IPv4 地 址 早 期 为 网 络 号 + 主 机 号 结 构, 后 来 引 入 第 7 章 下 一 代 网 际 协 议 IPv6 本 章 是 有 关 下 一 代 网 际 协 议 IPv6 的 描 述, 重 点 介 绍 IPv6 的 产 生 原 因 IPv6 的 地 址 与 IPv6 首 部 格 式 等 通 过 本 章 的 学 习, 读 者 应 重 点 掌 握 和 理 解 以 下 内 容 : IPv4 向 IPv6 发 展 的 必 然 性 IPv6 的 新 特 性 IPv6 地

More information

Microsoft Word - om388-rnt _excl Items 16 & 38_ 23.1.09 _final_for uploading_.doc

Microsoft Word - om388-rnt _excl Items 16 & 38_ 23.1.09 _final_for uploading_.doc 城 市 規 劃 委 員 會 鄉 郊 及 新 市 鎮 規 劃 小 組 委 員 會 二 零 零 九 年 一 月 二 十 三 日 下 午 二 時 三 十 分 舉 第 3 8 8 次 會 議 記 錄 行 的 出 席 者 規 劃 署 署 長 伍 謝 淑 瑩 女 士 主 席 陳 偉 明 先 生 簡 松 年 先 生 梁 廣 灝 先 生 吳 祖 南 博 士 鄭 恩 基 先 生 鄺 心 怡 女 士 陳 漢 雲 教 授

More information

% 25% (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 2

% 25% (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 2 01165 2016 12 30 (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 1 14.22 14.07 5% 25% 14 14 2016 12 30 (i) 95% 96,290,900 (ii) 99.9% 17,196,000 (iii) 99.9% 89,663,100 2 2016 12 30 (i) (ii)

More information

¨Æ·~½g¡ã¾·~¤ÀÃþ

¨Æ·~½g¡ã¾·~¤ÀÃþ 事 業 篇 年 級 課 題 名 稱 目 標 1. 讀 書 時 讀 書 遊 戲 時 遊 戲 生 活 計 劃 初 2. 一 寸 光 陰 一 寸 金 處 事 態 度 3. 職 業 分 類 職 業 資 訊 1. 個 人 每 天 生 活 時 間 表 生 活 計 劃 中 2. 誰 的 工 作 處 事 態 度 3. 十 條 問 題 猜 一 猜 職 業 資 訊 1. 時 間 投 資 大 拍 賣 生 活 計 劃 高

More information

國立中山大學學位論文典藏.PDF

國立中山大學學位論文典藏.PDF I II ..1.1.1.1.4. 4.....5...11.13... 13...23.........31........42....42 57.......70...70... 75.......83......83......88....100..115.115.127.130..137.137.138..141 III 1979 860 1 1979 1980 4 1987 1979 34

More information

Microsoft Word - 405-mpc-min-chi.doc

Microsoft Word - 405-mpc-min-chi.doc 城 市 規 劃 委 員 會 都 會 規 劃 小 組 委 員 會 二 零 零 九 年 十 月 九 日 上 午 九 時 舉 行 的 第 4 0 5 次 會 議 記 錄 出 席 者 規 劃 署 署 長 伍 謝 淑 瑩 女 士 黃 遠 輝 先 生 主 席 副 主 席 陳 華 裕 先 生 陳 弘 志 先 生 梁 乃 江 教 授 林 雲 峰 教 授 杜 本 文 博 士 邱 小 菲 女 士 陳 家 樂 先 生 陳

More information

穨cwht.PDF

穨cwht.PDF 1 3 3 4 5 6 6 8 10 12 13 13 14 15 16 ii 17 17 18 19 20 21 21 22 22 23 24 25 25 26 26 27 27 28 28 iii 29 29 29 30 30 31 31 32 33 1 85 000 70% 2 1 1 41 3 1 1 1 2 1 3 (a) 4 (b) (c) (d) 1 4 1 5 1.6% 457 000

More information

900502_Oasis.indb

900502_Oasis.indb 2010 1 22 93 1996 4 1 2009 8 27 2015 4 24 2005 5 1 94 12 95 2013 5 15 2 2005 12 1 2015 5 30 1993 11 12011 1 8 96 1994 10 11 1996 2005 3 28 2005 5 1 2009 10 11 97 98 (i) (ii) (iii) 2002 11 1 2014 8 31 2015

More information

bnb.PDF

bnb.PDF - 1 - - 2 - - 3 - - 4 - - 5 - 1 2 3 4 5 6 7 8 9 10-6 - 5 5 900,000,000 2 10 10 10 10-7 - - 8 - - 9 - -14,833.25 (%) (%) - 10 - - 11 - 277.84 0 21,003.87 6668.57 355.99 18,421.47 405.7290.67 0 0 399.79-12

More information

untitled

untitled 2016 3 175,688 163,875 510,091 493,725 (85,912) (81,373) (253,533) (262,191) 89,776 82,502 256,558 231,534 3 611 827 3,158 7,011 3 656 326 2,768 1,480 (53,355) (48,544) (148,127) (120,526) (12,592) (14,056)

More information

Microsoft Word - 75413980_4

Microsoft Word - 75413980_4 中 国 资 产 管 理 业 翘 首 等 待 修 订 后 的 证 券 投 资 基 金 法 及 配 套 法 规 的 施 行 2012 年 12 月 28 日, 业 内 期 盼 已 久 的 中 华 人 民 共 和 国 证 券 投 资 基 金 法 ( 新 基 金 法 ) 修 订 通 过, 自 2013 年 6 月 1 日 起 施 行 为 了 支 持 新 基 金 法 的 实 施, 有 关 监 管 部 门, 主

More information

郑州大学(下).doc

郑州大学(下).doc ...1...10 ( )...12...14...18...20...24...26...30...33...37...39...42...45...48...52...53 I ...57...63...65...74...82...84...85...87...91...95...97... 101... 103... 106... 109... 115... 124... 126... 128

More information

厨房小知识(六)

厨房小知识(六) ...1...1...2...2...4...6...7...8...9...10...13...14...17...18...20...20...21...23...24...24...26...27...28 I II...31...32...32...35...36...39...40...41...41...42...43...44...47?...49...50...52...53...54...54...60...67...68...69

More information

广 东 纺 织 职 业 技 术 学 院 发 展 党 员 公 示 制 实 施 办 法...189 关 于 推 荐 优 秀 团 员 作 为 党 的 发 展 对 象 工 作 的 意 见...192 后 勤 管 理 工 作 广 东 纺 织 职 业 技 术 学 院 新 引 进 教 职 工 周 转 房 管 理

广 东 纺 织 职 业 技 术 学 院 发 展 党 员 公 示 制 实 施 办 法...189 关 于 推 荐 优 秀 团 员 作 为 党 的 发 展 对 象 工 作 的 意 见...192 后 勤 管 理 工 作 广 东 纺 织 职 业 技 术 学 院 新 引 进 教 职 工 周 转 房 管 理 目 党 政 工 作 广 东 纺 织 职 业 技 术 学 院 党 委 理 论 中 心 组 学 习 制 度...1 广 东 纺 织 职 业 技 术 学 院 教 职 工 政 治 理 论 学 习 制 度...4 广 东 纺 织 职 业 技 术 学 院 党 风 廉 政 建 设 责 任 制 实 施 办 法 ( 试 行 )...6 广 东 纺 织 职 业 技 术 学 院 党 风 廉 政 建 设 暂 行 规 定...18

More information

2005 2005 12

2005  2005 12 2005 2005 http://www.nsfc.gov.cn 2005 12 2005...1 1-1 2005...1 1-2 2005...2 1-3 2005...5 1-4 2005...6 1-5 2005...7 1-6 2005...8 1-7 2005...9 1-8 2005...10 1-9 2005 200...11 1-10 2005...21 1-11 2005...61

More information

游戏攻略大全(五十).doc

游戏攻略大全(五十).doc I...1...2...18...32...37...39...40...40...41...41...41...42...42...42...43...44...44...44...45...45...45...46 ...46...46...47...47...47...47...48...48...48...49...51...72...80...82...85...86...91...94...97

More information

金融英语证书考试大纲

金融英语证书考试大纲 金 融 英 语 证 书 考 试 大 纲 第 一 部 分 考 试 说 明 一 考 试 目 的 金 融 英 语 证 书 考 试 是 国 家 级 行 业 性 专 业 外 语 水 平 考 试, 旨 在 通 过 统 一 的 标 准 化 考 试 程 序 和 测 试 标 准, 为 中 国 金 融 业 提 供 金 融 英 语 水 平 行 业 参 考 标 准, 测 试 并 认 定 应 试 人 员 的 金 融 英 语

More information

I...1...2...3...4...6...7...8...10... 11...12...13...14...16...17...18...20...21...22...23...25...26...27...28...30 II...31...33...34...35...37...38...39...41...43...44...45...47...49...50...52...54...55...56...57...59...60...61...62...63...64...65

More information

健康知识(二)

健康知识(二) I...1...6...7...8...10...12...14...15...17...19...22...26...28...29...30...31...32...34...36...37...38...39...40 II...41...42...43...46 7...47...48...49...53...55...56...57...58...60...66...67...68...69...69...70...73...73...74...75...78...79...79

More information

中南财经大学(二).doc

中南财经大学(二).doc 2004...1...3 2004...5...9 2004...10 2004...13...16...18...19...23...35...39...42...44...46...50 I ...53...54 ( )...57...58...62... 121... 124... 149 ( )... 151... 152... 154... 157... 158... 159... 163...

More information

广西大学(一).doc

广西大学(一).doc .....1... 11...14...15...16...17...19...19...22 ( )...30 ( )...32...34...39...44 ( )...63...64...67...69 I ...75...77...79...81...87 ( )...88...92...93...95...98... 100... 104... 114... 116... 124 ( )...

More information

根据学校教学工作安排,2011年9月19日正式开课,也是我校迁址蓬莱的第一学期开学

根据学校教学工作安排,2011年9月19日正式开课,也是我校迁址蓬莱的第一学期开学 济 南 大 学 泉 城 学 院 2014 届 毕 业 生 就 业 质 量 年 度 报 告 前 言 济 南 大 学 泉 城 学 院 是 国 家 教 育 部 和 山 东 省 人 民 政 府 正 式 批 准 成 立, 实 施 本 科 层 次 学 历 教 育 的 综 合 性 高 等 院 校 自 2005 年 建 校 以 来, 学 院 依 托 济 南 大 学 雄 厚 的 办 学 实 力, 坚 持 以 学 生

More information

山东大学(一).doc

山东大学(一).doc ...1...8...23...27...30 ( )...33...36...40...44...46...52 ( )...53...54...54 I ...55...56...58...59...60 ( )...63...75...88...92...99 ( )... 110... 118... 138... 142... 148 ( )... 152 2004 2006... 156

More information

主 编 : 杨 林 副 主 编 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 评 审 顾 问 : 杨 林 张 新 民 评 审 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 李 忆 萍 徐 如 雪 文 字 编 辑 : 曹 纯 纯 邹 兰 李 雅 清

主 编 : 杨 林 副 主 编 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 评 审 顾 问 : 杨 林 张 新 民 评 审 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 李 忆 萍 徐 如 雪 文 字 编 辑 : 曹 纯 纯 邹 兰 李 雅 清 主 编 : 杨 林 副 主 编 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 评 审 顾 问 : 杨 林 张 新 民 评 审 : 张 新 民 邹 兰 曹 纯 纯 周 秋 婷 李 雅 清 黄 囡 囡 李 忆 萍 徐 如 雪 文 字 编 辑 : 曹 纯 纯 邹 兰 李 雅 清 周 秋 婷 李 忆 萍 徐 如 雪 何 雯 技 术 编 辑 : 李 雅 清 曹 纯 纯 薛 莞 陈 敏

More information

最新文物管理执法全书(十四).doc

最新文物管理执法全书(十四).doc I...1...3...5...8...12...15...19...23...25...28...30...34...37...39...43...47...50...52...55...59...60...63...67...70 ...75...79...82...83...85...90...92...95...99... 103... 106... 113... 117... 119...

More information

园林常识(二).doc

园林常识(二).doc I...1...1...1...2...32...33...36...38...41...42...43...43...43...44...45...45...46...48...49...56...62...65 ...68...77...84...98... 103 :... 104... 105 :... 107 :... 109... 110...111... 126... 127... 130

More information

前 言 二 一 六 年 四 月 四 日, 兒 童 節, 誕 生 了 一 件 美 事 : 中 國 作 家 曹 文 軒 在 意 大 利 博 洛 尼 亞 國 際 童 書 展 榮 獲 國 際 安 徒 生 文 學 獎, 是 該 獎 創 設 六 十 年 來, 第 一 位 摘 桂 的 中 國 作 家, 意 義 重

前 言 二 一 六 年 四 月 四 日, 兒 童 節, 誕 生 了 一 件 美 事 : 中 國 作 家 曹 文 軒 在 意 大 利 博 洛 尼 亞 國 際 童 書 展 榮 獲 國 際 安 徒 生 文 學 獎, 是 該 獎 創 設 六 十 年 來, 第 一 位 摘 桂 的 中 國 作 家, 意 義 重 目 錄 前 言 i 童 年 1 關 於 肥 肉 的 歷 史 記 憶 ( 節 錄 ) 7 疲 民 15 水 邊 的 文 字 屋 23 海 邊 的 屋 29 紅 葫 蘆 37 追 隨 永 恆 ( 草 房 子 代 跋 一 ) 53 因 水 而 生 草 房 子 寫 作 札 記 59 書 香 人 家 73 朗 讀 的 意 義 79 知 無 涯, 書 為 馬 85 讀 是 誰 91 給 孩 子 講 課 文 學

More information

湖 南 科 技 大 学

湖 南 科 技 大 学 I 目 录 第 一 章 2015 年 度 培 训 概 况 1 1 基 本 情 况 1 1.1 项 目 申 报 情 况 1 1.2 项 目 实 施 情 况 3 1.3 学 员 来 源 情 况 5 1.4 项 目 经 费 情 况 7 2 组 织 管 理 9 2.1 学 校 设 立 培 训 项 目 实 施 工 作 领 导 小 组 9 2.2 施 训 学 院 设 立 项 目 实 施 办 公 室 9 3 培

More information

上海外国语大学(二).doc

上海外国语大学(二).doc ...1...3...4...9...10 ( )... 11...12...16...31...33...34...50...56...58...60...62 I II...63...65...68...74...75...75...76...76...78...87...92...96 ( )...96 ( )...97 ( )...98 ( )...99... 100 ( )... 101

More information

2009 陳 敦 德

2009 陳 敦 德 前 言 : 發 掘 香 港 歷 史 獨 有 的 寶 藏 2010 2009 陳 敦 德 目 錄 前 言 發 掘 香 港 歷 史 獨 有 的 寶 藏 / i 第 一 章 香 港 設 立 八 路 軍 辦 事 處, 青 年 廖 承 志 為 主 任 /1 一 毛 澤 東 認 為, 八 路 軍 駐 香 港 辦 事 處, 是 個 獨 特 的 辦 事 處 /10 二 毛 澤 東 親 自 點 將, 為 小 廖 舉

More information

切 实 加 强 职 业 院 校 学 生 实 践 能 力 和 职 业 技 能 的 培 养 周 济 在 职 业 教 育 实 训 基 地 建 设 工 作 会 议 上 的 讲 话 深 化 教 育 教 学 改 革 推 进 体 制 机 制 创 新 全 面 提 高 高 等 职 业 教 育 质 量 在

切 实 加 强 职 业 院 校 学 生 实 践 能 力 和 职 业 技 能 的 培 养 周 济 在 职 业 教 育 实 训 基 地 建 设 工 作 会 议 上 的 讲 话 深 化 教 育 教 学 改 革 推 进 体 制 机 制 创 新 全 面 提 高 高 等 职 业 教 育 质 量 在 目 录 中 华 人 民 共 和 国 职 业 教 育 法... 1 国 务 院 关 于 大 力 推 进 职 业 教 育 改 革 与 发 展 的 决 定... 7 国 务 院 关 于 大 力 发 展 职 业 教 育 的 决 定... 17 教 育 部 财 政 部 关 于 实 施 国 家 示 范 性 高 等 职 业 院 校 建 设 计 划 加 快 高 等 职 业 教 育 改 革 与 发 展 的 意 见...

More information

鸽子(三)

鸽子(三) ...1...3...5...7....9...12...20...28...30...33...39...52....53...56...60...61...64...67....86 I ...88...90...95.... 102... 107... 112... 115... 125... 127... 128... 134... 139... 149... 151... 152... 156...

More information

兽药基础知识(四)

兽药基础知识(四) ...1...1...3...4...9...10... 11...13...14...15...16...18...19...23...24...26...29...32...34 I ...36...38...39...40...41...43...45...47...49...50...52...53...54...55...57...59...61...64 E...68...69...72

More information

园林植物卷(十).doc

园林植物卷(十).doc I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67

More information

园林植物卷(十七).doc

园林植物卷(十七).doc I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67

More information

临床手术应用(三)

临床手术应用(三) ...1...5...5... 11...16...16...24...30...34...36...38...42...49...49...51...53...55...57...58...58...61 I ...63...65...67...69...73...73...75...80...83...85...86...88...92...94...94...98... 101... 102...

More information

家装知识(二十)

家装知识(二十) I..1...2...5...7...10... 11...12...14...17...19...20...21...25...26...27...30...32...33...37...40...42...44...45 II...49...50...53...54...56...61...62...63...64...67...68...69...71...74...75...76...79...80...81...81...82...83...87...90...91...93

More information

医疗知识小百科

医疗知识小百科 ...1...3...4...7...8...9... 10... 12... 13... 13... 14... 15... 17... 19... 29... 30... 32... 34... 37... 38... 39... 42 I ... 47... 48... 52... 53... 57... 58... 59... 61... 63... 65... 66... 67... 69...

More information

家庭万事通(一)

家庭万事通(一) I...1...2...3...5...7...9...10... 11...12...14...14...16...18...19...21...22...24...27...28...29...31...32...34 II...36...37...38...39...41...45...46...46...49...50...51...52...54...56...58...59...67...69...71...72...73...75...77...78...80...83

More information

家装知识(三)

家装知识(三) I...1...2...3...4...7...8... 11...13...16...18...19...20...21...23 10...25...26...30...31...33...35...38...42...44 II...45...47...49...51...53...54...56...57...59...62...64...66...68...69...71...75...77...80...81...82...83...85...85...88...90...91

More information

园林绿化(一)

园林绿化(一) ( 20 010010) 7871092 32 162.50 2004 12 1 2004 12 1 11 000 495.00 ( 19.80 ) ...1...2 605...5 84K...7 9...9...12...15...17...18...20...30...32...36...40...40...43...45...50 ( )...52 I ... 106... 113... 121...

More information

园林植物卷(十五).doc

园林植物卷(十五).doc I II III 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67

More information

最新监察执法全书(一百五十).doc

最新监察执法全书(一百五十).doc ................................ I ............................. 2000.................. II ...... III [2002]5 1 2 3 4 5 6 1 2 3 1993 8 14 () () () () () () () () () () () () () () () () () ()

More information

兽药基础知识(三)

兽药基础知识(三) ...1...2...5...8...10... 11...16...18...20...24...26...27...30...31...35...39...43...45...46 I ...49...50...52...53...54...54...57...61...62 ()...64...65...67...68...71...73...75...77...77...78.....80...81

More information

奥运档案(四).doc

奥运档案(四).doc ...1 2012...1...2 (2004.3.22 28)...2 (2004 3 15 21)...8 (2004.3.8 14)...14 (2004.3.1 3.7)...21 (2004.2.23 29)...28 (2004.3.8 14)...34...41 2012...45...48...50 1964...51 1968...59 1972...69 1976...79 1980...90

More information

最新监察执法全书(五十).doc

最新监察执法全书(五十).doc ............................ ( )... I ................................. II ..................... III @ 3 12 2 2 1 ( ) ( [1999]9 ) ( [2001]21 ) 1. 2. 3.

More information

最新执法工作手册(三百八十四)

最新执法工作手册(三百八十四) [1999 2 5 1999 7 ]............... I ... 1998... 1998................... II ....................... III [1999 2 5 1999 7 ] 30 30 2 1 15 30 30 B 15 1 1 2 2 l 2 1 5 12 5 10 18 10 24 1 1 2 1 l 24 1 12 13 24

More information

中华美食大全4

中华美食大全4 I...1...1...2...3...5...6...8...9...12...13...14...16...17...19...20...21...23...24...26...27...28...30...31...33 II...35...37...39...40...41...43...44...45...47...48...49...50...52...54...55...56...57...58...60...62...63...65...66...67...69...70

More information

动物杂谈_二_.doc

动物杂谈_二_.doc I...1...2...4...5...6...7...12...13...14 :...16...18 10...19...21...23...24...24 50...25...26...27 :...28...29...30 :...31...32 II...33...34...35...35...36...37 -...43...44...45...49...50 8000...54...54...57...58...60...61...63...65...68...77...78...79...90...93

More information

抗非典英雄赞歌(三)

抗非典英雄赞歌(三) ...1...8... 16... 25... 30... 34... 38... 45... 48 15... 50... 51... 53... 54 :... 56 309... 61... 64 I ... 67.. 70... 73... 76... 80... 85... 87... 91... 94... 98... 100... 103... 106 80...116...118...

More information

新时期共青团工作实务全书(三十五)

新时期共青团工作实务全书(三十五) ....................................... I ................................. II ...... 90 90... III ' ' 1 2 3 4 1 2 3 30 90 02 0.15 1 2 3 4 5 6 7 8 9 10 11 12 13 14 1 2 3 4 5 6 7 8 9 10 2 11 12

More information

经济法法律法规第十九卷

经济法法律法规第十九卷 ...1...6...12...18...29 ( )...34...39...53...62...67...76...83...87 (2001 )...92...99 I ...111... 118... 120... 122... 128... 134... 137... 140... 141... 144... 151... 152 II ... 153... 158... 163 ()...

More information

游戏攻略大全(五十九).doc

游戏攻略大全(五十九).doc ...1 ----...15...41 2...41...41...42...43...43...44...45...46...47...48...49...50...51...52...53...54...55...57...58...59 I II...60...61...63...64...65...66...66...67...69...70...70...71...72...73 ---...78...79...79...79...80...80...80...80...81...81...82...82

More information

火灾安全实例

火灾安全实例 ...1...2...3...4... 19... 21... 26... 30... 40... 41... 43... 45... 51... 58... 61... 63... 66... 73... 79... 95... 97 I ... 98... 103... 105...113 ( )... 126... 135... 137... 144... 149... 157... 161...

More information

兽药基础知识(七)

兽药基础知识(七) ...1...4...5...7...9... 11...14...15...17...19...21...24...27.....28...29...31...32...38...39 I ...42...43...46...47...48...50...52...54...56...57...62...64...65...66...69...71...78...79...82...83...87

More information

实用玉米技术(二)

实用玉米技术(二) 1...1...6...10...16...18...20...22...24...26...26...31...32...32...34...35...37...42...43...44...46 I ...47...50...52...53...54...55...57...58...59...62...63...66...67...69...72...80...80...81...82...84...85...87

More information

中国政法大学(一).doc

中国政法大学(一).doc ...1...6...7...31...32...35...36...40...45...53...60...67...79...82 () I ...88...96... 108... 120 ()... 124... 126... 128 ( )... 132... 134... 143 ( )... 143 ( )... 146... 160... 163... 166 II ... 169

More information

水产知识(一)

水产知识(一) I...1...2...4...5...6...7...10...12...13...19...20...22...23...25...28...30...31...32...33 :...36 ...37...38...40...42...44...47...48...51...51...55...57...58...59...59...61...70...73...74...76...76...78

More information

招行2002年半年度报告全文.PDF

招行2002年半年度报告全文.PDF 2 2 12 13 13 16 19 19 1 2 7088 518040 14,444 2,744-370 -1,955-864 14,889 3 4 8% 16.38 14.01 10.26 11.39 11.93 11.61 4% 10.73 9.69 4.23 10.89 11.11 11.30 15% 6.43 7.59 8.15 10.64 9.28 11.44 75% 55.67 57.74

More information

(Microsoft Word - outline for Genesis 9\243\2721\243\25529.doc)

(Microsoft Word - outline for Genesis 9\243\2721\243\25529.doc) 創 世 紀 9:1-29; 神 的 憐 憫 及 與 挪 亞 立 約 韋 江 傳 道 暖 身 問 題 : 當 別 人 無 意 識 地 踩 到 你 的 腳, 確 一 句 話 不 說 就 走 開 的 時 候, 你 會 怎 麼 樣 做? 注 意 : 大 綱 中 問 題 較 多, 但 顯 然 不 是 所 有 的 都 需 要 討 論 到, 比 較 多 的 是 供 你 們 參 考 所 以, 每 一 個 帶 領 者

More information

穨Shuk-final.PDF

穨Shuk-final.PDF : : ( ( ( ( ( D : 20 25 -, -, - :, D ( ( ((,! ( ( ( 15 20 ( - - - ( ( ( 1985 33 ( ( ( 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 - - - - - ( ( ( - --- ( - ( - - - - ( ( ( ( ( ( ( ( 1985 35 1. ( ( ( ( ( 2.

More information