目 录 1 不 断 开 发 工 具 以 管 理 大 数 据 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 大 数 据 技 术 的 行 业 生 态 系 统 在 关 键 组 件 中 实 现 平 衡...

Size: px
Start display at page:

Download "目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡..."

Transcription

1 白 皮 书 英 特 尔 固 态 硬 盘 英 特 尔 以 太 网 融 合 网 络 英 特 尔 Hadoop* 发 行 版 软 件 应 用 大 数 据 技 术 获 得 近 实 时 分 析 巨 大 成 效 1 平 衡 的 基 础 设 施 使 工 作 负 载 完 成 时 间 从 4 小 时 缩 短 为 7 如 今, 基 于 广 泛 可 用 的 计 算 存 储 和 网 络 组 件 的 改 进, 商 业 学 术 和 政 府 组 织 有 效 处 理 大 数 据 的 能 力 正 快 速 提 高 英 特 尔 利 用 一 个 优 化 且 平 衡 的 Hadoop* 集 群, 展 示 了 可 以 得 到 的 显 著 成 效 这 一 集 群 由 最 新 的 本 地 固 态 硬 盘 存 储 和 万 兆 位 英 特 尔 以 太 网 融 合 网 络 组 成 事 实 上, 在 英 特 尔 所 开 展 的 多 项 测 试 中, 通 过 升 级 这 些 组 件 和 使 用 英 特 尔 Hadoop* 发 行 版 软 件 ( 英 特 尔 Hadoop 发 行 版 ), 可 将 使 用 TeraSort 基 准 工 作 负 载 排 序 1 TB 数 据 所 需 的 时 间 从 约 4 小 时 缩 短 至 约 7 1,2 这 些 结 果 预 示 着 我 们 向 近 实 时 数 据 分 析 的 宏 伟 目 标 又 迈 近 了 一 大 步, 而 且 所 需 的 成 本 大 幅 低 于 此 前 使 用 专 有 硬 件 和 软 件 实 施 的 成 本 大 幅 的 成 本 节 省 和 效 率 提 升 对 于 发 挥 出 大 数 据 技 术 的 全 部 潜 力 至 关 重 要 本 白 皮 书 介 绍 了 这 些 结 果 的 实 现 方 法, 以 作 为 IT 决 策 者 和 其 他 人 员 在 考 虑 投 资 方 向 时 的 指 导, 进 而 从 Hadoop* 环 境 中 获 得 最 佳 成 效 同 时 文 章 还 介 绍 了 经 过 预 先 优 化 的 交 钥 匙 型 英 特 尔 Hadoop 发 行 版 软 件 具 备 的 部 分 优 势 各 组 织 可 通 过 使 用 此 处 所 列 的 指 导 原 则, 在 满 足 其 预 算 要 求 的 前 提 下, 实 现 特 定 工 作 负 载 和 环 境 的 最 佳 性 能 平 衡 Hadoop* 集 群 内 的 计 算 存 储 和 网 络 资 源, 可 以 发 挥 出 最 新 英 特 尔 处 理 器 固 态 硬 盘 万 兆 位 英 特 尔 以 太 网 融 合 网 络 和 英 特 尔 Hadoop* 发 行 版 软 件 的 全 部 优 势 通 过 利 用 这 些 组 件 构 建 一 个 平 衡 的 基 础 设 施, 英 特 尔 将 完 成 TeraSort 基 准 测 试 工 作 负 载 所 需 的 时 间 从 约 4 小 时 缩 短 至 约 7 分 钟, 降 幅 约 为 97% 1 大 数 据 技 术 可 实 现 的 此 类 结 果 为 低 成 本 近 实 时 的 数 据 分 析 铺 平 了 道 路, 将 能 够 帮 助 企 业 近 乎 实 时 地 响 应 瞬 息 万 变 的 市 场 需 求, 并 从 其 资 产 中 获 得 更 多 价 值 1

2 目 录 1 不 断 开 发 工 具 以 管 理 大 数 据 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 大 数 据 技 术 的 行 业 生 态 系 统 在 关 键 组 件 中 实 现 平 衡 计 算 资 源 的 进 步 存 储 技 术 的 进 步 网 络 连 接 的 进 步 业 经 优 化 的 英 特 尔 Hadoop 发 行 版 万 兆 位 以 太 网 和 其 他 因 素 在 加 速 Hadoop 工 作 流 中 所 扮 演 的 角 色 优 化 导 入 阶 段 优 化 处 理 阶 段 : 从 4 小 时 缩 短 到 7 的 历 程 优 化 导 出 阶 段 研 究 环 境 简 述 调 试 和 优 化 注 意 事 项 网 络 连 接 操 作 系 统 和 驱 动 程 序 优 化 Hadoop 配 置 参 数 进 一 步 的 增 强 结 论 不 断 开 发 工 具 以 管 理 大 数 据 当 前, 无 论 是 何 种 类 型 和 规 模 的 企 业, 都 无 一 例 外 地 拥 有 着 庞 大 的 数 据 库 处 理 转 换 并 从 数 据 中 ( 通 常 为 非 结 构 化 数 据 ) 获 取 优 势 的 能 力 正 快 速 成 为 一 种 标 准 要 求, 同 时 能 够 进 行 此 类 工 作 的 工 具 和 技 术 也 日 益 普 遍 诸 如 Hadoop 等 框 架 的 广 泛 应 用, 而 且 越 来 越 多 的 IT 部 门 开 始 逐 渐 构 建 其 自 有 的 计 算 环 境 来 处 理 大 数 据 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 Hadoop 是 一 个 使 用 Java* 编 写 基 于 谷 歌 的 MapReduce* 和 分 布 式 文 件 系 统 工 作 的 开 源 软 件 框 架 它 用 于 支 持 分 布 式 应 用 程 序, 能 够 使 用 服 务 器 集 群 分 析 超 大 型 数 据, 然 后 将 其 转 换 为 更 易 于 这 些 应 用 程 序 使 用 的 形 式 Hadoop 用 于 部 署 在 常 见 的 通 用 型 基 础 设 施 之 中 该 框 架 擅 长 处 理 的 任 务 包 括 对 大 型 数 据 集 进 行 索 引 和 排 序 数 据 挖 掘 日 志 分 析 和 图 像 处 理 等 Hadoop 框 架 的 关 键 组 件 包 括 : Hadoop 分 布 式 文 件 系 统 (HDFS*) 能 够 通 过 将 数 据 分 解 为 数 据 块, 并 将 数 据 块 散 布 于 大 量 工 作 节 点 中, 实 现 容 错 和 高 性 能 Hadoop 的 MapReduce 引 擎 能 够 从 应 用 程 序 接 收 作 业, 并 将 这 些 作 业 分 解 成 多 项 任 务, 以 分 配 给 多 个 工 作 节 点 1.2 大 数 据 技 术 的 行 业 生 态 系 统 一 个 大 型 解 决 方 案 生 态 系 统 (Hadoop 仅 是 其 中 一 部 分 ) 的 设 计 旨 在 最 大 限 度 地 挖 掘 大 数 据 的 价 值 该 生 态 系 统 的 另 一 关 键 组 件 是 NoSQL( 不 仅 仅 是 SQL ) 数 据 库 NoSQL 是 更 为 常 见 的 基 于 表 格 的 关 系 型 数 据 库 管 理 系 统 (RDBMS) 的 一 种 替 代 ( 或 补 充 ) 技 术 与 RDBMS 不 同, NoSQL 数 据 库 并 不 主 要 以 表 格 为 基 础 对 依 赖 于 数 据 元 素 间 关 系 的 功 能 而 言, 这 一 特 征 尽 管 在 某 种 程 度 上 让 NoSQL 的 效 率 低 于 RDBMS, 但 是 NoSQL 能 够 简 化 大 量 关 系 并 非 特 别 重 要 的 数 据 的 处 理 过 程 尽 管 结 构 化 数 据 也 可 存 储 于 NoSQL 数 据 库 中, 但 是 这 些 系 统 更 适 于 处 理 非 结 构 化 数 据, 并 能 够 在 检 索 和 附 加 大 量 的 此 类 数 据 时 实 现 出 色 的 可 扩 展 性 和 性 能 随 着 大 数 据 技 术 的 不 断 发 展 和 其 在 数 据 中 心 所 起 到 的 重 要 作 用 日 益 突 显, 在 商 业 与 非 商 业 单 位 共 同 努 力 的 推 动 下, 诸 如 Hadoop 等 开 源 解 决 方 案 的 重 要 性 和 开 发 完 善 程 度 日 渐 提 高 Hadoop 生 态 系 统 中 的 高 级 NoSQL 数 据 库 包 括 Cassandra* HBase* 和 MongoDB* 除 了 Hadoop 以 外, 其 他 的 大 数 据 技 术 还 包 括 简 单 易 用 的 开 源 Disco Project*( 开 发 人 员 使 用 Python* 脚 本 编 写 作 业 ), 以 及 针 对 于 商 业 智 能 和 相 关 使 用 模 式 的 企 业 级 环 境 SAP HANA* 实 时 数 据 平 台 等 所 有 这 些 行 业 创 新 正 在 针 对 基 于 英 特 尔 至 强 处 理 器 的 平 台 进 行 紧 锣 密 鼓 的 开 发 和 优 化 工 作 由 于 大 数 据 广 泛 存 在 于 商 业 研 究 和 学 术 环 境 中, 并 且 其 规 模 在 迅 速 扩 张, 因 此 本 白 皮 书 以 Hadoop 作 为 示 例, 阐 述 了 如 何 处 理 大 数 据 的 系 统 2

3 2 在 关 键 组 件 中 实 现 平 衡 尽 管 Hadoop 集 群 通 常 由 通 用 的 主 流 组 件 构 建 而 成, 但 这 并 未 降 低 为 获 得 最 大 优 势 而 选 择 和 组 合 这 些 组 件 的 难 度 首 要 注 意 事 项 便 是 在 计 算 存 储 和 网 络 资 源 环 境 中 达 到 平 衡 ( 如 图 1 所 示 ) TaskTracker 在 转 到 有 关 确 定 集 群 组 件 组 合 的 具 体 战 略 之 前, 首 先 需 要 考 虑 每 个 类 别 中 常 用 技 术 的 状 态 ( 如 表 1 所 示 ) 在 确 定 了 需 要 的 资 源 类 型 后, 探 讨 将 专 注 于 Hadoop 集 群 如 何 能 够 充 分 利 用 这 些 资 源, 介 绍 万 兆 位 以 太 网 (10GbE) 连 接 在 交 付 各 项 优 势 中 所 扮 演 的 角 色 E5 JobTracker 2.1 计 算 资 源 的 进 步 相 比 上 一 代 平 台, E5 家 族 所 采 用 的 平 台 架 构 能 够 更 好 地 利 用 解 决 方 案 堆 栈 中 的 资 源 例 如, 全 新 架 构 将 每 个 插 槽 中 的 内 核 数 量 从 六 个 (12 个 硬 件 线 程 ) 增 加 到 了 八 个 (16 个 硬 件 线 程 ), 更 高 的 内 核 数 量 可 支 持 达 到 更 高 的 并 行 计 算 水 平, 而 后 者 对 于 数 据 密 集 型 Hadoop 工 作 负 载 有 着 重 要 意 义 英 特 尔 数 据 直 接 I/O 技 术 ( 英 特 尔 DDIO) 是 英 特 尔 至 强 处 理 器 E5 家 族 中 的 一 项 新 功 能, 可 支 持 英 特 尔 以 太 网 控 制 器 和 直 接 与 处 理 器 高 速 缓 存 通 信, 而 不 是 与 主 内 存 通 信, 从 而 能 够 帮 助 提 高 带 宽 和 降 低 延 迟 这 些 优 势 对 于 处 理 大 型 数 据 集 将 大 有 裨 益 1. Hadoop* 表 1. 升 级 Hadoop* 解 决 方 案 堆 栈, 实 现 平 衡 的 高 性 能 基 础 设 施 计 算 存 储 网 络 优 异 前 几 代 英 特 尔 至 强 处 理 器 传 统 旋 转 式 硬 盘 千 兆 位 英 特 尔 以 太 网 服 务 器 出 色 E5 家 族 分 层 存 储 ( 传 统 硬 盘 和 固 态 硬 盘 ) 万 兆 位 英 特 尔 以 太 网 融 合 网 络 最 佳 英 特 尔 至 强 处 理 器 E5 家 族 全 部 为 固 态 硬 盘 万 兆 位 英 特 尔 以 太 网 融 合 网 络 3

4 2.2 存 储 技 术 的 进 步 固 态 硬 盘 (SSD) 代 表 了 面 向 主 流 客 户 端 和 服 务 器 的 持 久 性 存 储 的 一 个 重 要 转 变 它 消 除 了 诸 如 旋 转 碟 片 和 读 / 写 磁 头 等 传 统 机 械 硬 盘 (HDD) 中 的 电 子 机 械 部 件, 并 因 此 大 幅 缩 短 了 数 据 访 问 时 间 和 延 迟 本 白 皮 书 所 描 述 的 测 试 使 用 了 英 特 尔 固 态 硬 盘 ( 英 特 尔 SSD)520 系 列, 该 系 列 拥 有 广 泛 的 容 量 选 择, 具 备 内 建 的 数 据 保 护 功 能, 并 相 比 传 统 机 械 硬 盘 实 现 了 大 幅 的 性 能 改 进 3 英 特 尔 固 态 硬 盘 520 系 列 采 用 了 英 特 尔 25 纳 米 NAND 闪 存, 可 提 供 最 高 每 秒 50,000 次 每 秒 输 入 / 输 出 操 作 (IOPS) 4 的 随 机 读 取 性 能 和 多 至 每 秒 550 兆 字 节 (MB/ 秒 ) 5 的 顺 序 读 取 性 能 作 为 传 统 机 械 硬 盘 和 固 态 硬 盘 之 间 的 过 渡 步 骤, 各 大 组 织 正 越 来 越 多 地 在 同 一 服 务 器 上 配 置 这 两 类 硬 盘 在 本 测 试 中, 固 态 硬 盘 作 为 高 速 数 据 缓 存 设 备, 可 减 少 从 传 统 机 械 硬 盘 中 读 取 数 据 和 向 其 写 入 数 据 的 需 求, 进 而 提 高 整 体 性 能 2.3 网 络 连 接 的 进 步 数 年 来, 网 络 连 接 的 线 速 一 直 都 在 不 断 提 高 与 此 同 时 这 一 领 域 也 涌 现 出 了 许 多 补 充 性 技 术, 为 用 户 提 供 了 更 高 的 价 值, 如 更 高 的 吞 吐 量 改 进 的 成 本 效 益 和 增 强 的 灵 活 性 等 而 这 一 研 究 的 主 要 考 虑 因 素 为 从 千 兆 位 以 太 网 (1GbE) 向 万 兆 位 (10GbE) 过 渡 英 特 尔 以 太 网 控 制 器 和 融 合 网 络 对 于 降 低 万 兆 位 以 太 网 网 络 连 接 的 成 本 发 挥 着 至 关 重 要 的 作 用 反 过 来, 虚 拟 化 和 带 宽 密 集 型 应 用 程 序 ( 如 数 据 分 析 和 视 频 点 播 ) 等 的 广 泛 部 署, 提 高 了 万 兆 位 以 太 网 网 络 的 采 用 率, 并 形 成 了 一 个 良 性 循 环, 让 成 本 效 益 和 主 流 网 络 采 用 率 能 够 相 辅 相 成 地 提 高 英 特 尔 以 太 网 软 件 驱 动 程 序 已 针 对 大 数 据 实 施 进 行 了 优 化, 例 如, 它 们 能 够 最 大 限 度 地 减 少 I/O 对 Hadoop 数 据 处 理 的 干 扰 英 特 尔 以 太 网 融 合 网 络 X540 是 一 款 低 成 本 低 功 率 的 10GBASE-T 解 决 方 案, 可 向 后 兼 容 使 用 第 6 类 和 第 6A 类 铜 缆 布 线 的 现 有 1000BASE-T 网 络 英 特 尔 以 太 网 控 制 器 X540 通 过 将 MAC 和 PHY 集 成 在 一 个 单 芯 片 解 决 方 案 中, 可 同 时 降 低 Sqoop Flume Zookeeper Intel Manager for Hadoop Oozie Pig 初 始 成 本 和 功 率 要 求 英 特 尔 以 太 网 融 合 网 络 X520 可 使 用 铜 缆 或 光 纤 网 络 连 接, 为 万 兆 位 以 太 网 网 络 提 供 SFP+ 连 接 2.4 业 经 优 化 的 英 特 尔 Hadoop 发 行 版 英 特 尔 Hadoop 发 行 版 可 帮 助 简 化 和 改 善 Hadoop 在 英 特 尔 架 构 基 础 设 施 上 的 部 署 它 是 唯 一 一 个 专 为 支 持 在 Hadoop 上 进 行 最 广 泛 的 数 据 分 析 而 构 建 的 发 行 版, 同 时 也 是 首 个 具 备 硬 件 增 强 的 性 能 和 安 全 功 能 的 产 品 该 解 决 方 案 包 含 Hadoop 框 架 MapReduce Hadoop 分 布 式 文 件 系 统 (HDFS*) 以 及 可 支 持 批 量 处 理 和 近 实 时 分 析 的 其 他 相 关 组 件, 如 Hive* 数 据 仓 库 基 础 设 施 Pig* 数 据 流 语 言 和 HBase 数 据 库 等 英 特 尔 Hadoop 发 行 版 中 所 包 含 的 组 件 显 示 于 图 2 中 Mahout 0.7 YARN MRv2 R connectors HDFS Hadoop Hive SQL HBase Hadoop* 4

5 英 特 尔 Hadoop 发 行 版 基 于 实 际 经 验, 为 用 户 提 供 了 调 试 和 优 化 指 导 原 则, 以 及 向 导 和 其 他 自 动 化 部 署 工 具 Intel Manager for Hadoop* 软 件 提 供 了 在 Hadoop 集 群 节 点 上 自 动 安 装 的 功 能, 并 通 过 功 能 强 大 且 直 观 的 仪 表 盘 提 供 了 实 时 管 理 监 控 和 诊 断 功 能 ( 如 图 3 所 示 ) 英 特 尔 Hadoop 发 行 版 还 为 客 户 提 供 了 大 量 培 训 资 源, 以 及 系 统 设 计 部 署 定 制 和 调 试 帮 助 此 外, 这 一 发 行 版 还 享 有 24x7 全 天 候 企 业 支 持, 可 全 面 满 足 企 业 和 用 户 的 需 求, 确 保 他 们 能 够 通 过 保 持 集 群 长 时 间 稳 定 正 常 运 行 取 得 成 功 图 3. 帮 助 简 化 安 装 和 配 置, 并 缩 短 部 署 时 间 的 仪 表 盘 3 万 兆 位 以 太 网 和 其 他 因 素 在 加 速 Hadoop 工 作 流 中 所 扮 演 的 角 色 大 数 据 管 理 能 力 的 提 高 不 断 推 动 我 们 向 在 主 流 环 境 中 实 现 实 时 分 析 的 目 标 迈 进 我 们 正 通 过 使 用 常 用 的 数 据 中 心 硬 件 和 软 件, 改 善 以 前 需 要 数 小 时, 甚 至 数 天 才 能 从 源 数 据 中 生 成 价 值 的 解 决 方 案 在 这 一 环 境 中 改 善 结 果 需 要 考 虑 整 个 工 作 流, 其 中 包 括 数 据 进 入 系 统 的 点 处 理 数 据 的 机 制 以 及 与 导 出 处 理 后 的 数 据 至 系 统 相 关 的 任 务 在 此 基 础 之 上,Hadoop 工 作 流 可 划 分 为 三 个 阶 段 : 1. 导 入 使 用 Hadoop 从 大 型 数 据 集 中 生 成 答 案 的 第 一 步, 是 将 应 用 程 序 的 数 据 导 入 HDFS 数 据 可 通 过 流 式 或 批 处 理 的 方 式 导 入 2. 处 理 将 数 据 导 入 HDFS 后,Hadoop 将 处 理 该 数 据, 以 从 中 获 取 价 值 MapReduce 引 擎 通 过 其 JobTracker 节 点 接 收 来 自 应 用 程 序 的 作 业, 该 节 点 将 工 作 分 解 成 多 个 小 型 任 务, 然 后 指 派 给 TaskTracker 节 点 典 型 的 操 作 包 括 排 序 搜 索 或 分 析 TeraSort 是 一 个 基 于 数 据 排 序 工 作 负 载 的 标 准 Hadoop 性 能 指 标 评 测 程 序 1 在 我 们 的 测 试 环 境 中, 我 们 将 使 用 TeraGen 来 实 际 生 成 数 据 集 3. 导 出 当 处 理 阶 段 中 针 对 数 据 的 操 作 结 束 后, 应 用 程 序 即 可 获 得 结 果 5

6 尽 管 这 三 个 阶 段 的 相 关 需 求 因 所 执 行 工 作 的 性 质 而 差 异 较 大, 但 此 模 型 仍 表 明 了 万 兆 位 以 太 网 在 Hadoop 工 作 流 中 的 重 要 价 值 举 个 简 单 的 例 子, 包 含 大 规 模 数 据 压 缩 的 工 作 负 载 在 导 入 数 据 时 的 工 作 负 载 负 担, 可 能 会 大 于 将 数 据 导 出 为 压 缩 格 式 的 负 担 同 样, 尽 管 各 种 任 务 处 理 的 数 据 量 可 能 相 似, 但 某 些 任 务 使 用 的 计 算 资 源 将 会 高 于 其 他 任 务 调 试 和 优 化 指 导 原 则, 以 及 英 特 尔 Hadoop 发 行 版 的 相 关 支 持 服 务 将 能 够 帮 助 发 现 可 满 足 特 定 需 求 的 最 佳 方 法 3.1 优 化 导 入 阶 段 3.2 优 化 处 理 阶 段 : 从 4 小 时 缩 短 到 7 分 钟 的 历 程 英 特 尔 测 试 使 用 了 1 TB TeraSort 工 作 负 载, 通 过 1 个 命 名 节 点 分 布 于 10 个 数 据 节 点 上 为 了 评 测 升 级 各 项 资 源 的 优 势, 我 们 收 集 了 各 项 组 件 在 升 级 前 后 的 结 果, 包 括 从 5600 系 列 升 级 到 E 产 品 家 族, 从 传 统 硬 盘 升 级 至 固 态 硬 盘, 以 及 从 千 兆 位 以 太 网 升 级 至 万 兆 位 以 太 网 升 级 前 这 些 硬 件 升 级 将 约 4 个 小 时 的 处 理 时 间 缩 短 为 约 12 实 施 英 特 尔 Hadoop 发 行 版 进 一 步 将 处 理 时 间 缩 短 为 约 7 总 体 而 言, 性 能 提 高 将 处 理 阶 段 所 需 的 时 间 减 少 了 近 97% 测 试 的 首 个 硬 件 变 化 是 从 英 特 尔 至 强 处 理 器 X5690 升 级 至 英 特 尔 至 强 处 理 器 E 如 图 4 所 示, 处 理 器 升 级 将 排 序 1 TB 数 据 集 所 需 的 时 间 缩 短 了 约 一 半, 从 250 缩 短 为 升 级 后 本 模 型 中 的 导 入 阶 段 只 是 简 单 地 将 数 据 输 入 HDFS 进 行 处 理 该 过 程 始 将 始 终 最 少 进 行 一 次, 在 某 些 情 况 下, 特 别 是 将 MapReduce 作 为 服 务 出 售 的 情 况 下, 可 能 需 要 进 行 多 次 导 入 该 阶 段 和 Hadoop 复 制 工 作 将 会 在 网 络 和 存 储 I/O 方 面, 对 系 统 产 生 重 大 网 络 性 能 需 求 Hadoop* 千 兆 位 英 特 尔 以 太 网 服 务 器 Hadoop 千 兆 位 英 特 尔 以 太 网 服 务 器 处 理 器 升 级 : 缩 短 约 50% 的 时 间 传 统 机 械 硬 盘 传 统 机 械 硬 盘 当 将 数 据 导 入 系 统 时, 万 兆 位 以 太 网 网 络 连 接 对 于 满 足 这 些 需 求 极 为 重 要 将 网 络 从 千 兆 位 以 太 网 迁 移 至 万 兆 位 以 太 网 后, 包 含 并 行 写 入 的 导 入 操 作 在 使 用 传 统 机 械 硬 盘 时 性 能 最 多 可 提 高 4 倍, 而 使 用 固 态 硬 盘 时 最 多 可 提 高 6 倍 1 固 态 硬 盘 性 能 提 高 程 度 较 高 的 原 因 在 于 其 非 易 失 性 存 储 器 可 加 快 对 存 储 子 系 统 的 写 入 速 度 5600 系 列 250 E 产 品 家 族 125 图 4. 处 理 器 升 级 到 E 产 品 家 族 : 处 理 阶 段 速 度 提 高 了 约 50% 1 6

7 在 处 理 这 一 庞 大 数 据 集 时, 快 速 访 问 非 顺 序 数 据 的 能 力 是 一 个 关 键 的 性 能 注 意 事 项 因 此, 为 了 减 少 任 意 现 有 的 存 储 瓶 颈, 下 一 个 测 试 的 升 级 是 将 传 统 机 械 硬 盘 替 换 成 固 态 硬 盘, 以 利 用 其 大 幅 提 高 的 随 机 读 取 次 数 的 优 势 基 于 之 前 通 过 处 理 器 升 级 获 得 的 性 能 改 进, 从 传 统 机 械 硬 盘 升 级 为 英 特 尔 固 态 硬 盘 520 系 列 后, 完 成 工 作 负 载 所 需 的 时 间 从 约 125 缩 短 为 约 23, 降 幅 接 近 80%( 如 图 5 所 示 ) 7 升 级 前 升 级 后 Hadoop* 英 特 尔 以 太 网 千 兆 位 服 务 器 传 统 机 械 硬 盘 E 产 品 家 族 125 Hadoop 英 特 尔 以 太 网 千 兆 位 服 务 器 英 特 尔 固 态 硬 盘 520 系 列 E 产 品 家 族 升 级 到 固 态 硬 盘 : 时 间 缩 短 约 80% 23 针 对 希 望 在 同 一 服 务 器 上 组 合 使 用 传 统 机 械 硬 盘 和 固 态 硬 盘 的 客 户, 英 特 尔 提 供 了 英 特 尔 高 速 缓 存 加 速 软 件 这 一 分 层 存 储 模 型 以 较 低 的 购 置 成 本 为 用 户 提 供 了 部 分 固 态 硬 盘 的 性 能 优 势, 但 与 仅 含 固 态 硬 盘 的 配 置 相 比, 除 了 存 在 性 能 差 异 外, 该 方 法 同 时 也 牺 牲 了 固 态 硬 盘 中 的 某 些 可 靠 性 优 势 然 而, 该 存 储 模 型 为 客 户 提 供 了 另 一 选 择, 可 帮 助 他 们 逐 步 采 用 固 态 硬 盘, 从 而 显 著 缩 短 从 数 据 中 获 取 重 要 洞 察 的 时 间 测 试 还 表 明, 当 在 每 个 任 务 节 点 上 安 装 五 块 固 态 硬 盘 时,Hadoop 框 架 能 够 同 时 运 行 足 够 多 的 Map( 映 射 ) 任 务, 以 向 每 块 固 态 硬 盘 生 成 并 行 I/O, 并 将 处 理 器 的 利 用 率 提 升 至 接 近 100% 8 这 一 状 态 可 为 Map 任 务 提 供 最 优 性 能 设 置 io.sort. mb 和 io.sort.record.percen 标 记 可 有 效 避 免 中 间 Map 输 出 溢 出, 过 多 的 磁 盘 读 取 和 写 入 每 个 Map 任 务 可 在 不 到 10 秒 内 处 理 128 MB 的 数 据 块, 并 生 成 128 MB 的 输 出 信 息 并 行 运 行 32 项 Map 任 务 让 每 个 任 务 节 点 达 到 超 过 5 Gb/ 秒 的 速 度 8 图 5. 存 储 升 级 为 固 态 硬 盘 : 处 理 阶 段 速 度 提 高 了 约 80% 7 Hadoop 工 作 负 载 的 大 规 模 分 布 式 特 性 让 网 络 I/O 成 为 了 工 作 流 中 每 个 阶 段 整 体 性 能 的 一 个 关 键 要 素, 万 兆 位 以 太 网 提 供 了 一 个 经 济 高 效 可 扩 展 的 解 决 方 案, 可 帮 助 有 效 缩 短 数 据 的 等 待 时 间 高 带 宽 的 万 兆 位 以 太 网 网 络 不 仅 可 支 持 快 速 向 集 群 导 入 数 据 和 从 集 群 中 导 出 数 据, 而 且 还 可 加 速 TeraSort 工 作 负 载 的 随 机 排 列 阶 段 的 工 作 通 过 在 Map 和 Reduce( 化 简 ) 节 点 间 使 用 万 兆 位 以 太 网 链 路,Reduce 节 点 可 快 速 获 取 数 据, 从 而 能 够 显 著 缩 短 整 体 作 业 执 行 时 间, 并 提 高 集 群 性 能 Hadoop* 升 级 前 英 特 尔 以 太 网 千 兆 位 服 务 器 英 特 尔 固 态 硬 盘 520 系 列 基 于 处 理 器 和 存 储 升 级 所 取 得 的 成 果, 将 集 群 硬 件 从 千 兆 位 以 太 网 升 级 到 万 兆 位 以 太 网 后, 测 试 工 作 负 载 的 处 理 时 间 再 次 缩 短 50%, 从 23 缩 短 为 12 ( 如 图 6 所 示 ) 9 使 用 万 兆 位 以 太 网 互 连 和 固 态 硬 盘 可 支 持 在 包 含 10 个 节 点 的 测 试 集 群 上, 运 行 超 过 100 个 并 发 Reducer 任 务, 从 而 可 实 现 出 色 的 作 业 扩 展 能 力 和 较 高 的 资 源 利 用 率 5 Hadoop 升 级 后 万 兆 位 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 升 级 到 万 兆 位 以 太 网 : 时 间 缩 短 约 50% E 产 品 家 族 23 E 产 品 家 族 12 图 6. 网 络 升 级 到 万 兆 位 以 太 网 : 处 理 阶 段 速 度 提 高 了 约 50% 9 7

8 除 了 上 述 硬 件 升 级 以 外, 英 特 尔 Hadoop 发 行 版 还 提 供 了 一 个 直 观 的 界 面 和 多 项 内 部 优 化, 其 中 包 括 高 级 数 据 压 缩 针 对 HDFS 的 动 态 复 制 副 本 选 择, 以 及 MapReduce 加 速 等 这 一 额 外 的 设 计 有 助 于 提 高 性 能, 同 时 当 与 英 特 尔 可 靠 的 企 业 级 支 持 组 合 使 用 时, 将 能 够 帮 助 客 户 更 快 速 地 部 署 Hadoop 环 境, 并 加 以 出 色 的 维 护 在 硬 件 升 级 的 基 础 上, 实 施 英 特 尔 Hadoop 发 行 版 再 次 将 工 作 负 载 的 完 成 时 间 缩 短 了 约 40%, 从 约 12 缩 短 为 7 ( 如 图 7 所 示 ) 优 化 导 出 阶 段 与 导 入 阶 段 类 似, 万 兆 位 以 太 网 网 络 可 大 幅 提 升 在 处 理 后 从 系 统 提 取 数 据 的 性 能, 而 在 将 传 统 硬 盘 升 级 为 固 态 硬 盘 后, 其 优 势 更 为 显 著 对 传 统 硬 盘 进 行 的 初 步 测 试 表 明,Hadoop 工 作 流 导 出 阶 段 的 主 要 瓶 颈 是 由 于 随 机 磁 盘 寻 道 所 导 致 将 本 地 存 储 更 换 为 固 态 硬 盘 可 消 除 这 一 弊 端, 使 结 果 与 我 们 在 导 入 阶 段 所 看 到 的 结 果 保 持 一 致 通 过 使 用 固 态 硬 盘, 我 们 可 在 从 千 兆 位 以 太 网 升 级 到 万 兆 位 以 太 网 后 将 性 能 提 升 约 6 倍, 从 而 大 幅 缩 短 了 整 个 工 作 流 内 的 整 体 操 作 所 需 的 时 间 如 上 所 述, 使 用 固 态 硬 盘 和 万 兆 位 以 太 网 还 有 助 于 从 高 级 别 的 处 理 器 资 源 中 获 得 更 大 优 势, 进 而 突 显 了 平 衡 Hadoop 集 群 的 资 源 可 带 来 的 重 要 优 势 Hadoop* 升 级 前 万 兆 位 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 E 家 族 12 4 研 究 环 境 简 述 生 成 本 白 皮 书 中 所 述 结 果 的 Hadoop 测 试 平 台 包 含 一 个 头 结 点 ( 命 名 节 点,Job Tracker) 10 个 工 作 节 点 ( 数 据 节 点, Task Tracker) 和 一 台 思 科 Nexus* Gb 交 换 机 测 试 所 比 较 的 不 同 基 准 和 升 级 后 的 工 作 节 点 组 件 详 细 列 于 表 2 中 2 升 级 后 英 特 尔 Hadoop* 发 行 版 软 件 10 Gb 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 E 家 族 图 7. 实 施 英 特 尔 Hadoop* 发 行 版 软 件 : 处 理 阶 段 速 度 提 高 了 约 40% 10 部 署 英 特 尔 Hadoop* 发 行 版 软 件 : 时 间 缩 短 约 40% 7 表 2. 测 试 环 境 中 所 比 较 的 工 作 节 点 组 件 处 理 器 和 基 准 系 统 比 较 存 储 比 较 网 络 比 较 软 件 比 较 基 准 组 件 SuperMicro SYS-1026T-URF 1U 服 务 器, 包 含 两 个 英 特 尔 至 强 处 理 器 3.47 GHz, 48 GB 内 存 700 GB 7200 RPM SATA 硬 盘 英 特 尔 以 太 网 服 务 器 适 配 器 I350-T2 (1 Gb 以 太 网 ) Hadoop* 升 级 的 组 件 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存 英 特 尔 固 态 硬 盘 520 系 列 英 特 尔 以 太 网 融 合 网 络 适 配 器 X520-DA2 ( 万 兆 位 以 太 网 ) 英 特 尔 Hadoop* 发 行 版 软 件

9 5 调 试 和 优 化 注 意 事 项 除 了 升 级 网 络 组 件 和 考 虑 使 用 英 特 尔 Hadoop 发 行 版 以 外, 致 力 于 最 大 限 度 地 从 大 数 据 技 术 中 挖 掘 价 值 的 各 个 组 织, 还 必 须 考 虑 网 络 堆 栈 中 的 配 置 和 设 置, 以 及 Hadoop 软 件 环 境 本 身 尽 管 确 定 可 能 的 配 置 和 设 置 范 围 存 在 较 大 挑 战, 根 据 以 往 的 最 佳 实 践, 我 们 建 议 工 程 师 格 外 注 意 本 部 分 所 列 的 注 意 事 项, 以 获 得 最 大 价 值 5.1 网 络 连 接 操 作 系 统 和 驱 动 程 序 优 化 在 操 作 系 统 和 网 络 连 接 堆 栈 中, 任 意 时 间 打 开 的 文 件 打 开 的 网 络 连 接, 以 及 运 行 的 进 程 的 数 量 应 根 据 特 定 工 作 负 载 的 需 求 而 进 行 调 整 英 特 尔 万 兆 位 以 太 网 Linux* 驱 动 程 序 也 应 通 过 调 整 RSS 队 列 的 数 量 ( 如 本 白 皮 书 所 描 述 的, 测 试 中 的 最 优 数 量 为 两 个 ) 而 进 行 优 化, 而 且 还 应 通 过 调 整 中 断 阈 值 减 少 上 下 文 开 关 的 数 量 在 操 作 系 统 网 络 连 接 和 TCP/IP 堆 栈 中, 应 特 别 注 意 以 下 设 置 优 化 和 实 践 : 增 加 操 作 系 统 中 可 打 开 的 文 件 的 数 量 Hadoop 会 打 开 大 量 文 件, 因 此 提 高 并 发 可 打 开 的 文 件 的 数 量 限 制, 将 能 够 减 少 作 业 故 障 英 特 尔 的 测 试 发 现 32,000 个 文 件 个 数 将 足 够 提 高 并 发 进 程 的 数 量 也 有 助 于 减 少 作 业 故 障 增 加 待 处 理 的 连 接 和 SYN 请 求 的 数 量 Hadoop 的 HSFS 和 MapReduce 引 擎 将 打 开 众 多 周 期 较 短 的 TCP/IP 连 接 在 英 特 尔 设 置 配 置 中, 该 设 置 提 高 到 了 3,240,000, 减 少 了 HDFS 和 MapReduce 通 信 的 等 待 时 间 如 果 不 需 要 在 Hadoop 工 作 负 载 上 进 行 资 源 共 享, 可 考 虑 加 大 TCP/IP 的 最 大 窗 口 大 小 并 扩 展 到 16 MB 该 方 法 将 能 够 帮 助 最 大 限 度 地 提 高 万 兆 位 以 太 网 投 资 的 价 值 如 果 有 足 够 的 系 统 内 存 可 用, 可 提 高 TCP/IP 发 送 和 接 收 缓 冲 大 小 这 一 变 更 可 提 高 网 络 吞 吐 量 在 英 特 尔 测 试 集 群 中, 最 大 值 可 被 设 为 16 MB 当 带 宽 可 用 时, 禁 用 TCP/IP 可 选 ACK 当 启 用 可 选 ACK 时, 对 客 户 端 请 求 的 响 应 可 能 被 延 迟, 并 降 低 作 业 执 行 和 完 成 时 间 ; 禁 用 这 些 ACK 将 有 助 于 改 善 整 体 服 务 器 的 响 应 时 间 和 Hadoop 作 业 性 能 为 存 储 使 用 JBOD Hadoop 拥 有 内 建 的 负 载 平 衡 功 能, 并 能 够 在 可 用 的 HDFS 和 MapReduce JBOD 磁 盘 间 使 用 高 效 的 轮 询 功 能 使 用 包 含 固 态 硬 盘 和 快 速 存 储 的 RAID 可 限 制 存 储 吞 吐 量 和 整 体 作 业 性 能 相 反, 请 为 HDFS 和 MapReduce 的 磁 盘 使 用 JBOD 模 式, 这 是 因 为 HDFS 和 MapReduce 均 内 建 有 在 多 个 JBOD 磁 盘 间 进 行 负 载 平 衡 的 功 能 5.2 Hadoop 配 置 参 数 Hadoop 堆 栈 中 拥 有 超 过 200 个 配 置 参 数, 基 于 以 下 调 试 注 意 事 项 着 手 将 能 够 帮 助 工 程 团 队 高 效 工 作 : Java 虚 拟 机 (JVM) 任 务 的 内 存 配 置 每 个 Map 和 Reduce 任 务 将 在 独 立 的 JVM 实 例 中 运 行 用 户 可 分 别 使 用 配 置 参 数 mapred.map.child.java.opts 和 mapred. reduce.child.java.opts 为 Map 和 Reduce 任 务 指 定 各 个 任 务 的 内 存 英 特 尔 测 试 集 群 将 Map 任 务 堆 栈 的 内 存 设 置 为 512 MB, 将 Reduce 任 务 堆 栈 的 内 存 设 置 为 1.5 GB - Map 任 务 的 内 存 要 求 将 取 决 于 每 个 Map 所 生 成 的 输 出 数 量 包 含 排 序 应 用 程 序 的 128 MB 数 据 块 需 要 约 200 MB 的 空 间 来 存 储 中 间 记 录, 才 能 防 止 溢 出 这 一 内 存 可 使 用 配 置 参 数 进 行 管 理, 如 io.sort.mb =200 mb,io.sort.record.percent=.15 和 io.sort.spih.percent=1.0 - Reduce 任 务 的 内 存 使 用 量 也 可 进 行 调 整 英 特 尔 测 试 建 议 大 多 数 参 数 的 默 认 设 置 已 是 最 优, 但 mapred.job.reduce. inputbuffer.percent 可 变 更 为 0.7, 从 而 让 Reducer 无 需 在 开 始 最 终 合 并 前 清 空 内 存 9

10 并 发 Map 和 Reduce 任 务 的 数 量 在 英 特 尔 至 强 处 理 器 上,Map 任 务 的 最 优 数 量 通 常 为 逻 辑 内 核 的 数 量, 而 Reducer 的 数 量 应 与 物 理 内 核 的 数 量 相 同 这 些 设 置 可 通 过 mapred.tasktracker.map. tasks.maximum 和 mapred.tasktracker. reduce.tasks.maximum 参 数 进 行 配 置 命 名 节 点 和 数 据 节 点 请 求 处 理 程 序 数 量 和 线 程 数 量 如 果 命 名 节 点 上 拥 有 足 够 的 内 存 和 计 算 资 源, 那 么 命 名 节 点 中 的 线 程 处 理 程 序 数 量 可 提 高 至 100 或 更 高, 以 支 持 大 量 并 发 请 求 提 高 数 据 节 点 的 处 理 程 序 数 量 也 将 可 以 带 来 诸 多 优 势, 特 别 是 在 使 用 固 态 硬 盘 或 快 速 存 储 时, 优 势 将 更 为 突 出 降 低 节 点 间 IPC 通 信 的 网 络 延 迟 将 ipc.server.tcpnodelay 和 ipc.client. tcpnodelay 设 置 为 true Job Tracker 和 Task Tracker 之 间 的 心 跳 频 率 默 认 心 跳 频 率 为 3 秒 对 于 Map 任 务 能 够 较 快 完 成 的 小 型 作 业, 该 设 置 可 能 延 迟 任 务 完 成 通 知 和 新 任 务 的 调 度 设 置 mapreduce.tasktracker. outofband.heartbeats 立 即 发 送 作 业 完 成 通 知 可 提 高 作 业 性 能 使 用 mapreduce.tasktracker.outofband. heartbeat.damper 参 数 来 调 整 心 跳 频 率 也 能 够 提 供 一 定 的 优 势 推 测 任 务 执 行 Hadoop 可 能 在 多 个 节 点 上 安 排 相 同 的 任 务, 以 防 止 节 点 故 障 或 延 迟 执 行 这 一 实 践 若 能 够 充 分 利 用 闲 置 资 源, 则 效 果 显 著, 但 是 若 集 群 满 载 运 行, 其 效 果 甚 微 因 此, 我 们 推 荐 在 某 些 时 候 禁 用 推 测 任 务 执 行, 特 别 是 存 在 高 性 能 处 理 存 储 和 网 络 资 源 的 时 候 中 间 Map 输 出 压 缩 为 中 间 Map 输 出 启 用 压 缩 功 能 有 助 于 提 高 受 到 存 储 或 网 络 性 能 限 制 的 集 群 的 性 能 请 注 意, 当 使 用 万 兆 位 以 太 网 和 固 态 硬 盘 时, 压 缩 输 出 对 于 性 能 的 改 善 效 果 有 限 HDFS 数 据 块 大 小 HDFS 数 据 块 的 最 优 大 小 将 根 据 工 作 负 载 的 不 同 而 有 所 差 异, 但 是 较 大 的 数 据 块 大 小 通 常 不 会 形 成 较 高 的 性 能, 这 是 因 为 它 们 可 能 导 致 对 内 存 产 生 额 外 的 负 担, 并 有 可 能 在 Map 阶 段 导 致 中 间 溢 出 同 时, 较 小 的 数 据 块 大 小 将 对 较 小 和 并 行 程 度 较 高 的 任 务 产 生 额 外 的 开 销 在 英 特 尔 测 试 中, 128 MB 的 数 据 块 大 小 为 TeraSort 性 能 指 标 评 测 程 序 提 供 了 最 优 的 整 体 性 能 5.3 进 一 步 的 增 强 正 如 本 白 皮 书 中 所 介 绍 的, 英 特 尔 已 通 过 使 用 最 新 英 特 尔 至 强 处 理 器 固 态 硬 盘 万 兆 位 以 太 网 英 特 尔 以 太 网 融 合 网 络 适 配 器 和 英 特 尔 Hadoop* 发 行 版 软 件, 实 现 了 大 量 性 能 优 势 所 有 这 些 组 件 的 持 续 进 步 将 有 望 在 大 数 据 的 实 施 过 程 中 带 来 更 多 性 能 优 势 目 前, 我 们 正 在 为 Hadoop 和 其 他 大 数 据 技 术 考 虑 开 发 大 量 软 件 增 强 例 如, 我 们 可 以 通 过 将 基 于 HTTP 的 跨 节 点 通 信 更 换 成 其 他 更 为 优 化 的 选 项, 加 速 传 输 层 性 能, 在 不 增 加 物 理 资 源 的 前 提 下 提 高 整 体 吞 吐 量 这 一 增 强 和 其 他 软 件 增 强 均 为 英 特 尔 持 续 关 注 的 一 个 研 究 领 域 面 向 商 业 分 析 和 其 他 大 数 据 使 用 模 型 的 虚 拟 化 预 构 建 的 Hadoop 集 群 是 另 一 个 前 景 广 阔 的 研 发 领 域, 它 们 可 带 来 众 多 潜 在 优 势, 其 中 包 括 : 降 低 实 施 Hadoop 环 境 的 复 杂 性 为 虚 拟 化 资 源 配 置 制 定 最 佳 实 践, 摒 弃 手 动 调 整 基 于 大 数 据 技 术 构 建 多 用 途 环 境 10

11 6 结 论 存 储 和 分 析 大 量 非 结 构 化 数 据 的 能 力 将 能 够 为 企 业 学 术 机 构 和 政 府 组 织 带 来 众 多 机 会 英 特 尔 通 过 此 研 究 表 明, 通 过 使 用 精 选 的 硬 件 组 件 组 成 平 衡 的 基 础 设 施, 并 使 用 英 特 尔 Hadoop* 发 行 版 软 件,Hadoop 将 能 够 实 现 大 幅 的 性 能 提 升 本 白 皮 书 中 所 描 述 的 结 果 只 是 英 特 尔 和 行 业 其 他 领 域 所 正 在 开 展 的 并 不 断 壮 大 的 大 型 研 究 中 的 一 部 分, 这 些 研 究 旨 在 发 现 各 种 最 佳 实 践, 以 支 持 构 建 和 运 行 Hadoop 集 群 与 其 他 大 数 据 解 决 方 案, 同 时 开 发 和 调 试 软 件, 确 保 这 些 软 件 能 够 在 此 类 环 境 中 实 现 最 优 运 行 这 一 方 面 的 进 展 将 能 够 指 导 计 算 行 业 朝 着 简 化 低 成 本 实 施 的 目 标 迈 进, 从 而 推 动 在 今 后 实 现 实 时 分 析 能 力 的 广 泛 普 及 11

12 如 欲 了 解 更 多 信 息, 请 访 问 以 下 页 面 : hadoop.intel.com 英 特 尔 在 2012 年 12 月 进 行 的 TeraSort 性 能 指 标 评 测 自 定 义 设 置 :mapred.reduce.tasks=100 以 及 mapred.job.reuse.jvm.num.tasks=-1 如 欲 了 解 更 多 信 息, 请 访 问 : 2 集 群 配 置 : 一 个 头 结 点 ( 命 名 节 点,Job Tracker),10 个 工 作 节 点 ( 数 据 节 点,Task Tracker), 思 科 Nexus* Gb 交 换 机 基 准 工 作 节 点 :SuperMicro SYS-1026T-URF1U 服 务 器, 包 含 两 个 3.47 GHz,48 GB 内 存,700 GB 7200 RPM SATA 硬 盘, 英 特 尔 以 太 网 服 务 器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工 作 节 点 中 的 升 级 处 理 器 和 基 准 系 统 : 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存 工 作 节 点 中 的 升 级 存 储 : 英 特 尔 固 态 硬 盘 520 系 列 工 作 节 点 中 的 升 级 网 络 : 英 特 尔 以 太 网 融 合 网 络 X520-DA2 工 作 节 点 中 的 升 级 软 件 : 英 特 尔 Hadoop* 发 行 版 软 件 英 特 尔 固 态 硬 盘 520 系 列 当 前 未 针 对 数 据 中 心 用 途 进 行 验 证 4 固 态 硬 盘 性 能 将 由 于 容 量 的 不 同 而 有 所 差 异 5 性 能 使 用 lorneter*( 队 列 深 度 为 32) 测 量 得 出 测 试 于 2012 年 12 月 开 展 6 基 准 工 作 节 点 :SuperMicro SYS-1026T-URF1U 服 务 器, 其 中 包 含 两 个 3.47 GHz,48 GB 内 存,700 GB 7200 RPM SATA 硬 盘, 英 特 尔 以 太 网 服 务 器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工 作 节 点 中 的 升 级 处 理 器 和 基 准 系 统 : 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存,700 GB 7200 RPM SATA 硬 盘 7 基 准 存 储 :700 GB 7200 RPM SATA 硬 盘, 升 级 存 储 : 英 特 尔 固 态 硬 盘 520 系 列 8 资 料 来 源 : 英 特 尔 内 部 测 试,2012 年 12 月 9 基 准 网 络 : 英 特 尔 以 太 网 服 务 器 I350-T2, 升 级 网 络 : 英 特 尔 以 太 网 融 合 网 络 X520-DA2 10 工 作 节 点 中 的 升 级 软 件 : 英 特 尔 Hadoop* 发 行 版 软 件 在 性 能 检 测 过 程 中 涉 及 的 软 件 及 其 性 能 只 有 在 英 特 尔 微 处 理 器 的 架 构 下 方 能 得 到 优 化 诸 如 SYSmark* 和 MobileMark* 等 测 试 均 系 基 于 特 定 计 算 机 系 统 硬 件 软 件 操 作 系 统 及 功 能, 上 述 任 何 要 素 的 变 动 都 有 可 能 导 致 测 试 结 果 的 变 化 请 参 考 其 他 信 息 及 性 能 测 试 ( 包 括 结 合 其 他 产 品 使 用 时 的 运 行 性 能 ) 以 对 目 标 产 品 进 行 全 面 评 估 更 多 信 息 敬 请 登 陆 结 果 以 英 特 尔 内 部 测 试 为 基 础, 并 使 用 了 第 三 方 基 准 测 试 数 据 和 软 件 英 特 尔 不 控 制 或 审 核 本 文 件 中 所 引 述 的 网 页 或 第 三 方 所 提 供 的 基 准 数 据 的 设 计 或 实 施 情 况 英 特 尔 鼓 励 客 户 登 录 本 文 件 引 述 的 网 页 或 其 他 网 页 以 核 实 相 关 基 准 数 据 的 准 确 性 以 及 其 是 否 反 映 了 所 购 买 的 系 统 的 性 能 英 特 尔 编 译 器 针 对 非 英 特 尔 微 处 理 器 的 优 化 程 度 可 能 与 英 特 尔 微 处 理 器 相 同 ( 或 不 同 ) 这 些 优 化 包 括 SSE2 SSE3 和 SSSE3 指 令 集 以 及 其 它 优 化 对 于 在 非 英 特 尔 制 造 的 微 处 理 器 上 进 行 的 优 化, 英 特 尔 不 对 相 应 的 可 用 性 功 能 或 有 效 性 提 供 担 保 该 产 品 中 依 赖 于 处 理 器 的 优 化 仅 适 用 于 英 特 尔 微 处 理 器 部 分 非 针 对 英 特 尔 微 体 系 架 构 的 优 化 也 为 英 特 尔 微 处 理 器 保 留 了 下 来 如 欲 了 解 更 多 有 关 本 声 明 所 涉 及 的 特 定 指 令 集 的 信 息, 请 参 阅 适 用 产 品 的 用 户 和 参 考 指 南 声 明 版 本 # 本 文 件 中 包 含 关 于 英 特 尔 产 品 的 信 息 英 特 尔 未 通 过 明 示 或 暗 示, 禁 止 翻 供 或 其 他 方 式 许 可 或 担 保 与 销 售 和 / 或 使 用 英 特 尔 产 品 相 关 的 内 容, 其 中 包 括 不 对 特 定 目 的 适 用 性 适 销 性, 以 及 是 否 侵 犯 任 何 专 利 版 权 或 其 他 知 识 产 权 做 出 担 保 除 非 经 过 英 特 尔 的 书 面 同 意 认 可, 英 特 尔 的 产 品 无 意 被 设 计 用 于 或 被 用 于 以 下 应 用 : 即 在 这 样 的 应 用 中 可 因 英 特 尔 产 品 的 故 障 而 导 致 人 身 伤 亡 英 特 尔 有 权 随 时 更 改 产 品 的 规 格 和 描 述 而 毋 需 发 出 通 知 设 计 者 不 应 信 赖 任 何 英 特 产 品 所 不 具 有 的 特 性, 设 计 者 亦 不 应 信 赖 任 何 标 有 保 留 权 利 或 未 定 义 说 明 或 特 性 描 述 对 此, 英 特 尔 保 留 将 来 对 其 进 行 定 义 的 权 利, 同 时, 英 特 尔 不 应 为 因 其 日 后 更 改 该 等 说 明 或 特 性 描 述 而 产 生 的 冲 突 和 不 相 容 承 担 任 何 责 任 此 处 提 供 的 信 息 可 随 时 改 变 而 毋 需 通 知 请 勿 根 据 本 文 件 提 供 的 信 息 完 成 一 项 产 品 设 计 本 文 件 所 描 述 的 产 品 可 能 包 含 使 其 与 宣 称 的 规 格 不 符 的 设 计 缺 陷 或 失 误 这 些 缺 陷 或 失 误 已 收 录 于 勘 误 表 中, 可 索 取 获 得 在 发 出 订 单 之 前, 请 联 系 当 地 的 英 特 尔 营 业 部 或 分 销 商 以 获 取 最 新 的 产 品 规 格 索 取 本 文 件 中 或 英 特 尔 的 其 他 材 料 中 提 的 包 含 订 单 号 的 文 件 的 复 印 件, 可 拨 打 , 或 登 陆 英 特 尔 公 司 2013 年 版 权 所 有 所 有 权 保 留 英 特 尔 Intel 标 识 至 强 和 Xeon 是 英 特 尔 在 美 国 和 / 或 其 他 国 家 的 商 标 * 其 他 的 名 称 和 品 牌 可 能 是 其 他 所 有 者 的 资 产 0113/ME/MESH/PDF C 请 注 意 环 保 CN 12

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项 IT@Intel 白 皮 书 英 特 尔 IT 部 门 大 数 据 和 商 业 智 能 2013 年 10 月 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 要 点 概 述 仅 在 五 周 之 内, 我 们 就 实 施 了 基 于 Apache Hadoop* 英 特 尔 分 发 版 的 低 成 本 可 完 全 实 现 的 大 数

More information

培 训 机 构 介 绍 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培

培 训 机 构 介 绍  中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培 Hadoop 2.0 培 训 Hadoop 2.0Training Hadoop 2.0 运 维 与 开 发 实 战 培 训 邀 请 函 培 训 机 构 介 绍 www.zkpk.org 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开

More information

合集

合集 Ver 1.0 版 本 目 录 第 一 章 当 大 数 据 遇 上 SSD 01 第 二 章 广 东 移 动 运 用 Hadoop 创 新 应 用 04 第 三 章 第 四 章 第 五 章 第 六 章 第 七 章 第 八 章 第 九 章 第 十 章 如 何 利 用 大 数 据 分 析 提 升 垃 圾 短 信 过 滤 效 果 广 东 电 信 用 大 数 据 重 构 室 内 网 优 大 数 据 提 升

More information

<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63>

<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63> 关 于 举 办 Hadoop 大 数 据 及 海 量 数 据 挖 掘 应 用 工 程 师 培 训 班 的 通 知 随 着 云 时 代 的 来 临, 大 数 据 技 术 将 具 有 越 来 越 重 要 的 战 略 意 义 大 数 据 分 析 与 挖 掘 技 术 已 经 渗 透 到 每 一 个 行 业 和 业 务 职 能 领 域, 逐 渐 成 为 重 要 的 生 产 要 素, 人 们 对 于 海 量 数

More information

目录 1 不断开发工具以管理大数据 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 大数据技术的行业生态系统 在关键组件中实现平衡 计算资源的进步 存储技术的进步 网络连接的进步...

目录 1 不断开发工具以管理大数据 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 大数据技术的行业生态系统 在关键组件中实现平衡 计算资源的进步 存储技术的进步 网络连接的进步... 白皮书英特尔 固态硬盘英特尔 以太网融合网络适配器英特尔 Hadoop* 发行版软件 应用大数据技术获得近实时分析巨大成效 1 平衡的基础设施使工作负载完成时间从 4 小时缩短为 7 如今, 基于广泛可用的计算 存储和网络组件的改进, 商业 学术和政府组织有效处理大数据的能力正快速提高 英特尔利用一个优化且平衡的 Hadoop* 集群, 展示了可以得到的显著成效 这一集群由最新的 本地固态硬盘存储和万兆位英特尔

More information

Reducing Client Incidents through Big Data Predictive Analytics

Reducing Client Incidents through Big Data Predictive Analytics IT@lntel 白 皮 书 英 特 尔 IT 部 门 IT 最 佳 实 践 大 数 据 预 测 分 析 2013 年 12 月 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 总 体 概 述 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 容 易 主 动 找 出 客 户 端 问 题, 并 及 时 将 其 修 复 以 免 问 题 扩 大, 从 而 为 企 业 节 约

More information

温州市政府分散采购

温州市政府分散采购 温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理

More information

02 责任编辑 张晋芬 2 16:06:31

02 责任编辑 张晋芬 2 16:06:31 责任编辑 2015 年 9 月 7 日 第 229 期 总第 7629 期 国内统一刊号 CN51-0078 1 星期一 B 1 34 16:06:26 02 责任编辑 张晋芬 2 16:06:31 目录 Contents 责任编辑 朱华樑 03 SMB 视点 总经理兼主编 王海峰 编辑 / 记者 张金祥 朱华樑 张晋芬 李珍珍 客户总监 宫建强 詹 恒 数据总监 赵 倩 制作部 张凤林 张 琳 市场部

More information

<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63>

<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63> 项 目 编 号 : 招 标 文 件 ( 论 证 稿 ) 广 东 和 盛 招 标 代 理 有 限 公 司 Guangdong Hesheng Tendering Agency Co.,Ltd. 目 录 第 一 部 分 : 投 标 邀 请 函 1 第 二 部 分 : 采 购 项 目 内 容 4 第 三 部 分 : 投 标 人 须 知 88 第 四 部 分 : 合 同 书 格 式 104 第 五 部 分

More information

Azure_s

Azure_s Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL

More information

国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对

国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 重点文化工程 中华古籍保护计划 数字图书馆推广工程 民国时期文献保护计划 年度掠影 国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 中 华 古 籍

More information

Microsoft Word - 134招标文件.doc

Microsoft Word - 134招标文件.doc 威 海 市 政 府 采 购 招 标 文 件 采 购 编 号 :WHGP2016-134 采 购 项 目 : 网 站 建 设 采 购 方 式 : 公 开 招 标 山 东 省 鲁 成 招 标 有 限 公 司 2016 年 5 月 20 日 目 录 第 一 部 分 招 标 公 告 2 第 二 部 分 投 标 人 须 知 4 第 三 部 分 开 标 评 标 定 标 13 第 四 部 分 采 购 项 目 说

More information

3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol

3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol HPE Apollo System 中国独家提供商 服务器 存储和技术服务 以上描述适用于中国大陆地区,H3C 不是 HPE 唯一咨询服务提供商 3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo

More information

Microsoft Word - View存储注意事项.doc

Microsoft Word - View存储注意事项.doc VMware View .......................................................................... 3 Windows I/O.....................................................3...............................................................

More information

G1-0406国务院教学设备

G1-0406国务院教学设备 广 西 科 联 招 标 中 心 公 开 招 标 采 购 文 件 项 目 名 称 : 教 学 设 备 采 购 项 目 编 号 :GXZC2016-G1-0406-KLZB 采 购 人 : 广 西 国 际 商 务 职 业 技 术 学 院 采 购 代 理 机 构 : 广 西 科 联 招 标 中 心 2016 年 5 月 目 录 第 一 章 公 开 招 标 公 告... 2 第 二 章 招 标 项 目 采

More information

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI 一般報導 大數據與 巨量資料分析 曾龍 我們需要你 資料科學家 來幫助國民建立更好的數位服務 幫助我們揭開更新的創意 幫助我們改善這個國家和全世界 美國總統歐巴馬 在 2012 年 10 月發行的 哈佛商業評 論 中 戴 文 波 特 湯 姆 斯 Thomas H. Davenport 及 帕 蒂 爾 D.J. Patil 發 表 了 一篇文章 描述 21 世紀最性感的職業 資料科學家 Data Scientist:

More information

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1 Business & Operation 业 务 与 运 营 大 数 据 技 术 在 精 准 营 销 中 的 应 用 王 小 鹏 北 京 东 方 国 信 科 技 股 份 有 限 公 司 北 京 100102 摘 要 简 要 介 绍 主 流 的 大 数 据 技 术 架 构 和 大 数 据 挖 掘 技 术 ; 阐 述 大 数 据 技 术 在 精 准 营 销 与 维 系 系 统 建 设 中 的 应 用,

More information

IBM System x 系列手册

IBM System x 系列手册 IBM Systems and Technology System x IBM System x IBM System x 2 IBM System x IBM System x IBM System x BladeCenter RAS IT System x BladeCenter - IT IBM - IBM X System x System x IBM System x System x BladeCenter

More information

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式]

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式] Big Data RC Sharing 大數據掃盲 Service Planner of Enterprise Big Data 大 數 據 服 務 規 劃 師 企 業 大 數 據 課 程 規 劃 依 照 企 業 資 料 流 程 的 特 殊 性, 安 排 合 適 的 課 程 協 助 企 業 導 入 應 用 大 數 據 案 例 :Etu 資 策 會 平 安 保 險 湖 南 國 防 科 技 大 學 等

More information

雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO

雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO CHAPTER 使用 Hadoop 打造自己的雲 8 8.3 測試 Hadoop 雲端系統 4 Nodes Hadoop Map Reduce Hadoop WordCount 4 Nodes Hadoop Map/Reduce $HADOOP_HOME /home/ hadoop/hadoop-0.20.2 wordcount echo $ mkdir wordcount $ cd wordcount

More information

(Quad-Core Intel Xeon 2.0GHz) ()(SAS) (Quad-Core Intel Xeon 2.0GHz) (Windows )(Serial ATA) (Quad-Core Intel Xeon 2.0GHz) (Linux)(Serial ATA)

(Quad-Core Intel Xeon 2.0GHz) ()(SAS) (Quad-Core Intel Xeon 2.0GHz) (Windows )(Serial ATA) (Quad-Core Intel Xeon 2.0GHz) (Linux)(Serial ATA) LP5-970060 HP (EDA) HP (GIS) HP OEM HP z400 z600/xw6000 z800 xw9000 CPU 8 intel base 6SATA channel SAS Hard Disk PCI-X 192GB Memory CAE D H D SDHD CPU APRAM CPU, AMD Dual core Model 3D 64GB Memory SCI

More information

ZoneFlex AP SKU ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * A

ZoneFlex AP SKU ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * A ZoneFlex AP SKU 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * AP AP ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex

More information

总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1 -

总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1 - ( 招 标 编 号 :JXBJ2016-G008) 江 西 省 百 巨 招 标 咨 询 有 限 公 司 中 国 江 西 二 一 六 年 一 月 总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1

More information

Microsoft Word - 11900電腦軟體設計.doc

Microsoft Word - 11900電腦軟體設計.doc 技 能 檢 定 規 範 之 一 一 九 電 腦 軟 體 行 政 院 勞 工 委 員 會 職 業 訓 練 局 編 印 軟 體 技 術 士 技 能 檢 定 規 範 目 錄 一 軟 體 技 術 士 技 能 檢 定 規 範 說 明... 1 二 丙 級 軟 體 技 術 士 技 能 檢 定 規 範... 3 三 乙 級 軟 體 技 術 士 技 能 檢 定 規 範... 5 四 甲 級 軟 體 技 術 士 技

More information

Microsoft Word - 3D_仿單_領證版20150722

Microsoft Word - 3D_仿單_領證版20150722 富 士 希 納 普 斯 三 維 影 像 軟 體 FUJIFILM SYNAPSE 3D 使 用 前 請 務 必 詳 閱 原 廠 之 使 用 說 明 書 並 遵 照 指 示 使 用 衛 部 醫 器 輸 字 第 027455 號 型 號 FN-7941 產 品 敘 述 與 用 途 本 產 品 為 供 訓 練 有 素 的 專 業 醫 療 影 像 人 員 使 用 之 軟 體 本 產 品 接 受 來 自 各

More information

会计从业资格无纸化考试试题管理系统

会计从业资格无纸化考试试题管理系统 证 券 业 从 业 人 员 资 格 考 试 计 算 机 化 考 试 服 务 项 目 招 标 文 件 招 标 编 号 :B0708-CMC15N7779 中 国 机 械 进 出 口 ( 集 团 ) 有 限 公 司 2015 年 12 月 目 录 招 标 编 号 :B0708-CMC15N7779 第 一 章 投 标 邀 请... 4 第 二 章 投 标 资 料 表 评 分 细 则 投 标 人 须 知...

More information

電機工程系認可證照清單 2011/7/1

電機工程系認可證照清單                  2011/7/1 南 台 科 技 大 學 電 機 工 程 系 專 業 證 照 課 程 實 施 要 點 96 年 10 月 05 日 系 務 會 議 通 過 100 年 06 月 30 日 系 務 會 議 修 正 通 過 101 年 06 月 21 日 系 務 會 議 修 正 通 過 一 本 系 為 提 升 學 生 的 專 業 技 能, 特 訂 定 本 辦 法 二 實 施 對 象 : 本 系 日 間 部 96 學 年

More information

<4D6963726F736F667420576F7264202D20BCC6CBE3BBFABFC6D1A7D3EBBCBCCAF5D7A8D2B5C5E0D1F8B7BDB0B8A3A8D7BFD4BDA3A931332E646F63>

<4D6963726F736F667420576F7264202D20BCC6CBE3BBFABFC6D1A7D3EBBCBCCAF5D7A8D2B5C5E0D1F8B7BDB0B8A3A8D7BFD4BDA3A931332E646F63> 计 算 机 科 与 技 术 专 业 培 养 方 案 专 业 代 码 :080605 专 业 名 称 : 计 算 机 科 与 技 术 (Computer Science and Technology) 制 : 四 年 授 予 位 : 工 士 一. 培 养 目 标 本 专 业 培 养 具 有 良 好 的 科 素 养, 以 软 件 技 术 为, 系 统 地 掌 握 计 算 机 科 与 技 术, 包 括 :

More information

<4D6963726F736F667420576F7264202D20B8EAB054B35DB3C6B1C4C1CAABD8C4B3AAED2D313031A67E3131A4EB31352EB8B9A7F3B7732E646F63>

<4D6963726F736F667420576F7264202D20B8EAB054B35DB3C6B1C4C1CAABD8C4B3AAED2D313031A67E3131A4EB31352EB8B9A7F3B7732E646F63> 一 個 人 電 腦 ( 中 信 局 ) LP5-100066 ( 契 約 起 始 日 期 :101/06/04, 終 止 日 期 :102/05/31) ( 3 年 之 到 府 人 工 及 零 件 保 固 服 務 ) 等 級 規 格 預 算 CPU RAM HDD 獨 立 顯 卡 其 他 建 議 型 號 備 註 行 政 入 門 個 人 電 腦 ( 含 19 吋 以 螢 幕 ) IntelCore i3-3.3ghz

More information

《80后职场新鲜人生存手册》

《80后职场新鲜人生存手册》 80 后 职 场 新 鲜 人 生 存 手 册 *************** * 第 一 章 别 把 求 职 当 成 简 单 的 事 *************** 树 立 起 一 个 良 好 的 工 作 态 度, 在 遇 到 困 难 的 时 候 要 懂 得 正 确 对 待, 不 要 把 它 当 做 绊 脚 石, 而 要 看 成 是 锻 炼 自 己 承 受 能 力 的 机 会 ---------------

More information

PowerPoint Presentation

PowerPoint Presentation 1 版权所有 2012,Oracle 和 / 或其分支机构 保留所有权利 大数据技术概述 2 版权所有 2012,Oracle 和 / 或其分支机构 保留所有权利 以下内容旨在概述产品的总体发展方向 该内容仅供参考, 不可纳入任何合同 该内容不构成提供任何材料 代码或功能的承诺, 并且不应该作为制定购买决策的依据 此处所述有关 Oracle 产品的任何特性或功能的开发 发布以及相应的日程安排均由 Oracle

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 Apache Spark 与 多 数 据 源 的 结 合 田 毅 @ 目 录 为 什 么 会 用 到 多 个 数 据 源 Spark 的 多 数 据 源 方 案 有 哪 些 已 有 的 数 据 源 支 持 Spark 在 GrowingIO 的 实 践 分 享 为 什 么 会 用 到 多 个 数 据 源 从 数 据 本 身 来 看 大 数 据 的 特 性 之 一 :Variety 数 据 的 多 样

More information

ZoneFlex ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex

ZoneFlex ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex ZoneFlex 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex R700 7982 (1)

More information

公开招标文件

公开招标文件 广 东 省 政 府 采 购 招 标 文 件 项 目 名 称 : 广 东 山 洪 地 质 灾 害 防 治 气 象 保 障 工 程 建 设 项 目 采 购 方 式 : 公 开 招 标 二 〇 一 五 年 五 月 目 录 第 一 部 分 投 标 邀 请 函... 2 第 二 部 分 用 户 需 求 书... 6 第 三 部 分 投 标 人 须 知... 96 第 四 部 分 合 同 书 格 式... 124

More information

DPark MapReduce (Davies) davies@douban.com 2011/12/07 Velocity China 2011 Douban Douban 5500 Douban 5500 1000G, Douban 5500 1000G, 60+ Douban 5500 1000G, 60+ 200+ Douban 5500 1000G, 60+ 200+ > MooseFS

More information

201316

201316 Computer Engineering and Applications 计 算 机 工 程 与 应 用 2013,49(16) 25 基 于 开 源 Hadoop 的 矢 量 空 间 数 据 分 布 式 处 理 研 究 尹 芳 1, 冯 敏 2, 诸 云 强 2 3, 刘 睿 YIN Fang 1, FENG Min 2, ZHU Yunqiang 2, LIU Rui 3 1. 长 安 大 学

More information

COP中文范本

COP中文范本 四 川 宏 达 ( 集 团 ) 有 限 公 司 全 球 契 约 年 度 进 展 报 告 2010 年 5 月 13 日 目 录 高 管 致 辞... 1 公 司 简 介... 2 一 经 济 绩 效... 3 1. 体 系 与 政 策... 3 2. 工 作 与 成 果... 3 3. 反 馈 与 评 价... 3 二 环 境 绩 效... 3 1. 体 系 与 政 策... 4 2. 工 作 与

More information

冶金企业安全生产监督管理规定

冶金企业安全生产监督管理规定 冶 金 企 业 安 全 生 产 监 督 管 理 规 定 国 家 安 全 生 产 监 督 管 理 总 局 国 家 安 全 生 产 监 督 管 理 总 局 令 第 26 号 冶 金 企 业 安 全 生 产 监 督 管 理 规 定 已 经 2009 年 8 月 24 日 国 家 安 全 生 产 监 督 管 理 总 局 局 长 办 公 会 议 审 议 通 过, 现 予 公 布, 自 2009 年 11 月

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 张 工 培 训 注 册 消 防 工 程 师 考 试 免 费 宣 讲 课 土 木 建 筑 培 训 领 导 者 1 关 于 资 格 考 试 科 目 及 报 考 条 件 1 什 么 时 候 考 试? 一 级 和 二 级 是 同 一 时 间 考 试 吗? 根 据 公 安 部 消 防 局 官 方 答 疑,2015 年 一 级 注 册 消 防 工 程 师 资 格 考 试 时 间 和 报 名 方 式 计 划 由

More information

<4D6963726F736F667420576F7264202D20BAECB1A6C0F6A3BAB7C7B9ABBFAAB7A2D0D0B9C9C6B1C4BCBCAFD7CABDF0CAB9D3C3B5C4BFC9D0D0D0D4B1A8B8E62E646F63>

<4D6963726F736F667420576F7264202D20BAECB1A6C0F6A3BAB7C7B9ABBFAAB7A2D0D0B9C9C6B1C4BCBCAFD7CABDF0CAB9D3C3B5C4BFC9D0D0D0D4B1A8B8E62E646F63> 证 券 代 码 :002165 证 券 简 称 : 红 宝 丽 公 告 编 号 :2010-022 南 京 红 宝 丽 股 份 有 限 公 司 非 公 开 发 行 股 票 募 集 资 金 使 用 的 可 行 性 报 告 二 〇 一 〇 年 十 月 1 目 录 第 一 节 募 集 资 金 使 用 计 划 3 第 二 节 本 次 募 集 资 金 投 资 项 目 可 行 性 分 析 3 第 三 节 本 次

More information

调 查 概 述, 调 查 主 要 发 现 为 此 绿 色 和 平 主 张 01 调 查 背 景 02 环 境 信 息 公 开 的 法 理 基 础 及 实 践 03 中 国 的 环 境 信 息 公 开 办 法 ( 试 行 ) 调 查 对 象 04 05 调 查 方 法 06 07 免 责 声 明 : 08 09 调 查 主 要 结 果 及 分 析 10 11 12 超 越 第 二 十 一 条 企 业

More information

An ERP Platform Strategy Based on Industry-standard Servers

An ERP Platform Strategy Based on Industry-standard Servers IT@ lntel 白 皮 书 英 特 尔 信 息 技 术 部 门 企 业 资 源 规 划 2010 年 3 月 基 于 工 业 标 准 的 ERP( 企 业 资 源 规 划 ) 平 台 战 略 执 行 概 述 四 路 具 备 出 色 的 性 能 内 存 容 量 I/O 扩 展 能 力 和 业 经 验 证 的 技 术, 是 运 行 我 们 的 大 型 ERP 系 统 的 理 想 平 台 许 多 大

More information

<4D6963726F736F667420576F7264202D20483343CAD3C6B5BCE0BFD8BDE2BEF6B7BDB0B8A3A8B4E6B4A2B2BFCAF0A3A9BCBCCAF5B0D7C6A4CAE92E646F63>

<4D6963726F736F667420576F7264202D20483343CAD3C6B5BCE0BFD8BDE2BEF6B7BDB0B8A3A8B4E6B4A2B2BFCAF0A3A9BCBCCAF5B0D7C6A4CAE92E646F63> H3C 视 频 监 控 解 决 方 案 ( 存 储 部 署 ) 技 术 白 皮 书 关 键 词 : 单 播 组 播 存 储 视 频 监 控 摘 要 :H3C 视 频 监 控 解 决 方 案 ( 存 储 部 署 ) 整 合 了 自 主 知 识 产 权 的 IP 存 储 和 视 频 监 控 二 者 的 优 势, 根 据 用 户 的 应 用 场 景 提 供 了 多 种 视 频 数 据 存 储 模 式, 通

More information

叮当旺业通

叮当旺业通 叮 当 旺 业 通 即 时 通 讯 系 统 解 决 方 案 上 海 富 可 信 息 技 术 发 展 有 限 公 司 2011 年 06 月 03 日 日 期 版 本 说 明 变 更 人 批 准 日 期 批 准 人 目 录 第 一 部 分 引 言... 1 1.1 编 写 目 的... 1 1.2 项 目 背 景... 1 1.3 定 义... 1 1.4 参 考 资 料... 1 第 二 部 分 任

More information

93年度支用計畫書.PDF

93年度支用計畫書.PDF 93 4 29 (02)24372093-415 (02)24376209 E-mailhccheng@ems.cku.edu.tw 1 2 () 1. 2. 117,031 119318 106,998 108825 10,033 10493 229 229 69 69 19 19 20 25 ( 4,880 5744 ) 21,747 21361 34118 47,019 70 71 34 36

More information

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一 考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 五 專 企 二 乙 胡 哲 維 中 文 輸 入 五 專 企 二 乙 周 林 昜 中 文 輸 入 五 專 企 二 乙 賴 昱 樺 中 文 輸 入 五 專 企 二 乙

More information

VIDEOJET connect 7000 VJC-7000-90 zh- CHS Operation Manual VIDEOJET connect 7000 zh-chs 3 目 录 1 浏 览 器 连 接 7 1.1 系 统 要 求 7 1.2 建 立 连 接 7 1.2.1 摄 像 机 中 的 密 码 保 护 7 1.3 受 保 护 的 网 络 7 2 系 统 概 述 8 2.1 实 况

More information

ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示

ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 完整的大数据解決方案 ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 Dataframe Pig YARN Spark Stand Alone HDFS Spark Stand Alone Mesos Mesos Spark Streaming Hive Hadoop

More information

Acronis True Image 2014

Acronis True Image 2014 Update 2 使 用 指 南 目 錄 1 簡 介... 8 1.1 什 麼 是 Acronis True Image 2014?... 8 1.2 什 麼 是 Acronis True Image 2014 Premium?... 8 1.3 此 版 本 新 增 內 容... 9 1.4 系 統 需 求 與 支 援 媒 體... 9 1.4.1 最 低 系 統 需 求...9 1.4.2 支 援

More information

【工程类】

【工程类】 茂 名 市 地 方 税 务 局 会 议 室 功 能 升 级 项 目 采 购 项 目 编 号 :GZGD-2015-008 公 开 招 标 文 件 广 州 广 大 工 程 项 目 管 理 有 限 公 司 编 制 发 布 日 期 : 二 0 一 六 年 一 月 捌 日 目 录 第 一 部 分 投 标 邀 请 函 -----------------------------------------------------------------------------------------------------------

More information

附 件 : 湖 北 省 会 计 人 员 继 续 教 育 实 施 办 法 第 一 条 为 规 范 会 计 人 员 继 续 教 育 工 作, 加 强 持 有 会 计 从 业 资 格 证 书 人 员 ( 以 下 简 称 会 计 人 员 ) 继 续 教 育 的 管 理, 推 进 全 省 会 计 人 员 继 续 教 育 工 作 科 学 化 规 范 化 信 息 化, 培 养 造 就 高 素 质 的 会 计 队

More information

2016 28 2016 2013 50 2013 69 2016 2016 10 2016 1 2016 24 2016 1 2016 2016 7 1 2017 6 30 1 2016 2 2012 17 2016 2016 24 2016 1 2016 1 2016 1 2016 1 2016 2016 24 2016 24 2016 24 24 12 2016 CN 24 24 12 2016

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 大数据分析工具介绍 主讲 : 王建明 手机 :13940975206 QQ:564250480( 微信 ) 2/39 大数据的基本特征 特征 Volume 数据体量巨大 PB 级 -> EB 级 -> ZB 级 速度要求快数据输入输出的速度 Velocity Big Data Varity 数据类型多样文本 图像 视频 音频 Veracity 价值密度低商业价值高 Hadoop 生态系统介绍 ( 离线

More information

国家测绘局政府网站

国家测绘局政府网站 国 家 测 绘 局 管 理 信 息 中 心 2011 年 第 3 期 ( 总 第 11 期 ) 2011 年 4 月 15 日 2011 年 一 季 度 国 家 测 绘 局 网 站 运 行 情 况 综 述 2011 年 第 一 季 度, 国 家 测 绘 局 网 站 紧 紧 围 绕 社 会 热 点 和 局 中 心 工 作, 制 作 了 加 强 地 理 国 情 监 测, 提 升 测 绘 服 务 水 平

More information

Java ¿ª·¢ 2.0: Óà Hadoop MapReduce ½øÐдóÊý¾Ý·ÖÎö

Java ¿ª·¢ 2.0: Óà Hadoop MapReduce ½øÐдóÊý¾Ý·ÖÎö 中 文 登 录 ( 或 注 册 ) 技 术 主 题 软 件 下 载 社 区 技 术 讲 座 搜 索 developerworks developerworks 技 术 主 题 Java technology 文 档 库 Java 开 发 2.0: 用 Hadoop MapReduce 进 行 大 数 据 分 析 成 堆 的 数 据 如 何 变 成 信 息 金 矿 Andrew Glover, 作 家

More information

IT认证培训(五).doc

IT认证培训(五).doc ... IT!...... IT... IT PROJECT+... WINDOWS... 2003... PC......... IT...... IT......... C......... IT... IT... IT... I ?...... IT... IT... IT...... 2003 IT... IT... 2003 IT.................. :... 2002...

More information

<4D6963726F736F667420576F7264202D20CFB5B7D62DCFC2CEE749CAD4CCE22D3037C9CF>

<4D6963726F736F667420576F7264202D20CFB5B7D62DCFC2CEE749CAD4CCE22D3037C9CF> 全 国 计 算 机 技 术 与 软 件 专 业 技 术 资 格 ( 水 平 ) 考 试 2007 年 上 半 年 系 统 分 析 师 下 午 试 卷 I ( 考 试 时 间 3:30~5:00 共 90 分 钟 ) 请 按 下 表 选 答 试 题 试 题 号 一 二 ~ 五 选 择 方 法 必 答 题 选 答 2 题 请 按 下 述 要 求 正 确 填 写 答 题 纸. 本 试 卷 满 分 75 分,

More information

岳西职教中心

岳西职教中心 省 级 示 范 中 等 职 业 学 校 复 评 申 报 材 料 岳 西 县 职 业 技 术 教 育 中 心 二 00 九 年 九 月 目 录 一 关 于 要 求 对 岳 西 县 职 教 中 心 申 报 省 级 示 范 中 等 职 业 学 校 工 作 进 行 复 评 的 报 告 二 关 于 成 立 岳 西 县 争 创 省 级 示 范 中 等 职 业 学 校 领 导 小 组 的 通 知 三 关 于 成

More information

156 ORACLE SUN ORACLE SUN

156 ORACLE SUN ORACLE SUN ORACLE SUN ( Oracle ) Oracle Oracle SUN SUN Oracle 155 156 ORACLE SUN ORACLE SUN Database Appliance X4-1 Oracle ORACLE SUN 1. Oracle Database Appliance (ODA) X4-2 ODA Oracle Database (OLTP) Oracle License

More information

《计算机应用基础》学习材料(讲义)

《计算机应用基础》学习材料(讲义) 计 算 机 应 用 基 础 学 习 材 料 ( 讲 义 ) Fundamentals of Computer Application 2014-3-22 JIANGSU OPEN UNIVERSITY 第 二 学 习 周 计 算 机 基 础 知 识 ( 一 ) 导 学 在 本 学 习 周, 我 们 主 要 的 任 务 是 认 识 计 算 机 你 将 知 道 计 算 机 是 什 么 时 候 产 生 的,

More information

pdf

pdf i ii iii 1 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 QCon QCon InfoQ DNS StartRender Full load QPS 20% Dom html 26 URI Profile RT QPS URI profile InfoQ RT 50ms 40ms 10ms 20% RT Velocity

More information

cosa Quick Start Manual

cosa Quick Start Manual 小 心 SmartStor Cloud 網 路 儲 存 體 機 箱 內 的 電 子 元 件 易 受 靜 電 放 電 (ESD) 的 影 響, 因 而 受 到 損 壞 處 理 SmartStor Cloud 裝 置 或 其 子 配 件 時, 應 隨 時 遵 守 預 防 措 施 警 告! 風 扇 含 有 危 險 的 活 動 零 件 確 保 手 指 及 其 他 身 體 部 位 遠 離 風 扇 小 心 如

More information

基于 SQL-on-Hadoop 的 网络日志分析

基于 SQL-on-Hadoop 的 网络日志分析 1896 1920 1987 2006 基于 SQL-on-Hadoop 的 网络日志分析 章思宇, 姜开达, 韦建文, 罗萱, 王海洋 上海交通大学网络信息中心 2014 年 11 月 事后追查 校园网安全日志分析 已经发生, 已被发现的入侵 攻击检测 已经发生, 尚不知晓的攻击 正在进行的攻击 (APT) 漏洞挖掘 发现尚未被利用的漏洞 镜像流量抓包分析 网络流量日志采集 Internet 缓存加速系统

More information

IPC IPC PCs SIMATIC IPC PC 30 PCs 1983 PC SIMATIC IPC 9 PC TIA Portal SIMATIC IPC PC SIMATIC 1 Mio. 0.5 Mio TIA

IPC IPC PCs SIMATIC IPC PC 30 PCs 1983 PC SIMATIC IPC 9 PC TIA Portal SIMATIC IPC PC SIMATIC 1 Mio. 0.5 Mio TIA SIMATIC IPC PC siemens.com/ipc IPC IPC PCs SIMATIC IPC PC 30 PCs 1983 PC SIMATIC IPC 9 PC TIA Portal SIMATIC IPC PC SIMATIC 1 Mio. 0.5 Mio. 2004 2006 2008 2010 2012 2014 2016... TIA Portal siemens.com/tia-portal

More information

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家 全 国 中 小 企 业 股 份 转 让 系 统 有 限 责 任 公 司 2016 年 暑 期 实 习 生 招 收 公 告 一 公 司 简 介 全 国 中 小 企 业 股 份 转 让 系 统 ( 以 下 简 称 新 三 板 ) 是 经 国 务 院 批 准, 依 据 证 券 法 设 立 的 继 上 交 所 深 交 所 之 后 第 三 家 全 国 性 证 券 交 易 场 所, 也 是 境 内 第 一 家

More information

I/ OHDD HDD Soeda I/O HDD SSD SSD SSD HDD Hitachi HP HP StorageWorks XP24000 XP20000 SSD SSD Hitachi Universal Storage Platform V VM SSD

I/ OHDD HDD Soeda I/O HDD SSD SSD SSD HDD Hitachi HP HP StorageWorks XP24000 XP20000 SSD SSD Hitachi Universal Storage Platform V VM SSD SSDHDD NAND Solid-State Drives, SSD baidu. com Baidu comscore 2 2008 1 baidu.jp baidu.com GB 100 10 1 0.1 0.01 PND NAND GB SSD20GB Netbook solid-state drives, SSD NAND HDD NAND 2.5 HDD 160GB 3.5 HDD 750GB

More information

思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846 联 系 人 : 刘 颖 董 凯 联 系 电 话 :010

思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846 联 系 人 : 刘 颖 董 凯 联 系 电 话 :010 大 数 据 发 展 白 皮 书 (2015 版 ) 中 国 电 子 信 息 产 业 发 展 研 究 院 工 业 和 信 息 化 部 赛 迪 智 库 二 一 五 年 四 月 思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846

More information

镇江市行政审批事项申报材料清单

镇江市行政审批事项申报材料清单 丹 政 办 发 2015 143 号 关 于 公 布 行 政 审 批 事 项 申 报 材 料 及 前 置 中 介 服 务 事 项 清 单 的 通 知 各 镇 人 民 政 府, 各 街 道 办 事 处, 开 发 区 管 委 会, 练 湖 度 假 区 管 委 会, 市 政 府 各 部 门, 市 各 直 属 单 位 : 为 进 一 步 简 政 放 权, 深 化 行 政 审 批 制 度 改 革, 切 实 解

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 Hadoop 生 态 技 术 在 阿 里 全 网 商 品 搜 索 实 战 阿 里 巴 巴 - 王 峰 自 我 介 绍 真 名 : 王 峰 淘 宝 花 名 : 莫 问 微 博 : 淘 莫 问 2006 年 硕 士 毕 业 后 加 入 阿 里 巴 巴 集 团 淘 及 搜 索 事 业 部 ( 高 级 技 术 与 家 ) 目 前 负 责 搜 索 离 线 系 统 团 队 技 术 方 向 : 分 布 式 计 算

More information

一 公 司 简 介 993 年, 顺 丰 诞 生 于 广 东 顺 德 自 成 立 以 来, 顺 丰 始 终 专 注 于 服 务 质 量 的 提 升 持 续 加 强 基 础 建 设 积 极 研 发 和 引 进 具 有 高 科 技 含 量 的 信 息 技 术 与 设 备 以 提 升 作 业 自 动 化

一 公 司 简 介 993 年, 顺 丰 诞 生 于 广 东 顺 德 自 成 立 以 来, 顺 丰 始 终 专 注 于 服 务 质 量 的 提 升 持 续 加 强 基 础 建 设 积 极 研 发 和 引 进 具 有 高 科 技 含 量 的 信 息 技 术 与 设 备 以 提 升 作 业 自 动 化 顺 丰 集 团 206 届 校 园 招 聘 简 章 一 公 司 简 介 993 年, 顺 丰 诞 生 于 广 东 顺 德 自 成 立 以 来, 顺 丰 始 终 专 注 于 服 务 质 量 的 提 升 持 续 加 强 基 础 建 设 积 极 研 发 和 引 进 具 有 高 科 技 含 量 的 信 息 技 术 与 设 备 以 提 升 作 业 自 动 化 水 平, 在 国 内 外 建 立 了 庞 大 的

More information

ATI-2019安裝手冊-v

ATI-2019安裝手冊-v #1 ...02 Acronis True Image...03 Acronis True Image 2019...03 Acronis True Image 2019...04 ( ) 64...04 ( ) Acronis Account...05 ( )...05 ( ) Acronis True Image...05 ( ) Windows...06 1....06 2....08 ( )

More information

操 守, 爱 岗 敬 业 诚 实 守 信 办 事 公 道 服 务 群 众 奉 献 社 会 ; 具 备 从 事 职 业 活 动 所 必 需 的 基 本 能 力 和 管 理 素 质 ; 脚 踏 实 地 严 谨 求 实 勇 于 创 新 3. 人 文 素 养 与 科 学 素 质 : 具 有 融 合 传 统

操 守, 爱 岗 敬 业 诚 实 守 信 办 事 公 道 服 务 群 众 奉 献 社 会 ; 具 备 从 事 职 业 活 动 所 必 需 的 基 本 能 力 和 管 理 素 质 ; 脚 踏 实 地 严 谨 求 实 勇 于 创 新 3. 人 文 素 养 与 科 学 素 质 : 具 有 融 合 传 统 计 算 机 类 专 业 ( 大 数 据 方 向 ) 大 专 人 才 培 养 方 案 一 招 生 对 象 及 学 习 年 限 ( 一 ) 招 生 对 象 : 全 日 制 普 通 中 学 高 中 毕 业 生, 招 生 方 式 为 普 通 高 考 招 生 ( 二 ) 学 习 年 限 : 基 本 学 制 三 年, 实 行 弹 性 学 制, 学 生 在 校 时 间 原 则 上 不 能 少 于 两 年, 总 在

More information

在 Hitachi AMS 2000 系列上应用 VMware VAAI 的优势

在 Hitachi AMS 2000 系列上应用 VMware VAAI 的优势 1 与 VMware VAAI 配 套 使 用 Hitachi Adaptable Modular Storage 2000 系 列 的 优 势 实 验 室 认 证 报 告 作 者 :Henry Chu 和 Roger Clark 2011 年 2 月 年 月 反 馈 日 立 数 据 系 统 公 司 欢 迎 您 提 供 反 馈 意 见 请 发 送 电 子 邮 件 至 SolutionLab@hds.com,

More information

Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac

Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac Dell EMC Dell EMC IT Dell EMC IT Dell EMC https://www. dellemc.com/ Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost

More information

公 司 年 度 大 事 记 2015 年 10 月 -11 月, 公 司 完 成 股 份 制 改 造 10 月 13 日, 百 灵 有 限 临 时 股 东 会 作 出 决 议, 同 意 各 发 起 人 将 其 在 百 灵 有 限 拥 有 的 截 至 2015 年 8 月 31 日 经 审 计 的 原

公 司 年 度 大 事 记 2015 年 10 月 -11 月, 公 司 完 成 股 份 制 改 造 10 月 13 日, 百 灵 有 限 临 时 股 东 会 作 出 决 议, 同 意 各 发 起 人 将 其 在 百 灵 有 限 拥 有 的 截 至 2015 年 8 月 31 日 经 审 计 的 原 百 灵 电 子 NEEQ :836943 郑 州 百 灵 电 子 技 术 股 份 有 限 公 司 (ZHENGZHOU BEELINK ELECTRONIC TECHNOLOGY CO.,LTD.) 年 度 报 告 2015 第 1 页, 共 110 页 公 司 年 度 大 事 记 2015 年 10 月 -11 月, 公 司 完 成 股 份 制 改 造 10 月 13 日, 百 灵 有 限 临 时

More information

項 目 重 要 日 程 碩 士 班 ( 含 在 職 專 班 ) 日 期 博 士 班 網 路 報 名 104.12.20( 日 )12:00~ 105.2.3( 三 ) 105.4.20( 三 )12:00-5.11( 三 ) 報 名 繳 費 截 止 日 105.2.4( 四 )15:30 免 報 名

項 目 重 要 日 程 碩 士 班 ( 含 在 職 專 班 ) 日 期 博 士 班 網 路 報 名 104.12.20( 日 )12:00~ 105.2.3( 三 ) 105.4.20( 三 )12:00-5.11( 三 ) 報 名 繳 費 截 止 日 105.2.4( 四 )15:30 免 報 名 靜 宜 大 學 105 學 年 度 碩 博 士 班 暨 碩 士 在 職 專 班 考 試 入 學 招 生 簡 章 靜 宜 大 學 教 務 處 招 生 組 編 訂 中 華 民 國 104 年 11 月 項 目 重 要 日 程 碩 士 班 ( 含 在 職 專 班 ) 日 期 博 士 班 網 路 報 名 104.12.20( 日 )12:00~ 105.2.3( 三 ) 105.4.20( 三 )12:00-5.11(

More information

分布式数据库期中作业说明

分布式数据库期中作业说明 厦 门 大 学 林 子 雨 编 著 大 数 据 技 术 原 理 与 应 用 ( 版 本 号 :2016 年 4 月 13 日 版 本 ) ( 备 注 :2015 年 8 月 1 日 第 一 版 教 材 中 没 有 本 章, 本 章 为 2016 年 新 增 内 容, 将 被 放 入 第 二 版 教 材 中 ) ( 版 权 声 明 : 版 权 所 有, 请 勿 用 于 商 业 用 途 ) 主 讲 教

More information

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成 ULA 尚 观 云 计 算 集 群 架 构 师 ( 零 首 付 )V9.0( 周 末 ) 一 尚 观 教 育 九 年 运 营 35000 学 员, 平 均 月 薪 6258+ 签 法 律 双 保 就 业 协 议, 保 底 薪, 保 就 业, 不 就 业 100% 退 所 有 学 费, 绝 非 就 业 推 荐 协 议 9 年 运 营 9 大 城 市 直 属 校 区 实 力 保 证, 三 万 多 名 已

More information

HighPoint产品的FAQ手册

HighPoint产品的FAQ手册 一 引 言 首 先 承 蒙 贵 公 司 赐 顾, 使 用 HighPoint ( 简 称 HPT) 系 列 产 品 以 下 是 根 据 多 年 来 合 作 的 客 户 所 提 出 的 问 题 而 总 结 出 的 有 关 HighPoint 系 列 产 品 的 FAQ, 欢 迎 您 随 时 提 出 批 评 建 议 以 便 我 们 及 时 改 进 谢 谢! 二 HighPoint RAID 产 品 技

More information

数字地理空间框架及一村一镇一地图建设

数字地理空间框架及一村一镇一地图建设 数 字 五 华 地 理 空 间 框 架 及 一 村 一 镇 一 地 图 建 设 项 目 招 标 文 件 招 标 编 号 :SZGXMZ140318 2014 年 5 月 12 日 编 制 人 : 曾 旭 明 目 录 第 一 部 分 投 标 邀 请 书...4 第 二 部 分 投 标 须 知...6 1. 关 于 定 标 方 式...6 2. 关 于 招 标 文 件...6 3. 关 于 投 标 人...6

More information

从上面这个表格中我们可以很明显看到巨大的差异当数据全部缓存到内存中 内存大小会影响所有操作 不管是 SELECT 还是 INSERT/UPDATE/DELETE 操作 INSERT 当往一个随机排序的索引中插入数据的时候会造成随机的读/写 UPDATE/DELETE 当更改数据的时候会导致磁盘的读/

从上面这个表格中我们可以很明显看到巨大的差异当数据全部缓存到内存中 内存大小会影响所有操作 不管是 SELECT 还是 INSERT/UPDATE/DELETE 操作 INSERT 当往一个随机排序的索引中插入数据的时候会造成随机的读/写 UPDATE/DELETE 当更改数据的时候会导致磁盘的读/ MySQL 服务器的 linux 性能优化和扩展技巧 作者 Yoshinori Matsunbu 作者现在是 DeNA 公司的数据库和基础设施架构师 之前在 SUN 公司工作 他也是 HandlerSocket 的作者 这个是 MySQL 的 NoSQL 插件 本文是根据他的 PPT 整理而成的 如有不正确敬请指教 本文主要的内容有如下 1. 内存和 SWAP 空间管理 2. 同步 I/O 文件系统和

More information

Sun Storage Common Array Manager 阵列管理指南,版本 6.9.0

Sun Storage Common Array Manager  阵列管理指南,版本 6.9.0 Sun Storage Common Array Manager 阵 列 管 理 指 南, 版 本 6.9.0 文 件 号 码 :E27519-01 2012 年 2 月 版 权 所 有 2007, 2011, Oracle 和 / 或 其 附 属 公 司 保 留 所 有 权 利 本 软 件 和 相 关 文 档 是 根 据 许 可 证 协 议 提 供 的, 该 许 可 证 协 议 中 规 定 了 关

More information

深入理解otter

深入理解otter 深 入 理 解 otter 七 锋 2013-07-04 Agenda 1. 中 美 同 步 需 求 2. otter 架 构 & 设 计 o o o o o o o o 如 何 解 决 " 差 " 网 络 如 何 避 免 双 向 回 环 如 何 处 理 数 据 一 致 性 如 何 高 效 同 步 数 据 如 何 高 效 同 步 文 件 如 何 支 持 系 统 HA 如 何 处 理 特 殊 业 务

More information

双机模板方案0404.doc

双机模板方案0404.doc 2004 4 1 16 2 16 NF420 CPU XOEN MP 2.0G/1M*2 2 MEM DDR 2GB HDD 36G*2RAID1 NS3500 RAID 1 12 48 36G/73G/146G 10krpm 2+1 73G*5 Windows/Linux 1 HA LCHA for Windows/Linux 1 3 16 4 16 5 16 Heartb Local Disc

More information

Autodesk Whitepaper A4 size

Autodesk Whitepaper A4 size Autdesk Revit 2015 Revit Architecture 2015 Revit MEP 2015 Revit Structure 2015 Revit 模 型 效 能 技 術 文 件 與 任 何 設 計 儀 器 一 樣,Autdesk Revit 的 效 能 優 劣 取 決 於 使 用 者 的 知 識 技 能 與 實 務 做 法 以 及 為 軟 體 提 供 的 硬 體 環 境 為

More information

Acronis True Image 2015

Acronis True Image 2015 目 录 1 简 介...6 1.1 Acronis True Image 2015 是 什 么?... 6 1.2 此 版 本 中 的 新 增 功 能... 6 1.2.1 被 移 除 功 能 的 替 代 选 择... 7 1.3 系 统 要 求 与 支 持 的 媒 体... 7 1.3.1 最 低 系 统 要 求... 7 1.3.2 支 持 的 操 作 系 统... 7 1.3.3 支 持 的

More information

案由:審議各單位提報「101年度教育部對私立技專校院整體發展獎補助經費支用計畫書」中經常門、資本門經費支用項目及金額

案由:審議各單位提報「101年度教育部對私立技專校院整體發展獎補助經費支用計畫書」中經常門、資本門經費支用項目及金額 樹 德 科 技 大 學 103 年 度 第 1 次 整 體 發 展 獎 勵 補 助 經 費 規 劃 專 責 小 組 會 議 記 錄 已 於 103 年 02 月 25 日 奉 副 校 長 代 理 校 長 核 准 備 查 在 案 時 間 :103 年 2 月 20 日 ( 星 期 四 ) 中 午 12 時 10 分 地 點 : 行 政 大 樓 3 樓 A308 主 持 人 : 朱 元 祥 校 長 出

More information

30.00% 25.00% 25.00% 22.50% 20.00% 15.00% 12.50% 15.00% 12.50% 10.00% 7.50% 5.00% 2.50% 2.50% 0.00% 文 学 理 学 工 学 法 学 教 育 学 管 理 学 历 史 学 艺 术 学 ( 三 ) 学 生

30.00% 25.00% 25.00% 22.50% 20.00% 15.00% 12.50% 15.00% 12.50% 10.00% 7.50% 5.00% 2.50% 2.50% 0.00% 文 学 理 学 工 学 法 学 教 育 学 管 理 学 历 史 学 艺 术 学 ( 三 ) 学 生 四 川 文 理 学 院 2014 年 本 科 教 学 质 量 报 告 2014 年 来, 在 教 育 主 管 部 门 的 关 怀 指 导 下, 在 学 校 党 政 班 子 的 正 确 领 导 下, 广 大 师 生 员 工 团 结 一 心, 按 照 国 家 中 长 期 教 育 改 革 和 发 展 规 划 纲 要 和 教 育 部 对 办 应 用 型 本 科 的 要 求, 深 入 贯 彻 落 实 学 校

More information

LP / / / / / /

LP / / / / / / LP5-990091 / / / / / / 個人電腦之主機 LP5-990091 13 14 15 16 OptiPlex 790 OptiPlex 790 OptiPlex 790 OptiPlex 790 16,757 16,557 13,725 13,525 ( / ) 17,865 17,651 14,632 14,419 Intel Core i3-2100 Intel Core i3-2100

More information

XXXXXXXX http://cdls.nstl.gov.cn 2 26

XXXXXXXX http://cdls.nstl.gov.cn 2 26 [ ] [ ] 2003-7-18 1 26 XXXXXXXX http://cdls.nstl.gov.cn 2 26 (2003-7-18) 1...5 1.1...5 1.2...5 1.3...5 2...6 2.1...6 2.2...6 2.3...6 3...7 3.1...7 3.1.1...7 3.1.2...7 3.1.2.1...7 3.1.2.1.1...8 3.1.2.1.2...10

More information

Slide 1

Slide 1 IBM 大数据解决方案 Enterprise DataNode Using X3690X5 and EXP2512 Smarter Systems for a Smarter Planet 2011 IBM Corporation Reasons for using X3690X5 Data Node IBM System and Technology Group Advantage Description

More information

标题

标题 全 面 推 开 营 改 增 业 务 操 作 指 引 国 家 税 务 总 局 全 面 推 开 营 改 增 督 促 落 实 领 导 小 组 办 公 室 编 图 书 在 版 编 目 (CIP) 数 据 全 面 推 开 营 改 增 业 务 操 作 指 引 / 国 家 税 务 总 局 全 面 推 开 营 改 增 督 促 落 实 领 导 小 组 办 公 室 编. 北 京 : 中 国 税 务 出 版 社, 2016.

More information

附件2

附件2 附 件 2 辽 宁 省 普 通 高 等 学 校 本 科 优 势 特 色 专 业 申 报 书 专 业 名 称 : 软 件 工 程 专 业 代 码 : 080902 推 荐 学 校 ( 公 章 ): 大 连 交 通 大 学 推 荐 学 校 代 码 : 10150 专 业 带 头 人 : 梁 旭 联 系 电 话 ( 手 机 ): 13842899132 辽 宁 省 教 育 厅 制 2015 年 6 月 一

More information

校友会系统白皮书feb_08

校友会系统白皮书feb_08 硕 士 研 究 生 招 生 管 理 系 统 1 产 品 白 皮 书 希 尔 数 字 校 园 硕 士 研 究 生 招 生 管 理 系 统 白 皮 书 目 录 1 产 品 概 述... 1 1.1 产 品 简 介... 1 1.2 应 用 范 围... 1 2 产 品 功 能 结 构 图... 2 3 产 品 功 能... 3 3.1 系 统 设 置... 3 3.2 信 息 发 布... 3 3.3

More information

2003年中报正文.PDF

2003年中报正文.PDF SHANGHAI XINGYE HOUSING CO., LTD XYHC 333 200031-1 - 021-54042455 021-54045488 E-mailqiyong @ xingye.sina.net 38 200002 333 200031 021-54042455 021-54045488 E-mailxingyeb @ online.sh.cn http: // www. sse.

More information

PowerPoint Presentation

PowerPoint Presentation 数 字 化 校 园 信 息 平 台 解 决 方 案 杭 州 正 方 电 子 工 程 有 限 公 司 2007.10 杭 州 正 方 电 子 工 程 有 限 公 司 简 介 正 方 公 司 成 立 于 1999 年 1 月 份, 现 有 员 工 170 多 名, 是 经 相 关 机 构 认 定 的 高 新 技 术 企 业 软 杭 件 企 州 业 正, 取 方 得 电 计 算 子 机 工 软 件 程 著

More information

迅闪2009帮助手册(xshelp)

迅闪2009帮助手册(xshelp) 信 佑 技 术 白 皮 书 信 佑 6.0 目 录 1. 产 品 入 门... 1 1.1. 部 署 结 构... 1 1.2. 安 装 环 境 需 求... 1 1.3. 服 务 器 部 署 安 装... 2 1.4. 客 户 机 部 署 安 装... 8 1.5. 服 务 控 制 器... 12 2. 客 户 机 管 理... 13 2.1. 设 置 分 组... 13 2.2. 添 加 客 户

More information

0523内页正稿-改风格

0523内页正稿-改风格 1100MP 8,999 Dell Axim X50/X50v 300-500 4 Dell 2300MP Dell X50 416MHz 3,599 10-11 Dell E153FP 2 3 4-5 6-7 100 8-9 8-9 10-11 12 Oracle on Dell 13 5 14-15 1400 21001 15 800 x 600 2.2 1.677M 32 E232 1:1.2

More information

untitled

untitled TS-411U Turbo Server TS-411U Turbo Server ( : 1.0.0) 2005 2005 12 8-2 - 1. 2. TS-411U Turbo Server - 3 - ... 7 1.1... 7 1.2... 8 1.3... 9 TS-411U... 10 2.1... 10 2.2... 14 2.3 TS-411U... 15 LCD... 17...

More information

Microsoft Word - N3-CH3.doc

Microsoft Word - N3-CH3.doc Chapter 3 借貸法則 分錄與過帳 第一部分 課本習題 含答案 問答題] 易 [會計科目] 1. 什麼是會計科目 帳戶 的正常餘額 在借方還是在貸方 答案 資產與費損類的科目增加時 應將增加金額記載在會計帳戶的借方 左方 則 資產與費損類的科目正常餘額即在借方 負債 權益與收益類科目增加時 應將 增加金額記載在會計帳戶的貸方 右方 則負債 權益與收益類的科目正常餘 額即在貸方 易 [會計分錄的內容]

More information