目 录 1 不 断 开 发 工 具 以 管 理 大 数 据 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 大 数 据 技 术 的 行 业 生 态 系 统 在 关 键 组 件 中 实 现 平 衡...
|
|
- 张僻 伏
- 7 years ago
- Views:
Transcription
1 白 皮 书 英 特 尔 固 态 硬 盘 英 特 尔 以 太 网 融 合 网 络 英 特 尔 Hadoop* 发 行 版 软 件 应 用 大 数 据 技 术 获 得 近 实 时 分 析 巨 大 成 效 1 平 衡 的 基 础 设 施 使 工 作 负 载 完 成 时 间 从 4 小 时 缩 短 为 7 如 今, 基 于 广 泛 可 用 的 计 算 存 储 和 网 络 组 件 的 改 进, 商 业 学 术 和 政 府 组 织 有 效 处 理 大 数 据 的 能 力 正 快 速 提 高 英 特 尔 利 用 一 个 优 化 且 平 衡 的 Hadoop* 集 群, 展 示 了 可 以 得 到 的 显 著 成 效 这 一 集 群 由 最 新 的 本 地 固 态 硬 盘 存 储 和 万 兆 位 英 特 尔 以 太 网 融 合 网 络 组 成 事 实 上, 在 英 特 尔 所 开 展 的 多 项 测 试 中, 通 过 升 级 这 些 组 件 和 使 用 英 特 尔 Hadoop* 发 行 版 软 件 ( 英 特 尔 Hadoop 发 行 版 ), 可 将 使 用 TeraSort 基 准 工 作 负 载 排 序 1 TB 数 据 所 需 的 时 间 从 约 4 小 时 缩 短 至 约 7 1,2 这 些 结 果 预 示 着 我 们 向 近 实 时 数 据 分 析 的 宏 伟 目 标 又 迈 近 了 一 大 步, 而 且 所 需 的 成 本 大 幅 低 于 此 前 使 用 专 有 硬 件 和 软 件 实 施 的 成 本 大 幅 的 成 本 节 省 和 效 率 提 升 对 于 发 挥 出 大 数 据 技 术 的 全 部 潜 力 至 关 重 要 本 白 皮 书 介 绍 了 这 些 结 果 的 实 现 方 法, 以 作 为 IT 决 策 者 和 其 他 人 员 在 考 虑 投 资 方 向 时 的 指 导, 进 而 从 Hadoop* 环 境 中 获 得 最 佳 成 效 同 时 文 章 还 介 绍 了 经 过 预 先 优 化 的 交 钥 匙 型 英 特 尔 Hadoop 发 行 版 软 件 具 备 的 部 分 优 势 各 组 织 可 通 过 使 用 此 处 所 列 的 指 导 原 则, 在 满 足 其 预 算 要 求 的 前 提 下, 实 现 特 定 工 作 负 载 和 环 境 的 最 佳 性 能 平 衡 Hadoop* 集 群 内 的 计 算 存 储 和 网 络 资 源, 可 以 发 挥 出 最 新 英 特 尔 处 理 器 固 态 硬 盘 万 兆 位 英 特 尔 以 太 网 融 合 网 络 和 英 特 尔 Hadoop* 发 行 版 软 件 的 全 部 优 势 通 过 利 用 这 些 组 件 构 建 一 个 平 衡 的 基 础 设 施, 英 特 尔 将 完 成 TeraSort 基 准 测 试 工 作 负 载 所 需 的 时 间 从 约 4 小 时 缩 短 至 约 7 分 钟, 降 幅 约 为 97% 1 大 数 据 技 术 可 实 现 的 此 类 结 果 为 低 成 本 近 实 时 的 数 据 分 析 铺 平 了 道 路, 将 能 够 帮 助 企 业 近 乎 实 时 地 响 应 瞬 息 万 变 的 市 场 需 求, 并 从 其 资 产 中 获 得 更 多 价 值 1
2 目 录 1 不 断 开 发 工 具 以 管 理 大 数 据 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 大 数 据 技 术 的 行 业 生 态 系 统 在 关 键 组 件 中 实 现 平 衡 计 算 资 源 的 进 步 存 储 技 术 的 进 步 网 络 连 接 的 进 步 业 经 优 化 的 英 特 尔 Hadoop 发 行 版 万 兆 位 以 太 网 和 其 他 因 素 在 加 速 Hadoop 工 作 流 中 所 扮 演 的 角 色 优 化 导 入 阶 段 优 化 处 理 阶 段 : 从 4 小 时 缩 短 到 7 的 历 程 优 化 导 出 阶 段 研 究 环 境 简 述 调 试 和 优 化 注 意 事 项 网 络 连 接 操 作 系 统 和 驱 动 程 序 优 化 Hadoop 配 置 参 数 进 一 步 的 增 强 结 论 不 断 开 发 工 具 以 管 理 大 数 据 当 前, 无 论 是 何 种 类 型 和 规 模 的 企 业, 都 无 一 例 外 地 拥 有 着 庞 大 的 数 据 库 处 理 转 换 并 从 数 据 中 ( 通 常 为 非 结 构 化 数 据 ) 获 取 优 势 的 能 力 正 快 速 成 为 一 种 标 准 要 求, 同 时 能 够 进 行 此 类 工 作 的 工 具 和 技 术 也 日 益 普 遍 诸 如 Hadoop 等 框 架 的 广 泛 应 用, 而 且 越 来 越 多 的 IT 部 门 开 始 逐 渐 构 建 其 自 有 的 计 算 环 境 来 处 理 大 数 据 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架 Hadoop 是 一 个 使 用 Java* 编 写 基 于 谷 歌 的 MapReduce* 和 分 布 式 文 件 系 统 工 作 的 开 源 软 件 框 架 它 用 于 支 持 分 布 式 应 用 程 序, 能 够 使 用 服 务 器 集 群 分 析 超 大 型 数 据, 然 后 将 其 转 换 为 更 易 于 这 些 应 用 程 序 使 用 的 形 式 Hadoop 用 于 部 署 在 常 见 的 通 用 型 基 础 设 施 之 中 该 框 架 擅 长 处 理 的 任 务 包 括 对 大 型 数 据 集 进 行 索 引 和 排 序 数 据 挖 掘 日 志 分 析 和 图 像 处 理 等 Hadoop 框 架 的 关 键 组 件 包 括 : Hadoop 分 布 式 文 件 系 统 (HDFS*) 能 够 通 过 将 数 据 分 解 为 数 据 块, 并 将 数 据 块 散 布 于 大 量 工 作 节 点 中, 实 现 容 错 和 高 性 能 Hadoop 的 MapReduce 引 擎 能 够 从 应 用 程 序 接 收 作 业, 并 将 这 些 作 业 分 解 成 多 项 任 务, 以 分 配 给 多 个 工 作 节 点 1.2 大 数 据 技 术 的 行 业 生 态 系 统 一 个 大 型 解 决 方 案 生 态 系 统 (Hadoop 仅 是 其 中 一 部 分 ) 的 设 计 旨 在 最 大 限 度 地 挖 掘 大 数 据 的 价 值 该 生 态 系 统 的 另 一 关 键 组 件 是 NoSQL( 不 仅 仅 是 SQL ) 数 据 库 NoSQL 是 更 为 常 见 的 基 于 表 格 的 关 系 型 数 据 库 管 理 系 统 (RDBMS) 的 一 种 替 代 ( 或 补 充 ) 技 术 与 RDBMS 不 同, NoSQL 数 据 库 并 不 主 要 以 表 格 为 基 础 对 依 赖 于 数 据 元 素 间 关 系 的 功 能 而 言, 这 一 特 征 尽 管 在 某 种 程 度 上 让 NoSQL 的 效 率 低 于 RDBMS, 但 是 NoSQL 能 够 简 化 大 量 关 系 并 非 特 别 重 要 的 数 据 的 处 理 过 程 尽 管 结 构 化 数 据 也 可 存 储 于 NoSQL 数 据 库 中, 但 是 这 些 系 统 更 适 于 处 理 非 结 构 化 数 据, 并 能 够 在 检 索 和 附 加 大 量 的 此 类 数 据 时 实 现 出 色 的 可 扩 展 性 和 性 能 随 着 大 数 据 技 术 的 不 断 发 展 和 其 在 数 据 中 心 所 起 到 的 重 要 作 用 日 益 突 显, 在 商 业 与 非 商 业 单 位 共 同 努 力 的 推 动 下, 诸 如 Hadoop 等 开 源 解 决 方 案 的 重 要 性 和 开 发 完 善 程 度 日 渐 提 高 Hadoop 生 态 系 统 中 的 高 级 NoSQL 数 据 库 包 括 Cassandra* HBase* 和 MongoDB* 除 了 Hadoop 以 外, 其 他 的 大 数 据 技 术 还 包 括 简 单 易 用 的 开 源 Disco Project*( 开 发 人 员 使 用 Python* 脚 本 编 写 作 业 ), 以 及 针 对 于 商 业 智 能 和 相 关 使 用 模 式 的 企 业 级 环 境 SAP HANA* 实 时 数 据 平 台 等 所 有 这 些 行 业 创 新 正 在 针 对 基 于 英 特 尔 至 强 处 理 器 的 平 台 进 行 紧 锣 密 鼓 的 开 发 和 优 化 工 作 由 于 大 数 据 广 泛 存 在 于 商 业 研 究 和 学 术 环 境 中, 并 且 其 规 模 在 迅 速 扩 张, 因 此 本 白 皮 书 以 Hadoop 作 为 示 例, 阐 述 了 如 何 处 理 大 数 据 的 系 统 2
3 2 在 关 键 组 件 中 实 现 平 衡 尽 管 Hadoop 集 群 通 常 由 通 用 的 主 流 组 件 构 建 而 成, 但 这 并 未 降 低 为 获 得 最 大 优 势 而 选 择 和 组 合 这 些 组 件 的 难 度 首 要 注 意 事 项 便 是 在 计 算 存 储 和 网 络 资 源 环 境 中 达 到 平 衡 ( 如 图 1 所 示 ) TaskTracker 在 转 到 有 关 确 定 集 群 组 件 组 合 的 具 体 战 略 之 前, 首 先 需 要 考 虑 每 个 类 别 中 常 用 技 术 的 状 态 ( 如 表 1 所 示 ) 在 确 定 了 需 要 的 资 源 类 型 后, 探 讨 将 专 注 于 Hadoop 集 群 如 何 能 够 充 分 利 用 这 些 资 源, 介 绍 万 兆 位 以 太 网 (10GbE) 连 接 在 交 付 各 项 优 势 中 所 扮 演 的 角 色 E5 JobTracker 2.1 计 算 资 源 的 进 步 相 比 上 一 代 平 台, E5 家 族 所 采 用 的 平 台 架 构 能 够 更 好 地 利 用 解 决 方 案 堆 栈 中 的 资 源 例 如, 全 新 架 构 将 每 个 插 槽 中 的 内 核 数 量 从 六 个 (12 个 硬 件 线 程 ) 增 加 到 了 八 个 (16 个 硬 件 线 程 ), 更 高 的 内 核 数 量 可 支 持 达 到 更 高 的 并 行 计 算 水 平, 而 后 者 对 于 数 据 密 集 型 Hadoop 工 作 负 载 有 着 重 要 意 义 英 特 尔 数 据 直 接 I/O 技 术 ( 英 特 尔 DDIO) 是 英 特 尔 至 强 处 理 器 E5 家 族 中 的 一 项 新 功 能, 可 支 持 英 特 尔 以 太 网 控 制 器 和 直 接 与 处 理 器 高 速 缓 存 通 信, 而 不 是 与 主 内 存 通 信, 从 而 能 够 帮 助 提 高 带 宽 和 降 低 延 迟 这 些 优 势 对 于 处 理 大 型 数 据 集 将 大 有 裨 益 1. Hadoop* 表 1. 升 级 Hadoop* 解 决 方 案 堆 栈, 实 现 平 衡 的 高 性 能 基 础 设 施 计 算 存 储 网 络 优 异 前 几 代 英 特 尔 至 强 处 理 器 传 统 旋 转 式 硬 盘 千 兆 位 英 特 尔 以 太 网 服 务 器 出 色 E5 家 族 分 层 存 储 ( 传 统 硬 盘 和 固 态 硬 盘 ) 万 兆 位 英 特 尔 以 太 网 融 合 网 络 最 佳 英 特 尔 至 强 处 理 器 E5 家 族 全 部 为 固 态 硬 盘 万 兆 位 英 特 尔 以 太 网 融 合 网 络 3
4 2.2 存 储 技 术 的 进 步 固 态 硬 盘 (SSD) 代 表 了 面 向 主 流 客 户 端 和 服 务 器 的 持 久 性 存 储 的 一 个 重 要 转 变 它 消 除 了 诸 如 旋 转 碟 片 和 读 / 写 磁 头 等 传 统 机 械 硬 盘 (HDD) 中 的 电 子 机 械 部 件, 并 因 此 大 幅 缩 短 了 数 据 访 问 时 间 和 延 迟 本 白 皮 书 所 描 述 的 测 试 使 用 了 英 特 尔 固 态 硬 盘 ( 英 特 尔 SSD)520 系 列, 该 系 列 拥 有 广 泛 的 容 量 选 择, 具 备 内 建 的 数 据 保 护 功 能, 并 相 比 传 统 机 械 硬 盘 实 现 了 大 幅 的 性 能 改 进 3 英 特 尔 固 态 硬 盘 520 系 列 采 用 了 英 特 尔 25 纳 米 NAND 闪 存, 可 提 供 最 高 每 秒 50,000 次 每 秒 输 入 / 输 出 操 作 (IOPS) 4 的 随 机 读 取 性 能 和 多 至 每 秒 550 兆 字 节 (MB/ 秒 ) 5 的 顺 序 读 取 性 能 作 为 传 统 机 械 硬 盘 和 固 态 硬 盘 之 间 的 过 渡 步 骤, 各 大 组 织 正 越 来 越 多 地 在 同 一 服 务 器 上 配 置 这 两 类 硬 盘 在 本 测 试 中, 固 态 硬 盘 作 为 高 速 数 据 缓 存 设 备, 可 减 少 从 传 统 机 械 硬 盘 中 读 取 数 据 和 向 其 写 入 数 据 的 需 求, 进 而 提 高 整 体 性 能 2.3 网 络 连 接 的 进 步 数 年 来, 网 络 连 接 的 线 速 一 直 都 在 不 断 提 高 与 此 同 时 这 一 领 域 也 涌 现 出 了 许 多 补 充 性 技 术, 为 用 户 提 供 了 更 高 的 价 值, 如 更 高 的 吞 吐 量 改 进 的 成 本 效 益 和 增 强 的 灵 活 性 等 而 这 一 研 究 的 主 要 考 虑 因 素 为 从 千 兆 位 以 太 网 (1GbE) 向 万 兆 位 (10GbE) 过 渡 英 特 尔 以 太 网 控 制 器 和 融 合 网 络 对 于 降 低 万 兆 位 以 太 网 网 络 连 接 的 成 本 发 挥 着 至 关 重 要 的 作 用 反 过 来, 虚 拟 化 和 带 宽 密 集 型 应 用 程 序 ( 如 数 据 分 析 和 视 频 点 播 ) 等 的 广 泛 部 署, 提 高 了 万 兆 位 以 太 网 网 络 的 采 用 率, 并 形 成 了 一 个 良 性 循 环, 让 成 本 效 益 和 主 流 网 络 采 用 率 能 够 相 辅 相 成 地 提 高 英 特 尔 以 太 网 软 件 驱 动 程 序 已 针 对 大 数 据 实 施 进 行 了 优 化, 例 如, 它 们 能 够 最 大 限 度 地 减 少 I/O 对 Hadoop 数 据 处 理 的 干 扰 英 特 尔 以 太 网 融 合 网 络 X540 是 一 款 低 成 本 低 功 率 的 10GBASE-T 解 决 方 案, 可 向 后 兼 容 使 用 第 6 类 和 第 6A 类 铜 缆 布 线 的 现 有 1000BASE-T 网 络 英 特 尔 以 太 网 控 制 器 X540 通 过 将 MAC 和 PHY 集 成 在 一 个 单 芯 片 解 决 方 案 中, 可 同 时 降 低 Sqoop Flume Zookeeper Intel Manager for Hadoop Oozie Pig 初 始 成 本 和 功 率 要 求 英 特 尔 以 太 网 融 合 网 络 X520 可 使 用 铜 缆 或 光 纤 网 络 连 接, 为 万 兆 位 以 太 网 网 络 提 供 SFP+ 连 接 2.4 业 经 优 化 的 英 特 尔 Hadoop 发 行 版 英 特 尔 Hadoop 发 行 版 可 帮 助 简 化 和 改 善 Hadoop 在 英 特 尔 架 构 基 础 设 施 上 的 部 署 它 是 唯 一 一 个 专 为 支 持 在 Hadoop 上 进 行 最 广 泛 的 数 据 分 析 而 构 建 的 发 行 版, 同 时 也 是 首 个 具 备 硬 件 增 强 的 性 能 和 安 全 功 能 的 产 品 该 解 决 方 案 包 含 Hadoop 框 架 MapReduce Hadoop 分 布 式 文 件 系 统 (HDFS*) 以 及 可 支 持 批 量 处 理 和 近 实 时 分 析 的 其 他 相 关 组 件, 如 Hive* 数 据 仓 库 基 础 设 施 Pig* 数 据 流 语 言 和 HBase 数 据 库 等 英 特 尔 Hadoop 发 行 版 中 所 包 含 的 组 件 显 示 于 图 2 中 Mahout 0.7 YARN MRv2 R connectors HDFS Hadoop Hive SQL HBase Hadoop* 4
5 英 特 尔 Hadoop 发 行 版 基 于 实 际 经 验, 为 用 户 提 供 了 调 试 和 优 化 指 导 原 则, 以 及 向 导 和 其 他 自 动 化 部 署 工 具 Intel Manager for Hadoop* 软 件 提 供 了 在 Hadoop 集 群 节 点 上 自 动 安 装 的 功 能, 并 通 过 功 能 强 大 且 直 观 的 仪 表 盘 提 供 了 实 时 管 理 监 控 和 诊 断 功 能 ( 如 图 3 所 示 ) 英 特 尔 Hadoop 发 行 版 还 为 客 户 提 供 了 大 量 培 训 资 源, 以 及 系 统 设 计 部 署 定 制 和 调 试 帮 助 此 外, 这 一 发 行 版 还 享 有 24x7 全 天 候 企 业 支 持, 可 全 面 满 足 企 业 和 用 户 的 需 求, 确 保 他 们 能 够 通 过 保 持 集 群 长 时 间 稳 定 正 常 运 行 取 得 成 功 图 3. 帮 助 简 化 安 装 和 配 置, 并 缩 短 部 署 时 间 的 仪 表 盘 3 万 兆 位 以 太 网 和 其 他 因 素 在 加 速 Hadoop 工 作 流 中 所 扮 演 的 角 色 大 数 据 管 理 能 力 的 提 高 不 断 推 动 我 们 向 在 主 流 环 境 中 实 现 实 时 分 析 的 目 标 迈 进 我 们 正 通 过 使 用 常 用 的 数 据 中 心 硬 件 和 软 件, 改 善 以 前 需 要 数 小 时, 甚 至 数 天 才 能 从 源 数 据 中 生 成 价 值 的 解 决 方 案 在 这 一 环 境 中 改 善 结 果 需 要 考 虑 整 个 工 作 流, 其 中 包 括 数 据 进 入 系 统 的 点 处 理 数 据 的 机 制 以 及 与 导 出 处 理 后 的 数 据 至 系 统 相 关 的 任 务 在 此 基 础 之 上,Hadoop 工 作 流 可 划 分 为 三 个 阶 段 : 1. 导 入 使 用 Hadoop 从 大 型 数 据 集 中 生 成 答 案 的 第 一 步, 是 将 应 用 程 序 的 数 据 导 入 HDFS 数 据 可 通 过 流 式 或 批 处 理 的 方 式 导 入 2. 处 理 将 数 据 导 入 HDFS 后,Hadoop 将 处 理 该 数 据, 以 从 中 获 取 价 值 MapReduce 引 擎 通 过 其 JobTracker 节 点 接 收 来 自 应 用 程 序 的 作 业, 该 节 点 将 工 作 分 解 成 多 个 小 型 任 务, 然 后 指 派 给 TaskTracker 节 点 典 型 的 操 作 包 括 排 序 搜 索 或 分 析 TeraSort 是 一 个 基 于 数 据 排 序 工 作 负 载 的 标 准 Hadoop 性 能 指 标 评 测 程 序 1 在 我 们 的 测 试 环 境 中, 我 们 将 使 用 TeraGen 来 实 际 生 成 数 据 集 3. 导 出 当 处 理 阶 段 中 针 对 数 据 的 操 作 结 束 后, 应 用 程 序 即 可 获 得 结 果 5
6 尽 管 这 三 个 阶 段 的 相 关 需 求 因 所 执 行 工 作 的 性 质 而 差 异 较 大, 但 此 模 型 仍 表 明 了 万 兆 位 以 太 网 在 Hadoop 工 作 流 中 的 重 要 价 值 举 个 简 单 的 例 子, 包 含 大 规 模 数 据 压 缩 的 工 作 负 载 在 导 入 数 据 时 的 工 作 负 载 负 担, 可 能 会 大 于 将 数 据 导 出 为 压 缩 格 式 的 负 担 同 样, 尽 管 各 种 任 务 处 理 的 数 据 量 可 能 相 似, 但 某 些 任 务 使 用 的 计 算 资 源 将 会 高 于 其 他 任 务 调 试 和 优 化 指 导 原 则, 以 及 英 特 尔 Hadoop 发 行 版 的 相 关 支 持 服 务 将 能 够 帮 助 发 现 可 满 足 特 定 需 求 的 最 佳 方 法 3.1 优 化 导 入 阶 段 3.2 优 化 处 理 阶 段 : 从 4 小 时 缩 短 到 7 分 钟 的 历 程 英 特 尔 测 试 使 用 了 1 TB TeraSort 工 作 负 载, 通 过 1 个 命 名 节 点 分 布 于 10 个 数 据 节 点 上 为 了 评 测 升 级 各 项 资 源 的 优 势, 我 们 收 集 了 各 项 组 件 在 升 级 前 后 的 结 果, 包 括 从 5600 系 列 升 级 到 E 产 品 家 族, 从 传 统 硬 盘 升 级 至 固 态 硬 盘, 以 及 从 千 兆 位 以 太 网 升 级 至 万 兆 位 以 太 网 升 级 前 这 些 硬 件 升 级 将 约 4 个 小 时 的 处 理 时 间 缩 短 为 约 12 实 施 英 特 尔 Hadoop 发 行 版 进 一 步 将 处 理 时 间 缩 短 为 约 7 总 体 而 言, 性 能 提 高 将 处 理 阶 段 所 需 的 时 间 减 少 了 近 97% 测 试 的 首 个 硬 件 变 化 是 从 英 特 尔 至 强 处 理 器 X5690 升 级 至 英 特 尔 至 强 处 理 器 E 如 图 4 所 示, 处 理 器 升 级 将 排 序 1 TB 数 据 集 所 需 的 时 间 缩 短 了 约 一 半, 从 250 缩 短 为 升 级 后 本 模 型 中 的 导 入 阶 段 只 是 简 单 地 将 数 据 输 入 HDFS 进 行 处 理 该 过 程 始 将 始 终 最 少 进 行 一 次, 在 某 些 情 况 下, 特 别 是 将 MapReduce 作 为 服 务 出 售 的 情 况 下, 可 能 需 要 进 行 多 次 导 入 该 阶 段 和 Hadoop 复 制 工 作 将 会 在 网 络 和 存 储 I/O 方 面, 对 系 统 产 生 重 大 网 络 性 能 需 求 Hadoop* 千 兆 位 英 特 尔 以 太 网 服 务 器 Hadoop 千 兆 位 英 特 尔 以 太 网 服 务 器 处 理 器 升 级 : 缩 短 约 50% 的 时 间 传 统 机 械 硬 盘 传 统 机 械 硬 盘 当 将 数 据 导 入 系 统 时, 万 兆 位 以 太 网 网 络 连 接 对 于 满 足 这 些 需 求 极 为 重 要 将 网 络 从 千 兆 位 以 太 网 迁 移 至 万 兆 位 以 太 网 后, 包 含 并 行 写 入 的 导 入 操 作 在 使 用 传 统 机 械 硬 盘 时 性 能 最 多 可 提 高 4 倍, 而 使 用 固 态 硬 盘 时 最 多 可 提 高 6 倍 1 固 态 硬 盘 性 能 提 高 程 度 较 高 的 原 因 在 于 其 非 易 失 性 存 储 器 可 加 快 对 存 储 子 系 统 的 写 入 速 度 5600 系 列 250 E 产 品 家 族 125 图 4. 处 理 器 升 级 到 E 产 品 家 族 : 处 理 阶 段 速 度 提 高 了 约 50% 1 6
7 在 处 理 这 一 庞 大 数 据 集 时, 快 速 访 问 非 顺 序 数 据 的 能 力 是 一 个 关 键 的 性 能 注 意 事 项 因 此, 为 了 减 少 任 意 现 有 的 存 储 瓶 颈, 下 一 个 测 试 的 升 级 是 将 传 统 机 械 硬 盘 替 换 成 固 态 硬 盘, 以 利 用 其 大 幅 提 高 的 随 机 读 取 次 数 的 优 势 基 于 之 前 通 过 处 理 器 升 级 获 得 的 性 能 改 进, 从 传 统 机 械 硬 盘 升 级 为 英 特 尔 固 态 硬 盘 520 系 列 后, 完 成 工 作 负 载 所 需 的 时 间 从 约 125 缩 短 为 约 23, 降 幅 接 近 80%( 如 图 5 所 示 ) 7 升 级 前 升 级 后 Hadoop* 英 特 尔 以 太 网 千 兆 位 服 务 器 传 统 机 械 硬 盘 E 产 品 家 族 125 Hadoop 英 特 尔 以 太 网 千 兆 位 服 务 器 英 特 尔 固 态 硬 盘 520 系 列 E 产 品 家 族 升 级 到 固 态 硬 盘 : 时 间 缩 短 约 80% 23 针 对 希 望 在 同 一 服 务 器 上 组 合 使 用 传 统 机 械 硬 盘 和 固 态 硬 盘 的 客 户, 英 特 尔 提 供 了 英 特 尔 高 速 缓 存 加 速 软 件 这 一 分 层 存 储 模 型 以 较 低 的 购 置 成 本 为 用 户 提 供 了 部 分 固 态 硬 盘 的 性 能 优 势, 但 与 仅 含 固 态 硬 盘 的 配 置 相 比, 除 了 存 在 性 能 差 异 外, 该 方 法 同 时 也 牺 牲 了 固 态 硬 盘 中 的 某 些 可 靠 性 优 势 然 而, 该 存 储 模 型 为 客 户 提 供 了 另 一 选 择, 可 帮 助 他 们 逐 步 采 用 固 态 硬 盘, 从 而 显 著 缩 短 从 数 据 中 获 取 重 要 洞 察 的 时 间 测 试 还 表 明, 当 在 每 个 任 务 节 点 上 安 装 五 块 固 态 硬 盘 时,Hadoop 框 架 能 够 同 时 运 行 足 够 多 的 Map( 映 射 ) 任 务, 以 向 每 块 固 态 硬 盘 生 成 并 行 I/O, 并 将 处 理 器 的 利 用 率 提 升 至 接 近 100% 8 这 一 状 态 可 为 Map 任 务 提 供 最 优 性 能 设 置 io.sort. mb 和 io.sort.record.percen 标 记 可 有 效 避 免 中 间 Map 输 出 溢 出, 过 多 的 磁 盘 读 取 和 写 入 每 个 Map 任 务 可 在 不 到 10 秒 内 处 理 128 MB 的 数 据 块, 并 生 成 128 MB 的 输 出 信 息 并 行 运 行 32 项 Map 任 务 让 每 个 任 务 节 点 达 到 超 过 5 Gb/ 秒 的 速 度 8 图 5. 存 储 升 级 为 固 态 硬 盘 : 处 理 阶 段 速 度 提 高 了 约 80% 7 Hadoop 工 作 负 载 的 大 规 模 分 布 式 特 性 让 网 络 I/O 成 为 了 工 作 流 中 每 个 阶 段 整 体 性 能 的 一 个 关 键 要 素, 万 兆 位 以 太 网 提 供 了 一 个 经 济 高 效 可 扩 展 的 解 决 方 案, 可 帮 助 有 效 缩 短 数 据 的 等 待 时 间 高 带 宽 的 万 兆 位 以 太 网 网 络 不 仅 可 支 持 快 速 向 集 群 导 入 数 据 和 从 集 群 中 导 出 数 据, 而 且 还 可 加 速 TeraSort 工 作 负 载 的 随 机 排 列 阶 段 的 工 作 通 过 在 Map 和 Reduce( 化 简 ) 节 点 间 使 用 万 兆 位 以 太 网 链 路,Reduce 节 点 可 快 速 获 取 数 据, 从 而 能 够 显 著 缩 短 整 体 作 业 执 行 时 间, 并 提 高 集 群 性 能 Hadoop* 升 级 前 英 特 尔 以 太 网 千 兆 位 服 务 器 英 特 尔 固 态 硬 盘 520 系 列 基 于 处 理 器 和 存 储 升 级 所 取 得 的 成 果, 将 集 群 硬 件 从 千 兆 位 以 太 网 升 级 到 万 兆 位 以 太 网 后, 测 试 工 作 负 载 的 处 理 时 间 再 次 缩 短 50%, 从 23 缩 短 为 12 ( 如 图 6 所 示 ) 9 使 用 万 兆 位 以 太 网 互 连 和 固 态 硬 盘 可 支 持 在 包 含 10 个 节 点 的 测 试 集 群 上, 运 行 超 过 100 个 并 发 Reducer 任 务, 从 而 可 实 现 出 色 的 作 业 扩 展 能 力 和 较 高 的 资 源 利 用 率 5 Hadoop 升 级 后 万 兆 位 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 升 级 到 万 兆 位 以 太 网 : 时 间 缩 短 约 50% E 产 品 家 族 23 E 产 品 家 族 12 图 6. 网 络 升 级 到 万 兆 位 以 太 网 : 处 理 阶 段 速 度 提 高 了 约 50% 9 7
8 除 了 上 述 硬 件 升 级 以 外, 英 特 尔 Hadoop 发 行 版 还 提 供 了 一 个 直 观 的 界 面 和 多 项 内 部 优 化, 其 中 包 括 高 级 数 据 压 缩 针 对 HDFS 的 动 态 复 制 副 本 选 择, 以 及 MapReduce 加 速 等 这 一 额 外 的 设 计 有 助 于 提 高 性 能, 同 时 当 与 英 特 尔 可 靠 的 企 业 级 支 持 组 合 使 用 时, 将 能 够 帮 助 客 户 更 快 速 地 部 署 Hadoop 环 境, 并 加 以 出 色 的 维 护 在 硬 件 升 级 的 基 础 上, 实 施 英 特 尔 Hadoop 发 行 版 再 次 将 工 作 负 载 的 完 成 时 间 缩 短 了 约 40%, 从 约 12 缩 短 为 7 ( 如 图 7 所 示 ) 优 化 导 出 阶 段 与 导 入 阶 段 类 似, 万 兆 位 以 太 网 网 络 可 大 幅 提 升 在 处 理 后 从 系 统 提 取 数 据 的 性 能, 而 在 将 传 统 硬 盘 升 级 为 固 态 硬 盘 后, 其 优 势 更 为 显 著 对 传 统 硬 盘 进 行 的 初 步 测 试 表 明,Hadoop 工 作 流 导 出 阶 段 的 主 要 瓶 颈 是 由 于 随 机 磁 盘 寻 道 所 导 致 将 本 地 存 储 更 换 为 固 态 硬 盘 可 消 除 这 一 弊 端, 使 结 果 与 我 们 在 导 入 阶 段 所 看 到 的 结 果 保 持 一 致 通 过 使 用 固 态 硬 盘, 我 们 可 在 从 千 兆 位 以 太 网 升 级 到 万 兆 位 以 太 网 后 将 性 能 提 升 约 6 倍, 从 而 大 幅 缩 短 了 整 个 工 作 流 内 的 整 体 操 作 所 需 的 时 间 如 上 所 述, 使 用 固 态 硬 盘 和 万 兆 位 以 太 网 还 有 助 于 从 高 级 别 的 处 理 器 资 源 中 获 得 更 大 优 势, 进 而 突 显 了 平 衡 Hadoop 集 群 的 资 源 可 带 来 的 重 要 优 势 Hadoop* 升 级 前 万 兆 位 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 E 家 族 12 4 研 究 环 境 简 述 生 成 本 白 皮 书 中 所 述 结 果 的 Hadoop 测 试 平 台 包 含 一 个 头 结 点 ( 命 名 节 点,Job Tracker) 10 个 工 作 节 点 ( 数 据 节 点, Task Tracker) 和 一 台 思 科 Nexus* Gb 交 换 机 测 试 所 比 较 的 不 同 基 准 和 升 级 后 的 工 作 节 点 组 件 详 细 列 于 表 2 中 2 升 级 后 英 特 尔 Hadoop* 发 行 版 软 件 10 Gb 英 特 尔 以 太 网 融 合 网 络 英 特 尔 固 态 硬 盘 520 系 列 E 家 族 图 7. 实 施 英 特 尔 Hadoop* 发 行 版 软 件 : 处 理 阶 段 速 度 提 高 了 约 40% 10 部 署 英 特 尔 Hadoop* 发 行 版 软 件 : 时 间 缩 短 约 40% 7 表 2. 测 试 环 境 中 所 比 较 的 工 作 节 点 组 件 处 理 器 和 基 准 系 统 比 较 存 储 比 较 网 络 比 较 软 件 比 较 基 准 组 件 SuperMicro SYS-1026T-URF 1U 服 务 器, 包 含 两 个 英 特 尔 至 强 处 理 器 3.47 GHz, 48 GB 内 存 700 GB 7200 RPM SATA 硬 盘 英 特 尔 以 太 网 服 务 器 适 配 器 I350-T2 (1 Gb 以 太 网 ) Hadoop* 升 级 的 组 件 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存 英 特 尔 固 态 硬 盘 520 系 列 英 特 尔 以 太 网 融 合 网 络 适 配 器 X520-DA2 ( 万 兆 位 以 太 网 ) 英 特 尔 Hadoop* 发 行 版 软 件
9 5 调 试 和 优 化 注 意 事 项 除 了 升 级 网 络 组 件 和 考 虑 使 用 英 特 尔 Hadoop 发 行 版 以 外, 致 力 于 最 大 限 度 地 从 大 数 据 技 术 中 挖 掘 价 值 的 各 个 组 织, 还 必 须 考 虑 网 络 堆 栈 中 的 配 置 和 设 置, 以 及 Hadoop 软 件 环 境 本 身 尽 管 确 定 可 能 的 配 置 和 设 置 范 围 存 在 较 大 挑 战, 根 据 以 往 的 最 佳 实 践, 我 们 建 议 工 程 师 格 外 注 意 本 部 分 所 列 的 注 意 事 项, 以 获 得 最 大 价 值 5.1 网 络 连 接 操 作 系 统 和 驱 动 程 序 优 化 在 操 作 系 统 和 网 络 连 接 堆 栈 中, 任 意 时 间 打 开 的 文 件 打 开 的 网 络 连 接, 以 及 运 行 的 进 程 的 数 量 应 根 据 特 定 工 作 负 载 的 需 求 而 进 行 调 整 英 特 尔 万 兆 位 以 太 网 Linux* 驱 动 程 序 也 应 通 过 调 整 RSS 队 列 的 数 量 ( 如 本 白 皮 书 所 描 述 的, 测 试 中 的 最 优 数 量 为 两 个 ) 而 进 行 优 化, 而 且 还 应 通 过 调 整 中 断 阈 值 减 少 上 下 文 开 关 的 数 量 在 操 作 系 统 网 络 连 接 和 TCP/IP 堆 栈 中, 应 特 别 注 意 以 下 设 置 优 化 和 实 践 : 增 加 操 作 系 统 中 可 打 开 的 文 件 的 数 量 Hadoop 会 打 开 大 量 文 件, 因 此 提 高 并 发 可 打 开 的 文 件 的 数 量 限 制, 将 能 够 减 少 作 业 故 障 英 特 尔 的 测 试 发 现 32,000 个 文 件 个 数 将 足 够 提 高 并 发 进 程 的 数 量 也 有 助 于 减 少 作 业 故 障 增 加 待 处 理 的 连 接 和 SYN 请 求 的 数 量 Hadoop 的 HSFS 和 MapReduce 引 擎 将 打 开 众 多 周 期 较 短 的 TCP/IP 连 接 在 英 特 尔 设 置 配 置 中, 该 设 置 提 高 到 了 3,240,000, 减 少 了 HDFS 和 MapReduce 通 信 的 等 待 时 间 如 果 不 需 要 在 Hadoop 工 作 负 载 上 进 行 资 源 共 享, 可 考 虑 加 大 TCP/IP 的 最 大 窗 口 大 小 并 扩 展 到 16 MB 该 方 法 将 能 够 帮 助 最 大 限 度 地 提 高 万 兆 位 以 太 网 投 资 的 价 值 如 果 有 足 够 的 系 统 内 存 可 用, 可 提 高 TCP/IP 发 送 和 接 收 缓 冲 大 小 这 一 变 更 可 提 高 网 络 吞 吐 量 在 英 特 尔 测 试 集 群 中, 最 大 值 可 被 设 为 16 MB 当 带 宽 可 用 时, 禁 用 TCP/IP 可 选 ACK 当 启 用 可 选 ACK 时, 对 客 户 端 请 求 的 响 应 可 能 被 延 迟, 并 降 低 作 业 执 行 和 完 成 时 间 ; 禁 用 这 些 ACK 将 有 助 于 改 善 整 体 服 务 器 的 响 应 时 间 和 Hadoop 作 业 性 能 为 存 储 使 用 JBOD Hadoop 拥 有 内 建 的 负 载 平 衡 功 能, 并 能 够 在 可 用 的 HDFS 和 MapReduce JBOD 磁 盘 间 使 用 高 效 的 轮 询 功 能 使 用 包 含 固 态 硬 盘 和 快 速 存 储 的 RAID 可 限 制 存 储 吞 吐 量 和 整 体 作 业 性 能 相 反, 请 为 HDFS 和 MapReduce 的 磁 盘 使 用 JBOD 模 式, 这 是 因 为 HDFS 和 MapReduce 均 内 建 有 在 多 个 JBOD 磁 盘 间 进 行 负 载 平 衡 的 功 能 5.2 Hadoop 配 置 参 数 Hadoop 堆 栈 中 拥 有 超 过 200 个 配 置 参 数, 基 于 以 下 调 试 注 意 事 项 着 手 将 能 够 帮 助 工 程 团 队 高 效 工 作 : Java 虚 拟 机 (JVM) 任 务 的 内 存 配 置 每 个 Map 和 Reduce 任 务 将 在 独 立 的 JVM 实 例 中 运 行 用 户 可 分 别 使 用 配 置 参 数 mapred.map.child.java.opts 和 mapred. reduce.child.java.opts 为 Map 和 Reduce 任 务 指 定 各 个 任 务 的 内 存 英 特 尔 测 试 集 群 将 Map 任 务 堆 栈 的 内 存 设 置 为 512 MB, 将 Reduce 任 务 堆 栈 的 内 存 设 置 为 1.5 GB - Map 任 务 的 内 存 要 求 将 取 决 于 每 个 Map 所 生 成 的 输 出 数 量 包 含 排 序 应 用 程 序 的 128 MB 数 据 块 需 要 约 200 MB 的 空 间 来 存 储 中 间 记 录, 才 能 防 止 溢 出 这 一 内 存 可 使 用 配 置 参 数 进 行 管 理, 如 io.sort.mb =200 mb,io.sort.record.percent=.15 和 io.sort.spih.percent=1.0 - Reduce 任 务 的 内 存 使 用 量 也 可 进 行 调 整 英 特 尔 测 试 建 议 大 多 数 参 数 的 默 认 设 置 已 是 最 优, 但 mapred.job.reduce. inputbuffer.percent 可 变 更 为 0.7, 从 而 让 Reducer 无 需 在 开 始 最 终 合 并 前 清 空 内 存 9
10 并 发 Map 和 Reduce 任 务 的 数 量 在 英 特 尔 至 强 处 理 器 上,Map 任 务 的 最 优 数 量 通 常 为 逻 辑 内 核 的 数 量, 而 Reducer 的 数 量 应 与 物 理 内 核 的 数 量 相 同 这 些 设 置 可 通 过 mapred.tasktracker.map. tasks.maximum 和 mapred.tasktracker. reduce.tasks.maximum 参 数 进 行 配 置 命 名 节 点 和 数 据 节 点 请 求 处 理 程 序 数 量 和 线 程 数 量 如 果 命 名 节 点 上 拥 有 足 够 的 内 存 和 计 算 资 源, 那 么 命 名 节 点 中 的 线 程 处 理 程 序 数 量 可 提 高 至 100 或 更 高, 以 支 持 大 量 并 发 请 求 提 高 数 据 节 点 的 处 理 程 序 数 量 也 将 可 以 带 来 诸 多 优 势, 特 别 是 在 使 用 固 态 硬 盘 或 快 速 存 储 时, 优 势 将 更 为 突 出 降 低 节 点 间 IPC 通 信 的 网 络 延 迟 将 ipc.server.tcpnodelay 和 ipc.client. tcpnodelay 设 置 为 true Job Tracker 和 Task Tracker 之 间 的 心 跳 频 率 默 认 心 跳 频 率 为 3 秒 对 于 Map 任 务 能 够 较 快 完 成 的 小 型 作 业, 该 设 置 可 能 延 迟 任 务 完 成 通 知 和 新 任 务 的 调 度 设 置 mapreduce.tasktracker. outofband.heartbeats 立 即 发 送 作 业 完 成 通 知 可 提 高 作 业 性 能 使 用 mapreduce.tasktracker.outofband. heartbeat.damper 参 数 来 调 整 心 跳 频 率 也 能 够 提 供 一 定 的 优 势 推 测 任 务 执 行 Hadoop 可 能 在 多 个 节 点 上 安 排 相 同 的 任 务, 以 防 止 节 点 故 障 或 延 迟 执 行 这 一 实 践 若 能 够 充 分 利 用 闲 置 资 源, 则 效 果 显 著, 但 是 若 集 群 满 载 运 行, 其 效 果 甚 微 因 此, 我 们 推 荐 在 某 些 时 候 禁 用 推 测 任 务 执 行, 特 别 是 存 在 高 性 能 处 理 存 储 和 网 络 资 源 的 时 候 中 间 Map 输 出 压 缩 为 中 间 Map 输 出 启 用 压 缩 功 能 有 助 于 提 高 受 到 存 储 或 网 络 性 能 限 制 的 集 群 的 性 能 请 注 意, 当 使 用 万 兆 位 以 太 网 和 固 态 硬 盘 时, 压 缩 输 出 对 于 性 能 的 改 善 效 果 有 限 HDFS 数 据 块 大 小 HDFS 数 据 块 的 最 优 大 小 将 根 据 工 作 负 载 的 不 同 而 有 所 差 异, 但 是 较 大 的 数 据 块 大 小 通 常 不 会 形 成 较 高 的 性 能, 这 是 因 为 它 们 可 能 导 致 对 内 存 产 生 额 外 的 负 担, 并 有 可 能 在 Map 阶 段 导 致 中 间 溢 出 同 时, 较 小 的 数 据 块 大 小 将 对 较 小 和 并 行 程 度 较 高 的 任 务 产 生 额 外 的 开 销 在 英 特 尔 测 试 中, 128 MB 的 数 据 块 大 小 为 TeraSort 性 能 指 标 评 测 程 序 提 供 了 最 优 的 整 体 性 能 5.3 进 一 步 的 增 强 正 如 本 白 皮 书 中 所 介 绍 的, 英 特 尔 已 通 过 使 用 最 新 英 特 尔 至 强 处 理 器 固 态 硬 盘 万 兆 位 以 太 网 英 特 尔 以 太 网 融 合 网 络 适 配 器 和 英 特 尔 Hadoop* 发 行 版 软 件, 实 现 了 大 量 性 能 优 势 所 有 这 些 组 件 的 持 续 进 步 将 有 望 在 大 数 据 的 实 施 过 程 中 带 来 更 多 性 能 优 势 目 前, 我 们 正 在 为 Hadoop 和 其 他 大 数 据 技 术 考 虑 开 发 大 量 软 件 增 强 例 如, 我 们 可 以 通 过 将 基 于 HTTP 的 跨 节 点 通 信 更 换 成 其 他 更 为 优 化 的 选 项, 加 速 传 输 层 性 能, 在 不 增 加 物 理 资 源 的 前 提 下 提 高 整 体 吞 吐 量 这 一 增 强 和 其 他 软 件 增 强 均 为 英 特 尔 持 续 关 注 的 一 个 研 究 领 域 面 向 商 业 分 析 和 其 他 大 数 据 使 用 模 型 的 虚 拟 化 预 构 建 的 Hadoop 集 群 是 另 一 个 前 景 广 阔 的 研 发 领 域, 它 们 可 带 来 众 多 潜 在 优 势, 其 中 包 括 : 降 低 实 施 Hadoop 环 境 的 复 杂 性 为 虚 拟 化 资 源 配 置 制 定 最 佳 实 践, 摒 弃 手 动 调 整 基 于 大 数 据 技 术 构 建 多 用 途 环 境 10
11 6 结 论 存 储 和 分 析 大 量 非 结 构 化 数 据 的 能 力 将 能 够 为 企 业 学 术 机 构 和 政 府 组 织 带 来 众 多 机 会 英 特 尔 通 过 此 研 究 表 明, 通 过 使 用 精 选 的 硬 件 组 件 组 成 平 衡 的 基 础 设 施, 并 使 用 英 特 尔 Hadoop* 发 行 版 软 件,Hadoop 将 能 够 实 现 大 幅 的 性 能 提 升 本 白 皮 书 中 所 描 述 的 结 果 只 是 英 特 尔 和 行 业 其 他 领 域 所 正 在 开 展 的 并 不 断 壮 大 的 大 型 研 究 中 的 一 部 分, 这 些 研 究 旨 在 发 现 各 种 最 佳 实 践, 以 支 持 构 建 和 运 行 Hadoop 集 群 与 其 他 大 数 据 解 决 方 案, 同 时 开 发 和 调 试 软 件, 确 保 这 些 软 件 能 够 在 此 类 环 境 中 实 现 最 优 运 行 这 一 方 面 的 进 展 将 能 够 指 导 计 算 行 业 朝 着 简 化 低 成 本 实 施 的 目 标 迈 进, 从 而 推 动 在 今 后 实 现 实 时 分 析 能 力 的 广 泛 普 及 11
12 如 欲 了 解 更 多 信 息, 请 访 问 以 下 页 面 : hadoop.intel.com 英 特 尔 在 2012 年 12 月 进 行 的 TeraSort 性 能 指 标 评 测 自 定 义 设 置 :mapred.reduce.tasks=100 以 及 mapred.job.reuse.jvm.num.tasks=-1 如 欲 了 解 更 多 信 息, 请 访 问 : 2 集 群 配 置 : 一 个 头 结 点 ( 命 名 节 点,Job Tracker),10 个 工 作 节 点 ( 数 据 节 点,Task Tracker), 思 科 Nexus* Gb 交 换 机 基 准 工 作 节 点 :SuperMicro SYS-1026T-URF1U 服 务 器, 包 含 两 个 3.47 GHz,48 GB 内 存,700 GB 7200 RPM SATA 硬 盘, 英 特 尔 以 太 网 服 务 器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工 作 节 点 中 的 升 级 处 理 器 和 基 准 系 统 : 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存 工 作 节 点 中 的 升 级 存 储 : 英 特 尔 固 态 硬 盘 520 系 列 工 作 节 点 中 的 升 级 网 络 : 英 特 尔 以 太 网 融 合 网 络 X520-DA2 工 作 节 点 中 的 升 级 软 件 : 英 特 尔 Hadoop* 发 行 版 软 件 英 特 尔 固 态 硬 盘 520 系 列 当 前 未 针 对 数 据 中 心 用 途 进 行 验 证 4 固 态 硬 盘 性 能 将 由 于 容 量 的 不 同 而 有 所 差 异 5 性 能 使 用 lorneter*( 队 列 深 度 为 32) 测 量 得 出 测 试 于 2012 年 12 月 开 展 6 基 准 工 作 节 点 :SuperMicro SYS-1026T-URF1U 服 务 器, 其 中 包 含 两 个 3.47 GHz,48 GB 内 存,700 GB 7200 RPM SATA 硬 盘, 英 特 尔 以 太 网 服 务 器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工 作 节 点 中 的 升 级 处 理 器 和 基 准 系 统 : 戴 尔 PowerEdge* R720 2U 服 务 器, 包 含 两 个 2.90 GHz,128 GB 内 存,700 GB 7200 RPM SATA 硬 盘 7 基 准 存 储 :700 GB 7200 RPM SATA 硬 盘, 升 级 存 储 : 英 特 尔 固 态 硬 盘 520 系 列 8 资 料 来 源 : 英 特 尔 内 部 测 试,2012 年 12 月 9 基 准 网 络 : 英 特 尔 以 太 网 服 务 器 I350-T2, 升 级 网 络 : 英 特 尔 以 太 网 融 合 网 络 X520-DA2 10 工 作 节 点 中 的 升 级 软 件 : 英 特 尔 Hadoop* 发 行 版 软 件 在 性 能 检 测 过 程 中 涉 及 的 软 件 及 其 性 能 只 有 在 英 特 尔 微 处 理 器 的 架 构 下 方 能 得 到 优 化 诸 如 SYSmark* 和 MobileMark* 等 测 试 均 系 基 于 特 定 计 算 机 系 统 硬 件 软 件 操 作 系 统 及 功 能, 上 述 任 何 要 素 的 变 动 都 有 可 能 导 致 测 试 结 果 的 变 化 请 参 考 其 他 信 息 及 性 能 测 试 ( 包 括 结 合 其 他 产 品 使 用 时 的 运 行 性 能 ) 以 对 目 标 产 品 进 行 全 面 评 估 更 多 信 息 敬 请 登 陆 结 果 以 英 特 尔 内 部 测 试 为 基 础, 并 使 用 了 第 三 方 基 准 测 试 数 据 和 软 件 英 特 尔 不 控 制 或 审 核 本 文 件 中 所 引 述 的 网 页 或 第 三 方 所 提 供 的 基 准 数 据 的 设 计 或 实 施 情 况 英 特 尔 鼓 励 客 户 登 录 本 文 件 引 述 的 网 页 或 其 他 网 页 以 核 实 相 关 基 准 数 据 的 准 确 性 以 及 其 是 否 反 映 了 所 购 买 的 系 统 的 性 能 英 特 尔 编 译 器 针 对 非 英 特 尔 微 处 理 器 的 优 化 程 度 可 能 与 英 特 尔 微 处 理 器 相 同 ( 或 不 同 ) 这 些 优 化 包 括 SSE2 SSE3 和 SSSE3 指 令 集 以 及 其 它 优 化 对 于 在 非 英 特 尔 制 造 的 微 处 理 器 上 进 行 的 优 化, 英 特 尔 不 对 相 应 的 可 用 性 功 能 或 有 效 性 提 供 担 保 该 产 品 中 依 赖 于 处 理 器 的 优 化 仅 适 用 于 英 特 尔 微 处 理 器 部 分 非 针 对 英 特 尔 微 体 系 架 构 的 优 化 也 为 英 特 尔 微 处 理 器 保 留 了 下 来 如 欲 了 解 更 多 有 关 本 声 明 所 涉 及 的 特 定 指 令 集 的 信 息, 请 参 阅 适 用 产 品 的 用 户 和 参 考 指 南 声 明 版 本 # 本 文 件 中 包 含 关 于 英 特 尔 产 品 的 信 息 英 特 尔 未 通 过 明 示 或 暗 示, 禁 止 翻 供 或 其 他 方 式 许 可 或 担 保 与 销 售 和 / 或 使 用 英 特 尔 产 品 相 关 的 内 容, 其 中 包 括 不 对 特 定 目 的 适 用 性 适 销 性, 以 及 是 否 侵 犯 任 何 专 利 版 权 或 其 他 知 识 产 权 做 出 担 保 除 非 经 过 英 特 尔 的 书 面 同 意 认 可, 英 特 尔 的 产 品 无 意 被 设 计 用 于 或 被 用 于 以 下 应 用 : 即 在 这 样 的 应 用 中 可 因 英 特 尔 产 品 的 故 障 而 导 致 人 身 伤 亡 英 特 尔 有 权 随 时 更 改 产 品 的 规 格 和 描 述 而 毋 需 发 出 通 知 设 计 者 不 应 信 赖 任 何 英 特 产 品 所 不 具 有 的 特 性, 设 计 者 亦 不 应 信 赖 任 何 标 有 保 留 权 利 或 未 定 义 说 明 或 特 性 描 述 对 此, 英 特 尔 保 留 将 来 对 其 进 行 定 义 的 权 利, 同 时, 英 特 尔 不 应 为 因 其 日 后 更 改 该 等 说 明 或 特 性 描 述 而 产 生 的 冲 突 和 不 相 容 承 担 任 何 责 任 此 处 提 供 的 信 息 可 随 时 改 变 而 毋 需 通 知 请 勿 根 据 本 文 件 提 供 的 信 息 完 成 一 项 产 品 设 计 本 文 件 所 描 述 的 产 品 可 能 包 含 使 其 与 宣 称 的 规 格 不 符 的 设 计 缺 陷 或 失 误 这 些 缺 陷 或 失 误 已 收 录 于 勘 误 表 中, 可 索 取 获 得 在 发 出 订 单 之 前, 请 联 系 当 地 的 英 特 尔 营 业 部 或 分 销 商 以 获 取 最 新 的 产 品 规 格 索 取 本 文 件 中 或 英 特 尔 的 其 他 材 料 中 提 的 包 含 订 单 号 的 文 件 的 复 印 件, 可 拨 打 , 或 登 陆 英 特 尔 公 司 2013 年 版 权 所 有 所 有 权 保 留 英 特 尔 Intel 标 识 至 强 和 Xeon 是 英 特 尔 在 美 国 和 / 或 其 他 国 家 的 商 标 * 其 他 的 名 称 和 品 牌 可 能 是 其 他 所 有 者 的 资 产 0113/ME/MESH/PDF C 请 注 意 环 保 CN 12
白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项
IT@Intel 白 皮 书 英 特 尔 IT 部 门 大 数 据 和 商 业 智 能 2013 年 10 月 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 要 点 概 述 仅 在 五 周 之 内, 我 们 就 实 施 了 基 于 Apache Hadoop* 英 特 尔 分 发 版 的 低 成 本 可 完 全 实 现 的 大 数
More information培 训 机 构 介 绍 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培
Hadoop 2.0 培 训 Hadoop 2.0Training Hadoop 2.0 运 维 与 开 发 实 战 培 训 邀 请 函 培 训 机 构 介 绍 www.zkpk.org 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开
More information合集
Ver 1.0 版 本 目 录 第 一 章 当 大 数 据 遇 上 SSD 01 第 二 章 广 东 移 动 运 用 Hadoop 创 新 应 用 04 第 三 章 第 四 章 第 五 章 第 六 章 第 七 章 第 八 章 第 九 章 第 十 章 如 何 利 用 大 数 据 分 析 提 升 垃 圾 短 信 过 滤 效 果 广 东 电 信 用 大 数 据 重 构 室 内 网 优 大 数 据 提 升
More information<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63>
关 于 举 办 Hadoop 大 数 据 及 海 量 数 据 挖 掘 应 用 工 程 师 培 训 班 的 通 知 随 着 云 时 代 的 来 临, 大 数 据 技 术 将 具 有 越 来 越 重 要 的 战 略 意 义 大 数 据 分 析 与 挖 掘 技 术 已 经 渗 透 到 每 一 个 行 业 和 业 务 职 能 领 域, 逐 渐 成 为 重 要 的 生 产 要 素, 人 们 对 于 海 量 数
More information目录 1 不断开发工具以管理大数据 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 大数据技术的行业生态系统 在关键组件中实现平衡 计算资源的进步 存储技术的进步 网络连接的进步...
白皮书英特尔 固态硬盘英特尔 以太网融合网络适配器英特尔 Hadoop* 发行版软件 应用大数据技术获得近实时分析巨大成效 1 平衡的基础设施使工作负载完成时间从 4 小时缩短为 7 如今, 基于广泛可用的计算 存储和网络组件的改进, 商业 学术和政府组织有效处理大数据的能力正快速提高 英特尔利用一个优化且平衡的 Hadoop* 集群, 展示了可以得到的显著成效 这一集群由最新的 本地固态硬盘存储和万兆位英特尔
More informationReducing Client Incidents through Big Data Predictive Analytics
IT@lntel 白 皮 书 英 特 尔 IT 部 门 IT 最 佳 实 践 大 数 据 预 测 分 析 2013 年 12 月 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 总 体 概 述 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 容 易 主 动 找 出 客 户 端 问 题, 并 及 时 将 其 修 复 以 免 问 题 扩 大, 从 而 为 企 业 节 约
More information温州市政府分散采购
温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理
More information02 责任编辑 张晋芬 2 16:06:31
责任编辑 2015 年 9 月 7 日 第 229 期 总第 7629 期 国内统一刊号 CN51-0078 1 星期一 B 1 34 16:06:26 02 责任编辑 张晋芬 2 16:06:31 目录 Contents 责任编辑 朱华樑 03 SMB 视点 总经理兼主编 王海峰 编辑 / 记者 张金祥 朱华樑 张晋芬 李珍珍 客户总监 宫建强 詹 恒 数据总监 赵 倩 制作部 张凤林 张 琳 市场部
More information<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63>
项 目 编 号 : 招 标 文 件 ( 论 证 稿 ) 广 东 和 盛 招 标 代 理 有 限 公 司 Guangdong Hesheng Tendering Agency Co.,Ltd. 目 录 第 一 部 分 : 投 标 邀 请 函 1 第 二 部 分 : 采 购 项 目 内 容 4 第 三 部 分 : 投 标 人 须 知 88 第 四 部 分 : 合 同 书 格 式 104 第 五 部 分
More informationAzure_s
Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL
More information国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对
重点文化工程 中华古籍保护计划 数字图书馆推广工程 民国时期文献保护计划 年度掠影 国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 中 华 古 籍
More informationMicrosoft Word - 134招标文件.doc
威 海 市 政 府 采 购 招 标 文 件 采 购 编 号 :WHGP2016-134 采 购 项 目 : 网 站 建 设 采 购 方 式 : 公 开 招 标 山 东 省 鲁 成 招 标 有 限 公 司 2016 年 5 月 20 日 目 录 第 一 部 分 招 标 公 告 2 第 二 部 分 投 标 人 须 知 4 第 三 部 分 开 标 评 标 定 标 13 第 四 部 分 采 购 项 目 说
More information3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol
HPE Apollo System 中国独家提供商 服务器 存储和技术服务 以上描述适用于中国大陆地区,H3C 不是 HPE 唯一咨询服务提供商 3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo
More informationMicrosoft Word - View存储注意事项.doc
VMware View .......................................................................... 3 Windows I/O.....................................................3...............................................................
More informationG1-0406国务院教学设备
广 西 科 联 招 标 中 心 公 开 招 标 采 购 文 件 项 目 名 称 : 教 学 设 备 采 购 项 目 编 号 :GXZC2016-G1-0406-KLZB 采 购 人 : 广 西 国 际 商 务 职 业 技 术 学 院 采 购 代 理 机 构 : 广 西 科 联 招 标 中 心 2016 年 5 月 目 录 第 一 章 公 开 招 标 公 告... 2 第 二 章 招 标 项 目 采
More information美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI
一般報導 大數據與 巨量資料分析 曾龍 我們需要你 資料科學家 來幫助國民建立更好的數位服務 幫助我們揭開更新的創意 幫助我們改善這個國家和全世界 美國總統歐巴馬 在 2012 年 10 月發行的 哈佛商業評 論 中 戴 文 波 特 湯 姆 斯 Thomas H. Davenport 及 帕 蒂 爾 D.J. Patil 發 表 了 一篇文章 描述 21 世紀最性感的職業 資料科學家 Data Scientist:
More information业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1
Business & Operation 业 务 与 运 营 大 数 据 技 术 在 精 准 营 销 中 的 应 用 王 小 鹏 北 京 东 方 国 信 科 技 股 份 有 限 公 司 北 京 100102 摘 要 简 要 介 绍 主 流 的 大 数 据 技 术 架 构 和 大 数 据 挖 掘 技 术 ; 阐 述 大 数 据 技 术 在 精 准 营 销 与 维 系 系 统 建 设 中 的 应 用,
More informationIBM System x 系列手册
IBM Systems and Technology System x IBM System x IBM System x 2 IBM System x IBM System x IBM System x BladeCenter RAS IT System x BladeCenter - IT IBM - IBM X System x System x IBM System x System x BladeCenter
More informationMicrosoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式]
Big Data RC Sharing 大數據掃盲 Service Planner of Enterprise Big Data 大 數 據 服 務 規 劃 師 企 業 大 數 據 課 程 規 劃 依 照 企 業 資 料 流 程 的 特 殊 性, 安 排 合 適 的 課 程 協 助 企 業 導 入 應 用 大 數 據 案 例 :Etu 資 策 會 平 安 保 險 湖 南 國 防 科 技 大 學 等
More information雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO
CHAPTER 使用 Hadoop 打造自己的雲 8 8.3 測試 Hadoop 雲端系統 4 Nodes Hadoop Map Reduce Hadoop WordCount 4 Nodes Hadoop Map/Reduce $HADOOP_HOME /home/ hadoop/hadoop-0.20.2 wordcount echo $ mkdir wordcount $ cd wordcount
More information(Quad-Core Intel Xeon 2.0GHz) ()(SAS) (Quad-Core Intel Xeon 2.0GHz) (Windows )(Serial ATA) (Quad-Core Intel Xeon 2.0GHz) (Linux)(Serial ATA)
LP5-970060 HP (EDA) HP (GIS) HP OEM HP z400 z600/xw6000 z800 xw9000 CPU 8 intel base 6SATA channel SAS Hard Disk PCI-X 192GB Memory CAE D H D SDHD CPU APRAM CPU, AMD Dual core Model 3D 64GB Memory SCI
More informationZoneFlex AP SKU ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * A
ZoneFlex AP SKU 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * AP AP ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex
More information总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1 -
( 招 标 编 号 :JXBJ2016-G008) 江 西 省 百 巨 招 标 咨 询 有 限 公 司 中 国 江 西 二 一 六 年 一 月 总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1
More informationMicrosoft Word - 11900電腦軟體設計.doc
技 能 檢 定 規 範 之 一 一 九 電 腦 軟 體 行 政 院 勞 工 委 員 會 職 業 訓 練 局 編 印 軟 體 技 術 士 技 能 檢 定 規 範 目 錄 一 軟 體 技 術 士 技 能 檢 定 規 範 說 明... 1 二 丙 級 軟 體 技 術 士 技 能 檢 定 規 範... 3 三 乙 級 軟 體 技 術 士 技 能 檢 定 規 範... 5 四 甲 級 軟 體 技 術 士 技
More informationMicrosoft Word - 3D_仿單_領證版20150722
富 士 希 納 普 斯 三 維 影 像 軟 體 FUJIFILM SYNAPSE 3D 使 用 前 請 務 必 詳 閱 原 廠 之 使 用 說 明 書 並 遵 照 指 示 使 用 衛 部 醫 器 輸 字 第 027455 號 型 號 FN-7941 產 品 敘 述 與 用 途 本 產 品 為 供 訓 練 有 素 的 專 業 醫 療 影 像 人 員 使 用 之 軟 體 本 產 品 接 受 來 自 各
More information会计从业资格无纸化考试试题管理系统
证 券 业 从 业 人 员 资 格 考 试 计 算 机 化 考 试 服 务 项 目 招 标 文 件 招 标 编 号 :B0708-CMC15N7779 中 国 机 械 进 出 口 ( 集 团 ) 有 限 公 司 2015 年 12 月 目 录 招 标 编 号 :B0708-CMC15N7779 第 一 章 投 标 邀 请... 4 第 二 章 投 标 资 料 表 评 分 细 则 投 标 人 须 知...
More information電機工程系認可證照清單 2011/7/1
南 台 科 技 大 學 電 機 工 程 系 專 業 證 照 課 程 實 施 要 點 96 年 10 月 05 日 系 務 會 議 通 過 100 年 06 月 30 日 系 務 會 議 修 正 通 過 101 年 06 月 21 日 系 務 會 議 修 正 通 過 一 本 系 為 提 升 學 生 的 專 業 技 能, 特 訂 定 本 辦 法 二 實 施 對 象 : 本 系 日 間 部 96 學 年
More information<4D6963726F736F667420576F7264202D20BCC6CBE3BBFABFC6D1A7D3EBBCBCCAF5D7A8D2B5C5E0D1F8B7BDB0B8A3A8D7BFD4BDA3A931332E646F63>
计 算 机 科 与 技 术 专 业 培 养 方 案 专 业 代 码 :080605 专 业 名 称 : 计 算 机 科 与 技 术 (Computer Science and Technology) 制 : 四 年 授 予 位 : 工 士 一. 培 养 目 标 本 专 业 培 养 具 有 良 好 的 科 素 养, 以 软 件 技 术 为, 系 统 地 掌 握 计 算 机 科 与 技 术, 包 括 :
More information<4D6963726F736F667420576F7264202D20B8EAB054B35DB3C6B1C4C1CAABD8C4B3AAED2D313031A67E3131A4EB31352EB8B9A7F3B7732E646F63>
一 個 人 電 腦 ( 中 信 局 ) LP5-100066 ( 契 約 起 始 日 期 :101/06/04, 終 止 日 期 :102/05/31) ( 3 年 之 到 府 人 工 及 零 件 保 固 服 務 ) 等 級 規 格 預 算 CPU RAM HDD 獨 立 顯 卡 其 他 建 議 型 號 備 註 行 政 入 門 個 人 電 腦 ( 含 19 吋 以 螢 幕 ) IntelCore i3-3.3ghz
More information《80后职场新鲜人生存手册》
80 后 职 场 新 鲜 人 生 存 手 册 *************** * 第 一 章 别 把 求 职 当 成 简 单 的 事 *************** 树 立 起 一 个 良 好 的 工 作 态 度, 在 遇 到 困 难 的 时 候 要 懂 得 正 确 对 待, 不 要 把 它 当 做 绊 脚 石, 而 要 看 成 是 锻 炼 自 己 承 受 能 力 的 机 会 ---------------
More informationPowerPoint Presentation
1 版权所有 2012,Oracle 和 / 或其分支机构 保留所有权利 大数据技术概述 2 版权所有 2012,Oracle 和 / 或其分支机构 保留所有权利 以下内容旨在概述产品的总体发展方向 该内容仅供参考, 不可纳入任何合同 该内容不构成提供任何材料 代码或功能的承诺, 并且不应该作为制定购买决策的依据 此处所述有关 Oracle 产品的任何特性或功能的开发 发布以及相应的日程安排均由 Oracle
More informationPowerPoint 演示文稿
Apache Spark 与 多 数 据 源 的 结 合 田 毅 @ 目 录 为 什 么 会 用 到 多 个 数 据 源 Spark 的 多 数 据 源 方 案 有 哪 些 已 有 的 数 据 源 支 持 Spark 在 GrowingIO 的 实 践 分 享 为 什 么 会 用 到 多 个 数 据 源 从 数 据 本 身 来 看 大 数 据 的 特 性 之 一 :Variety 数 据 的 多 样
More informationZoneFlex ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex
ZoneFlex 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex R700 7982 (1)
More information公开招标文件
广 东 省 政 府 采 购 招 标 文 件 项 目 名 称 : 广 东 山 洪 地 质 灾 害 防 治 气 象 保 障 工 程 建 设 项 目 采 购 方 式 : 公 开 招 标 二 〇 一 五 年 五 月 目 录 第 一 部 分 投 标 邀 请 函... 2 第 二 部 分 用 户 需 求 书... 6 第 三 部 分 投 标 人 须 知... 96 第 四 部 分 合 同 书 格 式... 124
More informationDPark MapReduce (Davies) davies@douban.com 2011/12/07 Velocity China 2011 Douban Douban 5500 Douban 5500 1000G, Douban 5500 1000G, 60+ Douban 5500 1000G, 60+ 200+ Douban 5500 1000G, 60+ 200+ > MooseFS
More information201316
Computer Engineering and Applications 计 算 机 工 程 与 应 用 2013,49(16) 25 基 于 开 源 Hadoop 的 矢 量 空 间 数 据 分 布 式 处 理 研 究 尹 芳 1, 冯 敏 2, 诸 云 强 2 3, 刘 睿 YIN Fang 1, FENG Min 2, ZHU Yunqiang 2, LIU Rui 3 1. 长 安 大 学
More informationCOP中文范本
四 川 宏 达 ( 集 团 ) 有 限 公 司 全 球 契 约 年 度 进 展 报 告 2010 年 5 月 13 日 目 录 高 管 致 辞... 1 公 司 简 介... 2 一 经 济 绩 效... 3 1. 体 系 与 政 策... 3 2. 工 作 与 成 果... 3 3. 反 馈 与 评 价... 3 二 环 境 绩 效... 3 1. 体 系 与 政 策... 4 2. 工 作 与
More information冶金企业安全生产监督管理规定
冶 金 企 业 安 全 生 产 监 督 管 理 规 定 国 家 安 全 生 产 监 督 管 理 总 局 国 家 安 全 生 产 监 督 管 理 总 局 令 第 26 号 冶 金 企 业 安 全 生 产 监 督 管 理 规 定 已 经 2009 年 8 月 24 日 国 家 安 全 生 产 监 督 管 理 总 局 局 长 办 公 会 议 审 议 通 过, 现 予 公 布, 自 2009 年 11 月
More informationPowerPoint 演示文稿
张 工 培 训 注 册 消 防 工 程 师 考 试 免 费 宣 讲 课 土 木 建 筑 培 训 领 导 者 1 关 于 资 格 考 试 科 目 及 报 考 条 件 1 什 么 时 候 考 试? 一 级 和 二 级 是 同 一 时 间 考 试 吗? 根 据 公 安 部 消 防 局 官 方 答 疑,2015 年 一 级 注 册 消 防 工 程 师 资 格 考 试 时 间 和 报 名 方 式 计 划 由
More information<4D6963726F736F667420576F7264202D20BAECB1A6C0F6A3BAB7C7B9ABBFAAB7A2D0D0B9C9C6B1C4BCBCAFD7CABDF0CAB9D3C3B5C4BFC9D0D0D0D4B1A8B8E62E646F63>
证 券 代 码 :002165 证 券 简 称 : 红 宝 丽 公 告 编 号 :2010-022 南 京 红 宝 丽 股 份 有 限 公 司 非 公 开 发 行 股 票 募 集 资 金 使 用 的 可 行 性 报 告 二 〇 一 〇 年 十 月 1 目 录 第 一 节 募 集 资 金 使 用 计 划 3 第 二 节 本 次 募 集 资 金 投 资 项 目 可 行 性 分 析 3 第 三 节 本 次
More information调 查 概 述, 调 查 主 要 发 现 为 此 绿 色 和 平 主 张 01 调 查 背 景 02 环 境 信 息 公 开 的 法 理 基 础 及 实 践 03 中 国 的 环 境 信 息 公 开 办 法 ( 试 行 ) 调 查 对 象 04 05 调 查 方 法 06 07 免 责 声 明 : 08 09 调 查 主 要 结 果 及 分 析 10 11 12 超 越 第 二 十 一 条 企 业
More informationAn ERP Platform Strategy Based on Industry-standard Servers
IT@ lntel 白 皮 书 英 特 尔 信 息 技 术 部 门 企 业 资 源 规 划 2010 年 3 月 基 于 工 业 标 准 的 ERP( 企 业 资 源 规 划 ) 平 台 战 略 执 行 概 述 四 路 具 备 出 色 的 性 能 内 存 容 量 I/O 扩 展 能 力 和 业 经 验 证 的 技 术, 是 运 行 我 们 的 大 型 ERP 系 统 的 理 想 平 台 许 多 大
More information<4D6963726F736F667420576F7264202D20483343CAD3C6B5BCE0BFD8BDE2BEF6B7BDB0B8A3A8B4E6B4A2B2BFCAF0A3A9BCBCCAF5B0D7C6A4CAE92E646F63>
H3C 视 频 监 控 解 决 方 案 ( 存 储 部 署 ) 技 术 白 皮 书 关 键 词 : 单 播 组 播 存 储 视 频 监 控 摘 要 :H3C 视 频 监 控 解 决 方 案 ( 存 储 部 署 ) 整 合 了 自 主 知 识 产 权 的 IP 存 储 和 视 频 监 控 二 者 的 优 势, 根 据 用 户 的 应 用 场 景 提 供 了 多 种 视 频 数 据 存 储 模 式, 通
More information叮当旺业通
叮 当 旺 业 通 即 时 通 讯 系 统 解 决 方 案 上 海 富 可 信 息 技 术 发 展 有 限 公 司 2011 年 06 月 03 日 日 期 版 本 说 明 变 更 人 批 准 日 期 批 准 人 目 录 第 一 部 分 引 言... 1 1.1 编 写 目 的... 1 1.2 项 目 背 景... 1 1.3 定 义... 1 1.4 参 考 资 料... 1 第 二 部 分 任
More information93年度支用計畫書.PDF
93 4 29 (02)24372093-415 (02)24376209 E-mailhccheng@ems.cku.edu.tw 1 2 () 1. 2. 117,031 119318 106,998 108825 10,033 10493 229 229 69 69 19 19 20 25 ( 4,880 5744 ) 21,747 21361 34118 47,019 70 71 34 36
More information考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一
考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 五 專 企 二 乙 胡 哲 維 中 文 輸 入 五 專 企 二 乙 周 林 昜 中 文 輸 入 五 專 企 二 乙 賴 昱 樺 中 文 輸 入 五 專 企 二 乙
More informationVIDEOJET connect 7000 VJC-7000-90 zh- CHS Operation Manual VIDEOJET connect 7000 zh-chs 3 目 录 1 浏 览 器 连 接 7 1.1 系 统 要 求 7 1.2 建 立 连 接 7 1.2.1 摄 像 机 中 的 密 码 保 护 7 1.3 受 保 护 的 网 络 7 2 系 统 概 述 8 2.1 实 况
More informationABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示
完整的大数据解決方案 ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 Dataframe Pig YARN Spark Stand Alone HDFS Spark Stand Alone Mesos Mesos Spark Streaming Hive Hadoop
More informationAcronis True Image 2014
Update 2 使 用 指 南 目 錄 1 簡 介... 8 1.1 什 麼 是 Acronis True Image 2014?... 8 1.2 什 麼 是 Acronis True Image 2014 Premium?... 8 1.3 此 版 本 新 增 內 容... 9 1.4 系 統 需 求 與 支 援 媒 體... 9 1.4.1 最 低 系 統 需 求...9 1.4.2 支 援
More information【工程类】
茂 名 市 地 方 税 务 局 会 议 室 功 能 升 级 项 目 采 购 项 目 编 号 :GZGD-2015-008 公 开 招 标 文 件 广 州 广 大 工 程 项 目 管 理 有 限 公 司 编 制 发 布 日 期 : 二 0 一 六 年 一 月 捌 日 目 录 第 一 部 分 投 标 邀 请 函 -----------------------------------------------------------------------------------------------------------
More information附 件 : 湖 北 省 会 计 人 员 继 续 教 育 实 施 办 法 第 一 条 为 规 范 会 计 人 员 继 续 教 育 工 作, 加 强 持 有 会 计 从 业 资 格 证 书 人 员 ( 以 下 简 称 会 计 人 员 ) 继 续 教 育 的 管 理, 推 进 全 省 会 计 人 员 继 续 教 育 工 作 科 学 化 规 范 化 信 息 化, 培 养 造 就 高 素 质 的 会 计 队
More information2016 28 2016 2013 50 2013 69 2016 2016 10 2016 1 2016 24 2016 1 2016 2016 7 1 2017 6 30 1 2016 2 2012 17 2016 2016 24 2016 1 2016 1 2016 1 2016 1 2016 2016 24 2016 24 2016 24 24 12 2016 CN 24 24 12 2016
More informationPowerPoint 演示文稿
大数据分析工具介绍 主讲 : 王建明 手机 :13940975206 QQ:564250480( 微信 ) 2/39 大数据的基本特征 特征 Volume 数据体量巨大 PB 级 -> EB 级 -> ZB 级 速度要求快数据输入输出的速度 Velocity Big Data Varity 数据类型多样文本 图像 视频 音频 Veracity 价值密度低商业价值高 Hadoop 生态系统介绍 ( 离线
More information国家测绘局政府网站
国 家 测 绘 局 管 理 信 息 中 心 2011 年 第 3 期 ( 总 第 11 期 ) 2011 年 4 月 15 日 2011 年 一 季 度 国 家 测 绘 局 网 站 运 行 情 况 综 述 2011 年 第 一 季 度, 国 家 测 绘 局 网 站 紧 紧 围 绕 社 会 热 点 和 局 中 心 工 作, 制 作 了 加 强 地 理 国 情 监 测, 提 升 测 绘 服 务 水 平
More informationJava ¿ª·¢ 2.0: Óà Hadoop MapReduce ½øÐдóÊý¾Ý·ÖÎö
中 文 登 录 ( 或 注 册 ) 技 术 主 题 软 件 下 载 社 区 技 术 讲 座 搜 索 developerworks developerworks 技 术 主 题 Java technology 文 档 库 Java 开 发 2.0: 用 Hadoop MapReduce 进 行 大 数 据 分 析 成 堆 的 数 据 如 何 变 成 信 息 金 矿 Andrew Glover, 作 家
More informationIT认证培训(五).doc
... IT!...... IT... IT PROJECT+... WINDOWS... 2003... PC......... IT...... IT......... C......... IT... IT... IT... I ?...... IT... IT... IT...... 2003 IT... IT... 2003 IT.................. :... 2002...
More information<4D6963726F736F667420576F7264202D20CFB5B7D62DCFC2CEE749CAD4CCE22D3037C9CF>
全 国 计 算 机 技 术 与 软 件 专 业 技 术 资 格 ( 水 平 ) 考 试 2007 年 上 半 年 系 统 分 析 师 下 午 试 卷 I ( 考 试 时 间 3:30~5:00 共 90 分 钟 ) 请 按 下 表 选 答 试 题 试 题 号 一 二 ~ 五 选 择 方 法 必 答 题 选 答 2 题 请 按 下 述 要 求 正 确 填 写 答 题 纸. 本 试 卷 满 分 75 分,
More information岳西职教中心
省 级 示 范 中 等 职 业 学 校 复 评 申 报 材 料 岳 西 县 职 业 技 术 教 育 中 心 二 00 九 年 九 月 目 录 一 关 于 要 求 对 岳 西 县 职 教 中 心 申 报 省 级 示 范 中 等 职 业 学 校 工 作 进 行 复 评 的 报 告 二 关 于 成 立 岳 西 县 争 创 省 级 示 范 中 等 职 业 学 校 领 导 小 组 的 通 知 三 关 于 成
More information156 ORACLE SUN ORACLE SUN
ORACLE SUN ( Oracle ) Oracle Oracle SUN SUN Oracle 155 156 ORACLE SUN ORACLE SUN Database Appliance X4-1 Oracle ORACLE SUN 1. Oracle Database Appliance (ODA) X4-2 ODA Oracle Database (OLTP) Oracle License
More information《计算机应用基础》学习材料(讲义)
计 算 机 应 用 基 础 学 习 材 料 ( 讲 义 ) Fundamentals of Computer Application 2014-3-22 JIANGSU OPEN UNIVERSITY 第 二 学 习 周 计 算 机 基 础 知 识 ( 一 ) 导 学 在 本 学 习 周, 我 们 主 要 的 任 务 是 认 识 计 算 机 你 将 知 道 计 算 机 是 什 么 时 候 产 生 的,
More informationi ii iii 1 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 QCon QCon InfoQ DNS StartRender Full load QPS 20% Dom html 26 URI Profile RT QPS URI profile InfoQ RT 50ms 40ms 10ms 20% RT Velocity
More informationcosa Quick Start Manual
小 心 SmartStor Cloud 網 路 儲 存 體 機 箱 內 的 電 子 元 件 易 受 靜 電 放 電 (ESD) 的 影 響, 因 而 受 到 損 壞 處 理 SmartStor Cloud 裝 置 或 其 子 配 件 時, 應 隨 時 遵 守 預 防 措 施 警 告! 風 扇 含 有 危 險 的 活 動 零 件 確 保 手 指 及 其 他 身 體 部 位 遠 離 風 扇 小 心 如
More information基于 SQL-on-Hadoop 的 网络日志分析
1896 1920 1987 2006 基于 SQL-on-Hadoop 的 网络日志分析 章思宇, 姜开达, 韦建文, 罗萱, 王海洋 上海交通大学网络信息中心 2014 年 11 月 事后追查 校园网安全日志分析 已经发生, 已被发现的入侵 攻击检测 已经发生, 尚不知晓的攻击 正在进行的攻击 (APT) 漏洞挖掘 发现尚未被利用的漏洞 镜像流量抓包分析 网络流量日志采集 Internet 缓存加速系统
More informationIPC IPC PCs SIMATIC IPC PC 30 PCs 1983 PC SIMATIC IPC 9 PC TIA Portal SIMATIC IPC PC SIMATIC 1 Mio. 0.5 Mio TIA
SIMATIC IPC PC siemens.com/ipc IPC IPC PCs SIMATIC IPC PC 30 PCs 1983 PC SIMATIC IPC 9 PC TIA Portal SIMATIC IPC PC SIMATIC 1 Mio. 0.5 Mio. 2004 2006 2008 2010 2012 2014 2016... TIA Portal siemens.com/tia-portal
More information是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家
全 国 中 小 企 业 股 份 转 让 系 统 有 限 责 任 公 司 2016 年 暑 期 实 习 生 招 收 公 告 一 公 司 简 介 全 国 中 小 企 业 股 份 转 让 系 统 ( 以 下 简 称 新 三 板 ) 是 经 国 务 院 批 准, 依 据 证 券 法 设 立 的 继 上 交 所 深 交 所 之 后 第 三 家 全 国 性 证 券 交 易 场 所, 也 是 境 内 第 一 家
More informationI/ OHDD HDD Soeda I/O HDD SSD SSD SSD HDD Hitachi HP HP StorageWorks XP24000 XP20000 SSD SSD Hitachi Universal Storage Platform V VM SSD
SSDHDD NAND Solid-State Drives, SSD baidu. com Baidu comscore 2 2008 1 baidu.jp baidu.com GB 100 10 1 0.1 0.01 PND NAND GB SSD20GB Netbook solid-state drives, SSD NAND HDD NAND 2.5 HDD 160GB 3.5 HDD 750GB
More information思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846 联 系 人 : 刘 颖 董 凯 联 系 电 话 :010
大 数 据 发 展 白 皮 书 (2015 版 ) 中 国 电 子 信 息 产 业 发 展 研 究 院 工 业 和 信 息 化 部 赛 迪 智 库 二 一 五 年 四 月 思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846
More information镇江市行政审批事项申报材料清单
丹 政 办 发 2015 143 号 关 于 公 布 行 政 审 批 事 项 申 报 材 料 及 前 置 中 介 服 务 事 项 清 单 的 通 知 各 镇 人 民 政 府, 各 街 道 办 事 处, 开 发 区 管 委 会, 练 湖 度 假 区 管 委 会, 市 政 府 各 部 门, 市 各 直 属 单 位 : 为 进 一 步 简 政 放 权, 深 化 行 政 审 批 制 度 改 革, 切 实 解
More informationPowerPoint 演示文稿
Hadoop 生 态 技 术 在 阿 里 全 网 商 品 搜 索 实 战 阿 里 巴 巴 - 王 峰 自 我 介 绍 真 名 : 王 峰 淘 宝 花 名 : 莫 问 微 博 : 淘 莫 问 2006 年 硕 士 毕 业 后 加 入 阿 里 巴 巴 集 团 淘 及 搜 索 事 业 部 ( 高 级 技 术 与 家 ) 目 前 负 责 搜 索 离 线 系 统 团 队 技 术 方 向 : 分 布 式 计 算
More information一 公 司 简 介 993 年, 顺 丰 诞 生 于 广 东 顺 德 自 成 立 以 来, 顺 丰 始 终 专 注 于 服 务 质 量 的 提 升 持 续 加 强 基 础 建 设 积 极 研 发 和 引 进 具 有 高 科 技 含 量 的 信 息 技 术 与 设 备 以 提 升 作 业 自 动 化
顺 丰 集 团 206 届 校 园 招 聘 简 章 一 公 司 简 介 993 年, 顺 丰 诞 生 于 广 东 顺 德 自 成 立 以 来, 顺 丰 始 终 专 注 于 服 务 质 量 的 提 升 持 续 加 强 基 础 建 设 积 极 研 发 和 引 进 具 有 高 科 技 含 量 的 信 息 技 术 与 设 备 以 提 升 作 业 自 动 化 水 平, 在 国 内 外 建 立 了 庞 大 的
More informationATI-2019安裝手冊-v
#1 ...02 Acronis True Image...03 Acronis True Image 2019...03 Acronis True Image 2019...04 ( ) 64...04 ( ) Acronis Account...05 ( )...05 ( ) Acronis True Image...05 ( ) Windows...06 1....06 2....08 ( )
More information操 守, 爱 岗 敬 业 诚 实 守 信 办 事 公 道 服 务 群 众 奉 献 社 会 ; 具 备 从 事 职 业 活 动 所 必 需 的 基 本 能 力 和 管 理 素 质 ; 脚 踏 实 地 严 谨 求 实 勇 于 创 新 3. 人 文 素 养 与 科 学 素 质 : 具 有 融 合 传 统
计 算 机 类 专 业 ( 大 数 据 方 向 ) 大 专 人 才 培 养 方 案 一 招 生 对 象 及 学 习 年 限 ( 一 ) 招 生 对 象 : 全 日 制 普 通 中 学 高 中 毕 业 生, 招 生 方 式 为 普 通 高 考 招 生 ( 二 ) 学 习 年 限 : 基 本 学 制 三 年, 实 行 弹 性 学 制, 学 生 在 校 时 间 原 则 上 不 能 少 于 两 年, 总 在
More information在 Hitachi AMS 2000 系列上应用 VMware VAAI 的优势
1 与 VMware VAAI 配 套 使 用 Hitachi Adaptable Modular Storage 2000 系 列 的 优 势 实 验 室 认 证 报 告 作 者 :Henry Chu 和 Roger Clark 2011 年 2 月 年 月 反 馈 日 立 数 据 系 统 公 司 欢 迎 您 提 供 反 馈 意 见 请 发 送 电 子 邮 件 至 SolutionLab@hds.com,
More informationDell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac
Dell EMC Dell EMC IT Dell EMC IT Dell EMC https://www. dellemc.com/ Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost
More information公 司 年 度 大 事 记 2015 年 10 月 -11 月, 公 司 完 成 股 份 制 改 造 10 月 13 日, 百 灵 有 限 临 时 股 东 会 作 出 决 议, 同 意 各 发 起 人 将 其 在 百 灵 有 限 拥 有 的 截 至 2015 年 8 月 31 日 经 审 计 的 原
百 灵 电 子 NEEQ :836943 郑 州 百 灵 电 子 技 术 股 份 有 限 公 司 (ZHENGZHOU BEELINK ELECTRONIC TECHNOLOGY CO.,LTD.) 年 度 报 告 2015 第 1 页, 共 110 页 公 司 年 度 大 事 记 2015 年 10 月 -11 月, 公 司 完 成 股 份 制 改 造 10 月 13 日, 百 灵 有 限 临 时
More information項 目 重 要 日 程 碩 士 班 ( 含 在 職 專 班 ) 日 期 博 士 班 網 路 報 名 104.12.20( 日 )12:00~ 105.2.3( 三 ) 105.4.20( 三 )12:00-5.11( 三 ) 報 名 繳 費 截 止 日 105.2.4( 四 )15:30 免 報 名
靜 宜 大 學 105 學 年 度 碩 博 士 班 暨 碩 士 在 職 專 班 考 試 入 學 招 生 簡 章 靜 宜 大 學 教 務 處 招 生 組 編 訂 中 華 民 國 104 年 11 月 項 目 重 要 日 程 碩 士 班 ( 含 在 職 專 班 ) 日 期 博 士 班 網 路 報 名 104.12.20( 日 )12:00~ 105.2.3( 三 ) 105.4.20( 三 )12:00-5.11(
More information分布式数据库期中作业说明
厦 门 大 学 林 子 雨 编 著 大 数 据 技 术 原 理 与 应 用 ( 版 本 号 :2016 年 4 月 13 日 版 本 ) ( 备 注 :2015 年 8 月 1 日 第 一 版 教 材 中 没 有 本 章, 本 章 为 2016 年 新 增 内 容, 将 被 放 入 第 二 版 教 材 中 ) ( 版 权 声 明 : 版 权 所 有, 请 勿 用 于 商 业 用 途 ) 主 讲 教
More information云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成
ULA 尚 观 云 计 算 集 群 架 构 师 ( 零 首 付 )V9.0( 周 末 ) 一 尚 观 教 育 九 年 运 营 35000 学 员, 平 均 月 薪 6258+ 签 法 律 双 保 就 业 协 议, 保 底 薪, 保 就 业, 不 就 业 100% 退 所 有 学 费, 绝 非 就 业 推 荐 协 议 9 年 运 营 9 大 城 市 直 属 校 区 实 力 保 证, 三 万 多 名 已
More informationHighPoint产品的FAQ手册
一 引 言 首 先 承 蒙 贵 公 司 赐 顾, 使 用 HighPoint ( 简 称 HPT) 系 列 产 品 以 下 是 根 据 多 年 来 合 作 的 客 户 所 提 出 的 问 题 而 总 结 出 的 有 关 HighPoint 系 列 产 品 的 FAQ, 欢 迎 您 随 时 提 出 批 评 建 议 以 便 我 们 及 时 改 进 谢 谢! 二 HighPoint RAID 产 品 技
More information数字地理空间框架及一村一镇一地图建设
数 字 五 华 地 理 空 间 框 架 及 一 村 一 镇 一 地 图 建 设 项 目 招 标 文 件 招 标 编 号 :SZGXMZ140318 2014 年 5 月 12 日 编 制 人 : 曾 旭 明 目 录 第 一 部 分 投 标 邀 请 书...4 第 二 部 分 投 标 须 知...6 1. 关 于 定 标 方 式...6 2. 关 于 招 标 文 件...6 3. 关 于 投 标 人...6
More information从上面这个表格中我们可以很明显看到巨大的差异当数据全部缓存到内存中 内存大小会影响所有操作 不管是 SELECT 还是 INSERT/UPDATE/DELETE 操作 INSERT 当往一个随机排序的索引中插入数据的时候会造成随机的读/写 UPDATE/DELETE 当更改数据的时候会导致磁盘的读/
MySQL 服务器的 linux 性能优化和扩展技巧 作者 Yoshinori Matsunbu 作者现在是 DeNA 公司的数据库和基础设施架构师 之前在 SUN 公司工作 他也是 HandlerSocket 的作者 这个是 MySQL 的 NoSQL 插件 本文是根据他的 PPT 整理而成的 如有不正确敬请指教 本文主要的内容有如下 1. 内存和 SWAP 空间管理 2. 同步 I/O 文件系统和
More informationSun Storage Common Array Manager 阵列管理指南,版本 6.9.0
Sun Storage Common Array Manager 阵 列 管 理 指 南, 版 本 6.9.0 文 件 号 码 :E27519-01 2012 年 2 月 版 权 所 有 2007, 2011, Oracle 和 / 或 其 附 属 公 司 保 留 所 有 权 利 本 软 件 和 相 关 文 档 是 根 据 许 可 证 协 议 提 供 的, 该 许 可 证 协 议 中 规 定 了 关
More information深入理解otter
深 入 理 解 otter 七 锋 2013-07-04 Agenda 1. 中 美 同 步 需 求 2. otter 架 构 & 设 计 o o o o o o o o 如 何 解 决 " 差 " 网 络 如 何 避 免 双 向 回 环 如 何 处 理 数 据 一 致 性 如 何 高 效 同 步 数 据 如 何 高 效 同 步 文 件 如 何 支 持 系 统 HA 如 何 处 理 特 殊 业 务
More information双机模板方案0404.doc
2004 4 1 16 2 16 NF420 CPU XOEN MP 2.0G/1M*2 2 MEM DDR 2GB HDD 36G*2RAID1 NS3500 RAID 1 12 48 36G/73G/146G 10krpm 2+1 73G*5 Windows/Linux 1 HA LCHA for Windows/Linux 1 3 16 4 16 5 16 Heartb Local Disc
More informationAutodesk Whitepaper A4 size
Autdesk Revit 2015 Revit Architecture 2015 Revit MEP 2015 Revit Structure 2015 Revit 模 型 效 能 技 術 文 件 與 任 何 設 計 儀 器 一 樣,Autdesk Revit 的 效 能 優 劣 取 決 於 使 用 者 的 知 識 技 能 與 實 務 做 法 以 及 為 軟 體 提 供 的 硬 體 環 境 為
More informationAcronis True Image 2015
目 录 1 简 介...6 1.1 Acronis True Image 2015 是 什 么?... 6 1.2 此 版 本 中 的 新 增 功 能... 6 1.2.1 被 移 除 功 能 的 替 代 选 择... 7 1.3 系 统 要 求 与 支 持 的 媒 体... 7 1.3.1 最 低 系 统 要 求... 7 1.3.2 支 持 的 操 作 系 统... 7 1.3.3 支 持 的
More information案由:審議各單位提報「101年度教育部對私立技專校院整體發展獎補助經費支用計畫書」中經常門、資本門經費支用項目及金額
樹 德 科 技 大 學 103 年 度 第 1 次 整 體 發 展 獎 勵 補 助 經 費 規 劃 專 責 小 組 會 議 記 錄 已 於 103 年 02 月 25 日 奉 副 校 長 代 理 校 長 核 准 備 查 在 案 時 間 :103 年 2 月 20 日 ( 星 期 四 ) 中 午 12 時 10 分 地 點 : 行 政 大 樓 3 樓 A308 主 持 人 : 朱 元 祥 校 長 出
More information30.00% 25.00% 25.00% 22.50% 20.00% 15.00% 12.50% 15.00% 12.50% 10.00% 7.50% 5.00% 2.50% 2.50% 0.00% 文 学 理 学 工 学 法 学 教 育 学 管 理 学 历 史 学 艺 术 学 ( 三 ) 学 生
四 川 文 理 学 院 2014 年 本 科 教 学 质 量 报 告 2014 年 来, 在 教 育 主 管 部 门 的 关 怀 指 导 下, 在 学 校 党 政 班 子 的 正 确 领 导 下, 广 大 师 生 员 工 团 结 一 心, 按 照 国 家 中 长 期 教 育 改 革 和 发 展 规 划 纲 要 和 教 育 部 对 办 应 用 型 本 科 的 要 求, 深 入 贯 彻 落 实 学 校
More informationLP / / / / / /
LP5-990091 / / / / / / 個人電腦之主機 LP5-990091 13 14 15 16 OptiPlex 790 OptiPlex 790 OptiPlex 790 OptiPlex 790 16,757 16,557 13,725 13,525 ( / ) 17,865 17,651 14,632 14,419 Intel Core i3-2100 Intel Core i3-2100
More informationXXXXXXXX http://cdls.nstl.gov.cn 2 26
[ ] [ ] 2003-7-18 1 26 XXXXXXXX http://cdls.nstl.gov.cn 2 26 (2003-7-18) 1...5 1.1...5 1.2...5 1.3...5 2...6 2.1...6 2.2...6 2.3...6 3...7 3.1...7 3.1.1...7 3.1.2...7 3.1.2.1...7 3.1.2.1.1...8 3.1.2.1.2...10
More informationSlide 1
IBM 大数据解决方案 Enterprise DataNode Using X3690X5 and EXP2512 Smarter Systems for a Smarter Planet 2011 IBM Corporation Reasons for using X3690X5 Data Node IBM System and Technology Group Advantage Description
More information标题
全 面 推 开 营 改 增 业 务 操 作 指 引 国 家 税 务 总 局 全 面 推 开 营 改 增 督 促 落 实 领 导 小 组 办 公 室 编 图 书 在 版 编 目 (CIP) 数 据 全 面 推 开 营 改 增 业 务 操 作 指 引 / 国 家 税 务 总 局 全 面 推 开 营 改 增 督 促 落 实 领 导 小 组 办 公 室 编. 北 京 : 中 国 税 务 出 版 社, 2016.
More information附件2
附 件 2 辽 宁 省 普 通 高 等 学 校 本 科 优 势 特 色 专 业 申 报 书 专 业 名 称 : 软 件 工 程 专 业 代 码 : 080902 推 荐 学 校 ( 公 章 ): 大 连 交 通 大 学 推 荐 学 校 代 码 : 10150 专 业 带 头 人 : 梁 旭 联 系 电 话 ( 手 机 ): 13842899132 辽 宁 省 教 育 厅 制 2015 年 6 月 一
More information校友会系统白皮书feb_08
硕 士 研 究 生 招 生 管 理 系 统 1 产 品 白 皮 书 希 尔 数 字 校 园 硕 士 研 究 生 招 生 管 理 系 统 白 皮 书 目 录 1 产 品 概 述... 1 1.1 产 品 简 介... 1 1.2 应 用 范 围... 1 2 产 品 功 能 结 构 图... 2 3 产 品 功 能... 3 3.1 系 统 设 置... 3 3.2 信 息 发 布... 3 3.3
More information2003年中报正文.PDF
SHANGHAI XINGYE HOUSING CO., LTD XYHC 333 200031-1 - 021-54042455 021-54045488 E-mailqiyong @ xingye.sina.net 38 200002 333 200031 021-54042455 021-54045488 E-mailxingyeb @ online.sh.cn http: // www. sse.
More informationPowerPoint Presentation
数 字 化 校 园 信 息 平 台 解 决 方 案 杭 州 正 方 电 子 工 程 有 限 公 司 2007.10 杭 州 正 方 电 子 工 程 有 限 公 司 简 介 正 方 公 司 成 立 于 1999 年 1 月 份, 现 有 员 工 170 多 名, 是 经 相 关 机 构 认 定 的 高 新 技 术 企 业 软 杭 件 企 州 业 正, 取 方 得 电 计 算 子 机 工 软 件 程 著
More information迅闪2009帮助手册(xshelp)
信 佑 技 术 白 皮 书 信 佑 6.0 目 录 1. 产 品 入 门... 1 1.1. 部 署 结 构... 1 1.2. 安 装 环 境 需 求... 1 1.3. 服 务 器 部 署 安 装... 2 1.4. 客 户 机 部 署 安 装... 8 1.5. 服 务 控 制 器... 12 2. 客 户 机 管 理... 13 2.1. 设 置 分 组... 13 2.2. 添 加 客 户
More information0523内页正稿-改风格
1100MP 8,999 Dell Axim X50/X50v 300-500 4 Dell 2300MP Dell X50 416MHz 3,599 10-11 Dell E153FP 2 3 4-5 6-7 100 8-9 8-9 10-11 12 Oracle on Dell 13 5 14-15 1400 21001 15 800 x 600 2.2 1.677M 32 E232 1:1.2
More informationuntitled
TS-411U Turbo Server TS-411U Turbo Server ( : 1.0.0) 2005 2005 12 8-2 - 1. 2. TS-411U Turbo Server - 3 - ... 7 1.1... 7 1.2... 8 1.3... 9 TS-411U... 10 2.1... 10 2.2... 14 2.3 TS-411U... 15 LCD... 17...
More informationMicrosoft Word - N3-CH3.doc
Chapter 3 借貸法則 分錄與過帳 第一部分 課本習題 含答案 問答題] 易 [會計科目] 1. 什麼是會計科目 帳戶 的正常餘額 在借方還是在貸方 答案 資產與費損類的科目增加時 應將增加金額記載在會計帳戶的借方 左方 則 資產與費損類的科目正常餘額即在借方 負債 權益與收益類科目增加時 應將 增加金額記載在會計帳戶的貸方 右方 則負債 權益與收益類的科目正常餘 額即在貸方 易 [會計分錄的內容]
More information