Reducing Client Incidents through Big Data Predictive Analytics

Size: px
Start display at page:

Download "Reducing Client Incidents through Big Data Predictive Analytics"

Transcription

1 白 皮 书 英 特 尔 IT 部 门 IT 最 佳 实 践 大 数 据 预 测 分 析 2013 年 12 月 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 总 体 概 述 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 容 易 主 动 找 出 客 户 端 问 题, 并 及 时 将 其 修 复 以 免 问 题 扩 大, 从 而 为 企 业 节 约 大 量 成 本 Ajay Chandramouly 英 特 尔 IT 大 数 据 领 域 负 责 人 Ravindra Narkhede 英 特 尔 IT 企 业 SM 架 构 师 Vijay Mungara 英 特 尔 IT 大 数 据 架 构 师 在 概 念 验 证 (proof of concept, 简 称 PoC) 中, 英 特 尔 IT 将 自 然 语 言 处 理 和 统 计 建 模 应 用 于 PC 客 户 端 事 件 日 志 和 IT 帮 助 中 心 事 故 报 告, 并 预 测 到 之 后 28 天 内 发 生 的 20% 的 事 故 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 主 动 找 出 并 解 决 可 能 会 发 生 的 客 户 端 问 题, 以 免 问 题 扩 大, 从 而 有 望 为 企 业 节 约 大 量 成 本 在 2013 年, 英 特 尔 IT 设 定 了 目 标, 在 应 用 了 高 级 自 然 语 言 处 理 和 信 息 检 索 技 年 底 之 前 将 所 有 已 知 并 应 受 到 重 视 的 报 告 术, 后 者 支 持 将 机 器 信 息 ( 事 件 数 据 ) IT 事 故 ( 发 生 在 客 户 端 服 务 器 和 其 他 与 内 部 客 户 信 息 ( 事 故 报 告 ) 进 行 关 联 设 备 上 ) 减 少 40% 我 们 意 识 到 客 户 端 将 数 百 万 个 事 件 和 数 千 个 事 故 分 类, 而 是 造 成 各 类 事 故 的 主 要 元 凶, 所 以 使 且 在 预 测 其 他 客 户 端 会 发 生 的 事 故 方 面 用 Apache Hadoop* 软 件 的 英 特 尔 发 行 版 的 准 确 程 度 达 78% ( 使 用 Hadoop 版 本 2.2) 设 计 了 一 种 客 户 创 建 了 数 据 可 视 化 的 报 表, 以 帮 助 IT 端 事 故 预 测 概 念 验 证 (proof of concept, 支 持 员 工 快 速 确 定 问 题 的 发 生 概 率 严 简 称 PoC) 我 们 将 文 本 分 析 功 能 应 用 于 重 程 度 及 分 布 情 况, 更 准 确 地 制 定 修 复 数 百 万 个 客 户 端 事 件 日 志 和 数 千 份 客 户 端 措 施 及 其 他 主 动 支 持 服 务 事 故 报 告, 发 现 了 其 中 一 些 关 联 数 据, 并 据 此 来 预 测 和 解 决 客 户 端 问 题, 避 免 我 们 的 客 户 端 事 故 预 测 解 决 方 案 结 合 了 数 问 题 扩 大 据 挖 掘 和 预 测 分 析 功 能, 可 帮 助 我 们 在 那 些 基 本 上 被 曾 经 忽 视 的 数 据 中 获 取 价 值 在 实 施 概 念 验 证 时, 我 们 完 成 了 几 项 工 这 一 新 功 能 将 帮 助 我 们 及 时 解 决 众 多 客 户 作 端 问 题, 以 免 影 响 用 户 工 的 作 效 率 该 解 开 发 了 一 种 大 数 据 预 测 分 析 解 决 方 案, 决 方 案 的 要 素 还 有 望 协 助 发 掘 其 他 数 据 日 它 能 够 从 95,000 多 个 客 户 端 系 统 每 天 志 中 的 新 价 值, 例 如 从 英 特 尔 制 造 供 应 产 生 先 前 很 少 被 注 意 到 的 数 百 万 个 链 营 销 市 场 研 究 和 其 他 运 营 环 节 中 收 Windows* 事 件 记 录 中 获 取 价 值 集 到 的 数 据 Guillermo Rueda 英 特 尔 IT 大 数 据 架 构 师 Asoka Diggs 英 特 尔 IT 企 业 架 构 师

2 白 皮 书 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 目 录 总 体 概 述... 1 背 景... 2 概 念 验 证... 3 事 故 预 测 的 解 决 方 案 架 构... 3 主 要 工 具... 4 数 据 收 集... 5 大 数 据 文 本 分 析... 6 实 现 数 据 管 理... 7 从 可 视 化 数 据 发 现 信 息... 8 结 果... 9 后 续 步 骤...10 结 论...10 相 关 信 息...10 缩 写 词...10 IT@INTEL IT@Intel 计 划 将 全 球 各 地 的 IT 专 业 人 员 及 其 在 我 们 企 业 中 的 同 仁 紧 密 联 系 在 一 起, 共 同 分 享 经 验 教 训 方 法 和 战 略 我 们 的 目 标 十 分 简 单 : 分 享 英 特 尔 IT 的 最 佳 实 践, 获 得 业 务 价 值 并 实 现 IT 竞 争 优 势 如 欲 了 解 更 多 信 息, 请 访 问 或 联 系 您 当 地 的 英 特 尔 代 表 背 景 英 特 尔 全 球 计 算 环 境 共 包 括 超 过 95,000 台 企 业 客 户 端 电 脑 在 一 个 客 户 端 上 出 现 的 问 题 往 往 很 快 会 在 成 百 上 千 个 类 似 的 客 户 端 中 发 生, 而 且 也 可 能 会 出 现 在 其 他 IT 设 备 中 使 客 户 端 处 于 最 稳 定 的 状 态 成 为 高 度 优 先 事 项, 因 为 系 统 和 应 用 错 误 及 崩 溃 会 严 重 影 响 用 户 的 工 作 效 率, 丢 失 未 保 存 的 工 作 内 容, 并 大 幅 度 增 加 IT 运 营 成 本 积 极 主 动 去 解 决 客 户 端 的 问 题 一 直 以 来 都 是 IT 的 目 标, 而 且 对 于 我 们 在 2013 年 实 现 将 IT 设 备 的 重 要 事 故 数 量 降 低 40% 的 目 标 来 说 至 关 重 要 我 们 将 客 户 端 事 故 定 义 为 会 影 响 其 正 常 使 用 的 问 题, 如 系 统 和 应 用 错 误 恶 意 软 件 感 染 等 总 体 来 看, 客 户 端 系 统 造 成 了 约 80% 的 企 业 事 故, 从 数 量 上 而 言 是 事 故 发 生 的 主 要 元 凶, 因 此 是 IT 成 本 节 约 的 首 要 目 标 IT 拥 有 海 量 的 系 统 信 息, 可 以 从 中 找 到 大 量 客 户 端 事 故 的 根 本 原 因 主 要 信 息 源 包 括 客 户 在 帮 助 请 求 中 报 告 的 事 故, 和 客 户 机 生 成 的 事 件 日 志 数 据 事 件 是 Windows* 事 件 日 志 系 统 记 录 的 问 题 这 些 日 志 记 录 着 各 类 事 件, 从 组 件 未 成 功 启 动 到 操 作 未 成 功 完 成 事 件 被 分 类 为 危 险 错 误 信 息 和 审 计 以 医 疗 情 境 作 为 类 比, 事 故 就 像 特 定 患 者 的 抱 怨, 每 日 的 事 件 日 志 就 像 综 合 的 实 验 室 报 告, 详 细 描 述 血 样 中 可 能 失 常 的 所 有 因 素 而 要 实 现 准 确 的 诊 断, 二 者 通 常 是 缺 一 不 可 主 动 分 析 事 件 日 志 存 在 的 挑 战 在 于 事 件 日 志 的 数 据 量 极 其 庞 大, 每 台 机 器 每 天 会 产 生 约 2,000 条 日 志, 关 键 事 件 平 均 为 40 条 95,000 多 台 客 户 端 每 天 可 以 产 生 多 达 1900 万 个 事 件, 一 个 季 度 则 能 在 企 业 中 产 生 多 达 300GB 的 数 据 做 出 准 确 预 测 需 要 一 天 以 上 的 数 据 量 我 们 认 为 一 年 数 据 量 的 理 想 水 平 为 1TB 在 实 施 客 户 端 事 故 预 测 概 念 验 证 (PoC) 之 前, 事 件 日 志 的 信 息 量 极 其 庞 大 多 数 的 信 息 都 未 经 过 分 析 和 使 用 问 题 支 持 人 员 只 会 在 发 生 特 定 客 户 端 事 故 时 访 问 客 户 端 的 事 件 日 志 即 使 将 事 件 日 志 信 息 与 员 工 针 对 特 定 客 户 端 的 帮 助 请 求 作 关 联, 也 需 要 耗 费 大 量 的 时 间 和 人 工 为 了 处 理 这 类 工 作, 许 多 IT 部 门 放 弃 了 通 过 扩 展 容 量 来 预 测 有 可 能 发 生 事 故 的 长 期 目 标 在 2009 年, 英 特 尔 IT 在 从 被 动 式 转 型 至 主 动 式 问 题 管 理 方 面 取 得 了 重 大 进 展 我 们 开 发 了 一 种 工 具, 它 可 以 从 数 千 台 客 户 端 中 收 集 蓝 屏 系 统 崩 溃 数 据, 并 从 数 据 的 分 析 中 找 出 问 题 根 源 借 助 该 工 具, 我 们 能 够 将 问 题 分 类 和 优 先 排 序 我 们 部 署 针 对 最 优 先 问 题 的 解 决 方 案, 将 每 周 的 蓝 屏 次 数 从 5,500 减 少 到 2,500 以 内, 而 且, 经 常 能 够 发 现 那 些 可 能 会 有 相 同 问 题 出 现 的 客 户 端, 从 而 及 时 修 复, 避 免 发 生 故 障 2

3 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 白 皮 书 为 了 奠 定 成 功 的 基 础, 我 们 设 定 了 概 念 验 证 目 标, 旨 在 帮 助 IT 支 持 人 员 彻 底 处 理 任 何 特 定 事 故, 确 保 不 再 复 发 我 们 想 要 开 发 一 种 解 决 方 案, 它 能 够 在 相 似 的 机 器 中 将 客 户 端 事 故 与 事 件 日 志 相 互 匹 配, 然 后 分 析 数 据 来 找 出 问 题 的 根 源 然 后, 该 解 决 方 案 可 应 用 至 整 个 企 业, 防 止 相 同 问 题 复 发 概 念 验 证 为 了 增 强 英 特 尔 IT 主 动 式 的 客 户 端 系 统 问 题 管 理 功 能, 英 特 尔 IT 实 施 了 一 项 概 念 验 证, 专 注 于 使 用 基 本 被 忽 视 的 海 量 客 户 端 事 件 日 志 数 据 我 们 的 大 数 据 平 台 基 于 Apache Hadoop* 软 件 的 英 特 尔 发 行 版 ( 以 下 简 称 英 特 尔 发 行 版 )( 使 用 Hadoop 2.2) 将 文 本 分 析 功 能 应 用 于 数 百 万 客 户 端 事 件 日 志 和 客 户 端 事 故 报 告 我 们 使 用 数 据 可 视 化 解 决 方 案 来 比 较 结 果 和 发 现 其 中 的 关 联, 从 而 能 够 追 溯 到 客 户 端 问 题 在 工 作 环 境 中 首 次 现 身 的 情 况 然 后, 我 们 在 其 他 用 户 不 知 道 他 们 的 客 户 端 设 备 是 否 有 相 同 的 情 况 下 预 测 可 能 会 出 现 的 问 题, 而 且 多 数 情 况 下 能 够 在 问 题 发 生 之 前 采 取 修 复 措 施 本 节 将 首 先 描 述 解 决 方 案 架 构 和 主 要 工 具, 然 后 探 讨 数 据 的 收 集 与 分 析, 我 们 实 现 管 理 海 量 数 据 的 解 决 方 案, 以 及 我 们 使 用 商 用 工 具 实 施 可 视 化 分 析 技 术 的 情 况 各 章 节 提 到 的 一 个 重 要 概 念 是 我 们 使 用 的 分 组 构 造 (grouping construct), 称 为 症 状 (symptom) 相 关 章 节 对 症 状 会 有 更 为 全 面 的 描 述 症 状 为 一 组 客 户 端 事 件, 它 们 基 本 别 无 二 致, 只 是 在 不 同 的 时 间 发 生 在 不 同 的 机 器 上 为 了 奠 定 成 功 的 基 础, 我 们 设 定 了 概 念 验 证 的 目 标, 旨 在 帮 助 IT 支 持 人 员 彻 底 处 理 任 何 特 定 事 故, 确 保 不 再 复 发 事 故 预 测 的 解 决 方 案 架 构 三 V 容 量 (volume) 多 样 化 (variety) 和 速 度 (velocity) 促 使 我 们 做 出 使 用 大 数 据 解 决 方 案 的 决 策 三 V 是 大 数 据 最 显 著 的 属 性 对 于 我 们 的 概 念 验 证, 容 量 指 我 们 需 要 处 理 的 数 据 量 在 5 个 月 内 收 集 的 超 过 2 亿 行 事 件 数 据 多 样 化 指 事 故 非 结 构 化 文 本 数 据 和 XML 格 式 事 件 数 据 的 合 并, 用 户 需 要 对 合 并 的 数 据 分 析 才 能 获 得 其 关 联 资 料 以 及 IT 洞 察 速 度 指 每 日 持 续 记 录 且 日 益 增 多 的 事 件 它 还 指 支 持 员 工 在 分 析 与 合 并 事 件 和 事 故 数 据 时 必 须 采 取 的 速 度, 以 作 准 确 诊 断, 并 采 取 措 施 防 止 其 他 客 户 端 中 发 生 事 故 在 我 们 基 于 英 特 尔 发 行 版 的 事 故 预 测 解 决 方 案 架 构 中 ( 见 图 1), 从 我 们 IT 服 务 管 理 请 求 系 统 中 收 集 的 事 故 数 据 和 事 件 数 据 每 天 都 被 迁 移 至 该 平 台 然 后, 这 些 数 据 会 在 Hadoop 集 群 中 经 过 文 本 分 析 处 理, 得 出 事 故 和 事 件 数 据 的 相 似 资 料 传 统 客 户 端 问 题 管 理 方 面 的 困 难 客 户 端 问 题 管 理 包 括 诊 断 事 故 发 生 的 根 本 原 因, 并 确 定 根 本 解 决 之 道, 阻 止 发 生 更 多 事 故 它 具 有 两 个 主 要 目 标 : 防 止 事 故 复 发, 尽 量 减 小 无 法 避 免 的 事 故 的 影 响 传 统 的 客 户 端 问 题 管 理 专 注 于 使 用 最 明 显 的 事 故 数 据, 识 别 事 故 趋 势, 并 设 法 分 析 根 本 原 因 该 措 施 为 被 动 式 方 案, 因 为 它 需 要 用 户 ( 内 部 客 户 ) 联 系 服 务 台, 告 知 服 务 质 量 下 降 或 影 响 他 们 工 作 效 率 的 配 置 ( 硬 件 或 软 件 ) 问 题, 表 达 他 们 的 不 满 当 用 户 遇 到 具 破 坏 力 的 事 故 时,IT 支 持 人 员 可 帮 助 修 复 该 问 题 但 在 问 题 得 到 解 决 前, 用 户 的 工 作 效 率 会 受 到 影 响 有 关 这 些 事 故 的 数 据 的 通 常 较 强 主 观, 因 为 它 由 用 户 和 支 持 人 员 记 录 如 果 发 生 多 个 类 似 的 事 故, 而 且 它 们 都 被 正 确 记 录,IT 支 持 人 员 可 能 从 中 找 出 事 故 发 生 的 趋 势 但 这 种 模 式 存 在 一 个 严 重 的 不 足 : 完 全 依 赖 于 用 户 报 告 问 题 根 据 我 们 的 经 验, 用 户 不 一 定 会 报 告 问 题 他 们 可 能 会 容 忍 系 统 崩 溃, 不 愿 意 花 时 间 与 支 持 人 员 联 系, 避 免 麻 烦 他 们 甚 至 可 能 认 为 系 统 易 于 发 生 故 障, 但 从 不 将 情 况 告 诉 IT 这 类 质 量 参 差 不 齐 的 报 告 使 了 解 问 题 趋 势 和 判 断 问 题 蔓 延 情 况 变 得 颇 为 困 难 3

4 白 皮 书 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 此 次 概 念 验 证 使 用 了 一 个 Hadoop 服 务 器 集 群 我 们 使 用 MapReduce, 并 在 Hadoop 集 群 上 使 用 并 行 的 分 布 式 算 法 处 理 大 型 数 据 集 MapReduce 流 程 包 括 一 个 Map 程 序 来 将 数 据 过 滤 和 分 类, 以 及 一 个 Reduce 程 序 把 数 据 汇 总 在 我 们 的 概 念 验 证 中,Map 和 Reduce 程 序 对 文 本 过 滤 分 类 和 汇 总 后, 获 得 了 常 用 词 汇 的 使 用 频 率 等 结 果 每 种 MapReduce 算 法 可 能 在 集 群 的 任 何 节 点 中 被 执 行 另 外,Hadoop 提 供 一 种 分 布 式 文 件 系 统, 名 为 Hadoop 分 布 式 文 件 系 统 (Hadoop Distributed File System, 简 称 HDFS*) 它 可 将 数 据 存 储 在 计 算 节 点 上 HDFS 可 跨 集 群 提 供 较 高 的 聚 合 带 宽, 实 现 较 快 的 处 理 速 度 MapReduce 和 HDFS 用 于 确 保 该 框 架 可 自 动 解 决 任 何 节 点 故 障, 所 以 较 为 稳 定 主 要 工 具 项 目 的 范 围 如 此 广 和 复 杂, 其 挑 战 在 于 没 有 单 个 IT 员 工 具 备 所 使 用 的 技 术 涉 及 到 的 综 合 知 识 为 了 掌 握 必 要 的 知 识, 我 们 采 用 了 团 队 协 作 的 方 案 除 了 Hadoop 和 Linux* 与 英 特 尔 发 行 版 一 起 使 用 的 开 源 操 作 系 统 方 面 的 专 业 知 识 外, 我 们 还 招 聘 了 具 有 下 列 关 键 技 术 专 业 的 团 队 成 员 来 帮 助 我 们 在 使 用 工 具 时 遇 到 各 种 局 限 之 际 寻 找 解 决 方 案 问 题 管 理 员 可 视 化 ETL 本 地 提 取 转 换 和 加 载 (ETL) 模 型 事 故 和 事 件 数 据 事 故 数 据 源 1 Incident Data Incident SourcenData Sourcen 事 故 服 务 管 理 数 据 仓 库 事 故 数 据 ETL Sqoop* 预 测 数 据 Java* 开 放 式 自 然 语 言 处 理, Porter Stemming,Lucene Analyzer HIVE* 事 件 日 志 事 件 日 志 定 时 导 入 (24 小 时 读 取 ) HDFS* Apache Hadoop* 软 件 的 英 特 尔 发 行 版 ( 使 用 Hadoop 2.2) 数 据 来 源 事 件 数 据 仓 库 目 标 图 1. 预 测 事 故 的 解 决 方 案 架 构 使 用 Apache Hadoop* 软 件 的 英 特 尔 发 行 版 ( 使 用 Hadoop 2.2), 处 理 数 据 并 实 施 文 本 分 析, 以 找 到 客 户 端 事 件 日 志 和 客 户 端 事 故 报 告 之 间 有 何 相 似 的 地 方 4

5 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 白 皮 书 HIVE* Hive 是 一 种 构 建 于 Hadoop 之 上 的 数 据 仓 库 基 础 架 构, 可 提 供 数 据 汇 总 查 询 和 分 析 功 能 它 针 对 关 系 型 数 据 库 管 理 系 统 (relational database management system, 简 称 RDBMS) 采 用 了 一 种 简 易 的 语 法 ( 开 发 人 员 称 其 为 HiveQL), 同 时 保 持 了 对 MapReduce 算 法 的 全 面 支 持 除 使 用 Java* 开 发 的 事 件 解 析 流 程 和 Java 中 使 用 Apache OpenNLP* 函 数 库 的 文 本 分 析 功 能, 概 念 验 证 中 使 用 的 所 有 逻 辑 都 使 用 了 HiveQL 开 发 使 用 Hive 时 我 们 遇 到 了 几 个 问 题 : Hive 无 法 使 用 更 新 命 令 来 更 新 表 格, 因 此 我 们 只 得 采 取 两 步 更 新 流 程 因 为 Hive 无 法 自 动 生 成 标 识 列 (identity column), 所 以 我 们 实 施 了 一 项 Java 功 能, 以 创 建 一 个 由 用 户 定 义 的 通 用 功 能 为 症 状 列 出 个 别 的 标 识 符 由 于 Hive 不 支 持 在 现 有 表 格 中 加 插 新 的 列 (column), 所 以 每 当 有 此 必 要 时, 我 们 都 会 创 建 一 个 新 表 格, 并 迁 移 现 有 数 据 该 两 步 流 程 增 加 了 处 理 步 骤 JAVA Java 是 供 通 用 型 计 算 机 使 用 的 一 种 广 泛 以 物 件 为 导 向 的 语 言 我 们 使 用 Java 处 理 各 类 任 务, 并 将 它 主 要 用 于 事 件 XML 解 析 :Java 读 取 XML 事 件 数 据, 并 将 所 有 字 段 解 析 为 Hive 表 格 我 们 还 使 用 Java 创 建 一 种 由 用 户 定 义 的 通 用 功 能 来 为 症 状 列 出 个 别 的 标 识 符 在 使 用 Java 时 我 们 确 实 面 临 一 些 挑 战 例 如, 在 遇 到 Java 数 据 库 连 接 引 起 的 一 些 常 见 内 存 问 题 后, 我 们 转 而 使 用 HDFS 处 理 该 任 务 在 启 动 Java 虚 拟 机 处 理 映 射 任 务 时, 我 们 还 会 遇 到 Java 内 存 堆 空 间 错 误 我 们 对 该 问 题 的 解 决 办 法 是 将 Hadoop 任 务 配 置 设 置 (mapred.child. java.opts) 中 的 大 小 设 置 (size setting) 更 改 在 Java ARchive(JAR) 中 物 件 之 间 的 依 赖 关 系 也 会 给 我 们 带 来 问 题, 特 别 是 在 我 们 将 函 数 库 与 Hadoop 集 群 同 步 的 时 候 我 们 的 应 对 方 式 是 将 相 关 的 JAR 复 制 到 Hadoop 的 分 布 式 高 速 缓 存 中, 经 由 HDFS 高 效 地 将 我 们 的 函 数 库 与 集 群 中 的 所 有 节 点 同 步 APACHE OPENNLP Apache OpenNLP( NLP 即 natural language processing, 自 然 语 言 处 理 ) 是 一 种 用 于 处 理 自 然 语 言 文 本 的 机 器 学 习 工 具 集 该 工 具 集 支 持 标 记 化 句 子 切 分 特 定 的 语 法 类 标 记 分 块 解 析 和 其 他 语 言 处 理 任 务 在 我 们 的 事 故 预 测 解 决 方 案 中,OpenNLP 可 使 用 将 NLP 技 术 应 用 于 特 定 事 件 或 客 户 端, 收 集 输 入 信 息 到 词 袋 一 种 文 本 分 析 技 术 通 过 标 记 化 停 用 词 和 词 干 法,NLP 可 清 理 非 结 构 化 文 本, 以 便 将 数 据 再 作 进 一 步 处 理, 为 事 故 预 测 提 供 便 利 SQOOP* Sqoop 是 一 种 命 令 行 (command line) 界 面 应 用 程 序, 用 于 在 关 系 型 数 据 库 和 Hadoop 之 间 传 输 数 据 在 概 念 验 证 中, 我 们 使 用 了 Sqoop 将 RDBMS 中 的 历 史 数 据 传 输 至 Hadoop 集 群 我 们 面 临 的 一 个 挑 战 是,Sqoop 使 用 逗 号 作 为 分 隔 符 传 输 符 分 隔 文 本 被 特 定 字 符 分 隔 为 有 意 义 数 据 块 的 文 本 由 于 我 们 的 数 据 包 含 逗 号, 我 们 会 在 hive-delimsreplacement 选 项 中 使 用 \t 转 义 符 Sqoop 的 另 一 个 问 题 在 于 传 输 大 的 表 格 数 据 时 会 出 现 重 复 的 行 (row) 对 此, 我 们 会 增 加 一 个 压 缩 表 格 解 压 的 步 骤 数 据 可 视 化 解 决 方 案 数 据 可 视 化 软 件 提 供 必 要 的 treemap heatmap 和 其 他 可 视 化 工 具, 用 于 处 理 查 找 监 控 和 分 析 大 型 数 据 集 它 的 探 索 功 能 可 帮 助 问 题 管 理 员 深 入 获 取 外 部 的 更 多 详 情, 或 因 为 有 了 大 概 的 了 解, 发 现 以 前 不 为 人 知 的 趋 势 交 互 式 过 滤 器 支 持 他 们 将 不 相 关 的 数 据 和 内 容 从 分 析 中 删 除, 使 其 真 实 的 情 况 更 容 易 被 发 现 数 据 收 集 我 们 的 事 故 预 测 概 念 验 证 使 用 了 两 个 数 据 集 : 客 户 之 声 (voice of the customer, 简 称 VOC) 数 据, 包 含 英 特 尔 员 工 主 要 向 IT 帮 助 中 心 报 告 的 客 户 端 问 题 员 工 使 用 电 话 网 络 传 真 或 电 子 邮 件 提 供 问 题 的 资 料 机 器 之 声 (voice of the machine, 简 称 VOM) 数 据, 包 含 客 户 机 每 天 生 成 的 所 有 事 件 日 志 事 件 转 发 系 统 每 天 都 可 收 集 该 数 据 每 个 数 据 集 被 收 集 到 各 自 的 容 器 中, 后 者 再 将 数 据 传 送 至 用 于 关 联 二 者 的 事 故 预 测 解 决 方 案 架 构 此 处 的 相 似 之 处 为 两 个 数 据 集 都 基 于 文 本 用 户 表 述 他 们 的 问 题 时, 用 的 是 语 言 字 句 事 件 日 志 由 错 误 和 警 告 组 成, 它 们 包 含 代 码 和 基 于 文 本 的 描 述 内 容 该 内 容 可 描 述 客 户 端 系 统 上 的 特 定 应 用 在 特 定 时 间 发 生 了 什 么 对 于 用 户 而 言, 许 多 错 误 和 警 告 可 能 并 不 显 而 易 见 但 是, 从 应 用 程 序 没 有 响 应 到 系 统 出 现 问 题 或 者 崩 溃, 其 他 的 错 误 和 警 告 可 能 会 相 当 明 显 5

6 白 皮 书 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 事 件 机 器 之 声 事 故 客 户 之 声 词 袋 文 本 分 析 使 用 停 用 词 词 干 法 和 词 根 法, 将 句 子 转 化 为 标 记, 再 从 比 较 中 以 找 出 其 相 似 之 处 图 2. 为 了 将 事 件 ( 机 器 之 声 ) 与 事 故 ( 客 户 之 声 ) 进 行 相 互 匹 配, 此 次 概 念 验 证 采 用 了 词 袋 文 本 分 析 功 能 来 准 备 数 据, 以 便 于 发 现 其 相 似 之 处 大 数 据 文 本 分 析 过 去, 人 们 不 可 能 花 耗 时 间 来 手 动 分 类 和 解 释 VOM 数 据 中 包 含 的 数 亿 个 事 件 日 志 因 此, 查 找 那 些 与 客 户 报 告 的 事 故 相 关 的 并 且 它 们 同 样 适 用 于 其 他 事 故 可 用 于 预 测 未 来 事 故 的 事 件 等 活 动, 便 由 于 性 价 比 不 足 和 失 去 时 效 而 变 得 没 有 价 值 英 特 尔 IT 日 益 频 繁 地 使 用 大 数 据 平 台 梳 理 海 量 的 结 构 化 和 非 结 构 化 数 据, 以 便 为 英 特 尔 业 务 部 门 提 供 高 级 商 业 智 能 有 鉴 于 此, 我 们 也 开 始 考 虑 使 用 这 种 平 台 来 预 测 事 故 我 们 也 考 察 了 传 统 解 决 方 案, 如 RDBMS, 但 是 在 基 于 维 度 数 据 模 型 的 一 次 查 询 中, 就 花 了 32 个 小 时 我 们 还 考 察 了 跨 平 台 以 文 档 为 导 向 的 NoSQL 数 据 库 系 统 最 后, 考 虑 到 数 据 量 数 据 的 非 结 构 化 性 质 以 及 解 决 方 案 的 平 台 需 要 稳 定 运 行, 我 们 选 择 了 基 于 英 特 尔 发 行 版 的 Apache Hadoop 解 决 方 案 为 了 找 到 特 定 事 故 涉 及 的 VOC 和 VOM 数 据 的 关 系, 我 们 使 用 了 词 袋 模 型 这 种 处 理 自 然 语 言 和 检 索 信 息 的 简 化 技 术, 可 将 句 子 或 文 档 中 的 文 本 当 作 为 无 序 词 汇 集 合 来 处 理 无 论 语 法 和 词 序 如 何, 词 袋 技 术 都 会 专 注 于 当 前 的 词 汇, 并 可 能 考 虑 词 汇 的 出 现 频 率 等 条 件 在 词 袋 分 析 中, 所 有 句 子 首 先 通 过 标 记 化 转 化 为 词 汇 标 记 是 一 个 或 多 个 字 符 组 成 的 串 就 我 们 的 情 况 而 言, 它 指 组 成 词 汇 形 成 重 要 组 的 字 母 我 们 可 使 用 下 列 各 种 清 除 技 术 提 升 我 们 保 留 的 用 于 分 析 的 词 汇 质 量 : 停 用 词 停 用 列 表 用 于 从 文 本 中 删 除 与 上 下 文 不 相 关 或 不 够 具 体 的 各 种 词 根 根 据 停 用 列 表 待 删 除 的 词 汇 包 括 冠 词 ( 如 a 或 the) 介 词 ( 如 of 或 for) 指 示 词 ( 如 this 或 that) 另 外, 一 些 动 词 和 谓 语 被 认 为 无 关 紧 要 ( 如 have can may 和 would) 词 干 法 在 该 步 骤 中, 词 汇 被 简 化 为 词 干 或 曲 折 词 根 (inflectional root), 以 便 更 容 易 与 其 他 包 含 相 同 词 干 的 词 汇 匹 配 例 如, 包 含 相 同 词 干 的 名 词 和 动 词 ( 如 crash crashes crashed 和 crashing) 会 简 化 为 crash, 以 便 于 匹 配 词 根 法 在 某 些 情 况 下, 词 汇 无 需 经 过 词 干 法 处 理, 只 需 简 化 为 核 心 词 根 例 如,failure 这 类 词 汇 可 简 化 为 其 词 根 fail, 从 而 更 容 易 与 所 有 词 根 为 fail 的 词 汇 匹 配 在 应 用 上 述 文 本 分 析 技 术 之 前, 我 们 先 将 数 据 整 理 一 下, 具 体 做 法 是 搜 索 句 子 中 已 知 的 关 键 字 的 缩 写 词, 并 将 它 们 替 换 为 完 整 的 形 式, 以 改 进 分 析 结 果 例 如, 我 们 会 将 IE 替 换 为 Internet Explorer 为 了 将 事 件 模 式 与 客 户 端 事 故 进 行 匹 配, 我 们 根 据 其 独 特 的 名 称, 对 来 自 相 同 客 户 端 的 VOM 事 件 和 VOC 信 息 作 文 本 分 析 ( 见 图 2) 在 完 成 文 本 分 析 之 后, 我 们 采 用 了 一 种 基 于 Jaccard 相 似 系 数 用 于 比 较 两 个 数 据 集 相 似 点 和 多 样 化 的 统 计 数 值 的 算 法, 以 找 到 处 理 的 VOM 事 件 和 VOC 事 故 之 间 的 相 似 点 该 算 法 会 计 算 VOM 事 件 和 VOC 事 故 的 常 用 词 汇 的 数 量, 然 后 除 以 词 汇 总 数 6

7 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 白 皮 书 Jaccard 相 似 系 数 可 测 量 出 两 个 样 品 集 (A 和 B) 之 间 的 相 似 点, 具 体 方 法 是 将 交 集 的 大 小 ( 在 本 例 中 指 事 件 日 志 和 事 故 报 告 同 时 使 用 一 个 常 用 词 汇 的 次 数 ) 除 以 两 个 样 品 集 中 的 总 词 汇 数 J(A,B) = A B A B 该 算 法 可 过 滤 掉 所 有 相 似 指 标 小 于 可 调 阀 值 的 样 品 集 对, 提 供 最 佳 的 匹 配 结 果 : 事 故 和 关 联 的 症 状, 问 题 管 理 员 将 需 要 用 它 们 来 分 析 根 本 的 原 因 这 些 匹 配 结 果 还 能 帮 助 问 题 管 理 员 准 确 预 测 最 有 可 能 蔓 延 至 整 个 企 业 的 事 故 实 现 数 据 管 理 此 次 概 念 验 证 中 使 用 的 事 故 数 据, 来 源 于 我 们 历 时 5 年 从 IT 服 务 管 理 系 统 中 收 集 到 的 资 料 事 件 数 据 的 来 源 乃 过 去 约 6 个 月 内 从 Windows Event Framework 所 收 集 到 的 这 些 数 据 包 含 100 个 事 故 和 超 过 2.2 亿 个 事 件 我 们 可 使 用 事 件 ID 来 把 事 件 分 组 这 种 ID 是 一 种 独 特 的 标 识 符, 由 客 户 端 的 操 作 系 统 制 造 商 为 方 便 用 户 参 考 编 码 而 成 为 了 将 事 件 ID 的 数 量 减 少 到 可 管 理 的 水 平, 我 们 只 考 虑 至 少 包 含 1,000 个 实 例 的 事 件 ID, 因 此 数 据 集 包 含 的 事 件 数 量 仅 超 过 2200 万. 根 据 帕 累 托 原 则 ( 认 为 在 一 系 列 问 题 中, 约 80% 由 20% 的 原 因 所 造 成 ), 我 们 重 点 关 注 环 境 中 20% 的 事 件 ID( 见 图 3) 我 们 发 现, 超 过 80% 的 事 件 分 组 在 12 个 事 件 ID 中 将 事 件 分 组 为 症 状 为 了 降 低 问 题 的 复 杂 程 度 并 改 进 根 源 分 析, 我 们 使 用 了 名 为 症 状 的 分 组 概 念 这 一 概 念 可 帮 助 我 们 对 基 本 相 同 的 事 件 分 组 症 状 指 一 组 彼 此 相 同 的 单 个 事 件, 它 们 唯 一 的 不 同 之 处 在 于 记 录 的 时 间 和 日 期, 以 及 发 在 哪 个 客 户 端 上 我 们 将 XML 标 记 作 为 症 状 特 征 的 基 础, 因 为 所 有 的 事 件 数 据 都 为 XML 格 式, 而 且 XML 字 段 包 含 超 过 50 个 不 同 的 XML 标 记 或 列 (column), 因 特 定 事 件 ID 的 特 征 的 不 同 而 表 示 不 同 的 数 据 元 素 100 症 状 的 累 积 百 分 比 ( 按 事 件 ID) 注 : 并 未 列 出 所 有 的 100% 累 积 事 件 ID 累 积 频 率 % 的 症 状 症 状 ( 事 件 ID) 图 3. 根 据 帕 累 托 原 则, 我 们 重 点 关 注 环 境 中 20% 的 事 件 ID( 蓝 色 条 ) 在 本 累 积 频 率 分 析 直 方 图 中, 从 左 至 右 我 们 会 看 到 累 积 的 百 分 比 总 数, 因 为 最 大 事 件 百 分 比 所 表 示 的 事 件 ID 被 添 加 至 事 件 百 分 比 第 二 大 的 事 件 ID 中, 以 此 类 推 根 据 我 们 的 结 果, 蓝 色 条 显 示 12 个 事 件 ID 总 共 表 示 80% 的 事 件 我 们 将 这 12 个 事 件 ID 作 为 初 步 工 作 的 重 点 7

8 白 皮 书 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 为 了 识 别 症 状, 我 们 获 得 了 问 题 管 理 员 的 专 业 帮 助 例 如, 对 于 事 件 ID 1000, 问 题 管 理 员 帮 助 我 们 翻 译 并 确 定 了 所 有 的 关 键 字 段 选 择 的 这 些 字 段 中 的 特 定 数 值 组 合 或 模 式 构 成 了 一 个 独 特 的 症 状 ( 见 图 4) 为 了 找 到 我 们 独 特 的 症 状 列 表, 我 们 使 用 了 12 个 select distinct 声 明, 其 中 每 一 个 都 针 对 12 个 事 件 ID 中 的 一 个, 这 些 ID 表 示 我 们 所 见 的 企 业 中 80% 的 事 件 Select distinct 声 明 是 应 用 于 忽 略 重 复 数 值 仅 列 出 不 同 数 值 的 表 格 的 命 令 该 流 程 让 我 们 能 够 识 别 新 事 件 中 的 新 症 状, 同 时 将 信 息 添 加 至 现 有 的 已 识 别 症 状 中 在 我 们 的 症 状 数 据 库 中, 该 表 格 每 天 都 会 得 到 更 新 我 们 将 症 状 概 念 应 用 至 2 亿 个 事 件 行 (5 个 月 的 事 件 数 ) 中, 事 件 分 组 变 为 更 易 于 管 理 症 状 数 低 于 145,000 的 数 据 集 一 旦 从 文 本 分 析 流 程 和 Jaccard 相 似 指 标 中 发 现 事 件 VOM 和 事 故 VOC 之 间 的 关 系, 我 们 就 会 适 应 相 同 的 指 标 过 滤 症 状, 以 找 到 其 与 事 故 之 间 的 相 似 点 该 步 骤 可 帮 助 我 们 判 断 症 状 对 于 事 故 有 多 重 要 然 后, 问 题 管 理 员 能 够 集 中 专 心 处 理 与 大 量 事 故 高 度 相 似 的 症 状 从 可 视 化 数 据 发 现 信 息 数 据 可 视 化 软 件 是 我 们 解 决 方 案 的 重 要 元 素, 能 够 提 供 一 种 快 速 准 确 的 方 式 查 看 和 解 释 数 据 如 果 没 有 这 种 可 视 化 工 具, 数 据 就 需 要 统 计 员 的 解 释 和 剖 析, 从 而 给 问 题 管 理 员 亲 自 分 析 造 成 了 障 碍 通 过 treemaps heatmaps 和 其 他 可 视 化 工 具, 我 们 的 数 据 可 视 化 解 决 方 案 能 够 帮 助 问 题 管 理 员 轻 松 处 理 过 滤 和 理 解 数 据, 识 别 最 可 能 帮 助 达 成 主 动 识 别 复 发 事 故 业 务 目 标 的 事 故 和 症 状 症 状 定 义 文 本 分 析 相 似 指 标 翻 译 并 定 义 事 件 ID 关 键 字 段 例 如 : 问 题 管 理 员 检 查 的 事 件 % 的 症 状 ( 按 事 件 ID) 注 : 累 积 频 率 高 于 80% 的 事 件 ID 未 列 出 事 件 机 器 之 声 事 故 客 户 之 声 症 状 相 对 事 故 的 重 要 重 要 事 件 升 至 顶 部 累 积 频 率 事 件 1000 重 要 程 度 症 状 ( 按 事 件 ID) 症 状 表 格 症 状 基 于 事 件 分 组 词 袋 文 本 分 析 使 用 停 用 词 词 干 法 和 词 根 法, 将 句 子 转 化 为 标 记 并 作 比 较, 以 找 出 其 相 似 之 处 症 状 Select Distinct 命 令 可 定 义 新 症 状 症 状 数 据 库 约 145,000 条 症 状 定 义 图 4. 我 们 的 解 决 方 案 包 括 将 具 有 相 似 特 征 的 事 件 分 组 为 症 状, 将 许 多 事 件 整 合 为 单 个 症 状, 创 建 了 更 易 于 管 理 的 数 据 集 在 文 本 分 析 阶 段, 我 们 计 算 事 故 和 事 件 之 间 的 相 似 点, 然 后, 使 用 相 似 点 根 据 关 联 事 故 的 数 量 判 断 症 状 有 多 重 要 8

9 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 白 皮 书 图 5 是 所 有 症 状 ( 按 应 用 ) 的 heatmap 视 图, 包 括 每 个 症 状 及 关 联 事 故 的 详 细 信 息 症 状 在 heatmap 上 命 令 的 框 越 大, 与 其 相 关 的 事 故 数 量 越 多 按 症 状 ID 系 统 制 造 商 客 户 端 名 称 操 作 系 统 版 本 地 理 位 置 和 其 他 重 要 信 息 将 数 据 分 类 这 可 以 帮 助 轻 松 找 到 一 种 关 系, 如 症 状 是 否 与 特 定 的 电 脑 型 号 相 关 ( 见 图 6) 问 题 管 理 员 可 将 数 据 过 滤, 以 确 定 哪 些 搭 载 特 定 处 理 器 的 电 脑 正 遭 遇 特 定 症 状 当 事 故 和 事 件 数 据 独 立 时, 很 难 找 出 这 种 关 联 但 是 现 在 我 们 使 用 事 故 预 测 模 型, 可 轻 松 对 这 类 相 关 点 转 为 可 视 化 的 报 告, 得 出 结 论, 并 采 取 相 应 的 措 施 进 一 步 研 究 可 以 得 出 事 故 详 情 事 故 与 事 件 基 于 Jaccard 相 似 系 数 的 相 似 程 度 非 常 高 (0.80) 这 意 味 着 事 故 和 事 件 使 用 了 常 用 词 汇 结 果 通 过 应 用 大 数 据 解 决 方 案 NLP 和 统 计 建 模, 我 们 的 客 户 端 事 故 预 测 概 念 验 证 证 明 有 能 力 预 测 到 在 随 后 的 28 天 内 20% 有 可 能 出 现 的 事 故 我 们 能 够 将 数 百 万 个 事 件 和 数 千 个 事 故 分 类, 在 预 测 未 来 事 故 方 面 的 准 确 程 度 可 实 现 78%, 从 而 有 望 为 英 特 尔 节 约 大 量 成 本 将 客 户 端 问 题 管 理 转 变 得 为 更 主 动, 能 够 将 问 题 管 理 员 每 周 面 对 的 事 故 的 当 前 基 准 减 少 约 20% 事 故 数 量 减 少 的 话, 员 工 的 工 作 效 率 获 得 提 升, 由 于 系 统 崩 溃 而 造 成 的 工 作 内 容 丢 失 的 次 数 下 降, 以 及 员 工 对 于 客 户 端 更 强 的 信 心, 都 有 助 于 实 现 更 大 价 值 关 于 事 故 预 测 准 确 程 度, 图 7 提 供 了 一 份 四 周 的 数 据 快 照, 该 快 照 被 用 于 预 测 在 随 后 四 周 会 出 现 的 事 故 此 次 概 念 验 证 预 测 会 发 生 150 个 事 故 事 实 上, 事 故 的 总 数 量 为 220 从 统 计 上 来 说,78% 的 准 确 度 ( 作 为 回 归 模 型 的 R 方 计 算 ) 被 认 为 非 常 接 近 预 测 值 图 5. Heatmap 症 状 视 图 ( 按 应 用 ) 包 含 每 个 症 状 及 相 关 事 故 的 详 细 信 息 症 状 在 heatmap 上 命 令 的 框 越 大, 与 其 相 关 的 事 故 数 量 越 多 图 6. 该 图 表 根 据 笔 记 本 电 脑 型 号 过 滤 得 出, 不 同 颜 色 表 示 与 特 定 症 状 相 关 的 型 号 进 一 步 研 究 事 故 详 情, 可 以 得 出 事 故 与 事 件 之 间 的 相 似 度 INC 相 似 度 :0.80 型 号 性 能 图 表 600 症 状 完 美 模 型 预 测 数 量 实 际 数 量 图 7. 概 念 验 证 后 三 周 内 的 数 据 快 照 显 示 了 准 确 程 度 所 有 具 有 相 关 事 故 的 症 状 ( 图 表 中 的 每 个 点 ) 表 明, 预 测 结 果 和 每 个 症 状 实 际 相 关 的 事 故 的 实 际 数 量 比 较 接 近 9

10 白 皮 书 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 如 果 问 题 管 理 员 每 周 都 针 对 我 们 的 系 统 所 预 测 的 事 故 实 施 解 决 方 案, 他 们 就 可 大 幅 度 减 少 报 告 给 帮 助 中 心 的 问 题 数 量 需 要 指 出 的 是, 此 次 概 念 验 证 中 最 耗 时 的 阶 段 为 数 据 准 备 在 该 项 目 中, 我 们 大 约 60-80% 的 工 作 都 用 于 理 解 数 据, 并 实 施 数 据 整 理 数 据 加 载 和 数 据 迁 移 这 些 任 务 完 成 之 后, 剩 下 的 工 作 只 需 要 很 少 的 管 理 时 间 后 续 步 骤 概 念 验 证 证 明 我 们 有 能 力 预 测 下 月 可 能 发 生 的 很 多 事 故, 而 且 相 当 准 确 为 了 进 一 步 增 强 我 们 主 动 管 理 事 故 预 测 的 能 力, 防 止 它 们 成 为 现 实, 我 们 将 采 取 下 列 步 骤 : 实 施 高 级 NLP 中 的 更 多 技 术, 令 文 本 分 析 模 型 更 为 可 靠, 以 便 更 高 效 计 算 事 故 与 事 件 之 间 的 相 似 点 根 据 预 测 到 的 事 故, 制 定 主 动 问 题 管 理 的 业 务 流 程 量 化 预 测 分 析 工 作 减 少 的 事 故 数 量, 评 估 改 进 效 果 和 价 值 开 发 并 发 的 统 计 模 型 和 算 法, 减 少 误 报 ( 模 型 表 述 错 误 的 事 故 和 事 件 相 关 ) 和 漏 报 ( 模 型 并 未 将 应 该 相 关 的 事 故 和 事 件 进 行 关 联 ), 再 作 进 一 步 分 析 结 论 专 为 问 题 管 理 而 设 的 客 户 端 事 故 预 测 为 服 务 台 提 供 了 预 测 分 析 功 能, 帮 助 他 们 在 解 决 客 户 端 问 题 方 面 从 被 动 变 为 主 动 获 得 客 户 端 事 故 预 测 的 能 力 可 帮 助 英 特 尔 IT 将 当 前 的 基 线 降 低 20% 这 意 味 着 每 年 的 事 故 量 可 减 少 约 20%, 有 力 地 帮 助 我 们 实 现 显 著 减 少 企 业 中 所 有 设 备 事 故 数 量 的 目 标 IT 服 务 管 理 的 共 同 目 标 是 英 特 尔 IT 也 不 例 外 确 保 相 同 的 事 故 不 会 再 次 发 生 发 生 一 次 是 事 故, 发 生 两 次 就 成 了 恶 性 循 环 了 我 们 使 用 全 新 的 大 数 据 技 术 高 级 文 本 分 析 功 能 预 测 分 析 功 能 和 数 据 可 视 化 工 具, 帮 助 问 题 管 理 员 预 测 客 户 端 问 题 查 找 问 题 根 源 并 在 问 题 扩 大 之 前 将 之 解 决 我 们 的 客 户 端 事 故 预 测 解 决 方 案 结 合 数 据 挖 掘 和 预 测 分 析 功 能, 可 帮 助 我 们 从 曾 经 基 本 被 忽 视 的 数 据 中 获 取 重 要 价 值 这 类 数 据 可 帮 助 我 们 及 时 解 决 众 多 客 户 端 问 题, 以 免 影 响 用 户 工 作 效 率 通 过 将 英 特 尔 发 行 版 Java Hive 和 NoSQL 工 具 与 预 测 分 析 算 法 结 合 使 用, 我 们 将 有 望 在 数 据 日 志 中 挖 掘 到 有 益 于 许 多 其 他 数 据 类 型 的 价 值 我 们 期 望 该 解 决 方 案 能 够 全 面 或 部 分 应 用 于 英 特 尔 制 造 供 应 链 营 销 市 场 研 究 和 其 他 运 营 环 节 相 关 信 息 如 欲 查 找 相 关 主 题 的 内 容, 请 访 问 : 通 过 主 动 问 题 管 理 来 提 高 客 户 端 的 稳 定 度 英 特 尔 IT 部 门 实 施 Apache Hadoop* 软 件 的 最 佳 实 践 如 欲 了 解 有 关 英 特 尔 IT 部 门 最 佳 实 践 的 更 多 信 息, 请 访 问 : 缩 写 词 JAR NLP PoC Java 归 档 自 然 语 言 处 理 概 念 验 证 RDBMS 关 系 型 数 据 库 管 理 系 统 VOC VOM 客 户 之 声 机 器 之 声 本 文 旨 在 提 供 一 般 的 信 息, 并 非 特 定 指 南 建 议 ( 包 括 潜 在 的 节 约 成 本 ) 基 于 英 特 尔 的 经 验, 而 且 仅 为 估 值 英 特 尔 不 保 证 或 担 保 他 人 会 得 出 类 似 结 果 本 文 件 中 包 含 关 于 英 特 尔 产 品 的 信 息 本 文 件 不 构 成 对 任 何 知 识 产 权 的 授 权, 包 括 明 示 的 暗 示 的, 也 无 论 是 基 于 禁 止 反 言 的 原 则 或 其 他 除 相 关 产 品 的 英 特 尔 销 售 条 款 与 条 件 中 列 明 之 担 保 条 件 以 外, 英 特 尔 公 司 不 对 销 售 和 / 或 使 用 英 特 尔 产 品 做 出 其 它 任 何 明 确 或 隐 含 的 担 保, 包 括 对 适 用 于 特 定 用 途 适 销, 或 不 侵 犯 任 何 专 利 版 权 或 其 它 知 识 产 权 的 担 保 英 特 尔 和 Intel 标 识 是 是 英 特 尔 在 美 国 和 / 或 其 他 国 家 的 商 标 * 其 他 的 名 称 和 品 牌 可 能 是 其 他 所 有 者 的 资 产 英 特 尔 公 司 2013 年 版 权 所 有 所 有 权 保 留 请 注 意 环 保 1213/ACHA/KC/PDF

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项 IT@Intel 白 皮 书 英 特 尔 IT 部 门 大 数 据 和 商 业 智 能 2013 年 10 月 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 要 点 概 述 仅 在 五 周 之 内, 我 们 就 实 施 了 基 于 Apache Hadoop* 英 特 尔 分 发 版 的 低 成 本 可 完 全 实 现 的 大 数

More information

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1 Business & Operation 业 务 与 运 营 大 数 据 技 术 在 精 准 营 销 中 的 应 用 王 小 鹏 北 京 东 方 国 信 科 技 股 份 有 限 公 司 北 京 100102 摘 要 简 要 介 绍 主 流 的 大 数 据 技 术 架 构 和 大 数 据 挖 掘 技 术 ; 阐 述 大 数 据 技 术 在 精 准 营 销 与 维 系 系 统 建 设 中 的 应 用,

More information

2013_6_3.indd

2013_6_3.indd 中 国 科 技 资 源 导 刊 ISSN 1674-1544 2013 年 11 月 第 45 卷 第 6 期 95-99, 107 CHINA SCIENCE & TECHNOLOGY RESOURCES REVIEW ISSN 1674-1544 Vol.45 No.6 95-99, 107 Nov. 2013 构 建 基 于 大 数 据 的 智 能 高 校 信 息 化 管 理 服 务 系 统

More information

目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡...

目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡... 白 皮 书 英 特 尔 固 态 硬 盘 英 特 尔 以 太 网 融 合 网 络 英 特 尔 Hadoop* 发 行 版 软 件 应 用 大 数 据 技 术 获 得 近 实 时 分 析 巨 大 成 效 1 平 衡 的 基 础 设 施 使 工 作 负 载 完 成 时 间 从 4 小 时 缩 短 为 7 如 今, 基 于 广 泛 可 用 的 计 算 存 储 和 网 络 组 件 的 改 进, 商 业 学 术

More information

校友会系统白皮书feb_08

校友会系统白皮书feb_08 硕 士 研 究 生 招 生 管 理 系 统 1 产 品 白 皮 书 希 尔 数 字 校 园 硕 士 研 究 生 招 生 管 理 系 统 白 皮 书 目 录 1 产 品 概 述... 1 1.1 产 品 简 介... 1 1.2 应 用 范 围... 1 2 产 品 功 能 结 构 图... 2 3 产 品 功 能... 3 3.1 系 统 设 置... 3 3.2 信 息 发 布... 3 3.3

More information

国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对

国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 重点文化工程 中华古籍保护计划 数字图书馆推广工程 民国时期文献保护计划 年度掠影 国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 中 华 古 籍

More information

培 训 机 构 介 绍 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培

培 训 机 构 介 绍  中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培 Hadoop 2.0 培 训 Hadoop 2.0Training Hadoop 2.0 运 维 与 开 发 实 战 培 训 邀 请 函 培 训 机 构 介 绍 www.zkpk.org 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开

More information

合集

合集 Ver 1.0 版 本 目 录 第 一 章 当 大 数 据 遇 上 SSD 01 第 二 章 广 东 移 动 运 用 Hadoop 创 新 应 用 04 第 三 章 第 四 章 第 五 章 第 六 章 第 七 章 第 八 章 第 九 章 第 十 章 如 何 利 用 大 数 据 分 析 提 升 垃 圾 短 信 过 滤 效 果 广 东 电 信 用 大 数 据 重 构 室 内 网 优 大 数 据 提 升

More information

「西醫基層總額支付委員會《第28次委員會議紀錄

「西醫基層總額支付委員會《第28次委員會議紀錄 西 醫 基 層 總 額 支 付 委 員 會 101 年 第 2 次 委 員 會 議 紀 錄 時 間 :101 年 5 月 23 日 下 午 2 時 地 點 : 中 央 健 康 保 險 局 18 樓 會 議 室 ( 台 北 市 信 義 路 3 段 140 號 18 樓 ) 主 席 : 黃 召 集 人 三 桂 出 席 委 員 : 王 委 員 正 坤 王 委 員 錦 基 古 委 員 博 仁 王 正 坤 王

More information

untitled

untitled 01 1-1 PHP 1-2 PHP 1-3 MySQL 1-4 1-5 http://w3techs.com/technologies/history_overview/programming_language w3techs.com (Server-side) 2012 7 77.8% PHP PHP PHP PHP 1-1 PHP PHP HTML Script Windows ASP(Active

More information

電機工程系認可證照清單 2011/7/1

電機工程系認可證照清單                  2011/7/1 南 台 科 技 大 學 電 機 工 程 系 專 業 證 照 課 程 實 施 要 點 96 年 10 月 05 日 系 務 會 議 通 過 100 年 06 月 30 日 系 務 會 議 修 正 通 過 101 年 06 月 21 日 系 務 會 議 修 正 通 過 一 本 系 為 提 升 學 生 的 專 業 技 能, 特 訂 定 本 辦 法 二 實 施 對 象 : 本 系 日 間 部 96 學 年

More information

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家 全 国 中 小 企 业 股 份 转 让 系 统 有 限 责 任 公 司 2016 年 暑 期 实 习 生 招 收 公 告 一 公 司 简 介 全 国 中 小 企 业 股 份 转 让 系 统 ( 以 下 简 称 新 三 板 ) 是 经 国 务 院 批 准, 依 据 证 券 法 设 立 的 继 上 交 所 深 交 所 之 后 第 三 家 全 国 性 证 券 交 易 场 所, 也 是 境 内 第 一 家

More information

Azure_s

Azure_s Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL

More information

团 学 要 闻 我 校 召 开 共 青 团 五 届 九 次 全 委 ( 扩 大 ) 会 议 3 月 17 日, 我 校 共 青 团 五 届 九 次 全 委 ( 扩 大 ) 会 议 在 行 政 办 公 楼 五 楼 会 议 室 举 行, 校 团 委 委 员 各 院 ( 系 ) 团 委 书 记 校 学 生

团 学 要 闻 我 校 召 开 共 青 团 五 届 九 次 全 委 ( 扩 大 ) 会 议 3 月 17 日, 我 校 共 青 团 五 届 九 次 全 委 ( 扩 大 ) 会 议 在 行 政 办 公 楼 五 楼 会 议 室 举 行, 校 团 委 委 员 各 院 ( 系 ) 团 委 书 记 校 学 生 共 青 团 工 作 简 报 2011 年 第 1 期 共 青 团 大 连 海 洋 大 学 委 员 会 团 学 要 闻 : 导 读 我 校 召 开 共 青 团 五 届 九 次 全 委 ( 扩 大 ) 会 议 我 校 在 大 连 市 大 学 生 创 新 创 意 作 品 大 赛 中 取 得 佳 绩 校 团 委 召 开 学 生 干 部 思 想 动 态 座 谈 会 校 团 委 组 织 开 展 弘 扬 雷 锋

More information

CH01.indd

CH01.indd 3D ios Android Windows 10 App Apple icloud Google Wi-Fi 4G 1 ( 3D ) 2 3 4 5 CPU / / 2 6 App UNIX OS X Windows Linux (ios Android Windows 8/8.1/10 BlackBerry OS) 7 ( ZigBee UWB) (IEEE 802.11/a/b/g/n/ad/ac

More information

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式]

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式] Big Data RC Sharing 大數據掃盲 Service Planner of Enterprise Big Data 大 數 據 服 務 規 劃 師 企 業 大 數 據 課 程 規 劃 依 照 企 業 資 料 流 程 的 特 殊 性, 安 排 合 適 的 課 程 協 助 企 業 導 入 應 用 大 數 據 案 例 :Etu 資 策 會 平 安 保 險 湖 南 國 防 科 技 大 學 等

More information

6-1 Table Column Data Type Row Record 1. DBMS 2. DBMS MySQL Microsoft Access SQL Server Oracle 3. ODBC SQL 1. Structured Query Language 2. IBM

6-1 Table Column Data Type Row Record 1. DBMS 2. DBMS MySQL Microsoft Access SQL Server Oracle 3. ODBC SQL 1. Structured Query Language 2. IBM CHAPTER 6 SQL SQL SQL 6-1 Table Column Data Type Row Record 1. DBMS 2. DBMS MySQL Microsoft Access SQL Server Oracle 3. ODBC SQL 1. Structured Query Language 2. IBM 3. 1986 10 ANSI SQL ANSI X3. 135-1986

More information

學 科 100% ( 為 單 複 選 題, 每 題 2.5 分, 共 100 分 ) 1. 請 參 閱 附 圖 作 答 : (A) 選 項 A (B) 選 項 B (C) 選 項 C (D) 選 項 D Ans:D 2. 下 列 對 於 資 料 庫 正 規 化 (Normalization) 的 敘

學 科 100% ( 為 單 複 選 題, 每 題 2.5 分, 共 100 分 ) 1. 請 參 閱 附 圖 作 答 : (A) 選 項 A (B) 選 項 B (C) 選 項 C (D) 選 項 D Ans:D 2. 下 列 對 於 資 料 庫 正 規 化 (Normalization) 的 敘 ITE 資 訊 專 業 人 員 鑑 定 資 料 庫 系 統 開 發 與 設 計 實 務 試 卷 編 號 :IDS101 注 意 事 項 一 本 測 驗 為 單 面 印 刷 試 題, 共 計 十 三 頁 第 二 至 十 三 頁 為 四 十 道 學 科 試 題, 測 驗 時 間 90 分 鐘 : 每 題 2.5 分, 總 測 驗 時 間 為 90 分 鐘 二 執 行 CSF 測 驗 系 統 -Client

More information

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一 考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 五 專 企 二 乙 胡 哲 維 中 文 輸 入 五 專 企 二 乙 周 林 昜 中 文 輸 入 五 專 企 二 乙 賴 昱 樺 中 文 輸 入 五 專 企 二 乙

More information

Microsoft Word - 100118002.htm

Microsoft Word - 100118002.htm 100 年 度 11800 電 腦 軟 體 應 用 乙 級 技 術 士 技 能 檢 定 學 科 測 試 試 題 本 試 卷 有 選 擇 題 80 題, 每 題 1.25 分, 皆 為 單 選 選 擇 題, 測 試 時 間 為 100 分 鐘, 請 在 答 案 卡 上 作 答, 答 錯 不 倒 扣 ; 未 作 答 者, 不 予 計 分 准 考 證 號 碼 : 姓 名 : 選 擇 題 : 1. (3)

More information

附3

附3 普 通 高 等 学 校 本 科 专 业 设 置 申 请 表 ( 备 案 专 业 适 用 ) 080910T 3-6 2 016 7 6 4884878 目 录 填 表 说 明 ⒈ ⒉ ⒊ ⒋ ⒌ 1. 普 通 高 等 学 校 增 设 本 科 专 业 基 本 情 况 表 080910T 3-6 1978 36 ( 1978) ( 2008) 2017 60 120 / S J ⒉ 学 校 基 本 情

More information

2014年大学生村官考试公共基础知识:社会革命和社会改革

2014年大学生村官考试公共基础知识:社会革命和社会改革 2014 年 吉 林 省 招 募 三 支 一 扶 高 校 毕 业 生 计 划 实 施 公 告 根 据 省 人 社 厅 等 11 部 门 关 于 做 好 2014 年 高 校 毕 业 生 三 支 一 扶 计 划 实 施 工 作 的 通 知 ( 吉 人 社 联 字 2014 22 号 ) 精 神, 决 定 从 即 日 起 部 署 吉 林 省 2014 年 高 校 毕 业 生 三 支 一 扶 计 划 实

More information

Seagate_Dashboard_UG.book

Seagate_Dashboard_UG.book Seagate Dashboard Seagate Dashboard 2013 Seagate Technology LLC. Seagate Seagate Technology Wave FreeAgent Seagate Technology LLC 1 GB 10 1 TB 10000 Seagate Seagate Technology LLC 10200 S. De Anza Boulevard

More information

Acronis True Image 2015

Acronis True Image 2015 目 录 1 简 介...6 1.1 Acronis True Image 2015 是 什 么?... 6 1.2 此 版 本 中 的 新 增 功 能... 6 1.2.1 被 移 除 功 能 的 替 代 选 择... 7 1.3 系 统 要 求 与 支 持 的 媒 体... 7 1.3.1 最 低 系 统 要 求... 7 1.3.2 支 持 的 操 作 系 统... 7 1.3.3 支 持 的

More information

目錄

目錄 資 訊 素 養 線 上 教 材 單 元 五 資 料 庫 概 論 及 Access 5.1 資 料 庫 概 論 5.1.1 為 什 麼 需 要 資 料 庫? 日 常 生 活 裡 我 們 常 常 需 要 記 錄 一 些 事 物, 以 便 有 朝 一 日 所 記 錄 的 事 物 能 夠 派 得 上 用 場 我 們 能 藉 由 記 錄 每 天 的 生 活 開 銷, 就 可 以 在 每 個 月 的 月 底 知

More information

RTX3.2.0标准版 - 技术白皮书

RTX3.2.0标准版 - 技术白皮书 第 1 页 共 18 页 XForm 网 络 直 报 分 析 平 台 白 皮 书 2010 年 11 月 第 2 页 共 18 页 目 录 第 一 章 产 品 介 绍... 4 系 统 设 计 原 则... 5 1.1 先 进 性... 5 1.2 实 用 性... 5 1.2 安 全 性... 5 1.4 开 放 性... 6 1.5 扩 展 性... 6 1.6 高 效 性... 6 1.7 灵

More information

幻灯片 1

幻灯片 1 沈 阳 工 业 大 学 2014 年 6 月 第 7 章 数 据 库 技 术 基 础 主 要 内 容 : 7.1 数 据 库 概 述 数 据 库 基 本 概 念 数 据 模 型 逻 辑 数 据 模 型 数 据 库 系 统 的 产 生 和 发 展 常 用 的 数 据 库 管 理 系 统 7.2 Access 2010 数 据 库 创 建 及 维 护 创 建 Access 2010 数 据 库 创 建

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 张 工 培 训 注 册 消 防 工 程 师 考 试 免 费 宣 讲 课 土 木 建 筑 培 训 领 导 者 1 关 于 资 格 考 试 科 目 及 报 考 条 件 1 什 么 时 候 考 试? 一 级 和 二 级 是 同 一 时 间 考 试 吗? 根 据 公 安 部 消 防 局 官 方 答 疑,2015 年 一 级 注 册 消 防 工 程 师 资 格 考 试 时 间 和 报 名 方 式 计 划 由

More information

<4D6963726F736F667420576F7264202D20BAECB1A6C0F6A3BAB7C7B9ABBFAAB7A2D0D0B9C9C6B1C4BCBCAFD7CABDF0CAB9D3C3B5C4BFC9D0D0D0D4B1A8B8E62E646F63>

<4D6963726F736F667420576F7264202D20BAECB1A6C0F6A3BAB7C7B9ABBFAAB7A2D0D0B9C9C6B1C4BCBCAFD7CABDF0CAB9D3C3B5C4BFC9D0D0D0D4B1A8B8E62E646F63> 证 券 代 码 :002165 证 券 简 称 : 红 宝 丽 公 告 编 号 :2010-022 南 京 红 宝 丽 股 份 有 限 公 司 非 公 开 发 行 股 票 募 集 资 金 使 用 的 可 行 性 报 告 二 〇 一 〇 年 十 月 1 目 录 第 一 节 募 集 资 金 使 用 计 划 3 第 二 节 本 次 募 集 资 金 投 资 项 目 可 行 性 分 析 3 第 三 节 本 次

More information

调 查 概 述, 调 查 主 要 发 现 为 此 绿 色 和 平 主 张 01 调 查 背 景 02 环 境 信 息 公 开 的 法 理 基 础 及 实 践 03 中 国 的 环 境 信 息 公 开 办 法 ( 试 行 ) 调 查 对 象 04 05 调 查 方 法 06 07 免 责 声 明 : 08 09 调 查 主 要 结 果 及 分 析 10 11 12 超 越 第 二 十 一 条 企 业

More information

98年度即測即評學科測試與即測即評即發證技術士技能檢定簡章

98年度即測即評學科測試與即測即評即發證技術士技能檢定簡章 簡 章 103 年 度 即 測 即 評 學 科 測 試 與 即 測 即 評 及 發 證 技 術 士 技 能 檢 定 簡 章 報 名 書 表 勘 誤 表 日 期 103 年 6 月 12 日 封 面 封 面 10302A 10303A 報 檢 人 重 點 摘 要 提 示 1 6. 大 陸 地 區 人 民 ( 大 陸 配 偶 大 陸 學 位 生 ( 陸 生 就 學 ) 及 專 案 許 可 取 得 長 期

More information

Microsoft Word - 2015-12-25箕æ−¥ï¼‹å®ı稿;

Microsoft Word - 2015-12-25箕æ−¥ï¼‹å®ı稿; 名 词 工 作 简 报 第 4 期 ( 总 第 240 期 ) 全 国 科 学 技 术 名 词 审 定 委 员 会 事 务 中 心 编 印 2015 年 12 月 25 日 医 学 美 学 与 美 容 医 学 名 词 正 式 公 布 测 绘 学 名 词 ( 第 四 版 ) 等 8 种 科 技 名 词 预 公 布 中 国 社 科 院 秘 书 长 高 翔 出 席 审 定 工 作 会 议 并 讲 话 两

More information

ebook 132-2

ebook 132-2 2 SQL Server 7.0 SQL Server SQL Server 7 SQL Server 7 5 2.1 SQL Server 7 SQL Server 7 SQL Server SQL Server SQL Server 2.1.1 SQL Server Windows NT/2000 Windows 95/98 ( r a n d o m access memory R A M )

More information

Panaboard Overlayer help

Panaboard Overlayer help Panaboard Overlayer Image Capture Software for Electronic Whiteboard (Panaboard) ... 3... 5... 6... 13...14 Panaboard Overlayer 1. 2. 3. 4. 4-1. 4-2. [ / ] ( ) 4-3. 5. 6. 6-1. 6-2. [ / ] ( ) 7. Panaboard

More information

untitled

untitled 21 Visual FoxPro Visual FoxPro 6.0 11 Visual FoxPro Visual FoxPro CIP Visual FoxPro 2004 21 ISBN 7-03-014834-7 V Visual FoxPro TP311.138 CIP 2004 143035 16 100717 http://www.sciencep.com * 2004 12 7871092

More information

新疆医科大学

新疆医科大学 计 算 机 与 信 息 技 术 基 础 课 程 教 学 大 纲 (Windows 7 + Office 2010) ( 供 基 础 医 学 临 床 医 学 中 医 学 预 防 医 学 口 腔 医 学 护 理 学 药 学 生 物 医 学 工 程 信 息 管 理 与 信 息 系 统 专 业 汉 民 族 本 专 科 班, 分 级 教 学 C 级 班 使 用 ) (2014 年 2 月 修 订 讨 论 稿

More information

第二部分 成果简介

第二部分   成果简介 成 果 名 称 : 大 型 建 筑 物 复 杂 环 境 室 内 定 位 系 统 关 键 技 术 与 示 范 归 类 号 :431 成 果 持 有 单 位 : 北 京 邮 电 大 学 联 系 人 : 邓 中 亮 ; 联 系 电 话 :13911881798 推 荐 部 门 ( 单 位 ): 北 京 邮 电 大 学 适 用 范 围 : 随 着 位 置 服 务 的 蓬 勃 发 展 与 大 型 建 筑 的

More information

201316

201316 Computer Engineering and Applications 计 算 机 工 程 与 应 用 2013,49(16) 25 基 于 开 源 Hadoop 的 矢 量 空 间 数 据 分 布 式 处 理 研 究 尹 芳 1, 冯 敏 2, 诸 云 强 2 3, 刘 睿 YIN Fang 1, FENG Min 2, ZHU Yunqiang 2, LIU Rui 3 1. 长 安 大 学

More information

大数据分析技术 [13] 1.1 大数据 Big Data [2] IBM 5V Volume Velocity Variety Value Veracity Volume Velocity Variety Value Veracity 表 1 大数据特征表 Tab.1

大数据分析技术 [13] 1.1 大数据 Big Data [2] IBM 5V Volume Velocity Variety Value Veracity Volume Velocity Variety Value Veracity 表 1 大数据特征表 Tab.1 2016 2016, Vol. 37, No. 01 37 01 COMPUTER ENGINEERING & SOFTWARE IT 大数据在输变电设备状态评估中的研究 周广 1, 闫丹凤 1, 许光可 2, 李笋 1. 100876 2. 250001 2 摘要 : 电网的高速发展带来海量数据的存储和分析问题, 传统的数据管理和分析工具不再适用 本文主要对大数据分析的相关技术在输变电设备状态评估中的应用进行了研究

More information

软 件 工 程 专 业 习 指 南 目 录 一 软 件 工 程 专 业 设 置 背 景 与 发 展 前 景... 3 二 软 件 工 程 专 业 实 践 教 条 件... 4 三 软 件 工 程 专 业 课 程 类 型 及 核 方 式... 6 1. 软 件 工 程 专 业 课 程 类 型...7

软 件 工 程 专 业 习 指 南 目 录 一 软 件 工 程 专 业 设 置 背 景 与 发 展 前 景... 3 二 软 件 工 程 专 业 实 践 教 条 件... 4 三 软 件 工 程 专 业 课 程 类 型 及 核 方 式... 6 1. 软 件 工 程 专 业 课 程 类 型...7 计 算 机 系 软 件 工 程 专 业 习 指 南 广 东 科 技 院 计 算 机 系 2015-9-1 软 件 工 程 专 业 习 指 南 目 录 一 软 件 工 程 专 业 设 置 背 景 与 发 展 前 景... 3 二 软 件 工 程 专 业 实 践 教 条 件... 4 三 软 件 工 程 专 业 课 程 类 型 及 核 方 式... 6 1. 软 件 工 程 专 业 课 程 类 型...7

More information

温州市政府分散采购

温州市政府分散采购 温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理

More information

信息

信息 信 息 与 算 机 工 院 算 机 科 与 技 术 人 才 培 养 方 案 ( 代 码 :080901) 一 培 养 目 标 培 养 适 应 国 家 建 设 发 展 需 要, 德 智 体 全 面 发 展, 具 有 良 好 的 科 素 养 和 丰 厚 的 人 文 底 蕴, 掌 握 扎 的 算 机 科 核 心 基 础 理 论 知 识 和 主 流 工 技 术, 了 解 本 的 前 沿 发 展 现 状 和

More information

Paratune用户手册

Paratune用户手册 PARATERA Paratune 用 户 手 册 v4.0 北 京 并 行 科 技 有 限 公 司 2013 / 10 目 录 1 手 册 说 明... 5 1.1 关 于 手 册... 5 1.2 排 版 约 定... 5 1.3 名 词 解 释... 5 1.4 相 关 文 档... 6 1.5 信 息 反 馈... 6 2 Paratune 简 介... 7 2.1 软 件 界 面 与 主

More information

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI 一般報導 大數據與 巨量資料分析 曾龍 我們需要你 資料科學家 來幫助國民建立更好的數位服務 幫助我們揭開更新的創意 幫助我們改善這個國家和全世界 美國總統歐巴馬 在 2012 年 10 月發行的 哈佛商業評 論 中 戴 文 波 特 湯 姆 斯 Thomas H. Davenport 及 帕 蒂 爾 D.J. Patil 發 表 了 一篇文章 描述 21 世紀最性感的職業 資料科學家 Data Scientist:

More information

目 录 软 件 概 述... 3 1.1 软 件 用 途... 3 1.2 软 件 运 行... 3 1.3 系 统 配 置... 3 使 用 入 门... 4 2.1 软 件 登 录 与 退 出... 4 2.2 页 面 介 绍... 6 组 别 账 号 编 辑... 8 3.1 组 别 编 辑.

目 录 软 件 概 述... 3 1.1 软 件 用 途... 3 1.2 软 件 运 行... 3 1.3 系 统 配 置... 3 使 用 入 门... 4 2.1 软 件 登 录 与 退 出... 4 2.2 页 面 介 绍... 6 组 别 账 号 编 辑... 8 3.1 组 别 编 辑. 闪 电 王 多 账 户 版 使 用 说 明 版 本 :1.2.10 目 录 软 件 概 述... 3 1.1 软 件 用 途... 3 1.2 软 件 运 行... 3 1.3 系 统 配 置... 3 使 用 入 门... 4 2.1 软 件 登 录 与 退 出... 4 2.2 页 面 介 绍... 6 组 别 账 号 编 辑... 8 3.1 组 别 编 辑... 8 3.2 账 号 编 辑...

More information

宁夏专业技术人员服务平台

宁夏专业技术人员服务平台 宁 夏 专 业 技 术 人 员 服 务 平 台 职 称 申 报 系 统 版 本 号 :1.0 ( 版 本 处 于 变 动 中, 请 您 随 时 下 载 新 版 ) 使 用 说 明 书 2014 年 3 月 4 日 目 录 一 使 用 要 求... 1 二 进 入 系 统... 2 三 用 户 注 册... 4 四 完 善 个 人 基 本 信 息... 6 五 职 称 申 报... 8 六 打 印 确

More information

声 明 本 公 司 及 全 体 董 事 监 事 高 级 管 理 人 员 承 诺 不 存 在 任 何 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏, 并 对 其 真 实 性 准 确 性 完 整 性 承 担 个 别 和 连 带 的 法 律 责 任 本 公 司 负 责 人 和 主 管 会 计 工

声 明 本 公 司 及 全 体 董 事 监 事 高 级 管 理 人 员 承 诺 不 存 在 任 何 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏, 并 对 其 真 实 性 准 确 性 完 整 性 承 担 个 别 和 连 带 的 法 律 责 任 本 公 司 负 责 人 和 主 管 会 计 工 Shenzhen WitSoft Information Technology Co., Ltd. 主 办 券 商 二 〇 一 六 年 二 月 声 明 本 公 司 及 全 体 董 事 监 事 高 级 管 理 人 员 承 诺 不 存 在 任 何 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏, 并 对 其 真 实 性 准 确 性 完 整 性 承 担 个 别 和 连 带 的 法 律 责 任 本

More information

<4D6963726F736F667420576F7264202D20383439342D352DBED6D3F2CDF8D7E9BDA8D3EBB9DCC0EDCFEEC4BFBDCCB3CCD5FDCEC42E646F63>

<4D6963726F736F667420576F7264202D20383439342D352DBED6D3F2CDF8D7E9BDA8D3EBB9DCC0EDCFEEC4BFBDCCB3CCD5FDCEC42E646F63> 第 4 单 元 搭 建 自 己 的 Web 站 点 本 单 元 通 过 学 习 架 构 Web 服 务 器, 实 现 Web 服 务, 管 理 Web 站 点, 了 解 Web 站 点 服 务 器 的 架 构 个 人 空 间 和 虚 拟 主 机 的 概 念, 掌 握 IIS 组 件 的 安 装 Web 站 点 的 创 建 管 理 站 点 属 性 选 项 卡 的 配 置 管 理 等 知 识,Web 网

More information

經濟統計資料庫管理資訊系統

經濟統計資料庫管理資訊系統 招 標 文 件 (1) 經 濟 部 投 資 審 議 委 員 會 全 球 投 資 審 議 管 理 資 訊 系 統 ( 第 3 期 ) 開 發 建 置 專 案 投 標 須 知 經 濟 部 投 資 審 議 委 員 會 中 華 民 國 95 年 2 月 經 濟 部 投 資 審 議 委 員 會 投 標 須 知 以 下 各 項 招 標 規 定 內 容, 由 機 關 填 寫, 投 標 廠 商 不 得 填 寫 或

More information

FAQ -PowerDesigner9.5.DOC

FAQ -PowerDesigner9.5.DOC PowerDesigner 9.5 FAQ 1. PowerDesigner PowerDesigner PowerDesigner (CASE Tool,Computer Aided Software Engineering) PowerDesigner 1989 9.5 2. PowerDesigner PowerDesigner Internet ( Java) PowerDesigner 7.0

More information

XXXXXXXX http://cdls.nstl.gov.cn 2 26

XXXXXXXX http://cdls.nstl.gov.cn 2 26 [ ] [ ] 2003-7-18 1 26 XXXXXXXX http://cdls.nstl.gov.cn 2 26 (2003-7-18) 1...5 1.1...5 1.2...5 1.3...5 2...6 2.1...6 2.2...6 2.3...6 3...7 3.1...7 3.1.1...7 3.1.2...7 3.1.2.1...7 3.1.2.1.1...8 3.1.2.1.2...10

More information

Microsoft Word - ¸ê°T³q³ø273´Á.doc

Microsoft Word - ¸ê°T³q³ø273´Á.doc 機 關 動 態 研 究 發 展 考 核 委 員 會 研 考 會 資 訊 管 理 處 林 輝 誼 高 級 分 析 師 自 6 月 2 日 起 退 休, 蔡 世 田 科 長 於 6 月 1 日 升 任 為 高 級 分 析 師 臺 北 市 政 府 臺 北 市 政 府 資 訊 處 系 統 發 展 組 原 由 該 處 設 備 網 路 組 黃 組 長 坤 煌 兼 任, 自 6 月 14 日 起 職 務 由 行

More information

WP_ARIS_PPM_CN.PDF

WP_ARIS_PPM_CN.PDF ,! ARIS (ARIS PPM) IDS Scheer AG 1 1 3? 3 4 ARI PPM 5 IT - 6 2 ARIS PPM 6 6 7 8 (SLA) 8 9 10 10 11 12 QM 12 13 3 ARIS PPM 14 ARIS PPM 14 ARIS PPM 15 15 15 16 (Management Views) 16 (Speedometer)- 17 18

More information

使用 Scene7 Media Portal

使用 Scene7 Media Portal ADOBE SCENE7 MEDIA PORTAL http://help.adobe.com/zh_cn/legalnotices/index.html 2012/10/26 iii 1 : Media Portal.........................................................................................................

More information

Oracle Database 10g: SQL (OCE) 的第一堂課

Oracle Database 10g: SQL (OCE) 的第一堂課 商 用 資 料 庫 的 第 一 堂 課 中 華 大 學 資 訊 管 理 系 助 理 教 授 李 之 中 http://www.chu.edu.tw/~leecc 甲 骨 文 俱 樂 部 @Taiwan Facebook 社 團 https://www.facebook.com/groups/365923576787041/ 2014/09/15 問 題 一 大 三 了, 你 為 什 麼 還 在 這

More information

AVG AntiVirus User Manual

AVG AntiVirus User Manual AVG AntiVirus 用户手册 文档修订 AVG.04 2016 2 9 版权所有 AVG Technologies CZ, s.r.o. 保留所有权利 所有其它商标均是其各自所有者的财产 目录 1. 简介 3 2. AVG 安装要求 4 2.1 支持的操作系统 4 2.2 最低 推荐硬件要求 4 5 3. AVG 安装过程 3.1 欢迎 5 3.2 输入您的许可证号码 6 3.3 自定义安装

More information

Chapter 2

Chapter 2 2 (Setup) ETAP PowerStation ETAP ETAP PowerStation PowerStation PowerPlot ODBC SQL Server Oracle SQL Server Oracle Windows SQL Server Oracle PowerStation PowerStation PowerStation PowerStation ETAP PowerStation

More information

福 建 顶 点 软 件 股 份 有 限 公 司 首 次 公 开 发 行 股 票 招 股 说 明 书 发 行 股 票 类 型 人 民 币 普 通 股 (A 股 ) 本 次 拟 发 行 股 数 每 股 面 值 每 股 发 行 价 预 计 发 行 日 期 预 计 上 市 的 证 券 交 易 所 发 行 后

福 建 顶 点 软 件 股 份 有 限 公 司 首 次 公 开 发 行 股 票 招 股 说 明 书 发 行 股 票 类 型 人 民 币 普 通 股 (A 股 ) 本 次 拟 发 行 股 数 每 股 面 值 每 股 发 行 价 预 计 发 行 日 期 预 计 上 市 的 证 券 交 易 所 发 行 后 福 建 顶 点 软 件 股 份 有 限 公 司 ( 福 州 市 台 江 区 新 港 街 道 五 一 中 路 169 号 利 嘉 城 二 期 16 号 楼 24 层 07 室 ) 首 次 公 开 发 行 股 票 招 股 说 明 书 ( 申 报 稿 ) 保 荐 人 ( 主 承 销 商 ) ( 上 海 市 中 山 南 路 318 号 东 方 国 际 金 融 广 场 24 层 ) 福 建 顶 点 软 件 股

More information

目 录 简 介.3 ` 体 系 结 构...4 数 据 层...5 数 据 连 接 器...6 Tableau Server 组 件...7 网 关 / 负 载 平 衡 器...8 客 户 端 :Web 浏 览 器 和 移 动 应 用 程 序...8 客 户 端 :Tableau Desktop..

目 录 简 介.3 ` 体 系 结 构...4 数 据 层...5 数 据 连 接 器...6 Tableau Server 组 件...7 网 关 / 负 载 平 衡 器...8 客 户 端 :Web 浏 览 器 和 移 动 应 用 程 序...8 客 户 端 :Tableau Desktop.. Neelesh Kamkolkar, 产 品 经 理 Ellie Fields, 产 品 营 销 副 总 裁 Marc Rueter, 战 略 解 决 方 案 高 级 总 监 适 用 于 企 业 的 Tableau: IT 概 述 目 录 简 介.3 ` 体 系 结 构...4 数 据 层...5 数 据 连 接 器...6 Tableau Server 组 件...7 网 关 / 负 载 平 衡

More information

VIDEOJET connect 7000 VJC-7000-90 zh- CHS Operation Manual VIDEOJET connect 7000 zh-chs 3 目 录 1 浏 览 器 连 接 7 1.1 系 统 要 求 7 1.2 建 立 连 接 7 1.2.1 摄 像 机 中 的 密 码 保 护 7 1.3 受 保 护 的 网 络 7 2 系 统 概 述 8 2.1 实 况

More information