浪 潮 舆 情 云 监 测 系 统 技 术 白 皮 书 浪 潮 软 件 集 团 有 限 公 司 云 服 务 事 业 部 2015 年 11 月 第 1 页 共 35 页
目 录 第 一 章 浪 潮 舆 情 云 监 测 系 统 介 绍... 3 1.1 概 述... 3 1.1.1 舆 情 监 测 背 景... 3 1.1.2 舆 情 监 测 工 作 面 临 的 问 题... 4 1.1.3 产 品 简 介... 5 1.1.4 产 品 主 要 功 能... 5 1.1.5 浪 潮 舆 情 云 监 测 系 统 常 用 术 语... 6 第 二 章 产 品 设 计... 7 2.1 产 品 总 体 设 计... 7 2.2 产 品 设 计 原 则... 8 2.3 浪 潮 舆 情 云 监 测 系 统 架 构... 9 2.3.1 信 息 采 集... 9 2.3.2 信 息 处 理... 14 2.3.3 信 息 分 析... 18 2.3.4 信 息 展 示... 23 2.3.5 其 他... 25 第 三 章 技 术 优 势...27 3.1 技 术 成 熟 性... 27 3.2 业 务 需 求 可 靠 性... 28 第 四 章 服 务 安 全 性...28 4.1 身 份 认 证... 28 4.2 用 户 授 权... 28 4.3 密 码 管 理... 30 4.4 数 据 传 输 加 密... 31 4.5 数 据 存 储 加 密... 31 4.6 数 据 备 份... 31 4.7 数 据 删 除 保 护... 32 第 2 页 共 35 页
第 一 章 浪 潮 舆 情 云 监 测 系 统 介 绍 1.1 概 述 1.1.1 舆 情 监 测 背 景 目 前, 中 国 有 大 约 3.83 亿 网 民, 其 中 包 括 2.26 亿 网 民 看 网 络 新 闻 ;1 亿 网 民 访 问 BBS;1.82 亿 网 民 开 博 客 ;1.55 亿 网 民 使 用 手 机 上 网,2.4 亿 使 用 即 时 通 讯 工 具 网 民 成 为 网 络 舆 论 的 主 要 推 动 者 我 国 近 年 来 经 济 体 制 加 速 改 革, 利 益 格 局 深 刻 调 整, 正 处 于 社 会 转 型 矛 盾 加 剧 的 特 殊 时 期, 公 共 危 机 事 件 由 偶 发 变 为 频 发 而 在 网 络 中, 信 息 传 播 与 意 见 交 互 空 前 迅 捷, 网 络 舆 论 的 表 达 诉 求 也 日 益 多 元 化, 庞 大 的 网 民 群 体 的 参 与 使 得 公 共 危 机 事 件 在 短 时 间 内 迅 速 扩 散, 增 强 了 相 关 事 件 的 变 化 因 素 同 时, 我 国 国 家 领 导 人 高 度 重 视 网 民 意 见 自 2003 年 起, 舆 情 监 测 成 为 各 级 党 政 部 门 的 一 项 重 要 工 作, 开 始 进 入 制 度 化 规 范 化 发 展 阶 段 此 后, 我 国 陆 续 建 立 了 从 中 央 到 地 方 的 舆 情 监 测 体 系 2006 年 11 月, 中 共 中 央 关 于 构 建 社 会 主 义 和 谐 社 会 若 干 重 大 问 题 的 决 定 指 出, 健 全 社 会 舆 情 汇 集 和 分 析 机 制, 完 善 矛 盾 纠 纷 排 查 调 处 工 作 制 度 要 建 立 由 中 央 至 地 方 涵 盖 不 同 部 门 的 全 方 位 的 综 合 舆 情 监 测 体 系 各 相 关 部 门 不 仅 要 做 到 从 大 处 着 眼, 关 注 全 国 范 围 内 有 普 遍 影 响 力 的 议 题, 更 要 有 针 对 性 地 对 自 身 管 理 的 领 域 实 施 舆 情 监 测 同 时, 要 与 其 他 部 门 建 立 联 系, 共 享 资 源, 连 点 成 线, 结 线 成 面, 形 成 全 领 域 多 角 度 的 舆 情 监 测 体 系 可 以 通 过 设 立 网 络 第 3 页 共 35 页
监 察 员 等 方 式, 随 时 了 解 网 络 动 态, 随 时 掌 握 并 处 理 网 民 共 同 关 注 的 事 件 和 议 题 还 可 以 建 立 网 络 舆 情 分 析 中 心, 提 高 对 于 网 络 舆 情 的 处 理 技 术, 实 现 利 用 信 息 技 术 对 网 络 群 体 事 件 进 行 精 确 的 分 析 与 预 警 1.1.2 舆 情 监 测 工 作 面 临 的 问 题 网 络 舆 情 形 成 迅 速, 并 且 其 呈 现 的 影 响 力 日 益 增 加, 已 经 渗 入 到 政 府 政 策 发 布 企 业 活 动 等 社 会 的 各 个 方 面, 互 联 网 已 经 成 为 思 想 文 化 信 息 的 集 散 地 和 社 会 舆 论 的 放 大 器 网 络 舆 情 具 有 传 播 范 围 广 速 度 快 影 响 大 的 特 点, 具 有 直 接 性 突 发 性 和 偏 差 性 的 特 点, 具 有 易 变 性 和 非 稳 定 性 的 特 点 舆 情 带 有 倾 向 性 和 价 值 选 择 双 重 特 征, 具 有 很 大 的 情 绪 化 倾 向, 具 有 一 定 的 凝 聚 力 和 煽 动 性 网 络 舆 情 传 播 规 律 传 统 的 舆 情 监 测 手 段 具 有 舆 情 收 集 困 难 获 取 信 息 不 及 时 获 取 信 息 不 准 确 等 局 限 性, 这 就 导 致 了 各 级 政 府 部 门 不 能 及 时 掌 握 有 效 的 民 众 舆 情, 增 加 了 政 府 对 社 会 管 理 的 难 度 ; 增 加 了 社 会 不 安 定 因 素 ; 降 低 社 会 公 众 对 政 府 的 信 息 度 ; 危 害 政 府 公 共 管 理 秩 序 面 对 鱼 龙 混 杂 的 网 络 社 会, 各 级 政 府 部 门 如 果 能 够 及 时 掌 握 舆 论 的 动 向, 快 速 分 析 舆 论 趋 势, 便 可 以 积 极 引 导 舆 论 走 向 可 以 充 分 利 用 网 络 舆 论 分 析 工 具, 加 强 行 业 自 律, 改 变 工 作 作 风 积 极 有 效 地 宣 传 政 策 方 针, 维 护 社 会 稳 定, 真 正 第 4 页 共 35 页
做 到 关 注 民 生 重 视 民 生 保 障 民 生 改 善 民 生 放 大 正 面 声 音, 宣 传 积 极 向 上 的 事 物 ; 缩 小 负 面 声 音, 及 时 处 理 突 发 事 件 造 成 的 不 良 影 响, 减 小 事 件 的 社 会 危 害 性 如 何 及 时 掌 握 舆 论 动 态, 快 速 分 析 舆 论 趋 势, 把 握 舆 论 走 向, 传 统 的 人 工 调 查 方 式 已 经 无 法 满 足 当 今 网 络 时 代 的 要 求, 利 用 现 代 网 络 技 术 的 海 量 数 据 搜 索 分 析 处 理 能 力 解 决 对 舆 论 的 监 测 分 析 已 经 成 为 必 然 趋 势 1.1.3 产 品 简 介 浪 潮 舆 情 云 监 测 系 统, 是 利 用 爬 虫 及 搜 索 引 擎 技 术 对 互 联 网 的 标 题 网 页 内 容 论 坛 BBS 贴 吧 微 博 作 者 时 间 出 处 等 各 个 方 面 及 多 个 维 度 进 行 数 据 采 集, 然 后 通 过 基 于 自 主 知 识 产 权 的 专 利 算 法 进 行 深 度 的 数 据 挖 掘 以 及 智 能 化 的 数 据 分 析, 从 而 生 成 Word Web PDF 等 各 种 形 式 的 报 表, 称 之 为 舆 情 简 报 舆 情 简 报 可 为 企 业 用 户 提 供 各 类 信 息, 包 括 但 不 限 于 政 策 行 业 动 向 友 商 动 态 负 面 新 闻, 从 而 为 企 业 用 户 提 供 各 类 决 策 依 据, 有 助 于 企 业 用 户 加 强 品 牌 建 设 同 时 舆 情 简 报 可 为 政 府 用 户 提 供 舆 论 热 点 分 析 民 意 搜 索 与 调 查 负 面 舆 论 的 搜 集 消 除 及 引 导 等 功 能 1.1.4 产 品 主 要 功 能 浪 潮 舆 情 云 监 测 系 统 利 用 国 内 领 先 的 爬 虫 技 术, 实 时 监 测 新 闻 论 坛 博 客 微 博 平 媒 等 网 络 舆 情 信 息, 并 对 敏 感 信 息 及 时 预 警 系 统 利 用 中 文 分 词 技 术 自 然 语 言 处 理 技 术 中 文 信 息 处 理 技 术, 对 信 息 进 行 垃 圾 过 滤 去 重 相 似 性 聚 类 情 感 分 析 提 取 摘 要 自 动 聚 类 等 处 理, 自 动 生 成 个 性 化 的 舆 情 监 测 报 告 第 5 页 共 35 页
浪 潮 舆 情 云 监 测 系 统 主 要 包 括 舆 情 信 息 采 集, 舆 情 信 息 处 理, 舆 情 图 表 分 析, 多 维 度 微 博 监 测, 舆 情 危 机 预 警, 舆 情 统 计 报 告 等 功 能 1.1.5 浪 潮 舆 情 云 监 测 系 统 常 用 术 语 关 键 词 指 输 入 搜 索 框 中 的 文 字, 是 用 于 搜 索 新 闻 信 息 的 主 题 内 容 报 表 指 通 过 关 键 词 所 抓 取 在 互 联 网 上 发 布 的 新 闻 列 表 和 分 析 图 表 的 信 息 汇 总 数 据 指 通 过 关 键 词 进 行 系 统 抓 取 后 对 已 有 新 闻 信 息 并 进 行 不 同 维 度 存 储 的 数 据 属 性 系 统 对 数 据 进 行 正 面 / 负 面 / 中 立 进 行 判 断 监 测 指 本 系 统 连 接 到 远 程 管 理 对 象 上 进 行 数 据 采 集 并 对 所 采 集 数 据 进 行 状 态 判 断 的 一 个 流 程 预 警 预 警 方 式 包 括 邮 件 手 机 短 消 息 MSN GTALK 等 方 式 舆 情 分 析 帮 助 用 户 进 行 分 析 的 图 形 和 数 据 包 括 舆 情 走 势 媒 体 覆 盖 来 源 网 站 属 性 对 比 表 等, 表 现 形 式 包 括 曲 线 图 柱 状 图 面 积 图 饼 图 正 负 图 第 6 页 共 35 页
第 二 章 产 品 设 计 2.1 产 品 总 体 设 计 针 对 基 于 互 联 网 的 各 类 舆 论 信 息, 我 们 认 为 应 在 统 一 的 信 息 安 全 体 系 及 应 用 系 统 管 理 体 系 下 进 行 规 划 与 设 计, 在 一 个 统 一 的 基 础 框 架 基 础 上 建 设 各 应 用 系 统 系 统 利 用 搜 索 引 擎 技 术 自 然 语 言 处 理 技 术 知 识 管 理 方 法, 通 过 对 互 联 网 海 量 信 息 自 动 获 取 提 取 分 类 聚 类 主 题 监 测 专 题 聚 焦, 实 现 用 户 对 网 络 舆 情 监 测 和 热 点 事 件 专 题 追 踪 等 需 求, 形 成 舆 情 决 策 库 舆 情 简 报 等 分 析 结 果, 为 客 户 全 面 掌 握 舆 情 动 态, 做 出 正 确 舆 论 引 导 提 供 分 析 依 据 浪 潮 舆 情 云 监 测 系 统 具 有 舆 情 采 集 舆 情 分 析 舆 情 预 警 舆 情 搜 索 舆 情 简 报 统 计 分 析 等 核 心 功 能 浪 潮 舆 情 云 监 测 系 统 实 现 了 7*24 小 时 跟 踪 监 控 采 集 目 标 网 站 论 坛 微 博 QQ 等 即 时 通 讯 工 具 和 博 客 的 动 态 舆 情 信 息, 及 时 准 确 地 为 用 户 收 集 整 理 关 注 领 域 内 的 热 点 新 闻 突 发 事 件 人 物 活 动 等 舆 情 资 料 ; 通 过 敏 感 话 题 热 度 分 析, 为 用 户 从 海 量 舆 情 信 息 中 分 拣 出 最 新 重 大 舆 情 事 件, 让 用 户 实 时 掌 控 热 点 舆 情 及 行 业 动 态, 对 突 发 事 件 和 负 面 舆 情 作 出 及 时 预 警 ; 通 过 跟 踪 监 控 舆 论 报 道 的 发 展, 分 析 舆 情 信 息 的 传 播 途 径, 追 溯 危 机 舆 情 的 根 源, 为 及 时 防 范 处 理 负 面 舆 情 泛 滥 和 扩 散 积 极 引 导 事 态 发 展 的 趋 势 协 助 用 户 将 危 机 消 除 在 萌 芽 状 态, 提 供 高 价 值 的 参 考 决 策 及 危 机 处 理 服 务 第 7 页 共 35 页
2.2 产 品 设 计 原 则 根 据 国 家 相 关 监 管 部 门 的 要 求, 本 产 品 的 规 划 和 设 计 参 考 以 下 的 原 则 : 合 规 性 原 则 产 品 的 整 体 安 全 防 护 设 计 必 须 符 合 国 家 地 方 的 相 关 标 准 和 要 求 严 格 按 照 标 准 进 行 设 计 易 操 作 性 原 则 浪 潮 舆 情 云 监 测 系 统 具 备 完 善 的 功 能, 操 作 简 单 直 观 维 护 管 理 方 便 充 分 采 用 先 进 技 术, 尤 其 是 在 信 息 采 集 分 析 管 理 技 术 等 方 面, 采 用 领 先 的 智 能 化 技 术 在 管 理 共 享 数 据 调 度 等 方 面 充 分 体 现 智 能 化 和 自 动 化 可 靠 性 浪 潮 舆 情 云 监 测 系 统 具 有 很 高 的 可 靠 性 采 用 稳 定 成 熟 的 先 进 技 术, 以 及 高 质 量 的 设 备 相 关 工 作 人 员 在 系 统 运 行 过 程 中 以 及 进 行 系 统 安 装 时, 指 出 可 能 出 现 的 系 统 故 障 及 具 体 排 除 的 方 法 和 手 段, 确 保 浪 潮 舆 情 云 监 测 系 统 7 24 小 时 无 故 障 工 作 可 扩 展 性 原 则 由 于 随 着 新 技 术 的 发 展, 虽 然 现 在 的 产 品 方 案 解 决 了 目 前 问 题, 但 是 随 着 时 间 的 变 化, 新 类 型 的 舆 情 信 息 的 出 现, 原 有 的 问 题 解 决 方 案 可 能 满 足 不 了 其 需 求, 这 时 就 需 要 对 原 有 的 产 品 进 行 升 级 浪 潮 舆 情 云 监 测 系 统 具 备 良 好 的 可 扩 展 性, 能 够 随 着 新 技 术 的 发 展 以 及 时 间 的 变 化, 及 时 进 行 产 品 的 升 级 与 更 新 先 进 性 原 则 采 用 当 今 国 内 国 际 上 最 先 进 和 成 熟 的 计 算 机 软 硬 件 平 台 软 件 设 计 编 程 方 法 开 放 式 的 体 系 结 构 和 信 息 安 全 保 障 体 系, 浪 潮 舆 情 云 监 测 系 统 能 够 最 大 限 度 第 8 页 共 35 页
地 适 应 今 后 的 业 务 发 展 变 化 需 要 安 全 性 不 论 是 基 础 平 台 还 是 各 个 业 务 子 系 统, 整 个 浪 潮 舆 情 云 监 测 系 统 的 设 计 遵 循 了 安 全 性 的 重 要 原 则 在 网 络 系 统 构 建 硬 件 方 面, 浪 潮 舆 情 云 监 测 系 统 采 用 并 发 技 术 及 相 应 的 虚 拟 化 存 储 等 相 应 技 术, 从 而 保 证 了 网 络 带 宽 可 以 满 足 该 网 络 的 实 际 需 要 浪 潮 舆 情 云 监 测 系 统 硬 件 选 型 以 安 全 性 稳 定 性 为 主 浪 潮 舆 情 云 监 测 系 统 具 有 检 错 纠 错 能 力, 具 有 完 善 的 备 份 措 施 在 系 统 出 现 故 障 时, 能 够 在 较 短 的 时 间 内 恢 复 系 统 运 行 浪 潮 舆 情 云 监 测 系 统 能 对 网 络 和 设 备 的 运 行 情 况 进 行 监 测 和 记 录 实 用 性 和 最 优 性 价 比 原 则 在 整 个 系 统 设 计 中, 浪 潮 舆 情 云 监 测 系 统 从 实 际 出 发, 切 实 满 足 用 户 需 要, 保 证 实 现 本 项 目 和 本 工 程 的 建 设 目 标 同 时, 本 产 品 作 好 了 适 度 问 题 解 决 与 经 济 投 入 的 比 较, 注 重 实 用, 有 较 高 的 性 能 价 格 比 2.3 浪 潮 舆 情 云 监 测 系 统 架 构 2.3.1 信 息 采 集 在 浪 潮 舆 情 云 监 测 系 统 中, 用 户 可 自 定 义 监 测 站 点 及 监 测 关 键 词, 采 集 范 围 包 括 : 新 闻 论 坛 微 博 贴 吧 博 客 视 频 报 刊 杂 志 等 结 合 元 搜 索 技 术 ( 搜 索 引 擎 结 果 补 充 ), 确 保 信 息 全 面 性 定 向 抓 取 源 : 浪 潮 舆 情 云 监 测 系 统 对 相 关 站 点 中 的 新 闻 论 坛 微 博 贴 吧 博 客 视 频 报 刊 杂 志 等 网 络 媒 体 实 现 全 面 的 抓 取, 同 时 支 持 对 主 流 新 闻 网 站 分 页 评 论 内 容 的 采 集 以 及 对 论 坛 点 击 数 回 帖 数 的 抓 取 第 9 页 共 35 页
搜 索 引 擎 结 果 : 独 有 的 智 能 爬 虫 系 统 还 可 以 自 动 跟 踪 多 个 搜 索 引 擎 的 搜 索 结 果, 对 监 测 数 据 进 行 补 充 自 定 义 URL 来 源 及 采 集 频 率 : 除 系 统 常 规 监 测 范 围 外, 用 户 可 以 通 过 设 定 采 集 的 栏 目 URL 更 新 时 间 扫 描 间 隔 等, 自 定 义 需 要 重 点 监 测 的 信 息, 以 便 及 时 发 现 目 标 信 息 源 的 最 新 变 化, 并 以 最 快 的 速 度 将 个 性 化 关 注 内 容 采 集 到 本 地 用 户 可 自 定 义 监 测 站 点 及 监 测 关 键 词, 采 集 范 围 包 括 : 新 闻 论 坛 微 博 贴 吧 博 客 视 频 报 刊 杂 志 等 结 合 元 搜 索 技 术 ( 搜 索 引 擎 结 果 补 充 ), 确 保 信 息 全 面 性 2.3.1.1 元 搜 索 浪 潮 舆 情 云 监 测 系 统 采 用 用 户 设 置 的 站 点 与 关 键 词 进 行 抓 取, 可 以 满 足 绝 大 部 分 的 需 求, 但 是 总 有 部 分 信 息 在 非 重 点 的 来 源 冒 出 来, 对 于 这 部 分 信 息 需 要 采 用 元 搜 索 技 术, 即 采 用 百 度 Google 等 作 为 采 集 资 源, 利 用 预 先 定 义 的 语 料 搜 索 词 库 从 同 一 个 检 索 入 口 对 多 个 资 源 提 交 检 索 请 求 浪 潮 舆 情 云 监 测 系 统 是 采 用 网 络 爬 虫 技 术 和 网 络 信 息 挖 掘 技 术, 对 网 络 各 类 信 息 进 行 汇 集 分 类 整 合 筛 选, 以 形 成 对 网 络 热 点 网 民 意 见 等 的 实 时 舆 情 报 表, 为 决 策 层 全 面 掌 握 舆 情 动 态, 做 出 正 确 舆 论 引 导, 提 供 分 析 依 据 搜 索 引 擎 范 围 广 泛 但 是 深 度 不 够, 比 如 新 闻 评 论 大 部 分 论 坛 的 回 复 帖 子 微 博 目 前 搜 索 引 擎 还 不 能 抓 取, 结 合 浪 潮 舆 情 云 监 测 系 统 互 联 网 信 息 采 集 与 搜 索 引 擎 的 产 出 是 一 个 完 美 的 解 决 方 案 由 于 搜 索 引 擎 采 集 不 能 像 自 定 义 站 点 那 样 预 先 定 制 页 面 结 构 信 息, 对 于 这 部 分 信 息 智 能 采 用 智 能 分 析 页 面 结 构, 进 一 步 提 取 页 面 的 元 数 据 信 息 采 集 后 可 与 第 10 页 共 35 页
采 用 一 般 方 式 获 取 的 信 息 一 样 展 现 给 最 终 用 户 功 能 特 点 : 高 度 的 可 扩 展 性 浪 潮 舆 情 云 监 测 系 统 体 系 结 构 灵 活 支 持, 可 灵 活 扩 展 新 的 抓 取 方 式, 比 如, 假 设 新 出 现 推 特 微 博, 现 有 方 式 不 能 采 集 信 息, 可 通 过 配 置, 结 合 系 统 提 供 的 js 引 擎 可 产 生 新 的 信 息 采 集 方 式, 在 第 一 时 间 适 应 新 出 现 的 站 点 增 量 检 索 即 使 对 于 元 搜 索 系 统 也 支 持 增 量 式 检 索, 所 有 信 息 不 会 重 复 检 索 智 能 页 面 结 构 分 析 智 能 分 析 搜 索 引 擎 返 回 信 息 种 类, 智 能 提 取 页 面 信 息 广 泛 的 元 搜 索 源 目 前 浪 潮 舆 情 云 监 测 系 统 支 持 百 度 新 闻 百 度 贴 吧 爱 问 知 识 人 天 涯 百 度 论 坛 搜 索 百 度 博 客 搜 索 雅 虎 新 闻 百 度 新 闻 搜 索 搜 狗 新 闻 搜 索 搜 狗 博 客 搜 索 SOSO 新 闻 SOSO 博 客 有 道 新 闻 RSS 有 道 新 闻 有 道 论 坛 Live 资 讯 即 可 新 闻 RSS 奇 虎 论 坛 搜 索 奇 虎 博 客 搜 索 新 浪 新 闻 搜 索 即 刻 新 闻 搜 索 新 浪 博 客 搜 索 搜 搜 新 闻 盘 古 新 闻 搜 索 360 新 闻 搜 索 等 2.3.1.2 贴 吧 论 坛 采 集 浪 潮 舆 情 云 监 测 系 统 全 面 支 持 论 坛 贴 吧 信 息 采 集, 浪 潮 舆 情 云 监 测 系 统 支 持 论 坛 各 板 块 的 信 息 采 集, 目 前 支 持 一 次 性 采 集 一 次 性 采 集 与 新 闻 类 似, 每 个 帖 子 采 集 后 不 在 跟 踪, 下 次 采 集 只 访 问 新 增 的 主 贴 这 种 策 略 的 好 处 是 性 能 高, 主 要 内 容 一 般 不 会 漏 掉, 因 为 重 要 内 容 一 般 是 在 主 贴 发 布 第 11 页 共 35 页
支 持 SSO, 国 内 大 的 论 坛 部 分 会 跨 多 台 服 务 器, 系 统 支 持 在 多 个 论 坛 间 实 现 SSO 访 问, 虽 然 此 功 能 对 用 户 来 说 不 明 显, 但 是 在 访 问 论 坛 时 可 以 避 免 了 重 复 登 陆, 优 化 了 性 能 浪 潮 舆 情 云 监 测 系 统 支 持 封 闭 论 坛 采 集, 即 支 持 采 集 需 要 注 册 账 号 论 坛 中 的 信 息 浪 潮 舆 情 云 监 测 系 统 整 体 配 置 简 单 快 捷, 方 便 用 户 维 护, 支 持 可 视 化 配 置 2.3.1.3 博 客 微 博 采 集 浪 潮 舆 情 云 监 测 系 统 可 对 博 客 进 行 抓 取, 也 可 和 论 坛 一 样 持 续 跟 踪 浪 潮 舆 情 云 监 测 系 统 同 样 支 持 一 次 性 采 集, 一 次 性 采 集 即 仅 抓 取 采 集 时 刻 的 网 页 快 照 使 用 独 特 的 js 脚 本 引 擎 解 析 支 持 新 浪 腾 讯 搜 狐 网 易 人 民 凤 凰 移 动 天 涯 和 讯 Twitter 等 微 博 平 台 的 全 网 抓 取, 数 据 时 效 性 在 5 分 钟 之 内 浪 潮 舆 情 云 监 测 系 统 支 持 微 博 图 片 采 集, 如 果 同 时 发 布 了 图 片 可 以 与 文 字 一 起 采 集 2.3.1.4 数 据 存 储 作 为 对 采 集 信 息 的 信 息 加 工 服 务 之 一, 浪 潮 舆 情 云 监 测 系 统 支 持 采 集 网 页 之 后 提 取 其 正 文 内 容 和 智 能 摘 要, 在 此 基 础 上 可 以 选 定 一 个 或 多 个 信 息 批 量 导 出 到 Word Excel 文 本 文 件 等 文 件 中, 从 而 更 好 的 被 信 息 处 理 人 员 利 用 浪 潮 舆 情 云 监 测 系 统 支 持 保 存 采 集 的 信 息 的 快 照, 相 关 图 片, 以 及 全 文 索 引 浪 潮 舆 情 云 监 测 系 统 支 持 在 多 台 服 务 器 保 存 数 据, 数 据 存 取 采 用 分 布 式 存 取 方 第 12 页 共 35 页
式, 通 过 对 分 布 式 存 储 的 支 持, 使 系 统 具 有 了 更 大 的 横 向 扩 展 能 力, 从 而 支 持 保 存 更 长 时 间 的 数 据 2.3.1.5 功 能 特 点 总 结 维 护 人 员 可 方 便 指 定 采 集 的 目 标 站 点 或 页 面 采 用 多 线 程 并 发 搜 索 技 术, 采 集 过 程 高 效 准 确 提 供 高 效 的 更 新 手 段, 已 经 采 集 过 的 信 息 不 会 重 复 采 集, 更 新 时 只 获 取 前 次 采 集 后 更 新 的 网 页 维 护 人 员 可 方 便 设 定 信 息 监 测 的 时 间 周 期 采 集 源 定 义, 分 解 为 网 站 名 和 频 道 名, 使 来 源 属 性 更 为 准 确 支 持 对 采 集 的 网 页 信 息 进 行 自 动 分 类 自 动 过 滤 网 页 中 新 闻 的 正 文 内 容, 剔 除 垃 圾 信 息 自 动 提 取 网 页 中 的 属 性 信 息, 包 括 时 间 来 源 等 支 持 对 网 页 中 表 格 内 容 的 自 动 判 断 和 获 取 对 于 论 坛 内 容, 能 够 对 主 帖 和 回 帖 分 别 抓 取, 并 可 按 需 要 进 行 合 并 和 关 联, 论 坛 内 容 一 般 还 包 括 标 题 关 键 词 作 者 来 源 时 间 评 论 数 回 复 数 等 关 键 信 息 在 海 外 部 署 有 服 务 器, 可 对 海 外 重 点 网 站 实 施 7*24 小 时 全 面 监 控 可 以 采 集 网 页 中 的 图 片, 并 在 正 文 中 标 记 图 片 的 位 置 ; 采 集 过 程 成 熟 可 靠, 容 错 性 强, 完 成 初 始 设 定 后 可 长 时 间 稳 定 运 行 提 供 数 据 导 出 和 数 据 导 入 功 能, 可 实 现 与 其 它 系 统 文 件 级 的 信 息 共 享, 并 为 实 现 与 其 他 系 统 数 据 交 换 提 供 了 技 术 支 持 第 13 页 共 35 页
增 加 了 线 程 的 采 集 延 时 设 置, 实 现 对 采 集 目 标 的 采 集 强 度 控 制 采 集 程 序 内 存 管 理 更 为 科 学, 加 强 了 运 行 的 稳 定 性 和 可 靠 性 2.3.2 信 息 处 理 垃 圾 信 息 过 滤 : 基 于 机 器 学 习 的 垃 圾 过 滤 机 制 可 以 自 动 过 滤 广 告 水 贴 等 无 效 垃 圾 信 息 智 能 去 重 : 采 用 文 章 相 似 性 技 术, 根 据 文 档 内 容 的 匹 配 程 度 确 定 是 否 重 复 去 重 的 级 别 ; 根 据 不 同 的 需 要 特 点 分 为 :URL 去 重 标 题 去 重 正 文 去 重 三 个 级 别 HTML 内 容 提 取 : 采 用 自 主 知 识 产 权 的 HTML 网 页 文 本 萃 取 技 术 自 动 提 取 任 意 复 杂 网 页 中 的 标 题 内 容 作 者 发 布 时 间 等 信 息, 自 动 跟 踪 文 章 分 页 ; 对 于 论 坛 信 息 自 动 分 析 主 贴 回 帖 以 及 作 者 等 信 息 快 照 保 存 : 对 于 每 个 经 过 抓 取 和 处 理 的 网 页, 系 统 都 存 有 一 个 纯 文 本 的 备 份, 方 便 用 户 快 速 浏 览, 也 方 便 用 户 查 看 被 删 除 的 文 章 或 帖 子 2.3.2.1 内 容 去 噪 浪 潮 舆 情 云 监 测 系 统 支 持 智 能 去 噪 与 精 确 去 噪 智 能 去 噪 可 以 大 大 减 少 配 置 工 作 量, 如 对 搜 索 引 擎 返 回 的 页 面 的 分 析 智 能 去 噪 支 持 基 于 页 面 分 析 的 与 基 于 多 页 面 统 计 的, 可 适 应 大 多 数 网 站, 对 于 极 少 数 不 规 范 网 站 也 可 采 用 智 能 分 析 精 确 匹 配 的 去 噪 可 以 取 得 最 好 的 效 果, 实 现 完 美 去 噪, 但 是 配 置 工 作 量 稍 大 采 用 自 动 过 滤 技 术, 利 用 网 页 结 构 分 析, 自 动 分 析 有 用 的 网 页, 自 动 提 取 元 第 14 页 共 35 页
数 据, 自 动 过 滤 掉 不 需 要 采 集 的 网 页 和 媒 体 文 件, 有 效 避 免 垃 圾 信 息 的 下 载 以 及 对 带 宽 的 浪 费 利 用 自 动 过 滤 技 术, 滤 除 网 页 中 广 告 版 权 栏 目 等 无 用 信 息, 并 能 自 动 识 别 网 页 真 正 的 标 题 ( 很 多 网 页 都 以 New Page 来 标 识 ), 同 时 保 存 网 页 中 与 正 文 相 关 的 表 格 和 图 片, 识 别 正 文 中 嵌 入 的 广 告 去 噪 后 : 第 15 页 共 35 页
2.3.2.2 自 动 分 类 浪 潮 舆 情 云 监 测 系 统 采 用 自 动 分 类 技 术, 可 以 按 统 计 进 行 分 类, 创 建 专 有 的 分 类 模 型, 支 持 多 分 类 浪 潮 舆 情 云 监 测 系 统 支 持 基 于 统 计 的 分 类 与 基 于 规 则 的 分 类, 基 于 统 计 或 者 说 基 于 机 器 学 习 的 分 类, 再 准 备 好 已 分 类 好 文 章 的 基 础 上, 系 统 对 这 些 文 章 进 行 学 习, 统 计 出 关 键 特 征, 在 利 用 这 些 特 征 对 文 本 进 行 分 类, 这 种 办 法 有 点 是 自 适 应 性 强, 可 适 应 未 知 情 况, 有 新 的 情 况, 仅 需 修 改 语 料, 再 次 学 习 即 可 基 于 规 则 的 分 类, 简 单 说 是 基 于 关 键 字 的 分 类, 可 设 置 复 杂 条 件, 符 合 一 定 条 件 就 归 属 某 个 类 别 自 动 分 类 准 确 率 达 到 90% 以 上, 满 足 大 多 数 应 用 的 实 用 要 求 支 持 复 分, 一 篇 文 章 能 分 入 多 个 符 合 条 件 的 分 类 用 户 可 以 自 由 维 护 分 类 词 表, 人 工 添 加 或 修 改 规 则, 词 表 大 小 没 有 限 制 用 户 可 设 置 任 意 多 个 分 类 规 则 第 16 页 共 35 页
正 面 信 息 与 负 面 信 息 2.3.2.3 自 动 排 重 基 于 自 然 语 言 处 理 技 术, 浪 潮 舆 情 云 监 测 系 统 根 据 文 章 内 容 相 似 程 度 计 算 相 似 文 章, 方 便 获 取 同 一 内 容 文 章 的 所 有 传 播 网 站 采 用 文 章 相 似 性 技 术, 根 据 文 档 内 容 的 匹 配 程 度 确 定 是 否 重 复 去 重 的 级 别 ; 根 据 不 同 的 需 要 特 点 分 为 : URL 去 重 标 题 去 重 正 文 去 重 三 个 级 别 在 详 细 信 息 列 表 里, 分 为 过 滤 与 不 过 滤, 展 示 相 关 文 章 2.3.2.4 自 动 摘 要 浪 潮 舆 情 云 监 测 系 统 支 持 文 章 的 自 动 摘 要 技 术, 使 读 者 可 快 速 掌 握 文 章 内 容 更 重 要 的, 通 过 文 章 的 摘 要, 系 统 可 更 加 准 确 的 判 断 文 章 的 中 心 内 容 从 而 大 大 避 免 垃 圾 信 息 新 闻 : 谷 歌 眼 镜 周 二 发 售 可 穿 戴 热 浪 再 起 的 摘 要 第 17 页 共 35 页
2.3.2.5 多 语 言 支 持 浪 潮 舆 情 云 监 测 系 统 支 持 多 种 语 言 页 面 信 息 的 采 集, 包 括 简 体 中 文 繁 体 中 文 英 文 维 语 藏 语 等 语 言 在 数 据 库 中 网 页 信 息 应 以 统 一 的 内 码 存 储, 因 此 对 采 集 的 网 页 信 息 需 要 统 一 进 行 内 码 转 换 处 理 网 页 统 一 存 储 的 内 码 可 以 选 择 GBK,GB18030 或 者 Unicode 等 不 论 选 择 哪 种 内 码 作 为 存 储 标 准, 都 需 要 把 各 种 网 页 内 码 统 一 转 换 成 标 准 内 码 2.3.3 信 息 分 析 文 章 权 重 计 算 : 浪 潮 舆 情 云 监 测 系 统 综 合 网 站 重 要 程 度 文 章 出 现 位 置 主 题 相 关 度 危 机 程 度 点 击 回 复 次 数 传 播 数 量 以 及 用 户 自 定 义 规 则 等 复 杂 参 数 计 算 的 文 章 权 重, 加 上 基 于 自 然 语 言 处 理 技 术 的 训 练 系 统, 能 准 确 分 析 出 重 要 舆 情 信 息 传 播 轨 迹 分 析 : 浪 潮 舆 情 云 监 测 系 统 可 以 对 于 重 点 舆 情 信 息 的 舆 情 信 息 进 行 分 析, 展 示 重 点 舆 情 的 传 播 时 间 传 播 路 径 等 舆 情 预 警 : 浪 潮 舆 情 云 监 测 系 统 可 呈 现 预 警 信 息 走 势 和 预 警 信 息 列 表 建 立 多 个 舆 情 指 标, 对 于 突 发 舆 情 自 动 发 出 预 警 信 号, 在 第 一 时 间 通 过 邮 件 方 式 通 知 用 户, 辅 助 进 行 舆 情 干 预 和 引 导 媒 体 覆 盖 分 析 : 浪 潮 舆 情 云 监 测 系 统 可 以 对 监 测 信 息 的 媒 体 类 型 情 况 进 行 展 示, 同 时 对 信 息 的 主 要 传 播 媒 体 自 动 识 别, 进 行 整 合 分 析, 以 图 表 呈 现 第 18 页 共 35 页
2.3.3.1 热 点 ( 主 题 ) 发 现 利 用 相 似 性 检 索 技 术, 通 过 转 载 点 击 评 论 回 复 和 报 道 率 等 数 值, 发 现 新 闻 热 点 关 键 词 热 点 专 题 热 点 等 热 点 发 现 的 难 点 在 于 围 绕 一 个 主 题 的 不 同 信 息 的 聚 合, 即 基 于 专 题 的 热 点 分 析 排 名, 这 种 方 式 实 现 需 要 采 用 模 型 结 合 关 键 词 的 方 式, 模 型 方 式 不 容 易 漏 检, 但 建 模 复 杂, 关 键 词 方 式 准 确, 但 不 容 易 覆 盖 全 部 内 容, 二 者 结 合 可 以 实 现 有 益 的 互 补 2.3.3.2 传 播 路 径 分 析 发 现 文 章 传 播 路 径 第 19 页 共 35 页
2.3.3.3 网 页 快 照 对 抓 取 的 页 面, 系 统 生 成 快 照 保 存 在 本 地 2.3.3.4 主 题 追 踪 对 于 网 络 上 的 某 一 条 信 息, 可 设 定 个 人 主 题 追 踪 线 索, 指 定 过 去 和 未 来 的 追 踪 时 段, 一 方 面 提 取 以 往 信 息, 另 一 方 面 当 该 信 息 有 后 续 的 相 关 报 导 的 话, 会 显 示 在 定 制 的 追 踪 栏 目 中 第 20 页 共 35 页
2.3.3.5 监 听 预 警 预 警 条 件 实 时 对 网 络 上 的 舆 情 信 息 进 行 监 测, 新 产 生 的 舆 情 信 息, 或 者 已 有 舆 情 产 生 了 新 的 转 载, 新 的 跟 帖 等 变 化, 都 会 在 第 一 时 间 采 集 过 来, 反 映 在 系 统 当 中, 并 及 时 通 知 舆 情 工 作 人 员 自 动 发 现 热 点, 重 点 舆 情 通 过 站 内 消 息 手 机 短 信 邮 件 通 知 等 方 式 预 警 当 出 现 突 发 的 舆 情 信 息 时, 需 要 在 第 一 时 间 里 通 知 不 在 现 场 的 人 员, 在 热 点 信 息 突 发 时, 系 统 会 自 动 启 动 短 信 发 送 任 务, 将 该 热 点 信 息 发 送 到 指 定 用 户 / 用 户 组 的 手 机 上 预 警 方 式 系 统 内 建 一 系 列 敏 感 词 表, 当 分 析 后 的 舆 情 信 息 的 敏 感 词 权 重 超 过 一 定 阀 值 后, 系 统 自 动 触 发 舆 情 预 警 机 制 预 警 包 括 对 突 发 事 件 预 警 涉 及 安 全 的 敏 感 话 题 以 及 用 户 业 务 领 域 内 的 一 些 自 定 义 预 警 舆 情 预 警 方 式 有 桌 面 (c/s) 预 警 ( 对 管 理 员 弹 出 提 示 框 体 ) 短 信 预 警 邮 件 预 警 等 提 醒 舆 情 分 析 人 员 2.3.3.6 趋 势 分 析 通 过 图 表 展 示 指 定 分 类 信 息 和 时 间 的 分 布 关 系 以 及 趋 势 分 析, 包 括 地 域 信 息 分 布 以 提 供 阶 段 性 的 分 析 系 统 以 图 形 化 方 式 展 示 一 段 时 间, 在 媒 体 上 总 的 信 息 数 量, 也 可 支 持 某 类 信 息 在 具 体 ( 如 论 坛 ) 种 类 媒 体 上 的 发 展 趋 势 第 21 页 共 35 页
2.3.3.7 统 计 分 析 站 点 分 布 察 看 涉 及 到 某 种 信 息 在 指 定 站 点 上 的 信 息 情 况, 包 括 总 数, 分 栏 目 数 量 等 使 用 户 可 在 宏 观 上 某 站 点 的 信 息 数 量 有 总 的 了 解 分 类 信 息 分 类 统 计, 提 供 各 分 类 的 信 息 数 量, 使 用 户 把 握 各 分 类 的 信 息 的 活 跃 程 度 第 22 页 共 35 页
站 点 正 负 面 信 息 统 计 2.3.4 信 息 展 示 WEB 客 户 界 面 : 基 于 云 计 算 模 式, 用 户 可 以 使 用 WEB 浏 览 器 随 时 登 录 浪 潮 舆 情 云 监 测 系 统, 在 客 户 界 面 对 舆 情 状 况 进 行 全 面 的 了 解 客 户 界 面 包 含 : 最 新 预 警 舆 情 走 势 最 新 微 博 信 息 分 类 舆 情 载 体 覆 盖 情 况 等 主 要 内 容, 并 以 列 表 及 图 表 等 可 视 化 方 式 呈 现, 方 便 客 户 查 看 导 航 栏 清 晰 明 了, 方 便 用 户 查 看 各 种 分 类 ; 支 持 关 键 词 组 分 类 媒 体 类 型 分 类 信 息 属 性 分 类 查 看 舆 情 分 析 报 告 : 根 据 舆 情 分 析 引 擎 处 理 后 的 结 果 库 生 成 报 告, 客 户 可 通 过 浏 览 器 浏 览, 并 且 可 以 导 出 生 成 为 Word PDF 等 格 式 的 本 地 文 档 方 便 客 户 对 不 同 时 段 的 重 点 和 热 点 以 及 对 事 件 舆 情 数 据 的 把 握 第 23 页 共 35 页
2.3.4.1 首 页 浪 潮 舆 情 云 监 测 系 统 首 页, 使 用 户 可 全 面 了 解 系 统 最 新 信 息, 同 时 给 出 近 期 趋 势 图 与 相 应 热 点 浪 潮 舆 情 云 监 测 系 统 支 持 多 浏 览 器, 满 足 用 户 浏 览 器 使 用 多 元 化 趋 势 2.3.4.2 舆 情 报 告 浪 潮 舆 情 云 监 测 系 统 根 据 舆 情 分 析 引 擎 处 理 后 的 结 果 库 生 成 报 告, 用 户 可 通 过 浏 览 器 浏 览, 提 供 信 息 检 索 功 能, 根 据 指 定 条 件 对 热 点 话 题 倾 向 性 进 行 查 询, 并 浏 览 信 息 的 具 体 内 容, 提 供 决 策 支 持 2.3.4.3 简 报 形 式 浪 潮 舆 情 云 监 测 系 统 按 需 要 提 供 及 时 报, 及 日 周 月 等 不 同 周 期 的 报 告, 不 同 报 告 说 明 如 下 : 及 时 报 : 当 有 重 大 突 发 事 件 时 及 时 对 事 件 主 题 进 行 报 导, 展 示 发 展 趋 势 分 布 传 播 链 日 报 : 当 日 热 点 信 息 描 述 周 报 : 本 周 热 点 信 息 描 述 及 统 计 图 表 月 报 : 本 月 热 点 信 息 描 述 及 统 计 图 表 第 24 页 共 35 页
2.3.4.4 简 报 模 版 定 制 简 报 的 及 时 报 周 报 和 月 报 中 包 含 大 量 图 形 信 息, 这 些 信 息 都 将 以 模 块 的 方 式, 在 简 报 编 辑 过 程 中 进 行 调 用, 可 设 定 相 关 参 数, 如 时 间 段 时 间 颗 粒 度, 统 计 坐 标, 然 后 自 动 生 成 图 形 并 插 入 简 报 文 档 中 2.3.4.5 简 报 格 式 转 换 式 为 了 方 便 打 印 输 出, 报 告 完 成 后, 可 以 导 出 至 Word excel 和 PDF 等 文 档 形 2.3.4.6 简 报 推 送 结 合 邮 件 系 统 和 短 信 猫, 可 以 实 现 以 E-mail 和 短 信 等 多 种 方 式 发 送 报 告 和 突 发 性 的 及 时 报 2.3.5 其 他 2.3.5.1 舆 情 个 性 化 展 示 门 户 浪 潮 舆 情 云 监 测 系 统 提 供 面 向 个 人 的 可 定 制 的 个 性 化 展 示 页 面, 可 以 将 系 统 第 25 页 共 35 页
发 布 的 热 点 信 息 专 题 信 息 聚 类 关 联 词 语 预 警 统 计 等 各 种 信 息 进 行 组 织 和 调 整, 可 进 行 模 块 的 增 加 删 除 浪 潮 舆 情 云 监 测 系 统 不 仅 支 持 PC 端 查 看 舆 情 信 息, 同 时 支 持 Andriod 系 统 IOS 系 统, 手 持 移 动 终 端 可 随 时 查 看 舆 情 信 息 2.3.5.2 外 部 接 口 与 数 据 导 入 导 出 浪 潮 舆 情 云 监 测 系 统 开 放 外 部 接 口, 实 现 信 息 共 享 浪 潮 舆 情 云 监 测 系 统 支 持 分 析 结 果 和 简 报 等 数 据 的 导 出 功 能, 并 支 持 word pdf 等 多 种 格 式 第 26 页 共 35 页
第 三 章 技 术 优 势 3.1 技 术 成 熟 性 浪 潮 舆 情 云 监 测 系 统, 采 用 了 成 熟 的 先 进 技 术, 对 浪 潮 舆 情 云 监 测 系 统 的 关 键 技 术 在 前 期 的 工 作 中 进 行 了 大 量 实 验 和 攻 关 及 原 型 建 立, 并 在 客 户 环 境 中 得 到 了 较 好 的 应 用 而 且, 浪 潮 舆 情 云 监 测 系 统 所 选 取 的 硬 件 平 台 和 软 件 平 台, 是 具 有 良 好 的 技 术 支 持 和 发 展 前 途 的 成 熟 产 品 先 进 的 云 计 算 技 术 : 网 络 舆 情 监 测 运 营 云 平 台 与 舆 情 客 户 端 配 套 使 用 自 主 研 发 智 能 爬 虫 : 自 主 研 发 的 智 能 网 络 爬 虫 (spider) 系 统, 不 留 痕 迹 多 种 信 息 监 控, 封 闭 系 统 也 能 监 控 : 新 闻 论 坛 博 客 微 博 贴 吧 问 答 QQ 群, 甚 至 需 要 登 录 才 能 查 看 的 封 闭 论 坛 都 能 监 控 监 控 范 围 广 : 全 网 爬 虫 技 术 和 重 点 网 站 定 向 监 测 垃 圾 信 息 自 动 过 滤 : 无 关 信 息 垃 圾 贴 广 告 信 息 自 动 过 滤 技 术, 让 信 息 精 准 无 误 时 效 性 强 : 重 点 网 站 5 分 钟 即 可 发 现 信 息 客 户 即 时 提 醒,5 分 钟 内 通 告 用 户 独 有 的 信 息 权 重 算 法 : 根 据 网 站 重 要 性 文 章 重 要 性 主 题 相 关 度 信 息 危 机 度 等 多 种 指 标 综 合 计 算 的 信 息 权 重, 重 要 信 息 一 目 了 然 智 能 相 似 文 章 算 法 : 标 题 和 内 容 做 了 一 定 修 改 的 文 章 也 能 自 动 判 断 为 相 似, 并 生 成 传 播 轨 迹 自 动 分 类 与 情 感 判 断 : 将 自 然 语 言 处 理 技 术 应 用 于 系 统, 对 信 息 精 准 分 类, 第 27 页 共 35 页
并 自 动 做 情 感 分 析 机 器 学 习 技 术 让 系 统 越 用 越 智 能 3.2 业 务 需 求 可 靠 性 符 合 我 国 现 行 法 律 法 规 的 规 定 和 要 求 ; 并 且, 有 机 地 融 合 了 集 中 和 分 布 两 种 模 式 的 模 块 化 平 台 化 的 应 用 软 件, 不 仅 可 以 满 足 业 务 方 面 的 各 种 需 求, 而 且, 还 能 够 较 好 地 解 决 业 务 需 求 可 能 面 临 的 扩 充 及 变 动, 具 有 较 好 的 通 用 性 与 灵 活 的 扩 展 及 升 级 能 力 第 四 章 服 务 安 全 性 4.1 身 份 认 证 浪 潮 舆 情 云 监 测 系 统, 采 用 用 户 名 密 码 及 验 证 码 的 方 式 确 认 用 户 是 否 为 合 法 的 用 户, 系 统 通 过 核 对 用 户 输 入 的 用 户 名 口 令 及 验 证 码, 看 其 是 否 与 系 统 中 存 储 的 该 用 户 的 用 户 名 和 口 令 一 致, 来 判 断 用 户 身 份 是 否 正 确 4.2 用 户 授 权 浪 潮 舆 情 云 监 测 系 统, 是 通 过 用 户 管 理 员 及 用 户 的 模 式 对 整 个 舆 情 云 监 测 系 第 28 页 共 35 页
统 进 行 运 维, 用 户 管 理 员 可 对 用 户 的 权 限 进 行 设 置, 如 关 键 词 的 管 理 报 告 的 设 置 等, 同 时 用 户 管 理 员 可 通 过 账 号 查 询 运 维 人 员 的 运 维 操 作 用 户 描 述 : 使 用 系 统 的 人 员 权 限 : 仅 能 查 看 自 己 的 数 据 信 息, 并 对 系 统 中 的 关 键 词 等 设 置 进 行 管 理 维 护 用 户 管 理 员 描 述 : 针 对 某 组 织 具 有 多 账 户 的 情 况, 该 组 织 的 管 理 员 账 户 权 限 : 可 查 看 指 定 组 织 的 信 息, 并 对 指 定 组 织 的 数 据 信 息 进 行 管 理 维 护, 并 可 开 通 注 册 新 的 组 织 用 户 数 据 第 29 页 共 35 页
4.3 密 码 管 理 浪 潮 舆 情 云 监 测 系 统, 对 用 户 的 密 码 进 行 了 各 种 策 略 的 设 定, 包 括 密 码 强 度 密 码 锁 定 密 码 修 改 策 略 密 码 强 度 策 略 : 需 要 符 合 密 码 复 杂 性 原 理, 系 统 限 定 用 户 的 密 码 必 须 是 6 位 以 上, 系 统 自 动 检 测 密 码 复 杂 度, 检 测 值 必 须 达 到 80 及 以 上 ( 至 少 需 要 6 位 以 上, 含 有 字 母 数 字 大 写 字 母 或 者 特 殊 符 号 ) 才 能 修 改 成 功 密 码 锁 定 策 略 : 当 用 户 的 密 码 输 入 错 误 次 数 达 到 5 次, 用 户 账 号 将 被 锁 定, 15 分 钟 之 后 才 可 重 新 登 录 密 码 找 回 / 重 置 策 略 : 为 保 障 账 号 的 安 全 性, 目 前 系 统 不 提 供 密 码 找 回 / 重 置 策 略, 需 要 客 户 联 系 客 服 处 理, 客 户 登 录 后 可 以 自 己 修 改 自 己 的 密 码 密 码 修 改 策 略 : 客 户 登 录 系 统 后 可 以 自 己 修 改 账 号 的 密 码, 但 需 要 输 入 当 前 密 码 做 验 证 处 理, 设 置 的 密 码 必 须 达 到 系 统 设 置 的 密 码 强 度 要 求 第 30 页 共 35 页
4.4 数 据 传 输 加 密 不 适 用 4.5 数 据 存 储 加 密 数 据 存 储 : 数 据 存 储 采 用 主 流 的 分 库 分 表 技 术, 每 个 用 户 使 用 独 立 的 数 据 库 存 储 自 身 数 据 ; 同 时 也 便 于 在 用 户 数 据 量 大 增 情 况 下, 横 向 和 纵 向 扩 充 数 据 库 存 储 空 间 数 据 加 密 : 不 适 用 浪 潮 舆 情 云 监 测 系 统, 是 利 用 爬 虫 及 搜 索 引 擎 技 术 实 时 监 测 新 闻 论 坛 博 客 微 博 平 媒 等 网 络 舆 情 信 息, 这 些 数 据 是 互 联 网 上 已 公 开 的 信 息, 所 以 不 存 在 数 据 加 密 的 需 求 4.6 数 据 备 份 针 对 浪 潮 舆 情 云 监 测 系 统, 我 们 采 用 如 下 备 份 策 略 : 第 31 页 共 35 页
备 份 方 式 : 完 全 备 份 + 增 量 备 份 周 一 周 二 周 三 周 四 周 五 周 六 进 行 增 量 备 份, 每 周 日 进 行 一 周 的 全 备 份, 具 体 示 意 图 如 下 第 一 周 周 一 周 二 周 三 周 四 周 五 周 六 周 日 第 二 周 第 三 周 第 四 周 周 完 全 备 份 增 量 备 份 备 份 周 期 : 四 周 备 份 数 据 存 储 方 式 及 位 置 : 本 地 数 据 中 心 存 储 硬 盘 可 以 看 出, 祖 - 父 - 子 循 环 策 略 为 全 年 的 数 据 提 供 了 全 面 的 保 护 本 周 数 据 每 天 均 有 备 份, 本 月 数 据 每 周 均 有 备 份, 超 过 一 个 月 每 月 均 有 备 份, 无 论 想 恢 复 系 统 在 任 何 时 期 的 数 据, 都 可 以 方 便 地 恢 复 通 过 对 每 日 备 份 的 日 盘 和 每 周 备 份 的 周 盘 所 属 的 介 质 集 设 置 覆 盖 保 护 周 期 及 附 加 周 期, 即 可 实 现 一 个 月 后 磁 盘 的 循 环 使 用 同 时 保 证 能 够 恢 复 一 个 月 内 任 何 一 天 的 数 据 4.7 数 据 删 除 保 护 系 统 设 有 自 动 生 成 舆 情 报 告 功 能, 通 过 开 启 自 动 生 成 报 告 功 能, 用 户 可 对 报 告 进 行 设 置, 将 账 号 中 与 用 户 设 置 条 件 相 匹 配 的 数 据 自 动 加 入 报 告 中, 并 发 送 至 用 户 邮 箱 用 户 在 删 除 数 据 时, 系 统 会 给 用 户 提 示 是 否 要 删 除 数 据, 实 现 数 据 的 删 除 保 护 功 能, 即 时 用 户 误 删 除 了 数 据, 也 可 通 过 在 日 报 中 查 看 相 对 应 的 数 据 第 32 页 共 35 页
报 告 设 置 下 面 以 具 体 示 例 说 明 数 据 删 除 保 护 措 施 : 1 从 账 号 中 搜 索 到 网 易 新 闻 中 标 题 为 : 气 韵 生 动 中 国 当 代 艺 术 邀 请 展 续 写 海 上 丝 绸 之 路 传 奇 URL 为 : http://book.163.com/15/1105/17/b7m2f50g009244e6.html 的 数 据, 对 应 于 2015-11-05 日 报 告 中 的 第 一 条 数 据, 如 下 图 : 数 据 搜 索 第 33 页 共 35 页
对 应 日 报 中 数 据 2 对 该 条 数 据 进 行 删 除, 系 统 给 出 提 示 信 息, 如 下 图 : 删 除 提 示 删 除 成 功 数 据 删 除 日 志 第 34 页 共 35 页
3 在 账 号 中 根 据 此 信 息 的 URL 进 行 搜 索, 显 示 无 此 数 据, 如 下 图 : 搜 索 提 示 4 再 次 查 看 2015-11-05 日 的 报 告 仍 有 此 信 息, 如 下 图 : 第 35 页 共 35 页