第 一 讲 搜 索 引 擎 与 网 络 学 习 李 显 辉 (shining@xmu.edu.cn) 厦 门 大 学 图 书 馆 2015 年 09 月 22 日. All Rights Reserved
引 子 平 时 首 选 的 搜 索 引 擎 是? 关 于 搜 索 引 擎 发 展 史 关 于 Google ncr 关 于 搜 商 2
培 训 目 标 建 立 搜 索 意 识, 掌 握 搜 索 引 擎 使 用 技 巧, 学 习 初 步 的 信 息 评 析 方 法 主 要 搜 索 引 擎 :Google Baidu Bing 360
内 容 提 纲 搜 索 引 擎 的 分 类 : 从 电 脑 文 献 管 理 说 起 搜 索 引 擎 工 作 原 理 与 异 同 搜 索 原 则 与 技 巧 进 阶 Google 实 用 搜 索 语 法 搜 索 引 擎 的 未 来 发 展 趋 势 4
搜 索 引 擎 的 分 类 目 录 索 引 全 文 搜 引 元 搜 索 引 擎. All Rights Reserved
从 电 脑 文 献 管 理 说 起 树 状 结 构 层 级 文 件 夹 分 类 整 理 人 工 索 引 型 搜 索 引 擎 :Yahoo 关 键 词 直 接 搜 索 自 动 索 引 型 搜 索 引 擎 :Google Baidu 6
1. 人 工 索 引 搜 索 引 擎 导 引 与 浏 览 目 录 索 引 (directory) 类 搜 索 引 擎 : 由 人 工 完 成 对 网 络 信 息 的 分 类 与 索 引, 只 要 找 到 相 关 目 录, 就 完 全 可 以 找 到 相 关 的 网 站 优 势 : 检 索 结 果 的 准 确 性 适 用 于 找 面 ( 具 体 某 一 范 围 ) 的 信 息 要 求 7
目 录 索 引 使 用 步 骤 1 雅 虎 网 页 目 录 :http://dir.yahoo.com 根 据 信 息 要 求 找 准 目 录 项 8
目 录 索 引 使 用 步 骤 2 9
目 录 索 引 使 用 步 骤 3 10
2. 自 动 索 引 搜 索 引 擎 检 索 全 文 搜 索 引 擎 工 作 原 理 抓 取 网 页 建 立 索 引 数 据 库 在 数 据 库 中 按 特 定 排 序 储 存 网 页 11
3. 元 搜 索 引 擎 集 合 式 搜 索 引 擎 多 引 擎 检 索 特 点 : 本 身 一 般 没 有 索 引 数 据 库, 搭 建 平 台 跨 搜 引 搜 索 工 具, 集 众 家 之 长 常 用 元 搜 索 引 擎 :Dogpile Clusty Vivisimo 12
搜 索 引 擎 工 作 原 理 与 异 同 抓 取 和 索 引 编 制 算 法 反 垃 圾 内 容. All Rights Reserved
搜 索 引 擎 的 工 作 原 理 ( 以 Google 为 例 ) 抓 取 与 索 引 编 制 搜 索 爬 虫 :Googlebot 网 站 所 有 者 的 可 选 择 以 索 引 形 式 整 理 信 息 算 法 : 你 需 要 的 是 答 案, 而 非 网 页 200 多 个 因 素 决 定 搜 索 结 果 和 结 果 排 序 PageRank 反 垃 圾 内 容 计 算 机 检 查 与 手 动 检 查 相 配 合 演 示 网 址 主 页 Web Search How Search Works 14
搜 索 引 擎 的 异 同 搜 索 引 擎 在 细 节 上 有 差 异 采 集 范 围 和 数 量 异 同 索 引 方 法 不 同 反 馈 结 果 的 数 量 不 同 排 序 方 式 不 同 交 互 体 验 不 同 结 果 输 出 格 式 不 同 共 同 的 追 求 目 标 : 快 速 地 帮 助 用 户 找 到 最 有 价 值 的 信 息 15
附 :Google 的 Page Rank 技 术 Page Rank, 是 网 站 的 质 量 等 级 它 依 靠 一 系 列 标 准 计 算, 当 我 们 在 Google 搜 索 关 键 词 的 时 候, 页 面 等 级 高 的 网 页 排 序 会 越 靠 前 Page Rank 的 最 初 想 法 源 于 论 文 档 案 的 管 理 : 论 文 被 引 用 次 数 与 质 量 成 正 比 PageRank 能 够 对 网 页 的 重 要 性 做 出 客 观 的 评 价 PageRank 并 不 计 算 直 接 链 接 的 数 量, 而 是 将 从 网 页 A 指 向 网 页 B 的 链 接 解 释 为 由 网 页 A 对 网 页 B 所 投 的 一 票 Google 不 仅 评 估 网 页 B 收 到 的 投 票 数 量, 还 会 考 虑 每 个 投 票 网 站 的 重 要 性 16
附 :Google 的 Page Rank 技 术 Page Rank 的 主 要 指 标 : 指 向 你 的 网 站 的 超 链 接 数 量 ( 你 的 网 站 被 别 人 引 用 ), 数 值 越 大, 表 示 你 的 网 站 越 重 要 超 链 接 你 的 网 站 的 重 要 程 度, 意 思 就 是 一 个 质 量 好 的 网 站 有 你 的 网 站 的 超 链 接, 说 明 你 的 网 站 也 很 优 秀 网 页 特 定 性 因 素 : 包 括 网 页 的 内 容 标 题 及 URL 等, 也 就 是 网 页 的 关 键 词 及 位 置 17
搜 索 原 则 与 技 巧 进 阶. All Rights Reserved
搜 索 原 则 一 : 关 于 检 索 词 有 代 表 性 的 专 有 名 词 词 的 专 业 性 : 简 而 精, 避 免 宽 泛, 简 化 搜 索 结 果 词 的 代 表 性 : 它 包 含 在 所 需 网 页 中, 最 能 代 表 你 的 信 息 搜 索 要 求 双 词 检 索 原 则 : 细 化 搜 索 条 件 搜 索 条 件 越 具 体, 返 回 结 果 越 精 确 19
搜 索 原 则 二 三 四 持 续 搜 索, 不 单 纯 为 了 搜 索, 而 为 了 探 索 学 习 多 关 注 搜 索 结 果 的 后 续 页 面, 不 要 只 停 留 在 第 一 页 从 之 前 搜 索 到 的 页 面 提 取 新 关 键 词, 进 行 新 的 搜 索 要 带 有 批 评 精 神, 搜 索 引 擎 不 是 万 能 自 我 判 断 筛 选 信 息 多 个 信 息 源 的 相 互 参 照 与 求 证 20
基 本 技 巧 : 了 解 搜 索 主 页 分 类 搜 索 功 能 新 闻 图 片 网 页 到 图 书 专 利 学 术 信 息 等 搜 索 结 果 展 示 广 告 推 广 内 容 是 否 高 亮 标 识? Search Tool 选 项 : 精 炼 搜 索 结 果 检 索 范 围 的 进 一 步 限 定 选 项 根 据 搜 索 内 容 不 同 有 变 化 高 级 搜 索 选 项 21
进 阶 技 巧 一 : 巧 用 逻 辑 符 号 布 尔 逻 辑 符 的 巧 用 (AND OR NOT) 示 例 一 : 帕 氏 症 的 基 因 治 疗 方 法 帕 金 森 综 合 症 ( 空 格 ) 基 因 治 疗 示 例 二 : 佳 能 或 尼 康 相 机 的 信 息 相 机 佳 能 OR 尼 康 22
搜 索 界 面 1 23
搜 索 界 面 2 用 英 文 字 符 - 排 除 不 相 关 信 息 24
进 阶 技 巧 二 : 词 组 搜 索 词 组 检 索 : 利 用 双 引 号 ( 英 文 字 符 ) 工 具 示 例 : 艺 术 品 鉴 赏 world war i 25
搜 索 技 巧 三 : 善 用 高 级 搜 索 Google 的 高 级 搜 索 已 藏 身 于 搜 索 结 果 的 底 页, 但 好 好 利 用 它, 可 以 提 高 搜 索 精 度 点 击 主 页 右 下 角 的 设 置, 选 择 高 级 搜 索 项 26
进 阶 技 巧 三 : 善 用 高 级 搜 索 检 索 词 的 逻 辑 位 置 检 索 时 间 等 的 严 格 限 制 27
进 阶 技 巧 四 : 快 照 (Cache) 功 能 搜 索 引 擎 检 索 结 果 布 局 1. 标 题 2. 摘 要 3. 网 址 4.Cache: 缓 存 链 接, 译 为 快 照 或 快 取 28
还 需 要 什 么? 搜 索 时, 想 象 目 标 页 可 能 包 含 哪 些 词 汇 ; 提 问 时 想 象 可 能 的 答 案 加 入 如 何 批 评 来 寻 找 指 南 或 不 同 见 解 29
Google 实 用 搜 索 语 法. All Rights Reserved
关 于 Google Google 是 当 今 世 界 范 围 内 最 受 欢 迎 的 搜 索 引 擎, 凭 借 其 精 确 的 查 准 率, 极 快 的 响 应 速 度 广 受 用 户 好 评, 同 时 又 因 为 其 坚 持 不 走 商 业 化 道 路, 保 持 开 放 的 企 业 文 化 而 深 受 人 们 的 拥 戴 实 际 上 Google 所 代 表 的 已 不 仅 仅 是 某 项 先 进 的 技 术, 而 是 一 种 新 兴 的 文 化 31
Google 的 搜 索 语 法 1 filetype: 限 定 搜 索 结 果 的 文 件 类 型 格 式 : 检 索 词 A filetype: 文 档 的 后 缀 名 32
Google 的 搜 索 语 法 2 site: 限 定 在 某 个 网 站 内 搜 索 关 键 词 A 格 式 : 关 键 词 A site:xxx.com( 即 某 个 域 名 / 网 站 ) 33
Google 的 搜 索 语 法 3 intitle: 限 定 在 网 页 标 题 内 搜 索 关 键 词 A 格 式 : 检 索 词 B intitle: 检 索 词 A 34
Google 的 搜 索 语 法 4 inurl: 限 定 在 url( 链 接 ) 内 搜 索 关 键 词 A 35
Google 的 搜 索 语 法 更 多 内 容 参 见 Google 搜 索 从 入 门 到 精 通 link related 36
附 :Google 图 片 搜 索 技 巧 目 前 各 大 图 片 搜 索 引 擎 的 技 术 都 一 般, 搜 索 出 来 的 结 果 都 不 太 理 想 搜 索 引 擎 主 要 通 过 围 绕 图 片 的 文 字 来 给 图 片 加 上 特 定 标 签, 通 过 这 些 标 签 来 给 搜 索 者 呈 现 结 果 37
附 :Google 图 片 搜 索 技 巧 使 用 语 义 英 文 中 文 互 联 网 领 域 的 图 片 数 量 少 匹 配 度 低 所 以 搜 索 图 片 时 要 尽 量 使 用 英 文, 英 文 不 好 不 要 紧,Google 本 身 提 供 翻 译 服 务 查 询 方 式 其 次, 不 要 使 用 图 片 的 本 意 去 搜 索, 除 非 你 要 找 的 图 片 是 一 个 人 或 一 个 地 点 也 就 是 说, 要 想 象 其 他 人 在 张 贴 一 张 图 片 时 会 采 用 什 么 描 述, 而 往 往 这 些 描 述 都 不 是 直 接 的, 多 用 形 容 词 和 动 词 去 搜 索 会 找 到 更 准 确 的 结 果 38
Google 图 片 搜 索 示 例 1 例 一 : 找 一 张 表 达 人 与 人 之 间 相 互 连 通 的 图 片 39
Google 图 片 搜 索 示 例 2 例 二 : 搜 索 一 个 带 有 推 荐 含 义 的 小 图 标 (16*16) 精 确 定 义 图 片 尺 寸 40
演 示 示 例 一 : 按 图 索 骥 41
演 示 实 例 二 : 按 图 索 骥 42
演 示 示 例 二 : 辨 别 真 伪 世 界 奢 侈 品 协 会 : 供 货 商 委 员 会 执 行 主 席 世 界 奢 侈 品 研 究 中 心 43
搜 索 引 擎 的 未 来 发 展 趋 势 多 维 化 智 能 化 专 业 化 人 机 结 合 学 术 化 社 交 化. All Rights Reserved
趋 势 一 : 多 维 化 信 息 搜 索 的 多 维 化 : 搜 索 引 擎 正 逐 步 扩 展 搜 索 信 息 的 维 度 以 满 足 用 户 日 益 扩 张 的 搜 索 欲 望, 维 度 扩 展 体 现 在 信 息 的 载 体 类 型 传 播 方 式 等 方 面 的 扩 展, 以 下 是 一 些 常 见 的 信 息 维 度 : 信 息 的 格 式 :web 页 图 片 PDF 文 档 MS Office 文 档 Flash Mp3 等 信 息 的 类 型 : 资 讯 图 书 地 图 学 术 大 学 博 客 等 信 息 的 传 播 方 式 :PC 手 机 平 板 电 脑 等 45
趋 势 二 : 智 能 化 语 义 搜 索 与 知 识 图 谱 语 义 搜 索 : 未 来 搜 索 引 擎 对 人 类 语 言 的 学 习 能 力 更 为 强 大, 从 语 言 学 的 角 度, 分 析 用 户 关 键 词 的 语 境 个 人 搜 索 喜 好 等 因 素, 并 从 多 种 来 源 中 收 集 信 息, 将 更 准 确 的 相 互 关 联 的 信 息 提 供 给 用 户 Google 的 知 识 图 谱 (Google Knowledge Graph) 2012.5 发 布, 目 前 仅 限 美 国 Google 的 知 识 库 : 知 识 图 谱 除 了 显 示 其 他 网 站 的 链 接 列 表, 还 提 供 结 构 化 及 详 细 的 关 于 主 题 的 信 息 其 目 标 是, 用 户 将 能 够 使 用 此 功 能 提 供 的 信 息 来 解 决 他 们 查 询 的 问 题, 而 不 必 导 航 到 其 他 网 站 并 自 己 汇 总 信 息 ( 来 源 : 维 基 百 科 ) Google 搜 索 前 沿 :http://www.google.com/intl/zh- CN/insidesearch/features/search/knowledge.html 46
趋 势 二 : 智 能 化 对 话 搜 索 (Conversational search) 2013 年 5 月 的 Google I/O 大 会 上,Google 的 首 席 搜 索 工 程 师 阿 米 特 辛 格 尔 提 出 了 未 来 搜 索 引 擎 的 设 想 : 搜 索 引 擎 的 三 个 主 要 功 能 将 需 要 改 进, 搜 索 将 需 要 :1. 答 案,2. 对 话,3. 预 测 关 注 Android 设 备 上 的 Google Now, 可 对 话 搜 引 的 雏 形 47
趋 势 三 : 更 专 业 专 业 化 的 垂 直 主 题 搜 索 引 擎 产 生 原 因 : 网 络 信 息 浩 如 烟 海 面 对 专 业 信 息 要 求, 综 合 性 搜 引 的 力 不 从 心 检 索 结 果 的 筛 选 耗 时 耗 力 垂 直 主 题 的 搜 索 引 擎 以 其 高 度 的 目 标 化 和 专 业 化 在 各 类 搜 索 引 擎 中 占 据 了 一 系 席 之 地, 比 如 象 股 票 天 气 新 闻 旅 游 等 类 的 搜 索 引 擎, 具 有 很 高 的 针 对 性, 用 户 对 查 询 结 果 的 满 意 度 较 高 48
更 专 业 化 的 垂 直 主 题 搜 索 引 擎 典 型 : 去 哪 儿 (http://www.qunar.com/) 49
趋 势 四 : 问 答 搜 索 重 新 发 现 人 的 闪 光 点,P2P 形 式? P2P:People To People, 重 新 用 人 的 力 量 来 弥 补 纯 粹 依 靠 技 术 的 不 足 之 处 初 探 问 答 搜 索 的 初 级 阶 段 : 如 百 度 知 道 雅 虎 知 识 堂 等 50
P2P 形 式 的 改 进 : 问 答 型 社 交 网 站 的 兴 起 问 答 型 社 交 网 站 的 兴 起 Quora:http://www.quora.com/ 知 乎 :http://www.zhihu.com/ 优 点 : 门 槛 高, 邀 请 制 ; 注 重 问 题 与 解 答 的 质 量 51
趋 势 五 : 学 术 搜 索 注 重 对 深 层 信 息 的 挖 掘 所 谓 深 层 搜 索 是 指 搜 索 那 些 放 在 数 据 库 中 的 信 息 目 前 的 搜 索 引 擎 主 要 处 理 普 通 的 网 页 ( 称 为 浅 层 网 页 ), 对 于 深 层 网 页 的 信 息 难 以 搜 索, 而 据 说 这 样 的 信 息 是 普 通 网 页 的 500 倍 显 然, 如 何 能 够 将 搜 索 引 擎 的 触 角 深 入 到 数 据 库 里 去, 是 下 一 代 搜 索 引 擎 所 关 心 的 52
挖 掘 深 层 信 息 的 尝 试 常 用 学 术 搜 索 引 擎 介 绍 Google Scholar( 中 国 ):http://scholar.google.com.hk Google Scholar( 通 用 ): http://scholar.google.com Scirus:http://scirus.com 微 软 学 术 搜 索 :http://academic.research.microsoft.com CNKI 读 秀 学 术 搜 索 53
关 于 Scholar 是 Google 于 2004 年 11 月 推 出 的 用 来 专 门 搜 索 学 术 文 章 的 搜 索 引 擎, 涉 及 多 个 领 域, 其 中 包 括 人 文 社 科 资 源 它 可 以 搜 索 到 网 上 与 输 入 的 关 键 词 相 关 的 学 术 性 期 刊 论 文 书 籍 文 摘 等 文 献 源 自 学 术 出 版 物 大 学 及 网 上 学 术 论 文 搜 索 结 果 可 关 联 图 书 馆 的 书 目 信 息 与 电 子 文 献 资 源 了 解 有 关 某 一 领 域 的 学 术 文 献 ; 某 一 作 者 的 著 述, 并 提 供 书 目 信 息 54
Scholar 检 索 步 骤 1 点 击 Google 学 术 搜 索 页 面 右 上 角 的 学 术 搜 索 设 置, 进 入 到 设 置 页 面, 在 图 书 馆 链 接 搜 索 框 中 输 入 厦 门 大 学, 厦 门 大 学 图 书 馆, xiamen university library, xmulibrary 并 点 击 查 找 图 书 馆, 找 到 厦 大 馆 全 文 后, 最 后 保 存 设 置 55
Scholar 检 索 步 骤 2 再 回 到 Google 学 术 搜 索 中 查 询, 会 在 查 询 结 果 页 面 发 现 厦 大 馆 全 文 的 链 接 56
Scholar 检 索 步 骤 3 点 击 厦 大 馆 全 文 链 接, 将 会 出 现 SFX 导 航 页 面, 由 此 您 将 会 获 得 文 章 全 文 链 接 57
趋 势 六 : 社 交 网 络 信 息 搜 索 实 时 信 息 搜 索 : 对 社 交 网 站 信 息 的 挖 掘 对 社 交 信 息 的 搜 索, 具 有 时 效 性, 将 更 有 助 于 实 际 问 题 的 解 决 社 交 信 息 搜 索 的 尝 试 : Google 搜 索 结 果 加 入 Google Plus 平 台 的 社 交 信 息 Bing 的 Social Search, 可 搜 索 Facebook 和 Twitter 信 息 网 址 :http://bing.com/social 专 门 社 交 信 息 实 时 搜 引 :Topsy 58
The End E-mail:shining@xmu.edu.cn. All Rights Reserved