NONE



Similar documents
何 秋 琳 张 立 春 视 觉 学 习 研 究 进 展 视 觉 注 意 视 觉 感 知

说 明 为 了 反 映 教 运 行 的 基 本 状 态, 为 校 和 院 制 定 相 关 政 策 和 进 行 教 建 设 与 改 革 提 供 据 依 据, 校 从 程 资 源 ( 开 类 别 开 量 规 模 ) 教 师 结 构 程 考 核 等 维 度, 对 2015 年 春 季 期 教 运 行 基

2006年顺德区高中阶段学校招生录取分数线


名 称 生 命 科 学 学 院 环 境 科 学 1 生 物 学 仅 接 收 院 内 调 剂, 初 试 分 数 满 足 我 院 生 物 学 复 试 最 低 分 数 线 生 命 科 学 学 院 生 态 学 5 生 态 学 或 生 物 学 生 命 科 学 学 院

HSK( 一 级 ) 考 查 考 生 的 日 常 汉 语 应 用 能 力, 它 对 应 于 国 际 汉 语 能 力 标 准 一 级 欧 洲 语 言 共 同 参 考 框 架 (CEF) A1 级 通 过 HSK( 一 级 ) 的 考 生 可 以 理 解 并 使 用 一 些 非 常 简 单 的 汉 语

龚 亚 夫 在 重 新 思 考 基 础 教 育 英 语 教 学 的 理 念 一 文 中 援 引 的 观 点 认 为 当 跳 出 本 族 语 主 义 的 思 维 定 式 后 需 要 重 新 思 考 许 多 相 连 带 的 问 题 比 如 许 多 发 音 的 细 微 区 别 并 不 影 响 理 解 和

I

深圳市新亚电子制程股份有限公司

课程类 别

珠江钢琴股东大会

Template BR_Rec_2005.dot

一 公 共 卫 生 硕 士 专 业 学 位 论 文 的 概 述 学 位 论 文 是 对 研 究 生 进 行 科 学 研 究 或 承 担 专 门 技 术 工 作 的 全 面 训 练, 是 培 养 研 究 生 创 新 能 力, 综 合 运 用 所 学 知 识 发 现 问 题, 分 析 问 题 和 解 决

中 国 软 科 学 年 第 期!!!

<433A5C446F63756D656E E E67735C41646D696E F725CD7C0C3E65CC2DBCEC4CFB5CDB3CAB9D3C3D6B8C4CFA3A8BCF2BBAFA3A95CCAB9D3C3D6B8C4CF31302D31392E646F63>

修改版-操作手册.doc

,,,,, :,, (.,, );, (, : ), (.., ;. &., ;.. &.., ;, ;, ),,,,,,, ( ) ( ),,,,.,,,,,, : ;, ;,.,,,,, (., : - ),,,, ( ),,,, (, : ),, :,

正 规 培 训 达 规 定 标 准 学 时 数, 并 取 得 结 业 证 书 二 级 可 编 程 师 ( 具 备 以 下 条 件 之 一 者 ) (1) 连 续 从 事 本 职 业 工 作 13 年 以 上 (2) 取 得 本 职 业 三 级 职 业 资 格 证 书 后, 连 续 从 事 本 职 业

<4D F736F F D20BFC9B1E0B3CCD0F2BFD8D6C6CFB5CDB3C9E8BCC6CAA6B9FABCD2D6B0D2B5B1EAD7BC2E646F63>

评 委 : 李 炎 斌 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单

第 期 李 伟 等 用 方 法 对 中 国 历 史 气 温 数 据 插 值 可 行 性 讨 论


¹ º ¹ º 农 业 流 动 人 口 是 指 户 口 性 质 为 农 业 户 口 在 流 入 地 城 市 工 作 生 活 居 住 一 个 月 及 以 上 的 流 动 人 口 非 农 流 动 人 口 是 指 户 口 性 质 为 非 农 户 口 在 流 入 地 城 市 工 作 生 活 居 住 一 个

18 上 报 该 学 期 新 生 数 据 至 阳 光 平 台 第 一 学 期 第 四 周 至 第 六 周 19 督 促 学 习 中 心 提 交 新 增 专 业 申 请 第 一 学 期 第 四 周 至 第 八 周 20 编 制 全 国 网 络 统 考 十 二 月 批 次 考 前 模 拟 题 第 一 学

马 克 思 主 义 公 正 观 的 基 本 向 度 及 方 法 论 原 则!! # #

评 委 : 徐 岩 宇 - 个 人 技 术 标 资 信 标 初 步 审 查 明 细 表 序 号 投 标 单 位 投 标 函 未 按 招 标 文 件 规 定 填 写 漏 填 或 内 容 填 写 错 误 的 ; 不 同 投 标 人 的 投 标 文 件 由 同 一 台 电 脑 或 同 一 家 投 标 单

《C语言基础入门》课程教学大纲

采 取 行 动 的 机 会 90% 开 拓 成 功 的 道 路 2

( ) 信 号 与 系 统 Ⅰ 学 科 基 础 必 修 课 教 周 2016 年 06 月 13 日 (08:00-09:35) ( )

Microsoft Word - 第7章 图表反转形态.doc

<4D F736F F D D323630D6D0B9FAD3A6B6D4C6F8BAF2B1E4BBAFB5C4D5FEB2DFD3EBD0D0B6AF C4EAB6C8B1A8B8E6>

登录、注册功能的测试用例设计.doc


定 位 和 描 述 : 程 序 设 计 / 办 公 软 件 高 级 应 用 级 考 核 内 容 包 括 计 算 机 语 言 与 基 础 程 序 设 计 能 力, 要 求 参 试 者 掌 握 一 门 计 算 机 语 言, 可 选 类 别 有 高 级 语 言 程 序 设 计 类 数 据 库 编 程 类

0 年 上 半 年 评 价 与 考 核 细 则 序 号 部 门 要 素 值 考 核 内 容 考 核 方 式 考 核 标 准 考 核 ( 扣 原 因 ) 考 评 得 3 安 全 生 产 目 30 无 同 等 责 任 以 上 道 路 交 通 亡 人 事 故 无 轻 伤 责 任 事 故 无 重 大 质 量

第二讲 数列

中 中 中 中 部 中 岗 位 条 件 历 其 它 历 史 师 地 理 师 生 物 师 体 与 健 康 师 从 事 中 历 史 工 从 事 中 地 理 工 从 事 中 生 物 工 从 事 中 体 与 健 康 工 2. 课 程 与 论 ( 历 史 ); 2. 科 ( 历 史 )

3 月 30 日 在 中 国 证 券 报 上 海 证 券 报 证 券 时 报 证 券 日 报 和 上 海 证 券 交 易 所 网 站 上 发 出 召 开 本 次 股 东 大 会 公 告, 该 公 告 中 载 明 了 召 开 股 东 大 会 的 日 期 网 络 投 票 的 方 式 时 间 以 及 审

随着执业中医师资格考试制度的不断完善,本着为我校中医学专业认证服务的目的,本文通过对我校中医类毕业生参加2012年和2013年的中医执业医师考试成绩及通过率、掌握率进行分析,并与全国的平均水平进行差异比较分析,以此了解我校执业中医师考试的现状,进而反映我校中医类课程总体教学水平,发现考核知识模块教学中存在的不足,反馈给相关学院和教学管理部门,以此提高教学和管理水平。

Microsoft Word - 文件汇编.doc

公 开 刊 物 须 有 国 内 统 一 刊 (CN), 发 表 文 章 的 刊 物 需 要 在 国 家 新 闻 出 版 广 电 总 局 ( 办 事 服 务 便 民 查 询 新 闻 出 版 机 构 查 询 ) 上 能 够 查 到 刊 凡 在 有 中 国 标 准 书 公 开


抗 日 战 争 研 究 年 第 期

一 从 分 封 制 到 郡 县 制 一 从 打 虎 亭 汉 墓 说 起

目 录 一 系 统 访 问... 1 二 门 户 首 页 申 报 用 户 审 核 用 户... 2 三 系 统 登 录 用 户 名 密 码 登 录 新 用 户 注 册 用 户 登 录 已 注 册 用

(Microsoft Word - NCRE\314\345\317\265\265\367\325\37313\324\27221\272\3051.doc)

2014年中央财经大学研究生招生录取工作简报

 编号:

002 电 子 科 学 与 工 程 学 院 拟 招 生 150 人 联 系 人 : 周 老 师, 电 话 物 理 电 子 学 电 路 分 析 电 磁 场 理 论 01 电 磁 物 理 与 微 波 电 子 学 02 光 子 学 与 光 电 技 术 03 微 纳

<433A5C C6B73625C B746F705CB9FABCCAD6D0D2BDD2A9D7A8D2B5B8DFBCB6BCBCCAF5D6B0B3C6C6C0C9F3C9EAC7EBD6B8C4CFA3A CDA8D3C3B0E6A3A92E646F63>

伊 犁 师 范 学 院 611 语 言 学 概 论 全 套 考 研 资 料 <2016 年 最 新 考 研 资 料 > 2-2 语 言 学 纲 要 笔 记, 由 考 取 本 校 本 专 业 高 分 研 究 生 总 结 而 来, 重 点 突 出, 借 助 此 笔 记 可 以 大 大 提 高 复 习 效

目 录 关 于 图 标... 3 登 陆 主 界 面... 3 工 单 管 理... 5 工 单 列 表... 5 搜 索 工 单... 5 工 单 详 情... 6 创 建 工 单... 9 设 备 管 理 巡 检 计 划 查 询 详 情 销 售 管

一 开 放 性 的 政 策 与 法 规 二 两 岸 共 同 的 文 化 传 承 三 两 岸 高 校 各 自 具 有 专 业 优 势 远 见 杂 志 年 月 日


2009—2010级本科课程教学大纲与课程简介格式

用节点法和网孔法进行电路分析

思 想 政 治 理 论 经 核 查 无 误 思 想 政 治 理 论 经 核 查 无 误 思 想 政 治 理 论 经 核 查 无 误 思 想

<443A5C6D B5C30312EB9A4D7F7CEC4B5B55C30322EBACFCDACCEC4B5B55C C30342EC8CBC9E7CCFC5C31332ECFEEC4BFC5E0D1B55C E30385C322EB2D9D7F7CAD6B2E12E646F63>

附件1:

新, 各 地 各 部 门 ( 单 位 ) 各 文 化 事 业 单 位 要 高 度 重 视, 切 实 加 强 领 导, 精 心 组 织 实 施 要 根 据 事 业 单 位 岗 位 设 置 管 理 的 规 定 和 要 求, 在 深 入 调 查 研 究 广 泛 听 取 意 见 的 基 础 上, 研 究 提

教师上报成绩流程图

上证指数

Microsoft Word - 资料分析练习题09.doc

抗 战 时 期 国 民 政 府 的 银 行 监 理 体 制 探 析 % # % % % ) % % # # + #, ) +, % % % % % % % %

<4D F736F F D20B9D8D3DAB0BABBAAA3A8C9CFBAA3A3A9D7D4B6AFBBAFB9A4B3CCB9C9B7DDD3D0CFDEB9ABCBBE C4EAC4EAB6C8B9C9B6ABB4F3BBE1B7A8C2C9D2E2BCFBCAE92E646F6378>

( 二 ) 现 行 统 一 高 考 制 度 不 利 于 培 养 人 的 创 新 精 神,,,,,,,,,,,,, [ ],,,,,,,,,,, :, ;,,,,,,? ( 三 ) 现 行 统 一 高 考 制 度 不 利 于 全 体 学 生 都 获 得 全 面 发 展,, [ ],,,,,,,,,,,

!!!!!!!!!!

附 件 : 上 海 市 建 筑 施 工 企 业 施 工 现 场 项 目 管 理 机 构 关 键 岗 位 人 员 配 备 指 南 二 一 四 年 九 月 十 一 日 2

简 报 要 点 ESI 共 有 22 个 学 科 门 类, 江 苏 高 校 目 前 只 有 16 个 学 科 门 类 进 入 了 世 界 1%, 分 别 是 一 般 社 会 科 学 临 床 医 学 农 业 科 学 分 子 生 物 学 和 遗 传 学 动 植 物 科 学 化 学 地 球 科 学 工 程

类 似 地, 又 可 定 义 变 下 限 的 定 积 分 : ( ). 与 ψ 统 称 为 变 限 积 分. f ( ) d f ( t) dt,, 注 在 变 限 积 分 (1) 与 () 中, 不 可 再 把 积 分 变 量 写 成 的 形 式 ( 例 如 ) 以 免 与 积 分 上 下 限 的

证券代码: 证券简称:长城电脑 公告编号:



Cybozu Garoon 3 管理员手册

自 服 务 按 钮 无 法 访 问 新 系 统 的 自 服 务 页 面 因 此 建 议 用 户 从 信 网 中 心 ( 主 页, 右 下 角 位 置 的 常 用 下 载, 或 校 园 网 用 户 自 服 务 ( 首 页

国家职业标准:网络课件设计师

西 南 民 族 学 院 学 报 哲 学 社 会 科 学 版 第 卷 资 料 来 源 中 国 统 计 年 鉴 年 年 新 中 国 五 十 年 统 计 资 料 汇 编 中 国 人 口 统 计 年 鉴 年 数 据 资 料 来 源 中 国 统 计 年 鉴 中 国 统 计 出 版 社 年 版 资 料 来 源

物 流 从 业 人 员 职 业 能 力 等 级 证 书 分 为 四 个 级 别, 分 别 为 初 级 助 理 级 中 级 和 高 级 ; 采 购 从 业 人 员 职 业 能 力 等 级 证 书 分 为 三 个 级 别, 分 别 为 中 级 高 级 和 注 册 级 请 各 有 关 单 位 按 照 通

三武一宗灭佛研究

导 数 和 微 分 的 概 念 导 数 的 几 何 意 义 和 物 理 意 义 函 数 的 可 导 性 与 连 续 性 之 间 的 关 系 平 面 曲 线 的 切 线 和 法 线 导 数 和 微 分 的 四 则 运 算 基 本 初 等 函 数 的 导 数 复 合 函 数 反 函 数 隐 函 数 以

浙 江 海 洋 学 院 417 普 通 生 态 学 与 鱼 类 学 全 套 考 研 资 料 <2016 年 最 新 考 研 资 料 > 2-2 基 础 生 态 学 笔 记, 此 笔 记 为 高 分 研 究 生 复 习 所 用, 借 助 此 笔 记 可 以 大 大 提 高 复 习 效 率, 把 握 报

21 业 余 制 -- 高 起 专 (12 级 ) 75 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 江 西 化 校 工 科 22 业 余 制 -- 高 起 专 (12 级 ) 70 元 / 学 分 网 络 学 院 学 生 沪 教 委 财 (2005)49 号 吉

<4D F736F F D C4EAB9A4B3CCCBB6CABFCAFDD1A7D7A8D2B5BFCEBFBCCAD4B4F3B8D9D3EBD2AAC7F3>

金 不 少 于 800 万 元, 净 资 产 不 少 于 960 万 元 ; (3) 近 五 年 独 立 承 担 过 单 项 合 同 额 不 少 于 1000 万 元 的 智 能 化 工 程 ( 设 计 或 施 工 或 设 计 施 工 一 体 ) 不 少 于 2 项 ; (4) 近 三 年 每 年

Microsoft Word - 第3章.doc

Transcription:

第 12 卷 第 6 期 2011 年 12 月 信 息 工 程 大 学 学 报 Journal of Information Engineering University Vol. 12 No.6 Dec.2011 一 种 实 时 TS 流 视 频 信 息 快 速 浏 览 方 法 的 研 究 与 实 现 李 煌, 刘 振 中, 田 娅 (61580 部 队, 北 京 100094 ) 摘 要 : 分 析 研 究 了 TS 流 的 数 据 结 构 以 及 视 频 摘 要 的 实 现 原 理, 提 出 了 对 TS 流 视 频 信 息 进 行 关 键 帧 提 取 以 实 现 快 速 浏 览 方 案 在 实 现 多 路 TS 流 节 目 解 复 用 的 基 础 之 上, 通 过 对 单 节 目 视 频 数 据 进 行 分 层 判 断 实 现 了 对 I 帧 定 位 和 提 取, 并 采 用 FFMpeg 作 为 帧 解 码 和 图 片 编 码 输 出 的 基 础 支 持 实 验 结 果 表 明 该 方 法 实 现 简 单, 能 有 效 满 足 大 多 数 用 户 的 实 际 需 求 关 键 词 :TS 流 ; 视 频 摘 要 ; 1 帧 提 取 中 图 分 类 号 :TP391 文 献 标 识 码 :A 文 章 编 号 :1671-0673(2011)06-0754 -05 Research and Realization of Quick Browsing f Real-Time Transport Streams Videos LI Huang, LIU Zhen-zhong, TIAN Ya ( U nit 61580, Beijing 100094, China) Abstract: This paper analyzes the Transport Stream (TS) data structure and the generatien of video abstracts. Key frames of TS Streams are proposed to be extracted for rapid video browsing. Based on TS de-multiplexing, the locating and extracting of frame 1 are realized by stratificated identification of single-programe video data. FFMpeg is taken as the basic suppo 时 for frame decoding and picture coding output. Test results indicate this straightforward method can satisfy practical needs of most users. Key words: TS streams; video abstraction; frame 1 extracting 引 言 DVB (Digital Video Broadcasting) 信 号 在 卫 星 传 输 中 应 用 较 多, 其 标 准 于 1993 在 欧 洲 提 出 [IJ 被 欧 洲 的 ETS (European Telecommunications Standards) 采 用 DVB 目 前 主 要 有 卫 星 ( DVB-S) 电 缆 电 视 (DVB-C) 和 地 面 广 播 ( DVB-T)3 个 主 要 标 准 [2J 0 TS 流 (Transport Stream) 是 DVB 信 号 的 数 据 传 输 格 式, 一 般 情 况 下 用 于 传 输 保 存 多 道 节 目 编 码, 是 卫 星 数 字 电 视 的 应 用 基 础 通 过 对 卫 星 数 字 电 视 的 接 收 和 处 理, 可 以 及 时 了 解 其 中 传 递 的 各 类 信 息 目 前 较 为 常 见 的 方 法 是 将 视 频 数 据 进 行 实 时 播 放, 用 户 可 进 行 选 择 性 录 制 ; 另 一 种 是 对 视 频 数 据 进 行 全 文 解 码 并 建 立 摘 要 供 用 户 查 阅 前 者 需 要 大 量 硬 件 设 备 的 支 持 ( 如 电 视 墙 ), 成 本 很 高, 后 者 需 要 进 行 视 频 的 全 文 解 码, 增 加 了 系 统 的 复 杂 性, 因 此 要 实 现 对 众 多 类 似 信 号 的 快 速 实 时 处 理, 需 要 花 费 大 量 人 力 和 时 间 本 文 研 究 了 一 种 实 时 快 速 的 视 频 信 息 浏 览 方 法, 该 方 法 直 接 对 实 时 TS 流 中 的 视 频 压 缩 数 据 进 行 分 收 稿 日 期 :2011-0 8-22 ; 修 回 日 期 :2011-0 9-15 作 者 简 介 : 李 煌 (1 982 - ), 男, 硕 士 生, 主 要 研 究 方 向 为 数 字 视 频 信 息 处 理

第 6 期 李 煌 等 : 一 种 实 时 TS 流 视 频 信 息 快 速 浏 览 方 法 的 研 究 与 实 现 755 析 和 处 理, 将 能 代 表 视 频 主 要 信 息 的 关 键 帧 进 行 解 码 和 图 片 输 出 相 比 其 它 方 法 需 要 对 视 频 数 据 进 行 全 文 解 码 或 者 通 过 大 量 运 算 提 取 视 频 摘 要, 本 文 所 研 究 方 法 在 实 现 卫 星 数 字 电 视 快 速 浏 览 功 能 的 基 础 上, 又 确 保 了 计 算 快 速 简 单, 能 较 好 地 适 应 对 实 时 TS 流 视 频 信 息 的 快 速 浏 览, 目 前 该 方 法 已 经 在 " 某 DVB-S 信 号 处 理 系 统 " 中 成 功 应 用 1 视 频 信 息 快 速 浏 览 的 原 理 视 频 信 息 由 时 间 上 连 续 的 一 系 列 帧 图 像 组 成, 因 此, 将 其 中 一 些 具 有 代 表 性 的 帧 图 像 作 为 视 频 摘 要 就 能 实 现 快 速 浏 览 由 于 数 字 电 视 广 播 中 所 传 输 数 据 均 使 用 TS 流 进 行 封 装, 因 此, 实 现 快 速 浏 览 的 前 提 是 对 TS 流 的 数 据 结 构 进 行 分 析 和 研 究, 并 在 此 基 础 之 上 实 现 视 频 摘 要 的 提 取 1.1 TS 流 结 构 分 析 在 DVB-S 标 准 中, 音 频 视 频 数 据 的 编 码 和 压 缩 采 用 了 ISO/IECMPEG-2 标 准 MPEG-2 有 TS (Transport Stream) 和 PS (Program Stream) 两 种 编 码 方 式, 其 中 TS 的 场 合 [3] 主 要 应 用 于 数 字 电 视 广 播 的 传 输 流 造 合 于 信 道 状 况 相 对 恶 劣 具 有 较 高 误 码 率 在 数 字 电 视 的 编 码 阶 段, 通 过 对 音 频 视 频 数 据 进 行 编 码, 生 成 视 频 基 本 流 ES (Elementary Streams) 和 音 频 基 本 流 ES, 再 通 过 各 自 的 数 据 包 形 成 器, 将 ES 分 组 打 包, 形 成 PES (Packetized Elementary Streams), 由 于 PES 流 仅 是 标 准 中 规 定 的 一 种 逻 辑 结 构, 并 不 适 合 进 行 传 输 和 存 储, 因 此 需 要 利 用 节 目 流 复 用 器 和 传 输 流 复 用 器 将 视 频 PES 和 音 频 PES 组 合 成 相 应 的 节 目 流 和 传 送 流, 整 个 系 统 如 图 1 所 示 PES 分 组 长 度 可 达 64K 字 节, 远 大 于 184 字 节 的 TS 数 据 荷 载 区 长 度, 因 此 必 须 分 割 并 用 多 个 TS 包 进 行 传 送 MPEG-2 标 准 规 定, 用 来 传 送 一 个 PES 的 最 后 一 图 MPEG-2 系 统 简 要 框 图 个 TS 包 如 果 没 能 装 满, 则 进 行 空 闲 填 充, 而 一 个 新 的 PES 包 形 成 时, 要 使 用 新 的 TS 包 传 送 图 2 给 出 了 利 用 TS 包 传 送 PES 分 组 的 示 意 图 TS 包 长 188 字 节, 包 括 " 分 组 首 部 " 和 " 有 效 负 载 首 部 4 字 节, 包 含 了 PID (Packet IDdentifier) 等 信 息, PID 用 于 区 分 不 同 ES 流, 同 一 PID 的 TS 包 表 示 其 上 承 载 着 同 - ES 流 的 数 据 在 用 于 传 送 PES 的 一 组 TS 包 中, 第 1 个 TS 包 要 在 包 头 中 将 相 应 标 志 m 忧 a 飞 m 数 据 包 N~! 时 t 时 ayul 田 d Unit S 国 同 4 字 节 TS 头 部 184 字 节 数 据 不 是 区 域 负 载 l 兰 进 行 填 充 (playload unit start indicator) 置 为 1, 并 且 该 TS 包 所 传 数 据 的 第 1 个 字 节 即 为 该 PES 包 的 第 1 个 字 节 ( 包 含 PES 头 部 卜 图 2 PES 分 组 和 TS 分 组 的 关 系 为 提 高 信 道 利 用 率, MPEG-2 标 准 采 用 了 时 分 多 路 复 用 技 术, 在 同 一 信 道 中 传 输 了 多 路 信 号 在 接 收 端, 无 法 仅 通 过 PID 来 得 到 节 目 与 原 始 流 的 对 应 关 系 为 此, MPEG-2 标 准 定 义 了 节 目 专 用 信 息 ( Program Specific Information, PSI) 用 来 描 述 各 路 节 目 图 3 说 明 白 流 中 PSI 与 ES 流 ( ES 流 一 般 包 括 视 频 基 本 流 数 据 和 音 频 基 本 流 数 据 ) 的 关 系 [4] PSI 主 要 由 节 目 关 联 表 (Program Association Table, P AT) 条 件 访 问 表 (Conditional Access Table, CAT) 节 目 映 射 表 ( Program Map Table, PMT) 和 网 络 信 息 表 ( N etwork Information Table, NIT) 等 4 张 表 组 成 其 中, PMT 指 示 了 某 路 节 目 对 应 的 视 频 ES 流 音 频 ES 流 和 数 据 ES 流 所 在 TS 包 的 PID, 而 PAT 则 指 示 了 各 路 节 目 对 应 PMT 的 相 关 信 息, 如 各 个 PMT 所 在 TS 包 的 PID 等 1. 2 视 频 摘 要 提 取 图 3 TS 流 与 PSI 的 关 系 视 频 摘 要 (Video Abstraction) 就 是 对 较 长 视 频 文 件 的 简 短 内 容 总 结 [5] 按 照 摘 要 形 式 分 为 静 态 视 频 摘 要 和 动 态 视 频 摘 要 动 态 摘 要 以 多 段 视 频 进 行 描 述, 能 更 加 真 实 地 描 述 原 信 息 内 容, 但 实 现 非 常 复 杂 考 虑 到 实 际 应 用 系 统 对 实 时 性 的 要 求, 选 择 静 态 摘 要 作 为 研 究 方 向, 而 静 态 摘 要 中 的 关 键 帧 提 取 是 其 中 关 键

756 信 息 工 程 大 学 学 报 2011 年 关 键 帧 是 从 源 视 频 流 中 抽 取 的 静 态 图 像, 可 用 来 概 括 视 频 中 各 个 镜 头 的 信 息 内 容, 用 户 通 过 浏 览 关 键 帧 即 可 大 致 了 解 相 关 视 频 的 主 要 内 容 因 此, 对 实 时 TS 流 视 频 信 息 进 行 关 键 帧 提 取 是 本 文 研 究 的 重 点 内 '*' 甘 目 前 对 关 键 帧 的 提 取 主 要 有 以 下 几 种 典 型 算 法 : 1 基 于 镜 头 边 界 法 [6J 该 方 法 首 先 将 视 频 分 割 成 一 个 个 镜 头, 然 后 将 每 个 镜 头 的 第 1 帧 最 后 l 帧 作 为 镜 头 的 关 键 帧 本 方 法 实 现 算 法 简 单, 但 前 提 是 要 对 TS 流 中 的 视 频 数 据 进 行 全 文 解 码 2 像 素 平 均 法 [7 J 首 先 将 一 个 镜 头 中 的 所 有 帧 在 某 一 位 置 点 提 取 像 素 均 值, 将 镜 头 中 这 一 点 的 像 素 值 等 于 平 均 值 的 那 l 帧 作 为 代 表 该 镜 头 的 代 表 帧 由 于 需 要 将 每 1 帧 进 行 记 录, 所 以 需 要 存 储 量 很 大, 并 且 如 何 有 效 确 定 位 置 点 本 身 就 是 一 个 不 确 定 的 问 题 3 直 方 图 平 均 法 [ 8J 与 像 素 平 均 法 类 似, 直 方 图 平 均 法 是 将 对 应 镜 头 中 所 有 帧 的 统 计 直 方 图 进 行 平 均 值 计 算, 然 后 将 与 该 平 均 值 最 接 近 的 那 1 帧 作 为 关 键 帧, 此 方 法 处 理 前 提 也 需 要 对 TS 流 视 频 数 据 进 行 全 文 解 码 4 其 它 提 取 关 键 帧 的 方 法 基 于 运 动 分 析 和 基 于 视 频 聚 类 技 术 是 其 它 比 较 典 型 的 方 法, Wolf 最 早 提 出 了 基 于 运 动 分 析 的 提 取 方 法, 但 这 两 种 方 法 的 复 杂 度 和 计 算 量 相 对 于 实 时 性 要 求 较 高 的 系 统 来 说 都 显 得 不 适 用 由 于 " 某 DVB-S 信 号 处 理 系 统 " 对 实 时 性 要 求 较 高, 除 了 所 提 取 关 键 帧 要 能 代 表 视 频 信 息 的 主 要 内 容 外, 其 次 就 是 算 法 实 现 要 快 速 简 单 因 此 本 文 重 点 研 究 对 实 时 TS 流 中 视 频 信 息 的 关 键 帧 提 取 方 法 2 TS 流 视 频 信 息 关 键 帧 提 取 2. 1 实 时 TS 流 解 复 用 由 于 TS 流 同 时 传 输 多 路 节 目, 因 此 在 接 收 端 首 先 要 解 决 多 节 目 解 复 用 的 问 题, 之 后 才 能 进 行 关 键 帧 的 提 取 要 实 现 对 TS 流 的 解 复 用, 首 先 要 解 析 PSI, 在 标 准 中 不 同 的 PSI 表 的 格 式 都 是 确 定 的, 并 且 除 PMT 之 外, 其 它 如 PAT 等 表 的 PID 都 是 事 先 确 定 的 表 1 为 各 主 要 PSI 表 的 PID 对 应 值 由 于 PAT 表 包 含 了 每 个 节 目 对 应 的 PMT 信 息, 所 以 首 先 要 进 行 表 l 主 要 PSI 表 PID 对 应 值 PAT 的 提 取 标 准 中 规 定, PAT 的 PID 固 定 为 0, 因 此, 通 过 对 实 时 TS 流 中 PID 为 O 的 数 据 包 进 行 解 析, 可 得 出 当 前 TS 流 中 所 包 含 各 路 节 目 对 应 的 PMT 所 在 包 的 PID 值, 然 后 依 据 这 些 PID 来 查 找 含 有 PMT 的 数 据 包 并 进 行 节 目 详 情 解 析 图 4 为 PMT 结 构 示 意 图 PSI 表 类 型 PAT( 节 目 关 联 表 ) CAT( 条 件 访 问 表 ) NIT( 网 络 信 息 表 ) SDT( 服 务 描 述 表 ) PID 值 OXOOOO OXOOOl OXOO lo OXOOll 依 据 PMT 中 所 指 示 信 息, 将 用 于 传 输 对 应 节 目 视 频 ES 流 音 频 ES 流 其 它 数 据 的 TS 包 按 顺 序 重 新 组 织, 并 按 照 一 定 频 率 构 造 和 插 入 用 于 描 述 该 节 目 的 PSI 表 (PMT, PAT 等 ), 如 此 实 现 多 节 目 的 实 时 解 复 用 算 法 流 程 描 述 如 下 : 分 析 选 定 节 目 的 PMT, 得 到 视 频 ES 流 音 频 ES 流 所 在 TS 包 的 PID, 依 据 这 些 PID 对 TS 流 进 行 1S 数 据 包 负 辙 区 184 字 节 包 过 滤, 将 符 合 判 断 条 件 的 视 频 ES 流 和 音 频 ES 流 数 据 进 行 rez 监 ;~m. / 音 频 ES 流!Jr;tmPID 音 频 因 如 对 应 m 提 取, 按 照 包 到 达 的 先 后 顺 序 重 新 组 织 由 于 原 TS 流 中 各 PSI 信 息 是 针 对 多 路 节 目 进 行 配 置 的, 因 此 需 要 重 新 构 建 针 图 4 PMT 所 在 TS 包 结 构 示 意 图 对 当 前 单 节 目 的 PSI 信 息 PSI 的 插 入 频 率 需 要 进 行 调 整, 原 因 是 原 PSI 的 插 入 频 率 是 针 对 多 路 节 目, 其 相 对 单 节 目 来 说 显 得 太 高, 调 整 方 法 是 按 原 TS 流 中 各 节 目 的 数 据 流 占 用 的 带 宽 比 率 来 进 行 计 算 并 设 置 在 TS 流 解 复 用 的 过 程 中 需 要 对 CAT 进 行 解 析, CAT 中 指 示 了 各 路 节 目 的 条 件 接 收 信 息, 例 如 视 频 节 目 是 否 经 过 加 密 对 于 加 密 的 视 频 数 据, 必 须 进 行 解 密 才 能 处 理, 本 文 所 研 究 方 法 对 加 密 的 视 频 信 息 不 做 处 理 需 要 注 意 的 是, 由 于 传 输 原 因 会 造 成 个 别 情 况 下 音 频 流 视 频 流 的 同 步 错 位 问 题, 因 此, 需 要 利 用

第 6 期 李 煌 等 : 一 种 实 时 TS 流 视 频 信 息 快 速 浏 览 方 法 的 研 究 与 实 现 757 PCR (Program Clock Reference) 信 息 进 行 音 频 视 频 同 步 校 正, 这 一 部 分 不 属 于 本 文 研 究 范 围, 在 此 不 做 讨 论 2.2 关 键 帧 提 取 在 对 实 时 TS 流 解 复 用 的 过 程 中, 可 以 增 加 判 断 条 件 来 实 现 关 键 帧 的 提 取 TS 流 的 视 频 信 息 采 用 MPEG-2 标 准 进 行 编 码 和 压 缩, 压 缩 原 理 是 选 某 1 帧 作 为 基 帧, 以 基 帧 为 参 考, 其 后 的 帧 只 记 录 变 化 信 息 在 MPEG-2 标 准 中, 共 有 I 帧 ( 帧 内 编 码 帧 ) B 帧 ( 双 向 预 测 编 码 帧 ) 和 P 帧 ( 正 向 预 测 编 码 帧 )3 种 编 码 帧, 其 中 I 帧 作 为 基 帧, B 帧 和 P 帧 均 以 I 帧 为 基 础 记 录 变 化 的 信 息 因 此, 1 帧 能 基 本 反 映 一 个 图 像 序 列 的 主 要 内 容, 将 其 进 行 提 取 并 解 码 存 为 图 片 即 可 实 现 对 全 文 信 息 的 快 速 浏 览 通 过 对 MPEG-2 压 缩 格 式 的 研 究 可 以 得 知, MPEG-2 视 频 数 据 码 流 共 分 为 6 层, 层 层 打 包, 最 高 层 是 图 像 序 列 (Video Sequence), 依 次 是 图 像 组 (Group of Pictures) 宏 块 片 ( Slice) 宏 块 ( Macroblock) 最 低 层 是 块 ( Block) 其 中 在 GOP 图 像 组 内 分 为 I 帧 P 帧 和 B 帧 对 TS 流 视 频 信 息 进 行 I 帧 提 取 算 法 简 述 如 下 : 在 TS 流 解 复 用 的 过 程 中 增 加 条 件 判 断, 将 传 输 单 节 目 视 频 ES 流 的 TS 包 进 行 过 滤 并 提 取 TS 包 头 中 "Playload Unit Start lndicator" 的 值, 依 据 该 值 是 否 为 1 来 判 断 当 前 TS 包 是 否 承 载 着 所 传 PES 包 的 包 头 部 分 定 位 PES 包 头 之 后 在 PES 数 据 区 查 找 picture header 的 位 置 ( 以 Ox00000100 开 始 ), 然 后 对 picture header 之 后 2 个 字 节 的 第 11-13 位 进 行 判 断 可 确 定 当 前 帧 的 类 型, 001 是 I 帧, 011 是 B 帧, 010 是 P 帧 确 定 是 I 帧 之 后, 将 该 PES 分 组 进 行 数 据 重 组 并 将 对 应 的 I 帧 数 据 进 行 提 取, 最 后 送 入 解 码 输 出 模 块 处 理 由 于 这 一 过 程 在 解 复 用 的 同 时 进 行 并 且 只 对 个 别 视 频 帧 进 行 解 码 处 理, 因 此 相 比 将 TS 流 视 频 信 息 全 部 进 行 解 码 节 省 了 很 大 工 作 量 图 5 为 关 键 帧 提 取 部 分 的 算 法 流 程 示 意 图 其 中 采 用 FFMpeg ( 一 个 开 源 免 费 跨 平 台 的 音 视 频 流 解 决 方 案 ) 作 为 视 频 解 码 和 图 像 编 码 的 开 发 基 础 将 FFMpeg 应 用 在 I 帧 解 码 和 图 像 编 码 处 理 部 分 可 很 好 利 用 其 优 秀 的 编 解 码 能 力 3 实 验 结 果 本 文 选 择 " 某 DVB-S 信 号 处 理 系 统 " 和 通 用 视 频 播 放 软 件 作 为 实 验 平 台, 通 过 对 实 时 TS 流 视 频 信 息 进 行 处 理 并 回 放 对 比 进 行 实 验 验 证 实 验 中 选 取 体 育 新 闻 和 访 谈 节 目 3 种 具 有 代 表 意 义 的 视 频 TS 信 号 进 行 测 试 实 验 过 程 首 先 利 用 " 某 DVB-S 信 号 处 理 系 统 " 对 实 时 TS 信 号 中 某 一 路 视 频 节 目 进 行 关 键 帧 提 取 并 进 行 节 目 图 5 1 帧 处 理 流 程 示 意 图 录 制, 然 后 对 录 制 的 单 节 目 数 据 进 行 视 频 播 放 并 目 测 关 键 帧 数 量, 最 后 编 写 算 法 对 录 制 节 目 进 行 总 帧 数 统 计 表 2 为 实 验 结 果 记 录 表 2 实 验 测 试 结 果 测 试 序 号 2 3 TS 流 视 频 类 型 体 育 节 目 新 闻 访 谈 节 目 视 频 总 帧 数 3000 720 600 关 键 帧 数 ( 目 测 结 果 ) 94 35 22 关 键 帧 数 ( 本 文 方 法 提 取 ) 127 47 65 根 据 实 验 结 果, 可 以 发 现 本 方 法 对 于 访 谈 类 TS 流 视 频 的 处 理 结 果 冗 余 度 较 高, 而 对 于 画 面 变 化 度 较 大 的 新 闻 及 体 育 类 型 视 频, 本 方 法 处 理 结 果 与 人 工 目 测 结 果 相 差 不 大 4 结 束 语 通 过 实 验 可 以 证 实, 本 文 所 研 究 的 方 法 能 实 现 对 实 时 TS 流 视 频 信 息 的 快 速 浏 览, 并 且 由 于 该 算 法 实

758 信 息 工 程 大 学 学 报 2011 年 现 简 单 计 算 量 小, 应 用 系 统 对 硬 件 设 备 环 境 要 求 较 低, 实 际 应 用 中 一 部 普 通 计 算 机 即 可 实 现 对 卫 星 数 字 电 视 信 号 中 视 频 节 目 的 快 速 浏 览 本 文 的 研 究 方 法 可 以 满 足 大 多 数 用 户 的 实 际 需 求, 但 在 处 理 某 些 类 型 的 视 频 信 号 时 会 出 现 个 别 关 键 帧 提 取 冗 余 的 现 象 目 前 采 用 设 置 关 键 帧 时 间 间 隔 的 方 法 进 行 冗 余 去 除, 但 这 种 方 式 对 内 容 跳 跃 较 大 的 视 频 电 视 处 理 效 果 不 好, 容 易 因 间 隔 设 置 较 大 而 丢 弃 某 些 关 键 场 景 因 此 如 何 在 保 证 计 算 量 小 的 基 础 上 实 现 对 所 提 取 关 键 帧 进 行 冗 余 去 除 将 是 下 一 步 研 究 工 作 的 重 点 参 考 文 献 : [ 1] Broadcati 吨 DV. ETSI TR 101 200 V1. 1. 1-1997. Digital Video Broadcasting( DVB) : A Guideline for the Use of DVB Specifications and Standards [ S ]. 1997. [2] 江 濒. DVB-T 网 络 规 划 与 优 化 [D]. 上 海 : 复 旦 大 学, 2004. [3] 黄 成 辉, 邓 裕 昭 MPEG-2 中 TS 码 流 包 结 构 和 功 能 应 用 [ J]. 中 国 有 线 电 视, 2008, (3) :246-250. [4] 黄 浩, 伍 瑞 卿, 朱 维 乐, 等. Windows 平 台 上 的 TS 流 的 分 析 和 解 复 用 器 的 实 现 [J]. 中 国 有 线 电 视, 2006, (23 ) : 2303-2306. [ 5 ] 谢 晓 能. 语 义 相 关 内 容 挖 掘 的 视 频 摘 要 生 成 算 法 研 究 [D]. 杭 州 : 浙 江 大 学, 2006:1-4 9. [6] 赵 绪 视 频 镜 头 边 界 检 测 和 关 键 帧 提 取 技 术 研 究 [DJ. 西 安 : 西 安 电 子 科 技 大 学, 2008: 1-65 [7] Gunsel B,Tekalp A M, V AN BEEK P L. Content-based Access to Video Objects: Temporal Segmentation, Visual Summarization, and Feature Extraction[ J]. Signal Processing, 1998, 66(2): 261-280. [8 ] 张 继 东, 陈 都. 基 于 内 容 的 视 频 检 索 技 术 [J]. 电 视 技 术, 2002, ( 8) : 17-19,23. <>_<:>_<>_O_O_<>_<>_<>e< 二 >.<>.<>.<>.<>.<>.~.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>.<>-<>-<>-<>-<>-<>-<>-<>-<>-<>-<>-<>-<>- ( 上 接 第 728 页 ) 没 有 对 干 扰 的 类 型 分 类 识 别 在 实 际 应 用 过 程 中, 能 够 准 确 地 对 干 扰 类 型 进 行 识 别, 具 有 更 重 要 的 现 实 意 义 和 更 广 阔 的 应 用 价 值, 这 将 是 我 们 下 一 步 的 研 究 方 向 参 考 文 献 : [ 1 ] 王 素 玉, 沈 兰 苏. 智 能 视 觉 监 控 技 术 研 究 进 展 [JJ. 中 国 图 象 图 形 学 报, 2007, 12 (9) : 1505-1514. [2] 骆 云 志, 刘 治 红. 视 频 监 控 技 术 发 展 综 述 [J]. 兵 工 自 动 化, 2009, 28 (1 ) : 1-3. [3 ] 王 宝 君, 胡 福 桥. 基 于 角 点 的 监 控 摄 像 头 检 测 [JJ. 计 算 机 应 用 及 软 件, 2010, 27(5): 243-259. [4] 徐 璐, 胡 福 桥. 基 于 混 合 高 斯 模 型 的 摄 像 机 移 动 检 测 [J]. 计 算 机 应 用 及 软 件, 2010, 27 (6) : 233-235. [ 5] Ali Saglam, Alptekin Temizel. Real-time Adaptive Tamper Detection for Video Surveillance [ C] / / Advanced Video and Signal Based on Surveillance. September, 2009 :430-435. [6] Anil Aksay, Alptekin Temizel. Camera Tamper Detection Using Wavelet Analysis for Video Surveillance[ C] / / Advanced Video and Signal Based on Surveillance. September, 2007 :558-562. [7] Evan Ribinck, Stefan Atev, Osama Masoud. Real-time Detection of Camera Tamperi 吨 [ C ] / / Proceedings of the IEEE International Conference on Video and Signal Based Surveillance. November, 2006: 10-16.