5. 异 常 事 件 检 测 : 在 给 定 视 频 中 找 到 异 常 事 件 发 生 的 视 频 片 段 ( 时 间 ), 并 给 出 事 件 在 视 频 帧 内 的 发 生 位 置 ( 空 间 ) 为 在 比 赛 的 过 程 中 有 效 提 升 研 究 生 的 科 研 能 力, 组 织 方 将

Transcription

1 武 大 吉 奥 杯 第 二 届 全 国 研 究 生 智 慧 城 市 技 术 与 创 意 设 计 大 赛 之 视 频 分 析 技 术 挑 战 赛 参 赛 指 南 一 赛 事 说 明 ( 一 ) 赛 制 视 频 分 析 技 术 挑 战 赛 分 为 技 术 擂 台 赛 和 决 赛 两 个 阶 段 ( 二 ) 参 赛 方 式 1. 参 赛 对 象 各 培 养 单 位 正 式 注 册 的 在 读 研 究 生 以 及 已 确 定 读 研 资 格 的 本 科 生 均 可 参 赛 为 确 保 参 赛 选 手 资 格 有 效, 各 培 养 单 位 应 认 真 进 行 选 手 资 格 确 认 2. 参 赛 方 式 个 人 或 团 队, 个 人 作 品 申 报 总 人 数 不 超 过 2 人, 集 体 作 品 申 报 总 人 数 不 超 过 4 人 ( 三 ) 任 务 设 置 技 术 擂 台 赛 和 决 赛 均 设 置 同 样 的 比 赛 任 务, 包 括 : 1. 单 摄 像 头 多 类 对 象 检 测 : 检 测 摄 像 头 视 域 内 的 所 有 行 人 车 自 行 车 / 电 动 车 等 对 象 2. 单 摄 像 头 指 定 对 象 跟 踪 : 在 摄 像 头 视 域 内 跟 踪 指 定 的 对 象 3. 跨 摄 像 头 指 定 行 人 跟 踪 : 在 多 摄 像 机 网 络 内 指 定 行 人 在 摄 像 头 间 的 轨 迹 4. 人 脸 检 测 与 识 别 : 给 定 待 识 别 的 人 脸 库 ( 含 证 件 照 ), 要 求 检 测 并 识 别 出 摄 像 头 视 域 内 出 现 的 目 标 人 脸

2 5. 异 常 事 件 检 测 : 在 给 定 视 频 中 找 到 异 常 事 件 发 生 的 视 频 片 段 ( 时 间 ), 并 给 出 事 件 在 视 频 帧 内 的 发 生 位 置 ( 空 间 ) 为 在 比 赛 的 过 程 中 有 效 提 升 研 究 生 的 科 研 能 力, 组 织 方 将 提 供 上 述 任 务 的 参 考 算 法 代 码 及 相 关 论 文 ( 四 ) 比 赛 方 式 1. 数 据 集 本 次 比 赛 的 数 据 集 来 自 某 校 园 内 若 干 个 摄 像 头 的 监 控 视 频 根 据 用 途, 比 赛 数 据 集 分 为 训 练 数 据 集 验 证 数 据 集 决 赛 测 试 数 据 集 三 类 数 据 的 详 细 内 容 及 使 用 协 议 详 见 第 二 部 分 第 一 二 节 为 保 证 比 赛 的 公 平 性, 验 证 数 据 集 和 决 赛 测 试 数 据 集 应 遵 循 数 据 管 理 保 密 制 度, 详 见 第 二 部 分 第 三 节 2. 技 术 擂 台 赛 技 术 擂 台 赛 采 用 在 线 评 测 按 性 能 排 名 的 方 式 组 织 方 提 供 在 线 评 测 服 务, 参 赛 队 伍 可 以 按 规 定 格 式 在 线 提 交 在 验 证 数 据 集 上 本 队 算 法 运 行 的 结 果 文 件 ; 在 线 评 测 系 统 将 对 参 赛 队 伍 提 交 的 算 法 运 行 结 果 进 行 性 能 评 测, 并 按 性 能 高 低 分 任 务 进 行 排 名 具 体 评 测 方 法 和 指 标 见 附 件 6 技 术 擂 台 赛 开 始 前, 组 织 方 将 通 过 比 赛 网 站 发 布 训 练 数 据 集 算 法 平 台 ( 包 括 视 频 解 码 库 参 考 算 法 代 码 API 接 口 结 果 文 件 生 成 等 ), 以 确 保 参 赛 队 伍 的 算 法 运 行 结 果

3 能 正 确 提 交 到 在 线 评 测 系 统 上 进 行 性 能 评 测 参 赛 队 伍 须 根 据 API 接 口 集 成 本 队 研 发 的 算 法 到 算 法 平 台 技 术 擂 台 赛 开 始 后, 组 织 方 将 通 过 比 赛 网 站 发 布 验 证 数 据 集 验 证 数 据 集 与 训 练 数 据 集 采 集 自 相 同 的 监 控 摄 像 头 及 环 境 条 件, 与 训 练 数 据 集 不 重 叠, 用 于 在 线 评 测 系 统 中 客 观 评 测 参 赛 队 伍 的 算 法 性 能 评 测 结 果 的 排 名 将 以 两 周 为 单 位 公 布 在 比 赛 的 官 方 网 站 在 技 术 擂 台 赛 期 间, 每 个 参 赛 队 伍 每 周 最 多 可 以 提 交 2 次 结 果 进 行 在 线 评 测 组 织 方 将 根 据 参 赛 队 伍 数 量 及 排 名 情 况 选 择 一 定 数 量 的 队 伍 进 入 决 赛, 但 每 个 任 务 参 加 决 赛 的 队 伍 不 超 过 10 支 3. 决 赛 技 术 擂 台 赛 的 优 胜 队 伍 将 进 入 决 赛 决 赛 采 用 现 场 评 测 方 式, 由 组 织 方 提 供 场 地 和 硬 件 设 施 并 组 织 专 家 评 审 团 参 赛 队 伍 在 限 定 时 间 内 (24 小 时 ) 将 本 队 的 算 法 程 序 在 组 织 方 提 供 的 硬 件 平 台 (8 个 CPU 核 心 / 任 务 ) 上 调 试, 并 生 成 最 终 算 法 程 序 最 终 算 法 程 序 将 在 决 赛 测 试 数 据 集 上 运 行 并 得 到 评 测 结 果, 并 以 可 视 化 方 式 实 时 显 示 为 保 证 比 赛 的 公 平 性, 任 何 参 赛 团 队 不 能 自 带 设 备 参 加 决 赛 考 虑 到 大 赛 面 向 一 般 研 究 生, 参 赛 平 台 为 CPU, 不 提 供 GPU 等 其 他 特 殊 计 算 平 台 在 决 赛 期 间, 比 赛 开 始 后 严 禁 任 何 选 手 以 任 何 形 式 接 触 参 赛 计 算 机 终 端, 包 括 插 U 盘

4 移 动 硬 盘 或 调 整 程 序 参 数 等 ; 选 手 违 规 将 直 接 取 消 其 所 在 团 队 决 赛 资 格 为 确 保 比 赛 的 公 正 性, 决 赛 所 有 的 参 赛 队 伍 须 将 参 赛 程 序 提 交 给 组 织 方 存 档, 并 保 证 基 于 此 程 序 可 重 复 本 队 的 比 赛 结 果 该 程 序 副 本 保 存 在 教 育 部 学 位 中 心, 仅 供 比 赛 结 果 存 在 争 议 时 验 证 使 用 组 织 方 将 根 据 知 识 产 权 协 议 维 护 参 赛 队 伍 的 知 识 产 权 ( 五 ) 时 间 安 排 时 间 安 排 2015 年 3 月 29 日 报 名, 擂 台 赛 结 束 前 随 时 报 名 参 赛 2015 年 4 月 3 日 训 练 数 据 集 及 算 法 平 台 发 布 2015 年 4 月 7 日 验 证 数 据 集 发 布, 技 术 擂 台 赛 启 动 2015 年 7 月 15 日 技 术 擂 台 赛 结 束, 按 总 排 名 选 择 进 入 决 赛 的 队 伍 并 进 行 确 认 2015 年 8 月 中 下 旬 决 赛 及 学 术 论 坛 ( 参 赛 者 现 场 决 赛 ( 六 ) 奖 项 设 置 论 坛 研 讨 参 观 企 业 等 ) 五 项 比 赛 任 务, 共 设 特 等 奖 1 名 ( 可 空 缺 ), 每 项 任 务 设 一 等 奖 1 名, 二 等 奖 1 名, 三 等 奖 2 名, 企 业 冠 名 奖 若 干 所 有 进 入 决 赛 的 同 学 都 获 得 优 胜 奖, 同 时 参 加 智 慧 城 市 学 术 论 坛 ( 七 ) 知 识 产 权 和 作 品 所 有 权 1 为 保 证 比 赛 的 公 正 性, 决 赛 所 有 的 参 赛 队 伍 须 将 算

5 法 SDK 提 交 给 组 织 方 存 档, 并 保 证 基 于 此 算 法 SDK 能 使 得 本 队 提 交 的 结 果 可 重 复 2 比 赛 期 间 参 赛 队 伍 所 有 的 方 案 算 法 和 SDK 及 相 关 的 知 识 产 权 均 属 于 参 赛 队 伍 所 有, 组 织 方 承 诺 履 行 保 密 义 务, 并 不 用 于 除 本 比 赛 外 的 任 何 其 他 用 途 3 参 赛 队 伍 应 保 证 所 提 供 的 方 案 算 法 和 SDK 属 于 自 有 知 识 产 权 组 织 方 对 参 赛 队 伍 因 使 用 本 队 提 供 / 完 成 的 算 法 和 源 代 码 而 产 生 的 任 何 实 际 侵 权 或 者 被 任 何 第 三 方 指 控 侵 权 概 不 负 责 一 旦 上 述 情 况 和 事 件 发 生 参 赛 队 伍 必 须 承 担 一 切 相 关 法 律 责 任 和 经 济 赔 偿 责 任 并 保 护 组 织 方 免 于 承 担 该 等 责 任 二 数 据 库 ( 一 )PKU-SVD-B 数 据 库 PKU-SVD-B 数 据 库 由 北 京 大 学 视 频 编 解 码 技 术 国 家 工 程 实 验 室 联 合 北 京 大 学 保 卫 部 建 立 并 整 理, 主 要 用 于 全 国 研 究 生 智 慧 城 市 技 术 与 创 意 设 计 大 赛 视 频 分 析 技 术 挑 战 赛 本 说 明 将 从 命 名 规 则 视 频 内 容 存 储 方 式 和 共 享 要 求 几 个 方 面 对 PKU-SVD-B 数 据 库 库 进 行 简 单 的 介 绍 1. 命 名 规 则 将 数 据 集 按 照 数 据 用 途 和 任 务 类 型 划 分, 命 名 方 法 为 : * 数 据 用 途 *_* 任 务 类 型 * * 数 据 用 途 *(1 位 ):1 表 示 用 于 技 术 擂 台 赛 的 训 练 数 据 集,2 表 示 验 证 数 据 集,3 表 示 用 于 决 赛 的 测 试 数 据 集

6 * 任 务 类 型 *(2 位 ):01 表 示 单 摄 像 头 多 类 对 象 检 测 任 务,02 表 示 单 摄 像 头 指 定 对 象 跟 踪 任 务,03 表 示 跨 摄 像 头 指 定 行 人 跟 踪 任 务,04 表 示 人 脸 检 测 与 识 别 任 务,05 表 示 异 常 事 件 检 测 任 务 例 如, 数 据 集 1_05 表 示 用 于 技 术 擂 台 赛 中 异 常 事 件 检 测 任 务 的 训 练 数 据 集 每 个 数 据 集 划 分 为 若 干 个 子 任 务 的 子 数 据 集, 以 任 务 编 号 命 名 例 如 1_05\2 表 示 技 术 擂 台 赛 中 异 常 事 件 检 测 任 务 中, 用 于 其 第 2 个 子 任 务 的 数 据 集 每 个 子 数 据 集 中 视 频 文 件 的 命 名 方 法 为 : * 视 频 名 称 *_* 摄 像 头 编 号 *_* 分 辨 率 *_* 帧 率 *.* 扩 展 名 * * 视 频 名 称 *(64 位 内 ): 英 文 小 写 字 母 组 成 的 视 频 名 称, 长 度 在 64 个 字 符 内 * 摄 像 头 编 号 *(2 位 ): 表 示 拍 摄 视 频 的 摄 像 头 编 号, 不 到 2 位 的 前 面 补 零 ( 例 如, 第 2 号 摄 像 头 表 示 为 02) * 分 辨 率 *(8 位 到 10 位 ): 形 式 为 widthxheight, 其 中 width 表 示 图 像 的 宽 度,width 表 示 图 像 的 高 度 ( 例 如, 宽 为 720 像 素 高 为 576 像 素 的 视 频 分 辨 率 表 示 为 720x576) * 帧 率 *(2 位 ): 表 示 视 频 拍 摄 的 帧 率, 不 到 2 位 的 前 面 补 零 ( 例 如, 帧 率 为 30 的 则 表 示 为 30) * 扩 展 名 *(2 位 到 5 位 ): 表 示 视 频 的 扩 展 名, 包 括 avi, yuv,ts,asm,avses,avsts 等 例 如 1_05\2\v0018_07_1920x1080_30.avs 表 示 技 术 擂 台

7 赛 中 异 常 事 件 检 测 任 务 中, 用 于 其 第 2 个 子 任 务 的 数 据 集 里, 名 字 叫 做 v0018 在 第 7 号 摄 像 头 下 拍 摄 的 分 辨 率 为 帧 率 为 30 扩 展 名 为 avs 的 视 频 2. 视 频 内 容 PKU-SVD-B 数 据 库 中 包 含 : 来 自 北 京 大 学 校 园 内 20 个 摄 像 头 的 监 控 视 频, 分 辨 率 为 1080p 比 赛 数 据 集 按 场 景 难 易 等 分 为 两 级, 分 别 用 于 挑 战 赛 的 各 任 务 根 据 用 途, 比 赛 数 据 集 分 为 训 练 数 据 集 校 验 数 据 集 决 赛 测 试 数 据 集 三 类 3. 存 储 方 式 在 PKU-SVD-B 数 据 库 目 录 下, 我 们 按 照 视 频 的 识 别 号 建 立 目 录, 同 一 个 视 频 场 景 下 的 序 列 在 同 一 个 目 录 下 所 有 视 频 按 AVS-S2 标 准 进 行 编 码 存 储 组 织 方 将 提 供 该 编 码 标 准 的 视 频 解 码 库 及 程 序 解 析 该 格 式 视 频 的 API 4. 共 享 要 求 在 PKU-SVD-B 数 据 库 的 建 立 过 程 中, 北 京 大 学 视 频 编 解 码 国 家 工 程 实 验 室 与 联 合 单 位 签 署 了 PKU-SVD-B 数 据 库 使 用 许 可 协 议, 协 议 中 规 定 监 控 视 频 库 中 的 所 有 视 频 未 经 北 京 大 学 许 可 不 得 用 于 任 何 商 业 用 途 和 网 络 共 享 如 果 要 获 得 北 京 大 学 视 频 编 解 码 国 家 工 程 实 验 室 共 享 的 北 大 视 频 监 控 比 赛 数 据 库, 申 请 者 必 须 与 北 京 大 学 视 频 编 解 码 国 家 工 程 实 验 室 签 订 PKU-SVD-B 数 据 库 共 享 协 议

8 ( 二 )PKU-SVD-B 数 据 库 使 用 协 议 PKU-SVD-B 数 据 库 由 北 京 大 学 视 频 编 解 码 技 术 国 家 工 程 实 验 室 联 合 北 京 大 学 保 卫 部 建 立 并 整 理, 主 要 用 于 全 国 研 究 生 智 慧 城 市 技 术 与 创 意 设 计 大 赛 视 频 分 析 技 术 挑 战 赛 因 此,PKU-SVD-B 数 据 库 目 前 仅 用 于 科 学 研 究 所 有 使 用 PKU-SVD-B 数 据 库 的 科 研 人 员 必 须 签 署 本 协 定 并 遵 守 协 定 所 列 的 条 款 限 制 如 有 不 遵 守 本 协 定 的 行 为 发 生, 将 被 取 消 获 取 本 数 据 库 及 后 续 版 本 的 权 利, 并 将 被 追 究 民 事 责 任 所 有 科 研 人 员 需 要 遵 守 PKU-SVD-B 数 据 库 的 下 列 约 束 条 款 : 仅 本 数 据 库 中 公 开 数 据 可 以 并 仅 可 以 发 表 在 监 控 视 频 分 析 领 域 的 论 文 或 者 技 术 报 告 中, 对 于 未 公 开 部 分 不 准 以 任 何 形 式 出 现 在 任 何 的 文 档 中 数 据 库 内 所 有 数 据 不 准 发 布 在 商 业 资 料 新 闻 报 刊 或 者 其 他 公 共 媒 体 上 所 有 使 用 了 PKU-SVD-B 数 据 库 的 科 技 论 文 文 档 和 报 告 必 须 在 致 谢 中 表 明 使 用 了 本 数 据 库 所 有 使 用 了 PKU-SVD-B 数 据 库 的 科 技 论 文 文 档 和 报 告 必 须 立 即 转 发 给 北 京 大 学 视 频 编 解 码 技 术 国 家 工 程 实 验 室 不 论 盈 利 与 否, 均 不 得 采 用 任 何 方 式 对 本 数 据 库 进 一 步 发 布 发 表 复 制 或 者 进 一 步 传 播 本 条 款 之 限 定 包 括 应 其 他 大 学 单 位 或 者 公 司 的 要 求, 进 一 步 分 发 复 制 或 者 发 布 本 数 据 库 内 所 有 数 据 仅 可 用 于 科 学 研 究 本 数 据 库 整 体 或 者 部 分 均 不 得 以 任 何 方 式 用 于 商 业 用 途

9 本 协 定 最 终 解 释 权 归 北 京 大 学 视 频 编 解 码 技 术 国 家 工 程 实 验 室 所 有 姓 名 : 职 务 / 职 称 : 签 名 : 日 期 : 组 织 名 称 : 通 讯 地 址 : 电 话 : 传 真 : 电 子 邮 箱 : ( 三 ) 视 频 分 析 技 术 挑 战 赛 数 据 管 理 的 保 密 制 度 1. 目 的 为 保 证 比 赛 的 公 平 性 和 严 肃 性, 特 制 定 技 术 挑 战 赛 过 程 中 应 遵 循 的 数 据 管 理 保 密 制 度 ( 以 下 简 称 本 制 度 ) 2. 适 用 范 围 根 据 用 途, 比 赛 数 据 集 分 为 训 练 数 据 集 校 验 数 据 集 决 赛 测 试 数 据 集 三 类 本 制 度 的 适 用 范 围, 包 括 技 术 挑 战 赛 的 验 证 数 据 集 和 决 赛 测 试 数 据 集 ; 公 开 的 训 练 数 据 集 不 在 本 制 度 的 适 用 范 围 内 3. 数 据 产 生 方 式 整 个 技 术 挑 战 赛 的 数 据 采 集 自 来 自 北 京 大 学 校 园 内 20 个 摄 像 头 的 监 控 视 频, 对 每 类 任 务 采 集 的 数 据 量 不 少 于 3 小 时, 其 中 以 15 分 钟 作 为 一 个 基 本 数 据 单 元 上 述 三 类 数 据

10 采 用 统 一 的 标 注 标 准 和 方 法 4. 数 据 划 分 方 式 在 所 有 数 据 采 集 标 注 完 成 后, 在 专 家 委 员 会 的 监 督 下, 采 用 数 据 集 划 分 程 序 以 随 机 的 方 式 产 生 验 证 数 据 集 和 决 赛 测 试 数 据 集, 所 得 的 划 分 结 果 封 存 在 教 育 部 学 位 与 研 究 生 教 育 发 展 中 心 5. 数 据 分 发 在 技 术 挑 战 赛 的 技 术 擂 台 赛 或 决 赛 阶 段 开 始 之 前, 在 专 家 委 员 会 的 监 督 下, 从 教 育 部 学 位 与 研 究 生 教 育 发 展 中 心 获 取 相 应 的 验 证 数 据 集 或 决 赛 测 试 数 据 集, 并 进 入 比 赛 评 测 系 统

11 附 件 : 视 频 分 析 挑 战 赛 各 项 任 务 说 明 一 单 摄 像 头 多 类 对 象 检 测 评 测 ( 一 ) 评 测 对 象 本 项 评 测 的 对 象 为 公 共 场 景 下 的 行 人 与 车 辆 检 测 技 术 ( 分 两 个 子 任 务, 一 个 子 任 务 只 需 检 测 图 片 中 的 行 人 ( 文 件 夹 名 最 后 两 位 为 _1 ), 另 一 个 子 任 务 需 检 测 图 片 中 的 行 人 和 车 辆 ( 文 件 夹 名 最 后 两 位 为 _2 )), 即 检 测 测 试 图 片 中 是 否 有 行 人 / 车 辆 存 在 若 存 在, 将 行 人 / 车 辆 所 在 矩 形 框 信 息 保 存 下 来 ( 二 ) 问 题 定 义 和 任 务 说 明 1. 问 题 定 义 在 本 任 务 中, 给 定 的 训 练 集 数 据 包 含 各 个 场 景 的 图 片 及 标 注 文 件 ( 即 图 片 中 行 人 / 车 辆 的 矩 形 框 位 置 信 息 ), 任 务 目 标 是 对 测 试 图 片 进 行 行 人 / 车 辆 检 测, 对 检 测 到 的 行 人 / 车 辆 的 矩 形 框 位 置 按 评 测 结 果 文 件 格 式 保 存 下 来 评 测 结 果 文 件 格 式 见 本 部 分 第 四 节 行 人 检 测 : 多 类 ( 行 人 和 车 辆 ) 检 测 :

12 2. 任 务 说 明 多 类 检 测 任 务 可 以 描 述 为 : 给 定 几 个 不 同 场 景 的 图 片 集 作 为 测 试 集, 由 参 评 系 统 自 动 地 在 测 试 集 中 进 行 行 人 / 车 辆 检 测, 并 返 回 该 图 片 检 测 到 的 行 人 / 车 辆 的 位 置 信 息 ( 三 ) 评 测 数 据 集 1. 训 练 数 据 集 本 任 务 的 训 练 数 据 集 中 包 含 行 人 检 测 (4 个 场 景 ) 和 多 类 检 测 (4 个 场 景 ) 评 测 组 织 者 将 提 供 每 个 场 景 约 800 张 图 片 ( 标 注 文 件 中 含 groundtruth) 作 为 训 练 数 据, 参 评 单 位 也 可 以 自 行 收 集 数 据 用 于 训 练 2. 测 试 数 据 集 本 任 务 的 测 试 数 据 集 中 包 含 行 人 检 测 (4 个 场 景 ) 和 多 类 检 测 (4 个 场 景 ), 由 评 测 组 织 者 收 集 和 标 注 技 术 擂 台 赛 中, 测 试 集 中 行 人 检 测 (4 个 场 景 ) 每 个 场 景 约 1500 张 图 片, 多 类 检 测 (4 个 场 景 ) 每 个 场 景 约 1000 张 图 片 决 赛 中, 测 试 集 中 每 个 场 景 的 图 片 约 为 1500 张 图 片

13 ( 四 ) 参 评 系 统 输 入 输 出 文 件 格 式 1. 测 试 数 据 格 式 本 任 务 的 测 试 图 片 文 件 格 式 统 一 为 jpg 图 片 格 式 2. 评 测 结 果 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 请 按 照 指 定 格 式 保 存 ( 参 赛 者 可 以 利 用 SDK 自 动 生 成 ) 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 单 摄 像 头 多 类 对 象 检 测 任 务 编 号 为 1) mediafile 为 数 据 集 名 称, 对 应 于 数 据 集 的 名 称 ( 例 如, 对 于 单 摄 像 头 多 类 对 象 检 测 的 hongsilounorth_13_1920x1080_30_1 数 据 集, 其 名 称 即 为 hongsilounorth_13_1920x1080_30_1) imagename 代 表 图 片 名 称 l t r b 分 别 代 表 检 测 矩 形 框 的 左 上 右 下 type 代 表 目 标 类 型 (1 代 表 车 辆,2 代 表 行 人 ) 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="2" mediafile="dongcemen_6_1280x720_30_2" /> <Items> <Item imagename=" jpg"> <Label type="2" l="606" t="88" r="640" b="192" /> <Label type="2" l="652" t="94" r="694" b="190" /> <Item imagename=" jpg"> <Label type="2" l="606" t="94" r="640" b="188" /> <Label type="2" l="654" t="88" r="690" b="186" /> <Item imagename=" jpg"> <Label type="2" l="604" t="88" r="640" b="194" /> <Label type="2" l="656" t="88" r="698" b="190" /> <Label type="2" l="684" t="390" r="848" b="680" />

14 </Items> </Message> ( 五 ) 评 价 指 标 1. 技 术 擂 台 赛 评 测 指 标 参 照 PASCAL VOC 比 赛 评 测 方 法, 对 于 任 意 一 个 含 类 别 标 签 的 检 测 结 果, 在 类 别 标 签 一 致 前 提 下, 如 果 与 Ground Truth 的 唯 一 标 注 的 矩 形 框 满 足 公 式 (1), 则 被 认 为 是 正 检, 否 则 为 误 检 ; 多 个 检 测 框 对 应 一 个 标 注 框, 则 只 有 其 中 一 个 检 测 框 被 认 为 正 检, 其 余 均 为 误 检 (1) 其 中 为 所 提 交 的 任 一 检 测 结 果 框, 为 Ground Truth 标 注 框, 函 数 用 于 计 算 矩 形 框 的 面 积 根 据 上 述 正 检 判 断 规 则, 计 算 检 测 的 召 回 率 Recall 和 准 确 率 Precision 以 及 Fscore 作 为 评 测 指 标, 其 中 Fscore 为 大 赛 第 一 排 序 指 标, 该 值 越 大 说 明 算 法 性 能 越 好 其 中, f 为 正 检 数 目, p 为 误 检 数 目, t n 为 漏 检 数 目 (2) 2. 决 赛 评 测 指 标 决 赛 任 务 的 评 测 指 标 最 终 评 测 指 标 包 含 两 部 分 : 检 测 性 能 评 测 以 及 时 间 惩 罚 因 子, 具 体 定 义 为 : (3) 其 中, 与 技 术 擂 台 赛 评 测 指 标 定 义 相 同, 为 时 间 惩 罚 项, 定 义 如 下 : (4) 其 中, (T 为 算 法 运 行 时 间, T 0 为 规 定 时 间, 均 以 分 为 单 位 ) 为 超 过 规 定 时 间 的 比 例 时 间 计 算 惩 罚 的 原 则 为 : 时 间 惩 罚 因 子 只 适 用 于 没 有 在 规 定 时 间 内 运 行 完 的

15 算 法 ; 惩 罚 因 子 根 据 超 过 规 定 时 间 的 多 少 来 确 定, 超 过 时 间 越 多, 惩 罚 因 子 越 大, 而 算 法 运 行 时 间 超 过 规 定 时 间 2 小 时 以 上 的 则 计 为 无 效 成 绩

16 二 单 摄 像 头 指 定 对 象 跟 踪 ( 一 ) 评 测 对 象 本 项 评 测 的 对 象 为 公 共 场 景 下 的 单 摄 像 头 指 定 对 象 跟 踪 技 术 ( 包 括 行 人 和 车 辆 的 跟 踪 ), 即 给 出 目 标 ( 行 人 / 车 辆 ) 出 现 的 帧 号 及 位 置 信 息, 在 后 续 的 视 频 中 对 这 一 目 标 进 行 跟 踪, 将 跟 踪 的 结 果 ( 帧 号 及 位 置 信 息 ) 保 存 下 来 ( 二 ) 问 题 定 义 和 任 务 说 明 1. 问 题 定 义 在 本 任 务 中, 给 定 的 训 练 集 数 据 包 含 4 个 场 景 的 avs 视 频 及 标 注 文 件 ( 即 视 频 中 行 人 / 车 辆 的 矩 形 框 信 息 组 织 方 提 供 视 频 奇 数 帧 的 标 注 信 息, 规 定 视 频 起 始 帧 号 为 0, 即 标 注 1,3,5,7.. 帧 ) 测 试 阶 段, 组 织 方 提 供 各 个 场 景 的 配 置 文 件 ( 包 含 指 定 目 标 的 初 始 信 息 ( 出 现 的 帧 号, 矩 形 框 )), 任 务 目 的 是 对 配 置 文 件 中 的 指 定 目 标, 在 其 后 续 视 频 中 对 其 进 行 跟 踪, 并 将 跟 踪 的 结 果 ( 帧 号 及 位 置 信 息 ) 按 评 测 结 果 文 件 格 式 保 存 下 来 配 置 文 件 及 评 测 结 果 文 件 格 式 见 本 部 分 第 四 节 单 摄 像 头 指 定 对 象 跟 踪 : 2. 任 务 说 明 单 摄 像 头 指 定 对 象 跟 踪 任 务 可 以 描 述 为 : 给 定 4 个 不 同 场 景 的 视 频 作 为 测 试 集, 并 提 供

17 配 置 文 件 ( 包 含 要 跟 踪 目 标 的 初 始 信 息 ( 出 现 的 帧 号, 矩 形 框 等 )), 由 参 评 系 统 自 动 地 在 测 试 集 中 进 行 指 定 对 象 跟 踪, 并 将 跟 踪 结 果 保 存 下 来 ( 三 ) 评 测 数 据 集 1. 训 练 数 据 集 本 任 务 的 训 练 数 据 集 中 包 含 4 个 场 景 对 每 个 场 景 评 测 组 织 者 将 提 供 7 分 钟 视 频 和 标 注 文 件 ( 包 含 约 70 个 目 标 的 跟 踪 结 果 ) 作 为 训 练 数 据, 参 评 单 位 也 可 以 自 行 收 集 数 据 用 于 训 练 2. 测 试 数 据 集 本 任 务 的 测 试 数 据 集 中 包 含 4 个 场 景, 由 评 测 组 织 者 收 集 和 标 注 技 术 擂 台 赛 中, 测 试 集 中 每 个 场 景 约 7 分 钟, 指 定 约 70 个 目 标 决 赛 中, 测 试 集 中 每 个 场 景 约 8 分 钟, 指 定 约 100 个 目 标 ( 四 ) 参 评 系 统 输 入 输 出 文 件 格 式 1. 测 试 数 据 格 式 本 任 务 的 测 试 视 频 文 件 格 式 统 一 为 avs 视 频 格 式, 配 置 文 件 为 xml 格 式 2. 配 置 文 件 格 式 组 织 方 提 供 的 配 置 文 件 名 称 为 视 频 名 + _peizhi, 格 式 为 xml 文 件 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 单 摄 像 头 指 定 对 象 跟 踪 任 务 编 号 为 2) mediagroup 为 视 频 名 称, 例 如, 对 于 dongcemen_6_1280x720_30 视 频 进 行 指 定 对 象 跟 踪, 其 名 称 即 为 dongcemen_6_1280x720_30 mediacount 为 视 频 的 个 数, 单 摄 像 头 指 定 对 象 跟 踪 视 频 个 数 为 1 VideoName 为 评 测 视 频 名 称 ; 注 意 每 一 个 视 频 均 应 有 一 个 对 应 的 Items 标 签 startframenum 为 本 目 标 id 起 始 出 现 的 帧 号,endFrameNum 为 目 标 消 失 以 后 的 帧 号 ( 即

18 跟 踪 目 标 在 endframenum 之 前 已 经 消 失 ) l t r b id 分 别 代 表 跟 踪 矩 形 框 的 左 上 右 下 及 目 标 id 号 type 代 表 目 标 类 型 (1 代 表 车 辆,2 代 表 行 人 ) 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="2" mediagroup="yitiwest_8_1280x720_30" mediacount="1"/> <TrackTarget> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="7941" endframenum="8711"> <Item id="35" type="2" l="966" t="298" r="1122" b="700"/> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="8027" endframenum="8861"> <Item id="39" type="2" l="886" t="96" r="910" b="154"/> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="8027" endframenum="8841"> <Item id="38" type="2" l="858" t="88" r="882" b="148"/> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="8027" endframenum="8825"> <Item id="37" type="2" l="832" t="86" r="859" b="146"/> </Items> </TrackTarget> </Message> 3. 评 测 结 果 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 需 按 照 指 定 格 式 保 存 ( 可 以 由 SDK 自 动 生 成 ) 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 例 如, 单 摄 像 头 指 定 对 象 跟 踪 任 务 编 号 为 2) mediafile 为 子 任 务 名 称, 例 如, 对 于 dongcemen_6_1280x720_30.avs 视 频 进 行 指 定 对 象 跟 踪, 其 名 称 即 为 dongcemen_6_1280x720_30 jobid 为 指 定 对 象 的 id 号, 即 对 指 定 的 目 标 id 进 行 跟 踪 startframenum 为 本 目 标 id 起 始 出 现 的 帧 号,endFrameNum 为 目 标 消 失 以 后 的 帧 号 ( 即 跟 踪 目 标 在 endframenum 之 前 已 经 消 失 ) framenum 代 表 帧 号 l t r b id 分 别 代 表 跟 踪 矩 形 框 的 左 上 右 下 及 目 标 id 号

19 type 代 表 目 标 类 型 (1 代 表 车 辆,2 代 表 行 人 ) 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="2" mediafile="dongcemen_6_1280x720_30_r1" /> <Items jobid="35" startframenum="7941" endframenum="8565"> <Item framenum="7941"> <Label type="2" l="966" t="298" r="1122" b="700" id="35" /> <Item framenum="7943"> <Label type="2" l="976" t="300" r="1124" b="702" id="35" /> <Item framenum="7947"> <Label type="2" l="978" t="308" r="1136" b="698" id="35" /> <Items jobid="36" startframenum="8039" endframenum="8353"> <Item framenum="8039"> <Label type="2" l="770" t="408" r="900" b="700" id="36" /> <Item framenum="8041"> <Label type="2" l="784" t="396" r="906" b="682" id="36" /> <Item framenum="8043"> <Label type="2" l="796" t="384" r="908" b="678" id="36" /> <Item framenum="8045"> <Label type="2" l="802" t="376" r="906" b="668" id="36" /> </Items> </Message> ( 五 ) 评 价 指 标 参 照 PETS 比 赛 中 对 象 跟 踪 评 测 方 法, 选 取 MOT A 和 MOT P 作 为 对 象 跟 踪 性 能 评 测 指 标, 该 值 越 大 说 明 跟 踪 算 法 性 能 越 好 (5) m fp 其 中, t 为 漏 跟 目 标 个 数, t 为 误 跟 目 标 个 数, 则 为 跟 踪 轨 迹 id switch 次 数 ; i d t 为 第 t 帧 的 第 i 个 正 确 的 跟 踪 框, t c 为 为 第 t 帧 的 Ground Truth 目 标 个 数

20 最 终 性 能 指 标 按 如 下 Fscore 进 行 排 名 : (6) 其 中 暂 定 为 0.75

21 三 跨 摄 像 头 指 定 行 人 跟 踪 ( 一 ) 评 测 对 象 本 项 评 测 的 对 象 为 公 共 场 景 下 的 跨 摄 像 头 指 定 行 人 跟 踪 技 术 即 给 定 一 组 不 同 场 景 的 视 频, 给 出 指 定 目 标 第 一 次 出 现 的 信 息 ( 包 括 摄 像 头 名 称, 帧 号, 矩 形 框 信 息 ), 对 指 定 的 目 标 进 行 跟 踪, 并 在 目 标 在 当 前 场 景 消 失 后 在 其 余 场 景 ( 包 含 当 前 场 景 ) 的 视 频 中 进 行 搜 索 继 续 跟 踪, 将 跟 踪 的 结 果 ( 视 频 名, 帧 号 及 位 置 信 息 ) 保 存 下 来 ( 二 ) 问 题 定 义 和 任 务 说 明 1. 问 题 定 义 在 本 任 务 中, 给 定 的 训 练 集 数 据 包 含 3 个 子 任 务, 组 织 方 对 每 个 子 任 务 提 供 各 个 场 景 的 avs 视 频 及 标 注 文 件 ( 即 各 个 视 频 中 指 定 行 人 的 矩 形 框 信 息 组 织 方 提 供 的 视 频 奇 数 帧 的 标 注 结 果, 规 定 视 频 起 始 帧 号 为 0, 即 标 注 1,3,5,7.. 帧 ) 测 试 阶 段, 组 织 方 提 供 指 定 行 人 的 配 置 文 件 ( 包 含 指 定 目 标 的 初 始 信 息 ( 出 现 的 视 频 名 称, 帧 号, 矩 形 框 等 )), 任 务 目 的 是 对 配 置 文 件 中 的 指 定 目 标, 在 其 后 续 视 频 中 对 其 进 行 跟 踪, 并 在 目 标 消 失 后 在 其 余 场 景 的 视 频 中 进 行 搜 索 继 续 跟 踪, 将 跟 踪 的 结 果 ( 视 频 名 称, 帧 号 及 位 置 信 息 ) 按 评 测 结 果 文 件 格 式 保 存 下 来 配 置 文 件 及 评 测 结 果 文 件 格 式 见 本 部 分 第 四 节 跨 摄 像 头 指 定 行 人 跟 踪 :

22 2. 任 务 说 明 跨 摄 像 头 指 定 行 人 跟 踪 任 务 可 以 描 述 为 : 给 定 几 个 不 同 场 景 的 视 频 作 为 测 试 集, 并 提 供 配 置 文 件 ( 包 含 要 跟 踪 目 标 的 初 始 信 息 ( 出 现 的 视 频 名 称, 帧 号, 矩 形 框 等 )), 由 参 评 系 统 自 动 地 在 测 试 集 中 进 行 目 标 跟 踪, 并 在 目 标 消 失 后 在 其 余 场 景 的 视 频 中 进 行 搜 索 继 续 跟 踪, 将 跟 踪 结 果 保 存 下 来 ( 三 ) 评 测 数 据 集 1. 训 练 数 据 集 本 任 务 的 训 练 数 据 集 中 包 含 3 子 任 务, 分 别 包 含 个 场 景 对 每 个 场 子 任 务 分 别 提 供 不 同 场 景 的 视 频 和 标 注 文 件 ( 包 含 约 8 个 目 标 的 跨 头 跟 踪 结 果 ) 作 为 训 练 数 据, 参 评 单 位 也 可 以 自 行 收 集 数 据 用 于 训 练 2. 测 试 数 据 集 本 任 务 的 测 试 数 据 集 中 包 含 3 子 任 务, 分 别 包 含 个 场 景, 由 评 测 组 织 者 收 集 和 标 注 技 术 擂 台 赛 中, 测 试 集 中 3 个 子 任 务, 每 个 子 任 务 指 定 约 12 个 目 标 决 赛 中, 测 试 集 中 3 个 子 任 务, 共 约 40 分 钟, 每 个 子 任 务 指 定 约 12 个 目 标

23 ( 四 ) 参 评 系 统 输 入 输 出 文 件 格 式 1. 测 试 数 据 格 式 本 任 务 的 测 试 视 频 文 件 格 式 统 一 为 avs 视 频 格 式 2. 配 置 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 需 按 照 指 定 格 式 保 存 ( 可 由 SDK 自 动 生 成 ) 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 跨 摄 像 头 指 定 行 人 跟 踪 任 务 编 号 为 3) mediagroup 为 子 任 务 名 称, 对 应 于 数 据 集 中 的 子 任 务 编 号 ( 例 如, 对 于 跨 摄 像 头 指 定 行 人 跟 踪 任 务 的 第 2 个 子 任 务, 其 名 称 即 为 MultiPedestrianTracking2) mediacount 为 视 频 的 个 数, 如 MultiPedestrianTracking1_peizhi.xml 中, 指 定 的 8 个 目 标, 其 初 始 位 置 所 在 的 视 频 有 2 个, 则 mediacount 为 2 VideoName 为 评 测 视 频 名 称 ; 注 意 每 一 个 视 频 均 应 有 一 个 对 应 的 Items 标 签 startframenum 为 本 目 标 id 起 始 出 现 的 帧 号,endFrameNum 为 目 标 消 失 以 后 的 帧 号 ( 即 跟 踪 的 帧 号 最 大 不 超 过 endframenum) framenum 代 表 帧 号 l t r b id 分 别 代 表 跟 踪 矩 形 框 的 左 上 右 下 及 目 标 id 号 type 代 表 目 标 类 型 (1 代 表 车 辆,2 代 表 行 人 ) 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="3" mediagroup="multipedestriantracking2" mediacount="1" /> <TrackTarget> <Items VideoName="yitiwest_8_1280x720_30" startframenum="57" endframenum="6299"> <Item id="9" type="2" l="333" t="101" r="356" b="154"/> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="57" endframenum="1203"> <Item id="7" type="2" l="317" t="104" r="334" b="154" /> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="885" endframenum="6299">

24 <Item id="3" type="2" l="373" t="106" r="391" b="154" /> </Items> <Items VideoName=" yitiwest_8_1280x720_30" startframenum="1305" endframenum="2549"> <Item id="2" type="2" l="310" t="101" r="328" b="143" /> </Items> </TrackTarget> </Message> 3. 评 测 结 果 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 需 由 SDK 自 动 生 成 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 例 如, 跨 摄 像 头 指 定 行 人 跟 踪 任 务 编 号 为 3) mediacount 为 视 频 的 个 数, 如 MultiPedestrianTracking1_ 中, 指 定 的 8 个 目 标, 其 所 在 的 初 始 视 频 有 3 个, 则 mediacount 为 3 mediafile 为 子 任 务 名 称, 例 如, 对 于 第 一 个 子 任 务 进 行 跨 摄 像 头 指 定 行 人 跟 踪, 其 名 称 即 为 MultiPedestrianTracking1 VideoName 为 评 测 视 频 名 称 ; 注 意 每 一 个 视 频 均 应 有 一 个 对 应 的 Items 标 签 startframenum 为 本 目 标 id 起 始 出 现 的 帧 号,endFrameNum 为 目 标 消 失 以 后 的 帧 号 ( 即 跟 踪 的 帧 号 最 大 不 超 过 endframenum) framenum 代 表 帧 号 l t r b id 分 别 代 表 跟 踪 矩 形 框 的 左 上 右 下 及 目 标 id 号 type 代 表 目 标 类 型 (1 代 表 车 辆,2 代 表 行 人 ) 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="3" mediacount="2" meidiafile="multipedestriantracking1" /> <Items VideoName="yitiwest_8_1280x720_30" startframenum="145" endframenum="6053"> <Item framenum="145"> <Label type="2" l="621" t="147" r="653" b="224" id="9" /> <Item framenum="149"> <Label type="2" l="618" t="147" r="651" b="224" id="9" /> <Item framenum="153">

25 <Label type="2" l="617" t="148" r="649" b="225" id="9" /> <Item framenum="157"> <Label type="2" l="615" t="150" r="647" b="226" id="9" /> </Items> <Items VideoName="weiming_7_1280x720_30" startframenum="169" endframenum="6125"> <Item framenum="169"> <Label type="2" l="1250" t="277" r="1279" b="438" id="9" /> <Item framenum="173"> <Label type="2" l="1236" t="275" r="1279" b="437" id="9" /> <Item framenum="177"> <Label type="2" l="1216" t="275" r="1279" b="441" id="9" /> <Item framenum="181"> <Label type="2" l="1199" t="275" r="1258" b="449" id="9" /> <Item framenum="185"> <Label type="2" l="1182" t="271" r="1248" b="443" id="9" /> </Items> </Message> ( 五 ) 评 价 指 标 对 所 有 N 个 摄 像 头 中 的 每 个 摄 像 头, 在 时 间 轴 上 设 置 个 匹 配 节 点, 每 个 匹 配 节 点 在 时 间 轴 上 具 有 一 定 的 范 围 ( 例 如 前 后 10 帧 ) 如 果 某 个 对 象 的 运 动 轨 迹 在 这 个 时 间 范 围 内 经 过 一 个 摄 像 头, 则 认 为 这 条 轨 迹 包 含 了 对 应 的 匹 配 节 点 对 于 某 一 个 指 定 跟 踪 对 象, 在 某 个 包 含 的 匹 配 节 点 范 围 内, 当 提 交 的 跟 踪 轨 迹 和 Ground Truth 跟 踪 轨 迹 有 超 过 50% 的 帧 都 能 匹 配 上 ( 参 照 对 象 检 测 匹 配 方 式 ) 时, 则 认 定 该 跟 踪 对 象 在 跨 头 跟 踪 时 匹 配 到 了 该 匹 配 节 点 对 于 第 i 个 跟 踪 对 象, 评 测 指 标 为 : i i 其 中 N 是 总 的 摄 像 头 数, G ( G < T ) 是 第 i 个 指 定 跟 踪 对 象 的 跟 踪 Ground Truth 轨 n n n (7)

26 迹 在 摄 像 头 n 里 包 含 的 匹 配 节 点 的 数 目 i C n 是 第 i 个 指 定 跟 踪 对 象 在 摄 像 头 n 里 匹 配 到 的 i D n 匹 配 节 点 的 数 目 是 第 i 个 指 定 跟 踪 对 象 在 摄 像 头 n 里 包 含 的 匹 配 节 点 的 数 目 假 设 上 图 为 某 个 指 定 跟 踪 对 象 的 评 测 过 程 : 时 间 轴 上 标 识 的 是 不 同 的 匹 配 节 点 ; 提 交 结 果 为 提 交 的 跟 踪 轨 迹 所 包 含 的 匹 配 节 点 (1 号 摄 像 头 下 1 个,3 号 摄 像 头 下 1 个,7 号 摄 像 头 下 2 个,8 号 摄 像 头 下 1 个, 共 5 个 ); 标 准 结 果 为 当 前 对 象 的 Ground-truth 轨 迹 包 含 的 匹 配 节 点 (1 号 摄 像 头 下 2 个,3 号 摄 像 头 下 1 个,6 号 摄 像 头 下 2 个,8 号 摄 像 头 下 2 个, 共 7 个 ) 由 图 可 知, 匹 配 到 的 节 点 为 : 1 号 摄 像 头 下 第 一 个 节 点,3 号 摄 像 头 的 节 点,8 号 摄 像 头 的 第 二 个 节 点, 共 3 个 因 此, 这 条 轨 迹 的 评 测 结 果 为 : 对 于 所 有 的 指 定 跟 踪 目 标, 评 测 指 标 为 : (8) 其 中 M 是 所 有 被 指 定 跟 踪 目 标 对 象 数 目

27 四 人 脸 检 测 与 识 别 ( 一 ) 评 测 对 象 本 项 评 测 的 对 象 为 公 共 场 景 下 的 人 脸 检 测 与 识 别 技 术, 即 检 测 测 试 图 片 中 是 否 存 在 与 给 定 证 件 照 一 致 的 人 脸 若 存 在, 将 对 应 的 人 脸 所 在 矩 形 框 以 及 ID 信 息 保 存 下 来 ( 二 ) 问 题 定 义 与 任 务 说 明 1. 问 题 定 义 在 本 任 务 中, 给 定 的 训 练 集 数 据 包 含 2 个 场 景 的 图 片,gallery( 证 件 照 库 ) 及 probe( 测 试 图 片 ) 训 练 集 里 Probe 中 的 测 试 图 片 的 标 注 文 件 已 经 给 出, 标 注 文 件 包 含 人 脸 在 图 片 中 的 位 置 信 息 以 及 ID 信 息 任 务 目 标 是 在 给 出 gallery 的 基 础 上, 对 probe 中 测 试 图 片 进 行 人 脸 检 测 与 识 别, 对 识 别 出 为 gallery 证 件 照 库 的 人 脸, 将 其 矩 形 框 位 置 以 及 ID 信 息 按 评 测 结 果 文 件 格 式 保 存 下 来 评 测 结 果 文 件 格 式 见 本 部 分 第 四 节 人 脸 识 别 : gallery: Prob:

28 2. 任 务 说 明 人 脸 检 测 与 识 别 任 务 可 以 描 述 为 : 给 定 2 个 不 同 场 景 的 图 片 集 作 为 probe, 并 给 出 指 定 的 gallery 证 件 照 库 ( 含 待 识 别 的 人 脸 证 件 照 ), 由 参 评 系 统 自 动 地 在 probe 中 进 行 人 脸 检 测 与 识 别, 并 返 回 该 图 片 检 测 并 识 别 出 为 gallery 证 件 照 库 的 人 脸 的 位 置 信 息 以 及 ID 信 息 ( 三 ) 评 测 数 据 集 1. 训 练 数 据 集 本 任 务 的 训 练 数 据 集 中 包 含 2 个 场 景,gallery 证 件 照 库 及 标 注 文 件 ( 即 与 证 件 照 库 中 的 人 对 应 的 图 片 中 人 脸 的 矩 形 框 位 置 信 息 ) 评 测 组 织 者 将 提 供 每 个 场 景 约 1000 张 图 片 ( 标 注 文 件 中 含 groundtruth) 作 为 训 练 数 据, 参 评 单 位 也 可 以 自 行 收 集 数 据 用 于 训 练 2. 测 试 数 据 集 本 任 务 的 测 试 数 据 集 中 包 含 2 个 场 景, 由 评 测 组 织 者 收 集 和 标 注 技 术 擂 台 赛 中, 测 试 集 中 每 个 场 景 约 1000 张 图 片,gallery 证 件 照 库 中 有 10 张 证 件 照 决 赛 中, 测 试 集 中 每 个 场 景 的 图 片 约 为 1100 张 图 片,gallery 证 件 照 库 中 有 10 张 证 件 照

29 ( 四 ) 参 评 系 统 输 入 输 出 文 件 格 式 1. 测 试 数 据 格 式 本 任 务 的 测 试 图 片 文 件 格 式 统 一 为 jpg 图 片 格 式 2. 评 测 结 果 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 需 由 SDK 自 动 生 成 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 人 脸 检 测 与 识 别 任 务 编 号 为 4) mediafile 为 数 据 集 名 称, 对 应 于 数 据 集 的 名 称 ( 例 如, 对 于 脸 检 测 与 识 别 dongnanmenwest_16_1920x1080_30 数 据 集, 其 名 称 即 为 dongnanmenwest_16_1920x1080_30) imagename 代 表 图 片 名 称 score 代 表 该 识 别 矩 形 框 的 置 信 度 ( 需 要 归 一 化 到 0~1 之 间 ) l t r b id 分 别 代 表 识 别 矩 形 框 的 左 上 右 下 及 目 标 id 号 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="4" mediafile="dongnanmenwest_16_1920x1080_30" /> <Items> <Item imagename="13165.jpg"> <Label id="30" score=" " l="130" t="360" r="200" b="460" /> <Item imagename="13167.jpg"> <Label id="30" score=" " l="150" t="370" r="230" b="460" /> <Item imagename="13169.jpg"> <Label id="30" score=" " l="190" t="370" r="260" b="465" /> <Item imagename="15161.jpg" /> </Items> </Message>

30 ( 五 ) 评 价 指 标 人 脸 检 测 与 识 别 任 务 需 要 参 赛 者 提 供 在 不 同 匹 配 阈 值 ( 阈 值 需 要 归 一 化 到 [0,1] 之 间 ) 下 的 识 别 结 果, 对 应 每 一 个 阈 值 s, 可 获 得 如 下 指 标 : (9) 其 中, t (s) 为 当 前 阈 值 下 识 别 准 确 的 目 标 个 数, t (s) 为 当 前 阈 值 下 没 有 识 别 到 的 目 标 p n 个 数, f (s) 为 当 前 阈 值 下 识 别 错 误 的 目 标 个 数 详 细 地, 识 别 正 确 的 定 义 包 括 :1, 人 脸 检 p 测 正 确 ( 具 体 定 义 公 式 见 (2); 2, 人 脸 识 别 正 确 ( 即 识 别 返 回 的 ID 与 ground-truth 中 ID 相 同 ) 下 一 步, 我 们 会 将 会 根 据 在 不 同 阈 值 下 的 Recall (s) 和 模 拟 出 ROC 曲 线, 曲 线 的 横 纵 坐 标 分 别 为 Recall 和 Precision, 假 设 曲 线 方 程 为 : 最 后 我 们 利 用 等 错 误 率 C 来 作 为 最 终 评 测 指 标,C 通 过 下 列 方 程 求 解 : 注 1:( 10) 和 (11) 只 是 为 了 形 式 化 的 理 解, 在 我 们 实 现 中 并 没 有 完 全 求 出 (10) 的 具 体 形 式 化 表 达 我 们 会 根 据 参 赛 者 提 供 的 结 果 来 近 似 模 拟 ( 一 些 插 值 算 法 ) 计 算 出 等 错 误 率 注 2: 虽 然 我 们 的 评 测 程 序 中 等 错 误 率 只 能 保 证 近 似 满 足 (11) 而 不 是 完 全 满 足 (11), 但 是 可 以 保 证 对 所 有 参 赛 者 公 平, 绝 对 不 会 出 现 本 来 ROC 曲 线 表 现 好 的 结 果 等 错 误 率 低 (10) (11)

31 五 异 常 事 件 检 测 ( 一 ) 评 测 对 象 本 项 评 测 的 对 象 为 公 共 场 景 下 的 异 常 事 件 检 测 技 术, 即 检 测 测 试 视 频 中 是 否 存 在 异 常 事 件 若 存 在, 则 还 需 检 测 出 异 常 片 段 的 起 始 帧 号 和 终 止 帧 号, 以 及 该 片 段 内 每 一 帧 的 异 常 区 域 ( 二 ) 问 题 定 义 和 任 务 说 明 1. 问 题 定 义 在 本 任 务 中, 异 常 事 件 定 义 为 有 别 于 训 练 集 中 正 常 事 件 的 低 频 率 事 件, 包 括 但 不 限 于 群 体 聚 集 群 体 逃 散 追 赶 丢 弃 箱 包 敏 感 区 域 徘 徊 等 事 件 具 体 来 说, 在 本 任 务 中, 给 定 的 训 练 集 数 据 仅 包 含 正 常 事 件, 任 务 目 标 是 判 断 测 试 视 频 中 是 否 包 含 了 未 在 训 练 集 中 出 现 过 的 低 频 率 异 常 事 件, 如 果 有, 则 需 给 出 该 事 件 的 起 始 帧 号 和 终 止 帧 号, 以 及 每 一 帧 中 异 常 发 生 的 位 置 附 件 异 常 事 件 检 测 样 例.zip 中 给 出 了 测 试 集 中 可 能 包 含 的 几 类 异 常 事 件 的 样 本, 红 色 标 识 部 分 为 异 常 发 生 的 具 体 位 置 下 面 给 出 可 能 包 含 的 几 类 异 常 事 件 的 简 单 描 述 群 体 聚 集 : 多 人 聚 集 在 一 起, 长 时 间 不 散 开 图 7-1 异 常 事 件 ( 群 体 聚 集 ) 视 频 示 例 群 体 逃 散 : 多 人 聚 集 在 一 起 时, 忽 然 集 体 向 四 周 迅 速 逃 散

32 图 7-2 异 常 事 件 ( 群 体 逃 散 ) 视 频 示 例 追 赶 : 一 人 在 前 跑, 一 人 在 后 追 着 跑 图 7-3 异 常 事 件 ( 追 赶 ) 视 频 示 例

33 丢 弃 箱 包 : 一 人 手 提 箱 包, 将 箱 包 丢 弃 在 路 边 并 离 开 图 7-4 异 常 事 件 ( 丢 弃 箱 包 ) 视 频 示 例 敏 感 区 域 徘 徊 : 一 人 在 敏 感 区 域 来 回 走 动, 并 做 出 可 疑 举 动 ( 如 在 私 家 车 的 车 门 前 来 回 走 动, 窥 视 车 内 或 试 图 拉 动 车 门 手 ) 图 7-5 异 常 事 件 ( 敏 感 区 域 徘 徊 ) 视 频 示 例

34 2. 任 务 说 明 异 常 事 件 检 测 任 务 可 以 描 述 为 : 给 定 一 个 包 含 了 K 个 摄 像 头 下 所 有 M 个 视 频 的 测 试 集, 其 中 一 部 分 ( 约 70%) 视 频 为 正 常 事 件 视 频, 另 一 部 分 ( 约 30%) 视 频 为 异 常 事 件 视 频 由 参 评 系 统 自 动 地 在 测 试 集 中 进 行 异 常 事 件 检 测 若 判 定 该 视 频 包 含 了 异 常 事 件, 则 需 返 回 该 异 常 事 件 的 起 始 帧 号 和 终 止 帧 号, 以 及 该 区 间 内 每 一 帧 的 异 常 区 域 若 判 定 该 视 频 未 包 含 异 常 事 件, 则 只 需 返 回 该 视 频 正 常 ( 三 ) 评 测 数 据 集 数 据 集 中 的 正 样 本 和 负 样 本 定 义 如 下 正 样 本 : 包 含 了 异 常 事 件 的 视 频 负 样 本 : 不 包 含 任 何 异 常 事 件 的 视 频 1. 训 练 数 据 集 本 任 务 的 训 练 数 据 集 中 仅 包 含 负 样 本 评 测 组 织 者 将 提 供 K 个 摄 像 头 下 总 长 大 约 为 180 分 钟 的 正 常 事 件 视 频, 参 评 单 位 也 可 以 自 行 收 集 数 据 用 于 训 练 2. 测 试 数 据 集 本 任 务 的 测 试 数 据 集 中 包 含 正 样 本 和 负 样 本, 由 评 测 组 织 者 收 集 和 标 注 技 术 擂 台 赛 中, 测 试 集 中 所 有 视 频 总 长 大 约 为 60 分 钟 决 赛 中, 测 试 集 中 所 有 视 频 总 长 大 约 为 120 分 钟 3. 测 试 正 样 本 标 注 在 评 测 之 前, 评 测 组 织 者 首 先 招 募 人 员 对 测 试 数 据 集 中 的 正 样 本 进 行 人 工 标 注, 标 注 内 容 为 所 有 正 样 本 视 频 内 异 常 事 件 出 现 的 视 频 片 段 的 起 始 帧 号 和 终 止 帧 号, 以 及 该 区 间 内 每 一 帧 的 异 常 区 域 具 体 来 说, 对 于 异 常 事 件 片 段 内 的 每 一 帧, 都 划 分 为 R C 个 块, 以 从 上 至 下 从 左 至 右 的 顺 序 从 0 开 始 标 记 编 号 如 果 某 个 块 内 发 生 了 异 常 事 件, 则 将 该 块 标 记 为 异 常, 否 则 标 记 为 正 常 在 本 任 务 中, 设 定 R 为 18,C 为 32, 即 将 一 帧 划 分 为 = 576 块 块 划 分 与 标 号 规 则 如 下 图 所 示

35 图 7-8 正 样 本 标 注 示 例 通 过 上 述 人 工 标 注, 生 成 带 有 标 准 答 案 的 测 试 样 本 库 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致, 详 见 下 一 节 描 述 ( 四 ) 参 评 系 统 输 入 输 出 文 件 格 式 1. 测 试 数 据 格 式 本 任 务 的 测 试 视 频 文 件 格 式 统 一 为 avs 视 频 格 式 2. 评 测 结 果 文 件 格 式 参 评 系 统 提 交 的 结 果 为 文 本 文 件, 需 由 SDK 自 动 生 成 请 确 保 文 件 格 式 evaluatetype mediafile VideoName 均 符 合 标 准 测 试 集 标 准 答 案 的 文 件 格 式 与 评 测 结 果 的 文 件 格 式 一 致 其 中, 各 项 标 签 的 含 义 定 义 如 下 evaluatetype 为 任 务 类 型 编 号, 对 应 于 数 据 集 中 的 任 务 类 型 编 号 ( 例 如, 异 常 事 件 检 测 任 务 编 号 为 5) mediafile 为 子 任 务 名 称, 对 应 于 数 据 集 中 的 子 任 务 编 号 ( 例 如, 对 于 异 常 事 件 检 测 任 务 的 第 2 个 子 任 务, 其 名 称 即 为 AnomalyDetection2) VideoName 为 评 测 视 频 名 称 ; 注 意 每 一 个 视 频 均 应 有 一 个 对 应 的 Items 标 签, 否 则 将 判 定 为 漏 检 abn 代 表 判 定 此 视 频 是 否 为 异 常 视 频 (1 表 示 为 异 常,0 表 示 为 正 常 )

36 startframe 和 endframe 代 表 异 常 区 间, 即 该 异 常 事 件 从 第 startframe 帧 开 始, 到 第 endframe 帧 结 束 ; 帧 号 从 0 开 始 计 数 ; 若 该 视 频 中 不 包 含 任 何 异 常 事 件, 则 startframe 和 endframe 均 为 -1 framenum 代 表 帧 号 blockid 代 表 每 一 帧 内 块 的 编 号 下 面 给 出 一 个 样 例 文 本 <?xml version="1.0" encoding="gb2312"?> <Message Version="1.0"> <Info evaluatetype="5" mediafile="anomalydetection2" /> <Items VideoName="v0018_07_1920x1080_30.avs" abn="1" startframe="34" endframe="34"> <Item framenum="34"> <Label blockid="124" /> <Label blockid ="78" /> <Label blockid ="258" /> </Items> <Items VideoName="v0019_07_1920x1080_30.avs" abn="1" startframe="45" endframe="47"> <Item framenum="45"> <Label blockid ="36" /> <Label blockid ="291" /> <Label blockid ="153" /> <Label blockid ="292" /> <Label blockid ="82" /> <Item framenum="46"> <Label blockid ="116" /> <Label blockid ="153" /> <Label blockid ="292" /> <Item framenum="47"> <Label blockid ="47" /> <Label blockid ="138" /> </Items> <Items VideoName="v0020_07_1920x1080_30.avs" abn="0" startframe="-1" endframe="-1" /> <Items VideoName="v0021_07_1920x1080_30.avs" abn="0" startframe="-1" endframe="-1" /> <Items VideoName="v0022_07_1920x1080_30.avs" abn="0" startframe="-1" endframe="-1" /> </Message>

37 ( 五 ) 评 价 指 标 1. 技 术 擂 台 赛 评 测 指 标 对 于 每 个 视 频 i, 需 提 交 对 于 每 个 视 频 的 检 测 结 果 D 该 视 频 内 异 常 事 件 的 帧 区 间 ( 即 开 始 帧 为 F is,, 结 束 帧 为 F 示 第 3 块 和 第 5 块 为 异 常, 第 j 帧 的 检 测 结 果 设 为 A ) ie, i ) 以 及 该 区 间 内 每 帧 内 的 异 常 块 编 号 ( 如 (3, 5) 表 ij, 当 检 测 结 果 与 标 准 答 案 的 误 差 在 事 件 总 持 续 时 间 的 内 ( 即 阈 值 与 事 件 持 续 时 间 正 相 关 ), 则 认 为 此 区 间 判 定 正 确, 否 则 判 定 错 误 设 视 频 i 的 标 准 答 案 为 ( 表 示 开 始 帧 为 G is,, 结 束 帧 为 G ie, ), 则 视 频 i 的 评 测 结 果 为 (12) 其 中, 暂 定 为 0.9 对 于 检 测 结 果 中 的 每 帧, 按 照 检 测 结 果 与 标 准 答 案 的 交 比 并 计 算 评 测 结 果, 当 达 到 阈 值 ( 暂 定 为 0.6) 时, 则 认 定 此 帧 的 检 测 正 确 设 视 频 i 的 第 j 帧 的 标 准 答 案 为 g 测 结 果 为 ij,, 则 其 评 (13) 视 频 i 的 评 测 结 果 为 : (14) 其 中, G 代 表 第 i 个 视 频 的 标 准 答 案 是 否 为 异 常 (1 代 表 异 常,0 代 表 非 异 常 ) 公 式 (14) i 即 表 示 了 判 定 正 确 的 帧 的 数 量, 除 以 总 异 常 视 频 的 数 量 ( 加 惩 罚 项 )

38 (15) 其 中 D 代 表 选 手 判 定 视 频 i 为 异 常 Precision i 量 最 后 用 F 值 来 评 测 视 频 级 别 的 检 测 结 果 : clip 即 判 定 正 确 的 数 量 除 以 判 定 为 异 常 的 数 (16) 其 中 暂 定 为 0.75 帧 级 别 的 检 测 结 果 为 : (17) 其 中, 判 定 正 确 的 异 常 视 频 数 即 对 于 每 个 视 频, 在 检 测 结 果 与 标 准 答 案 的 交 集 内, 计 算 其 正 确 判 定 的 帧 数 除 以 交 集 帧 数, 对 于 所 有 视 频 求 Precision 的 平 均 值 因 此, 最 终 评 测 结 果 为 (18) 其 中 暂 定 为 决 赛 评 测 指 标 决 赛 的 评 测 指 标 包 含 两 个 部 分 : 检 测 性 能 评 测 以 及 时 间 惩 罚 因 子, 具 体 定 义 为 : M = Score L (19) 其 中,Score 由 公 式 (18) 得 到, 为 时 间 惩 罚 项, 由 公 式 (4) 得 到