前 言 Magic Leap 是 一 家 增 强 现 实 (AR) 创 业 公 司, 曾 获 得 过 谷 歌 阿 里 高 通 华 纳 兄 弟 等 知 名 公 司 的 投 资, 总 融 资 额 已 达 到 近 14 亿 美 元, 估 值 达 到 了 37 亿 美 元 Magic Leap 是 一 家 比 较 神 秘 的 增 强 现 实 创 业 公 司, 目 前 尚 未 推 出 正 式 的 产 品 Magic Leap 的 技 术 可 能 会 以 头 盔 的 形 式 出 现, 设 备 会 在 用 户 眼 前 显 示 电 脑 生 成 的 图 像, 最 终 虚 拟 的 图 像 将 与 现 实 融 为 一 体 腾 讯 科 技 VR 次 元 获 取 了 一 份 Magic Leap 在 2013 年 的 一 份 展 示 报 告,VR 次 元 进 行 了 优 化 整 理 报 告 介 绍 了 该 公 司 的 一 些 概 念 设 计 和 场 景 构 想, 虽 然 没 有 涉 及 真 正 的 技 术 文 档 和 专 利 文 件, 但 对 于 VR AR 行 业 的 从 业 人 士, 有 很 强 的 启 发 性 微 信 上 搜 索 VR 次 元 微 信 公 众 号 (qqtechvr), 关 注 后 回 复 魔 法, 即 可 获 得 报 告 中 文 版 最 后, 感 谢 kokonizhang 原 始 素 材
第 一 章 : 愿 景
世 界 将 会 变 成 一 种 全 新 的 新 桌 面 整 个 世 界 都 是 银 幕 在 设 计 建 筑 物 时, 可 以 共 同 想 象
让 电 影 院 走 进 家 庭 看 到 很 多 不 可 思 议 的 事 情
探 索 未 知 的 世 界 把 科 幻 电 影 分 享 到 现 实 生 活 中
视 频 游 戏 也 会 更 加 地 真 实 语 言 翻 译 会 更 加 直 截 了 当
即 使 在 卧 室 里, 也 能 当 DJ 跳 热 舞 家 里 也 可 以 开 音 乐 会
枯 燥 的 教 学 也 能 有 趣 虚 拟 的 相 册 体 验
Magic Leap 如 何 打 造 音 乐 现 场 感? Magic Leap 的 工 作 室 将 开 发 初 步 应 用, 展 示 Magic Leap 在 音 乐 领 域 的 能 力 Magic Leap 会 把 一 位 全 尺 寸 大 小 的 艺 术 家 的 数 字 形 象 发 送 到 家 中, 让 你 欣 赏 家 中 的 现 场 表 演 数 字 音 乐 现 场 将 把 你 和 好 友 发 送 到 一 个 令 人 惊 讶 的 数 字 空 间, 就 如 同 在 现 场 一 般 Magic Leap 将 会 与 一 系 列 的 艺 术 家 唱 片 公 司 发 行 商 和 经 纪 人 结 盟
第 二 章 : 产 品 设 计
Magic Leap 畅 想 的 产 品 主 要 包 括 三 部 分 Magic Leap 有 这 些 特 殊 的 技 术 把 图 像 绘 入 视 网 膜 提 供 现 实 引 擎, 利 用 影 院 现 实 深 度 技 术 打 造 栩 栩 如 生 的 感 觉 混 合 了 真 实 世 界 和 数 字 世 界
第 三 章 : 界 面 设 计
用 户 能 接 入 的 内 容 要 分 为 搜 索 和 浏 览 两 个 部 分, 而 这 两 部 分 涉 及 到 的 内 容 应 该 按 照 以 下 划 分 : 内 容 : 视 频 音 频 视 频 社 交 网 络 图 片 文 件 / 文 档 等 娱 乐 : 电 影 音 乐 阅 读 娱 乐 信 息 新 闻 天 气 等 导 航 : 地 图 旅 游 等 教 育 : 健 康 与 瘦 身 等 生 产 应 用 : 商 业 金 融 提 醒 和 笔 记 等
工 具 应 用 : 照 相 机 联 系 人 文 档 生 成 器 涂 鸦 / 世 界 皮 肤 等 Magic Leap 在 界 面 设 计 时 关 注 的 领 域 : 信 息 架 构 / 内 容 组 织 内 容 导 航 基 础 导 航 二 级 导 航 直 接 导 航 与 间 接 导 航 / 物 理 导 航 与 虚 拟 导 航 / 手 势 导 航 等 漂 浮 与 固 定 基 于 头 脑 风 暴 的 场 景 前 后 关 系 : 站 立 / 坐 着 / 走 路 环 境 : 家 中 / 工 作 / 公 共 场 所 社 交 : 开 放 与 离 散 美 学 / 视 觉
第 四 章 产 品 初 体 验
这 是 Magic Leap 畅 想 的 Hula-Hoop 用 户 界 面, 从 左 至 右 的 用 户 使 用 场 景 依 次 是 : 1 一 个 滑 动 手 势 能 够 让 用 户 界 面 进 入 用 户 视 线 2 用 户 界 面 的 选 择 菜 单 以 卷 轴 的 形 式 呈 献 给 用 户 3 用 户 选 择 菜 单 的 扩 展 体 验 这 是 Magic Leap 的 门 户 界 面, 从 上 到 下 的 功 能 依 次 是 :
1 3D 界 面 中 融 入 手 势 互 动 应 用 口 2 门 户 提 供 进 入 系 统 内 容 ( 应 用, 游 戏, 工 具 等 ) 的 入 3 门 户 能 够 在 任 何 规 格 的 物 体 上 打 开 这 也 是 Magic 的 门 户 界 面, 从 上 到 下 的 功 能 依 次 是 :
1 特 定 的 工 具 能 够 被 用 于 特 定 的 物 体, 让 它 们 能 够 自 动 打 开, 对 用 户 界 面 进 行 导 航 2 虚 拟 3D 物 体 能 够 被 清 理 出 门 户, 并 可 在 房 间 中 标 注 物 体 的 位 置 这 一 交 互 设 计 原 则 能 够 让 用 户 构 建 虚 拟 Magic 房 间
想 象 一 下, 当 用 户 举 起 他 / 她 的 手 时, 系 统 中 的 图 像 识 别 将 会 展 示 出 基 础 导 航 菜 单 单 用 户 可 以 在 菜 单 中 选 择 一 个 项 目, 或 者 是 伸 开 手 指 扩 大 菜
用 户 在 掌 心 用 手 指 画 圈, 就 可 以 旋 转 菜 单
用 户 捏 住 虚 拟 物 体 并 保 持 姿 势 进 行 映 射 物 体 能 够 被 映 射 到 被 照 明 的 环 境 中 保 持 姿 势, 用 户 移 动 手 臂 至 被 映 射 出 的 环 境 物 体 当 中 两 个 物 体 都 将 会 闪 耀 出 同 样 的 色 彩, 以 进 行 确 定 用 户 伸 开 手, 把 虚 拟 物 体 映 射 到 真 实 环 境 中
这 是 The Aeon 项 目, 功 能 包 括 扩 展 的 光 线 菜 单 在 主 菜 单 上 的 图 标 3D 螺 旋 内 容 管 理 弹 出 2D 警 报
数 字 3D 成 像, 功 能 包 括 : 2D 和 3D 物 体 / 显 示 映 射 至 2D 表 明 ( 真 实 或 虚 拟 ) 站 点 识 别
虚 拟 化 / 操 作 虚 拟 物 体 景 象 呈 现, 功 能 包 括 : 浮 动 和 映 射 界 面
站 点 识 别 瞳 孔 跟 踪 作 为 一 种 导 航 方 式 导 航 内 容 Ringo 全 息 界 面, 功 能 包 括 :
呼 啦 圈 式 的 界 面 内 容 导 航 数 据 输 入 / 游 戏 玩 法 带 有 2D 平 台 的 3D 导 航, 功 能 包 括 :
3D 存 储 / 导 航 空 间 按 物 体 / 或 颜 色 进 行 虚 拟 分 钟 有 机 导 航 模 式
这 是 未 来 的 枪 战 游 戏, 功 能 包 括 : 手 映 射 界 面 分 层 内 容 固 定 -- 永 远 有 效, 便 于 进 入, 位 于 用 户 视 野 的 角 落 随 选 -- 手 势 互 动 启 动 菜 单 进 行 深 度 挖 掘 提 醒 -- 弹 出 式 图 标
其 他 范 例, 功 能 包 括 : 光 线 菜 单 可 伸 缩 的 3D 虚 拟 物 体 2D 信 息 显 示 漂 浮 的 界 面 下 面 来 看 一 些 房 间 场 景 的 设 计
用 户 :Average Andrew 年 龄 :34 岁 职 业 : 土 木 工 程 师 爱 好 : 体 育 爱 好 者, 美 式 橄 榄 球 球 迷 场 景 : 在 办 公 室 工 作 -- 收 到 同 事 进 门 的 信 息 ( 提 醒 ) 从 客 厅 中 选 择 虚 拟 房 间 ; 从 娱 乐 室 转 换 至 工 作 室 从 一 个 房 间 打 开 / 进 入 特 定 应 用, 在 另 一 个 房 间 打 开 / 进 入 另 一 个 特 定 应 用 ( 从 娱 乐 室 打 开 摄 像 头 应 用 )
这 个 场 景 需 要 给 用 户 提 供 这 些 体 验 : 1 映 射 到 用 户 真 实 工 作 室 的 虚 拟 物 品 能 够 无 限 制 分 层 2 虚 拟 现 实 能 够 提 供 典 型 的 办 公 应 用, 如 电 子 邮 件 电 话 等 3D 虚 拟 物 品 提 供 可 使 用 常 规 工 具 的 入 口
能 : 有 时 候 用 户 需 要 一 些 提 醒 信 息, 这 里 需 要 这 么 几 个 功 1 固 定 -- 永 远 可 以 在 用 户 需 要 时 映 射 到 真 实 环 境 当 中 2 提 醒 -- 弹 出 式 提 醒 在 用 户 的 视 野 之 内, 如 果 未 被 注 意, 将 会 渐 渐 消 失 3 固 定 / 随 选 -- 可 使 用 工 具 和 进 入 深 层 次 菜 单 下 面 来 看 下 关 于 房 间 导 航 的 用 户 界 面 设 计 这 种 情 况 下, 会 有 两 个 场 景 :
选 择 使 用 的 房 间 从 娱 乐 室 导 航 至 工 作 室 从 左 至 右 是 : 真 实 客 厅 到 虚 拟 娱 乐 室 从 左 至 右 是 : 娱 乐 室 到 工 作 室 这 些 场 景 一 般 会 给 用 户 这 些 选 项 : 选 择 和 / 或 房 间 导 航 用 户 输 入 进 入 菜 单 系 统 手 势 -- 手 的 运 动
点 击 眼 镜 或 眼 镜 包 语 音 控 制 眼 睛 追 踪 手 势 打 开 图 标
提 供 快 速 进 入 非 功 能 性 房 间, 不 同 的 手 势 上 拉 综 合 菜 单
在 另 一 个 房 间 时, 提 供 可 进 入 房 间 的 功 能 性 工 具 和 应 用, 同 时 还 提 供 迷 你 工 作 台 全 房 间 景 象, 滑 动 导 航 可 供 选 择 的 房 间
这 是 我 们 构 想 的 Hiearchal 菜 单 系 统, 涵 盖 功 能 : 虚 拟 触 控 板 初 级 导 航 菜 单 进 入 用 户 定 义 房 间 房 间 是 初 级 导 航 菜 单 的 一 项 功 能 接 下 来 是 固 定 菜 单 概 念
用 户 的 周 边 视 觉 是 这 样 的, 可 扩 展 的 菜 单 永 远 位 于 用 户 视 野 的 右 上 角 展 示 可 供 选 择 的 房 间
这 是 前 映 射 菜 单 视 觉 触 控 板
当 选 定 特 定 房 间 后, 会 显 示 更 详 细 的 导 航 菜 单 再 来 说 另 外 一 个 场 景 : 在 特 定 房 间 选 择 使 用 的 应 用 这 是 构 想 的 呼 啦 圈 菜 单 系 统
用 户 在 工 作 室 打 开 体 育 中 心 (SportsCenter) 在 娱 乐 室 进 入 特 定 的 应 用, 在 所 处 房 间 找 到 特 定 应 用 在 娱 乐 室 进 入 特 定 的 应 用, 映 像 / 复 制 应 用 到 当 前 房 间
手 势 作 为 绝 大 多 数 共 同 使 用 的 应 用 的 热 键, 为 每 个 共 同 使 用 应 用 制 定 独 特 和 直 觉 手 势
第 五 章 : 场 景 举 例
母 亲 和 她 的 女 儿 结 伴, 在 超 市 入 口 推 着 一 辆 购 物 车 一 系 列 的 相 关 应 用 会 自 动 打 开, 包 括 : 购 物 列 表 ( 由 用 户 定 义 的 内 容 进 行 组 织 ) 优 惠 券 册 子 食 谱 书 食 谱 生 成 器
购 物 车 成 本 向 购 物 车 添 加 物 品 母 亲 在 称 上 对 挑 选 出 的 物 品 称 重, 物 品 的 价 格 将 会 自 动 输 入 到 购 物 车 成 本 当 中 -- 智 能 食 品 杂 货 店 列 表 将 基 于 地 理 位 置 自 动 更 新 -- 母 亲 列 表 中 的 食 品 将 在 场 景 中 被 凸 显 出 来
孩 子 打 开 寻 物 游 戏 应 用, 让 她 的 购 物 体 验 更 有 参 与 性 和 教 育 性 挑 战 是 把 全 世 界 不 同 国 家 的 食 品 进 行 分 类 当 孩 子 识 别 出 食 品 并 把 它 们 放 在 虚 拟 购 物 车 中 后, 分 数 将 添 加 到 孩 子 的 分 数 当 中
在 谷 物 类 别 中, 母 亲 选 择 了 一 款 特 定 的 谷 物, 来 探 索 额 外 的 元 数 据, 其 中 包 括 : 饮 食 规 定 限 制 营 养 信 息 ( 健 康 评 级 ) 产 品 评 论 / 产 品 对 比 消 费 者 评 论 母 亲 将 获 得 由 Toucan Sam 提 供 的 优 惠 券
与 此 同 时, 孩 子 注 意 到 一 个 恶 魔 爬 出 了 谷 物 盒, 这 也 让 她 开 始 一 场 魔 鬼 作 战 游 戏 通 过 挥 动 手 腕, 恶 魔 将 会 重 新 回 到 谷 物 盒 当 中
在 谷 物 通 道 的 尽 头, 一 个 虚 拟 的 马 雷 欧 巴 塔 利 (Mario Batali, 美 国 知 名 厨 师 ) 将 向 客 户 展 示 一 个 简 单 的 食 谱 所 有 所 需 的 配 料 都 可 以 在 尽 头 找 到
红 酒 通 道 寻 找 商 品 在 食 品 杂 货 店 的 红 酒 选 择 区, 母 亲 决 定 搜 索 一 款 特 定 的 红 酒 一 款 虚 拟 地 图 将 被 使 用, 用 于 导 航 希 望 获 得 的 红 酒 括 : 在 红 酒 通 道 行 走 时, 不 同 红 酒 将 会 显 示 出 相 关 的 数 据, 包 好 友 的 推 荐 ; 出 现 在 她 个 人 红 酒 列 表 中 的 红 酒
当 母 亲 走 到 Magic Leap 结 账 地 图 时, 她 的 购 物 体 验 就 已 经 完 成 然 后 她 会 在 一 个 虚 拟 显 示 屏 上 进 行 结 账, 无 需 信 用 卡
与 此 同 时, 孩 子 得 到 了 她 的 寻 物 游 戏 的 体 验 总 结, 其 中 包 括 她 先 前 的 最 高 分 等
Stella 打 开 自 己 想 看 的 图 书, 展 示 出 一 个 沉 浸 式 虚 拟 书 店 体 验 虚 拟 的 环 境 结 合 便 利 的 有 着 实 体 书 店 环 境 体 验 的 在 线 书 店
一 位 外 科 医 生 和 包 括 一 位 到 访 虚 拟 外 科 医 生 在 内 的 团 队, 为 一 台 即 将 进 行 的 外 科 手 术 进 行 准 备 病 人 的 前 映 射 解 剖 图 将 以 3D 形 式 呈 献 给 团 队, 用 于 在 计 划 中 进 行 分 析
在 手 术 过 程 中, 外 科 医 生 能 够 参 考 3D 前 映 射 解 剖 图 中 的 心 脏 位 置, 来 提 升 手 术 的 精 确 度 与 此 同 时, 一 位 医 学 院 学 生 将 能 够 从 教 室 观 察 虚 拟 手 术 错 误 病 人 的 信 息 能 够 准 确 提 供, 以 确 定 病 理, 避 免 任 何 关 键 性 的
在 一 场 手 术 后 的 会 议 中, 外 科 医 生 能 够 描 述 如 何 使 用 了 Stella 的 虚 拟 解 剖 图 Stella 的 丈 夫 在 工 作 时 也 能 够 虚 拟 参 加 这 场 会 议
当 所 有 人 离 开 医 院 时,Stella 能 够 把 自 己 的 环 境 转 换 至 更 舒 适 的 设 置, 例 如 海 滩
Stella 和 好 友 在 家 中 的 客 厅 参 加 了 一 场 虚 拟 瑜 伽 课
Stella 通 过 虚 拟 自 行 车 体 验 来 强 化 自 己 的 室 内 训 练 她 感 觉 到 自 己 骑 着 自 行 车 在 室 外 熟 悉 的 道 路 上 前 行 她 还 能 够 追 踪 一 些 重 要 的 数 据, 如 骑 行 时 间, 骑 行 距 离 和 速 度 等 一 位 虚 拟 的 阿 凡 达 能 够 让 她 与 自 己 的 个 人 最 好 时 间 进 行 竞 争
一 位 园 林 工 作 者 能 够 借 助 一 款 虚 拟 游 戏 来 强 化 自 己 的 工 作, 目 标 是 追 寻 一 个 虚 拟 化 的 映 像 模 型 如 果 精 确 追 踪 模 型, 这 位 工 作 者 将 能 够 获 得 分 数, 并 能 够 在 奖 励 分 消 失 之 前 触 及 它 们 获 得 额 外 的 加 分