PowerPoint Presentation

Transcription

1 多媒体通信 Multimedia Communications 主讲 : 俞能海陈晓辉 2017 年 9 月 18 日

2 课程信息 多媒体通信 课程编号 :INY5302 英文名称 :Multimedia Communications 开课单位 :006- 电子工程与信息科学系学分 :2.5 总学时 :40 周学时 :3 实验学时 :20 上课专业 : 通信与信息系统, 信号与信息处理, 信息安全 预修课程 : 通信原理, 计算机网络, 多媒体技术 课程主页 : 待定 2016 课件 : 课件 : 2

3 课时安排 授课环节 :40 课时,2 学分 实验环节 :20 课时,0.5 学分 考试形式 : 开卷? 闭卷? 成绩评定 : 卷面成绩 + 实验成绩 + 平时成绩 注 : 授课环节含学术讲座和研讨会 3

4 课程教学日历 实验在第 8 周前后开始, 地点 : 可能在东区 4

5 课程参考书 多媒体通信技术基础 ( 第三版 ) 蔡安妮等编著, 电子工业出版社,2012 多媒体通信系统 技术 标准和网络 K. R. Rao, et al. 著冯刚等译, 电子工业出版社,2004 多媒体传输网络与 VoIP 系统设计 沈鑫剡等编著, 人民邮电出版社,2005 多媒体技术教程 Ze-Nian Li. et al 著, 史元春等译, 机械工业出版社,2007 5

6 课程内容概述 课程简介 : 本课程介绍多媒体通信的基本概念 技术原理 系统构成 发展动态和应用前景 主要内容有多媒体通信的体系结构, 多媒体数据压缩编码标准, 多媒体通信的同步和 QoS 控制等 重点介绍基于 Internet 的多媒体通信协议标准 端到端 QoS 控制 系统结构 实际应用及发展 实验 : 安排若干实验配合课堂教学, 加深学生对多媒体通信基本概念与原理的理解, 并使学生对多媒体通信的技术实现有初步了解 6

7 课程内容 第 1 章多媒体通信概述 第 2 章多媒体数据压缩国际标准 第 3 章多媒体同步机制 第 4 章多媒体网络 QoS 第 5 章多媒体传输网络 第 6 章多媒体通信终端 系统与国际标准 第 7 章多媒体通信技术最新进展 7

8 几个需要思考的问题 什么是多媒体通信? 通信 多媒体通信? 多媒体技术 多媒体通信? 为什么要学习 多媒体通信? 目标与任务? 8

9 何为 多媒体通信 定义 : 基于网络 使用多种媒体 ( 如文本 图像 图形 语音 音频 视频 数据等 ) 来表示 存储 检索和传播计算机可处理的信息 通信 多媒体通信 : 现代通信的业务, 绝大多数都属于多媒体业务的范畴 为了更好的服务于人类, 应该根据多媒体数据的特性来设计网络 多媒体技术 多媒体通信 : 多媒体数据的产生变得非常廉价 方便, 人们渴望于交流彼此的信息, 这使得多媒体数据的通信成为一种必然 9

10 多媒体通信 Multimedia Communications 第 1 章多媒体通信概述 2017 年 9 月 18 日

11 课程内容 第 1 章多媒体通信概述 第 2 章多媒体数据压缩国际标准 第 3 章多媒体同步机制 第 4 章多媒体网络 QoS 第 5 章多媒体传输网络 第 6 章多媒体通信终端 系统与国际标准 第 7 章多媒体通信技术最新进展 11

12 第 1 章多媒体通信概述 1.1 媒体和多媒体 1.2 多媒体通信 (MMC) 1.3 MMC 主要问题和关键技术 1.4 MMC 发展动向 1.5 标准化组织 12

13 媒体 (Medium ) things in the middle 承载信息的载体 Different medium types:(itu-t ) Perception medium( 感知媒体 )--- 接触信息的感觉形式 Representation medium ( 表示媒体 )--- 信息的表示形式 Presentation medium ( 显示媒体 )--- 表现和获取信息的物理设备 Storage medium ( 存储媒体 )--- 存储数据的物理设备 Transmission medium ( 传输媒体 )--- 传输数据的物理设备 13

14 身边的不同媒体 感知 : 人们如何感知世界? 光 声音 气味 味道 触觉 表示 : 信息是如何编码的? ASCII,PCM,GIF,JPEG,MPEG 显示 : 展示信息的设备? 电视 扬声器 打印机 存储 : 信息如何存储? 纸, 硬盘, 光盘 传输 : 信息传输的载体? 无线电, 双绞线, 光纤 14

15 不同媒体的信息表达能力 文本 图形 声音 擅长 表达概念和刻画细节 ; 表达数量和时间信息 ; 具有指称对象和利用上下文手段 表达思想的轮廓 ; 有利于人对空间信息的快速接受 作为系统中事件的示意或反馈 ; 吸引人的注意力 ; 并有助于激发人的想象力 15 弱点 存在理解上的多义性 ; 非直观性 不擅长表达数量 否定和时间信息, 缺乏利用上下文的手段 单独出现时理解上有多义性 ; 过多应用会使人厌烦

16 不同媒体的信息表达能力 语音 擅长 使人在从事某活动的同时接受信息 ; 当与动画 陆续结合时可用来传递大量信息 弱点 存在理解上的多义性 ; 非直观性 动画表现变动信息自然度不足 动图像 表现真实事件和情景 ; 真实感强, 便于回忆 包含多方面信息 ; 存在理解上的多义性 3D 技术的兴起! 16

17 多媒体 多媒体 (Multimedia ) Multimedia =Variety + Integration + Interaction Variety: 多种媒体 ( 声 像 图 文 ) Integration: 将多种不同类型媒体集成为一体 Interactivity: 用户与系统之间交互 通信 or: Multimedia = Multimedia data+ Interactions Multimedia data the collection of 3 Ms: Multi-source Multi-type Multi-format 注意 : 多媒体信息最符合人类的感知 通信和行为 ; 多媒体 中的 媒体 指的是表示媒体, 如 ASCII,PCM,G.723.1,GIF,JPEG,MPEG 至少包括音频和视频的其中一种才能称之为多媒体 17

18 Variety 未来的媒体类型? 文本 音频 图像 视频 18

19 Variety 处理对象 视觉 : 文字 / 图像 / 动画 听觉 : 声音 触觉 : 盲文 / 键盘 / 鼠标 / 游戏手柄 触屏 / 触摸鼠标板 味觉? 嗅觉? 19

20 Variety 味觉和嗅觉 电子鼻 (Artificial Olfactory System, AOS) 各类气体传感器 人工味觉系统 (Artificial Taste System, ATS) PH 计 : 酸度检测 导电计 : 咸度的检测 比重计或屈光度计 : 甜度的检测 大部分研究由生物医学工程专业人员做

21 小结 : 多样性 (Variety) 是生命的调味料 随着传感器 智能设备以及社交协作技术的激增, 企业中的数据也变得更加复杂, 因为它不仅包含传统的关系型数据, 还包含来自网页 Web 日志文件 ( 包括单击流数据 ) 搜索索引 社交媒体论坛 电子邮件 文档 主动和被动系统的传感器数据等原始 半结构化和非结构化数据 我们将大部分时间都花在仅 20% 的数据上 : 格式整齐且符合我们严格模式的关系类型 但事实是, 全球 80% 的数据 ( 越来越多的这类数据创造了新的种类和数量的记录 ) 是非结构化的, 或者至多是半结构化的

22 Integration 现在的互联网媒体 互联网媒体又称网络媒体, 就是借助国际互联网这个信息传播平台, 以电脑 电视机以及移动电话等为终端, 以文字 声音 图像等形式来传播新闻信息的一种数字化 多媒体的传播媒介 互联网媒体相对于早已诞生的报纸 广播 电视等媒体而言, 又是 第四媒体 形式 PC 端 : 百度百家 虎嗅 钛媒体... 新闻客户端 : 一类是以网易 腾讯 搜狐 凤凰 新浪等为代表的传统门户新闻客户端 ; 另一类是以今日头条 一点资讯 百度新闻为代表的兴趣推送聚合媒体客户端 特点 兼容图 文 视频 超链 微博 随时针对文中的任何语句进行吐槽 评论 22

23 Integration 传统媒体数据与其他数据的结合 2013 Multimedia Grand Challenge Winner, Structured Exploration of Who, What, When, and Where in Heterogenous Multimedia News Sources. 23

24 Integration 传统媒体数据与其他数据的结合 俄罗斯搜索引擎 Yandex 地图堵车查询 莫斯科,1923 Hefei,2014 年 1 月 3 日 24 莫斯科,2013

25 Integration 多媒体信息交流的优势 提高人对信息表现形式的选择控制能力及其与人的逻辑思维和控制能力的结合程度, 多种形式 关联互补 生动表达 ; 多媒体信息对人具有更大的吸引力, 有利于人对信息的主动探索而不只是被动接收 ; 多媒体信息的冗余性和互补性有利于提高通信的抗干扰能力 ; 多媒体信息中的一种媒体信息对另一种媒体所传递的信息的多义性会产生一定的限定作用, 从而有利于提高信息的准确性 25

26 Integration 说说集成的重要性 西摩 克雷 (Seymour Cray): 超级计算机之父 1958 年设计建造了世界上第一台基于晶体管的超级计算机 1925 年 年, 车祸身亡 26

27 小结集成性 (Integration) 不是简单的组合 27

28 Interaction 技术先驱 :Kinect Kinect 是微软在 2009 年 6 月 2 日的 E3 大展上公布的 Xbox360 体感周边外设 Kinect 彻底颠覆了游戏的单一操作 使人机互动的理念更加彻底的展现出来 它是一种 3D 体感摄影机, 同时它导入了即时动态捕捉 影像辨识 麦克风输入 语音辨识 社群互动等功能 上市时间 :Kinect 于 2010 年 11 月 4 日在北美发售

29 Interaction 增强现实 (Augmented Reality,AR) 手机导航的效果 例如在奥运会的虚拟演播室可以将计算机生成运动员的国籍信息到真实场景中, 以帮助观众实时查看比赛的实况

30 Interaction 这些是不是 VR? 换背景 照相, 幕布 蜡像 + 真人 30

31 Interaction 技术先驱 : 眼球追踪和控制 2013 年 4 月 18 日, 三星 Galaxy S4 正式在中国发布 一时间关于眼球识别的话题在市面上传播开来 CES 2017: Tobii Dynavox PCEye Mini Tobii 是瑞典眼球追踪和控制技术供应商,PCEye mini 是目前世界上最小巧 最强大的眼球追踪器, 可通过 USB 接口安装在电脑显示器前, 主要是为一些行动不便的人们, 比如手部残疾或者中风患者提供无需鼠标操作的眼球追踪控制, 用户仅需眼睛便可控制计算机 笔记本电脑以及平板电脑

32 Interaction 数据交互方式融合多媒体与社交媒体? 32

33 小结 : 媒体和多媒体 媒体 : things in the middle 承载信息的载体 Perception medium( 感知媒体 ) Representation medium ( 表示媒体 ) Presentation medium ( 显示媒体 ) Storage medium ( 存储媒体 ) Transmission medium ( 传输媒体 ) 多媒体 (Multimedia ) Multimedia =Variety + Integration + Interaction Variety: 多种媒体 ( 声 像 图 文 ) Integration: 将多种不同类型媒体集成为一体 Interactivity: 用户与系统之间交互 通信

34 第 1 章多媒体通信概述 1.1 媒体和多媒体 1.2 多媒体通信 (MMC) 1.3 MMC 主要问题和关键技术 1.4 MMC 发展动向 1.5 标准化组织 34

35 1.2 多媒体通信 (MMC) 多媒体通信 : 使用多种媒体形式来表示 存储 检索和传播机器可处理的信息 MMC 的技术特点 : Integration( 集成 ) Interactivity( 交互 ) Synchronization( 同步 ) Network offerings( 网络承载 ) 在传输音视频信息方面,MMC 有以下特点 : 支持自然 合成的数据 ; 支持实时 非实时的应用 ; 根据用户的需求呈现不同的性能 ; 同时处理多路数据 35

36 Synchronization( 同步 ) 乐曲的歌词显示 36

37 Synchronization( 同步 ) 视频 音频 文字的时间关系 保持和维护各个媒体对象之间和各个媒体对象内部存在的时态关系, 组织多种媒体序列以实现某种特定的表现任务

38 Synchronization( 同步 ) 不同地理位置副本信息的一致性? CDN(Content Delivery Network, 即内容分发网络 ) 通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络,CDN 系统能够实时地根据网络流量和各节点的连接 负载状况以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上 其目的是使用户可就近取得所需内容, 提高用户访问网站的响应速度 38

39 Network offerings( 网络承载 ) SDN 案例 谷歌公司于 2011 年底在其数据中心内部部署了世界上最大的基于 OpenFlow 协议的 SDN 广域网 利用 SDN 的管理方式,Google 公司对内提供了流量工程 (TE) 服务, 将其内部网络线路利用率从之前的最高水准 30%- 40% 提升到了 95% 使用非最短路的包转发机制, 将应用的优先级纳入资源分配的考虑中 ; 当连接或交换机出现故障, 动态地重新分配带宽, 快速收敛 ; 在较高的层次上指定规则, 例如 Gmail 的流量不经过 39

40 Network offerings( 网络承载 ) Gbit WLAN 协议 发布日期 频带 数据速率 Legacy GHz 2 Mbit/s a GHz 54 Mbit/s b GHz 11 Mbit/s g GHz 54 Mbit/s n GHz 600 Mbit/s p Draft GHz 27 Mbit/s ac hz 6.77 Gbit/s ad GHz 3Gbit/s

41 Network offerings( 网络承载 ) Wireless Communications Gigabit Gerhard P. Fettweis, The Tactile Internet IEEE vehicular technology magazine MARCH

42 Network offerings( 网络承载 ) 5G 解决什么问题? 内容 感知 控制 Gerhard P. Fettweis, The Tactile Internet IEEE vehicular technology magazine MARCH

43 常见 MMC 系统 独立商亭式系统 ( 商场导购系统 教学系统 ) 多媒体信息检索与查询 多媒体会议与协同工作 ( 电视会议 ) 多媒体即时通信 ( 视频聊天 ) 点播电视 (Video on Demand) 43

44 MMC 应用的分类 家庭 娱乐 VoD Interactive TV Network Games 新闻 视频电话 留言 交易 Shopping banking 机构 广告 出版 远程医疗 函授课程 数字图书馆 商务 会议 协同工作 44

45 MMC 的业务类型 会议型业务 电视会议 远程医疗 虚拟教室 会话型业务 电视电话 分配型业务 广播 网络游戏 检索型业务 点播电视 在线新闻 消息型业务 Multimedia 采集型业务 远程监控系统 电子投票 45

46 MMC 业务示例 : 视频点播 点到点, 可以有时延, 音视频要同步 46

47 MMC 业务示例 :QQ 视频聊天 点到点, 实时, 音视频要同步, 时延敏感 47

48 MMC 业务示例 : 网络直播间 点到多点, 交互式 Retrieved: 21: /6/12 48

49 MMC 业务示例 : 斗鱼直播 点到多点, 交互性 49

50 MMC 业务示例 : 视频会议 多点参与, 时延敏感 51

51 MMC 业务示例 : 无人机视频 稳定拍摄 实时视频传输 定位导航 52

52 大疆无人机 2003 年, 已经读大三的汪滔从华东师范大学退学, 并向世界一流大学递上了申请, 最终只有香港科技大学电子及计算机工程学系发来了录取通知书 2006 年, 汪滔和一起做毕业课题的两位同学正式创立大疆 2014 年汪滔被福布斯评为中国十大创新人物 深圳市大疆创新科技有限公司 (DJI-Innovations, 简称 DJI), 成立于 2006 年, 是全球领先的无人飞行器控制系统及无人机解决方案的研发和生产商, 客户遍布全球 100 多个国家 通过持续的创新, 大疆致力于为无人机工业 行业用户以及专业航拍应用提供性能最强 体验最佳的革命性智能飞控产品和解决方案 53

53 MMC 的业务类型 1. Multimedia Conference Services 多媒体会议型业务是指利用音频视频技术和设备, 通过传输信道实现多方通信 多媒体会议可以实时传送声音 图像 图形 文件 数据等, 是多点之间人与人双向 实时的声 像 图 文通信 如会议电视 协同设计 远程教育等 2. Multimedia Conversational Services 多媒体会话型业务是指点到点两人之间的双向 实时多媒体通信业务, 传送实时话音和图像, 如可视电话 54

54 MMC 的业务类型 3. Multimedia Distribution Services 多媒体分配型业务是指机器与人之间 ( 点到多点 ) 单向多媒体业务, 如准视频点播 (NVoD) 电子新闻等 用户可通过交互操作向服务器指定所需业务内容 4. Multimedia Retrieval Services 多媒体检索型业务是指人与机器指间 ( 点到点 ) 单向多媒体信息检索 如 : 多媒体数据库检索 电子图书馆 VoD 等, 信息按用户要求发送 55

55 MMC 的业务类型 5. Multimedia Messaging Services 多媒体消息型业务是指存储转发型非实时多媒体业务, 如多媒体电子邮件 6. Multimedia Collection Services 多媒体采集型业务是指机 - 机或机 - 人之间 ( 多点 - 点 ) 汇集记录信息的业务 如监控系统 城市交通信息系统 电子投票 远距离证实等 56

56 各类型多媒体业务技术特征和主要应用 业务类型会议型会话型分配型检索型消息型采集型 通信配置多点点 - 点点 - 多点点 - 点点 - 点多点 - 点 信息交换对称性 双向对称 双向对称 信息交换实时实时 信息源 应用举例 实时多媒体信息 实时多媒体信息 会议电视, 可视电话协同工作 单向不对称 非实时 / 实时 存储或实时多媒体信息 NVOD 单向不对称 非实时 / 实时 存储或实时多媒体信息 VOD, 多媒体图书馆 单向不对称 非实时 存储的多媒体信息 多媒体电子邮件 单向不对称 非实时 / 实时 存储或实时多媒体信息 远程监视, 电子投票 57

57 小结 : 多媒体通信 (MMC) 多媒体通信 : 使用多种媒体形式来表示 存储 检索和传播机器可处理的信息 MMC 的技术特点 : Integration( 集成 ) Interactivity( 交互 ) Synchronization( 同步 ) Network offerings( 网络承载 ) MMC 的业务类型 Multimedia Conference Services Multimedia Conversational Services Multimedia Distribution Services Multimedia Retrieval Services Multimedia Messaging Services Multimedia Collection Services 58

58 思考 : 未来的 MMC 系统? 59

59 第 1 章多媒体通信概述 1.1 媒体和多媒体 1.2 多媒体通信 (MMC) 1.3 MMC 主要问题和关键技术 1.4 MMC 发展动向 1.5 标准化组织 60

60 传统意义的 MMC 处理对象 : 音频 图像 视频 基本问题 : 保证质量的音 / 视频实时传输 数据压缩 : 降低对网络传输带宽的要求 多点参与情形下的管理 多种媒体同时传输情形下的同步 61

61 MMC 关键技术 主要指标 性能 存储容量 带宽 处理速度 通信质量 实时播放 同步程度 容错能力 关键技术 数据压缩编码 音频 视频 多媒体网络设计 QoS 控制 协议 多媒体数据同步 时间同步 空间同步 内容与逻辑匹配 多媒体终端 计算机 智能手机 62

62 媒体内容安全 / 数字版权 Content Protection in the Digital Home Intel Technology Journal,

63 MMC 的安全性 64

64 小结 : 关键技术围绕不同媒体特征 感知 : 人们如何感知世界? MEMS( 微电机系统 ) 表示 : 信息是如何编码的? 信息量与处理能力的矛盾 显示 : 展示信息的设备? 3D 空间成像 存储 : 信息如何存储? 传输速率对存储的影响 传输 : 信息传输的载体? 可见光通信 NFC( 近场通信 ) 65

65 第 1 章多媒体通信概述 1.1 媒体和多媒体 1.2 多媒体通信 (MMC) 1.3 MMC 主要问题和关键技术 1.4 MMC 发展动向 1.5 标准化组织 66

66 多媒体通信发展的重要事件 Milestones 1982,Compact Disc-Consumer Audio 1984,PC,CD-ROM (Audio ON LANS) 1986,CD-I 1988, Audio over Internet 1990,MPC 1992,Video over Internet 1997, Java,Streaming 2000,Mobile Internet 2003,H.264/AVC 2007,SVC (Scalable Video Coding) 2013,HEVC (H.265) 67

67 未来 Trends Multimedia Communications on Internet/Intranet /LAN/PSTN; Network QoS Control for Multimedia Commutations Packet-based Multimedia Terminals Technologies High Speed Access Networks 68

68 多媒体通信相关技术 多媒体技术 多媒体处理技术 : 模拟 数字化 数字信号处理 计算机技术 : 人 - 机接口 数据处理 存储 通信技术 : 电信网 因特网 计算机网络技术 计算机技术 : 协议 数据处理 通信技术 : 有线 无线 多媒体技术可能的未来 触摸屏 陀螺仪等 10 年来已成为人机接口的标配 VR AR 人工智能等开辟一个新的人机接口时代? 计算机网络可能的未来 全方位数字化为基础 Mobile+Cloud+IoT 69

69 Interaction Gesture Input VS Mouse 1981 年 4 月 27 日, 施乐 (Xerox) 推出了第一台配有鼠标和视窗操作界面的商用电脑系统 ; 到现在, 鼠标仍是电脑的主要配件 1971 年, 美国人 Sam Hurt 发明了第一个触摸传感器 1999 年, 摩托罗拉公司在手机上集成了触摸操作 2007 年,iPhone 成为触控行业的一个里程碑 70

70 Interaction 新兴的人机交互方式 : 姿势 / 手势 2012 年的 CES 上, 梅赛德斯 - 奔驰展现过一套手势操控基础系统 2013 年,Google 公司提交了一份手势操控汽车相关专利, 在申请文件中,Google 对其工作原理进行了描述 : 由固定在车顶的三维摄像头对驾驶者的手势进行扫描, 以此来替代汽车仪表盘上的物理按键, 然后将其传送给汽车的智能系统并转换成指令完成操控 71

71 Interaction 各种 VR 应用 VR 购物 VR 试衣 72

72 Interaction 新兴的人机交互方式 : 脑电 / 肌电 近红外光脑成像 fnirs, 通过从头皮表面投影红外光到大脑, 用光反射回来时波长的变化来衡量大脑活动 从 scalp 表面, 来衡量光反射回来时波长变化 皮肤 组织 骨骼在 nm 波长范围内几乎是透明的, 但是血红蛋白却很能够吸收这些光 而血红蛋白的浓度代表了这个区域大脑所需的氧量 ; 而大脑所需氧量则对应了大脑活动的情况 fnirs 用这种方式建立起大脑活动的图像, 能够精确到较小的区域 但是由于血液流到确定区域需要一定时间,fNIR 需要 2-5 秒来产生 脑电图 (electroencephalogram, EEG) 是利用电极在头皮上测量只有 5-100μV 的弱电势 这种方法将人体脑部产生的微弱生物电放大, 形成波形图 每一个电极都可以产生一个波形图, 当覆盖头皮的若干个电极组合起来的时候, 就可以表征出大脑的活动状况 但是由于血液 骨骼 皮肤等将电极和大脑皮层真实的生理活动分开了, 测量出来的结果噪声很高 73

73 Interaction CES 2017: Tilt Brush Tilt Brush 是谷歌推出的一款基于 VR 的画图应用, 它已适配 HTC Vive 1 作画空间是立体的, 而不是平面 你可以在空间描绘任意形状, 比如你可以画一座房子, 并且 钻 到房子里面去装修墙壁 画上墙纸, 然后又可以走出去在门口画一颗树, 就像在现实世界建造东西一样 2 作画素材更加全面, 多种材料可选 在纸面上作画主要是用笔和颜料, 在电脑上作画则是用鼠标 ( 数位板 ) 线条和色彩 Tilt Brush 则支持许多新的作画材料, 例如光线 火 激光 星星等等 与其说是作画, 倒更像是高级版的积木, 完全是在创造世界的感觉 3 多种作画环境选择, 创造各色世界 使用 Tilt Brush 作画, 你可选择雪地 星夜诸多特定环境, 相当于创造世界的背景, 比如在雪地作画时, 已经有一个堆好的雪人, 你可以给它添加帽子 插上扫帚 如果是模特儿, 就可以给她设计衣服并穿上, 还可再脱下 74

74 Interaction 新兴的人机交互方式 : 刷脸 印奇,face++ 创始人兼 CEO 2016 年 3 月, 福布斯颁布的亚洲 30 岁以下 30 个领袖人物,28 岁的中国人印奇被被放在企业科技人物排行榜的首位 Facebook 的人脸识别率是 97.25%, 我们的识别率是 97.27%! 比 Facebook 还要略高一点! 75

75 Interaction 未来兴的人机交互方式? 碟中谍 5: 神秘国度 剧照

76 Communication 5G 五特征 : 无与伦比的快 人多也不怕 什么都能通信 最佳体验如影随形 超实时 超可靠 77

77 Communication 降费提速 流量费太高了 李克强在 2015 年 4 月 14 日召开的一季度经济形势座谈会上感叹道, 话题一开就引发了与会人士的热烈讨论 仅一个月后, 李克强在 5 月 13 日主持召开国务院常务会议时再度明确促进提速降费的五大具体举措 其中包括鼓励电信企业尽快发布提速降费方案计划, 使城市平均宽带接入速率提升 40% 以上, 推出流量不清零 流量转赠等服务 78

78 Communication Google 的 Project Loon Project Loon 项目的目标是建立一个覆盖整个地球的悬浮气球网络, 向地面上提供不间断无线网络, 测试显示, 无线网络速度可达到 10MB 每秒 2014 年 12 月 8 日, 谷歌公布了 Project Loon 取得的一些成果 数据显示, The Marthoner 热气球于 7 月份在新西兰升空, 最后在智利降落, 创下了 134 天热气球飞行记录 79

79 Communication Facebook 无人机 Facebook 无人机 Aquila 在 2016 年 6 月 28 日成功在亚利桑那州尤马县 (Yuma) 完成首次试飞, Aquila 在 656 米的高度飞行了 96 分钟 Aquila 在大约 1.8 万米至 2.7 万米的高空飞行, 通过激光将数据传输给其他飞行器及地面接收器, 地面再将数据转换成互联网信号 80 1 英尺 (ft)= 米 (m)

80 Trends - Digitization Digitization of all media , CD/MP3, digital camera, IPTV, web-radio, epayment, epaper Digitization of money mwallet: various SIM card and NFC based applications have been integrated in the mwallet Digitization of the home The home gateway serves as a service hub Digitalization of the car Communication and entertainment in motion 81

81 From stand alone PC to the Cloud-based IoT 1 st Phase Stand Alone Computer 2 nd Phase The Web App. Data Data Data W eb S ites Data Data App. Data Browser 3 rd Phase The Cloud 4 th Phase Cloud + IoT Data App. Data App. Data App. Data App. Data App. Data App. Data Data 82

82 小结 :MMC 发展的驱动技术 多媒体处理技术 : 基于新型传感技术的人机接口 计算机技术 : 存储和处理能力的飞速增长 通信网络技术 : 无线 光通信 83

83 第 1 章多媒体通信概述 1.1 媒体和多媒体 1.2 多媒体通信 (MMC) 1.3 MMC 主要问题和关键技术 1.4 MMC 发展动向 1.5 标准化组织 84

84 ITU-Telecommunications Sector( 国际电信联盟 电 信标准化部门 ) Study Group 8-Interactive Audiovisual Protocols Study Group 12-Audiovisual Multimedia Quality Study Group 13-Network Capabilities: Multimedia, B-ISDN Study Group 15-Audiovisual Systems, Signal Processing Study Group 16-Audiovisual Services and Standards 85

85 Internet Engineering Task Force( 因特网工程任务组 ) RFC(Request of Comment) 86

86 第三代合作伙伴计划 87

87 小结 : 多媒体通信的内涵 多媒体通信的技术特点 Integration( 集成 ) Interactivity( 交互 ) Synchronization( 同步 ) Network offerings( 网络承载 ) 传统意义的多媒体通信 处理对象 : 音频 图像 视频 基本问题 : 保证质量的音 / 视频实时传输 数据压缩 : 降低对网络传输带宽的要求 多点参与情形下的管理 多种媒体同时传输情形下的同步 Cloud+IoT 背景下的多媒体通信 处理对象更加宽泛 ; 承载网络异构化 CDN( 内容分发网络 ) P2P( 网络编码 ) 等内容分发系统 Google 百度等 IR 系统 Network-Centric User-Centric Information-Centric 88