智慧眼鏡的雲端新 視 界 戴昌台鉅景科技總經理 July 25 2015 1
鉅景科技介紹 Founded in 2002 Released emerging stock in December 2008 100 employees A leap forward in small, slim and wearable products System in Package (SiP) 智慧穿戴系統物聯網 IoT 方案提供 2
願景及價值 透過我們提供的穿戴式及物聯網的雲端即時服務, 創造隨心隨行的智慧生活 Values Core System in Package(SiP) technology for tiny and wearable devices. Resource integration from system design, software to production. Small design with smart applications. 3
主要產品 Creating A New Era of Smart Wearable Products Wearable System 4
大綱 智慧眼鏡的發展與市場 智慧眼鏡的基本介紹 智慧眼鏡的應用 智慧眼鏡設計討論 5
智慧手持輕薄智慧化 輕薄化 智慧化 大尺寸化 6
從智慧手機至智慧穿戴 智慧手機隨時隨地使用的便利性, 改變了個人的使用習慣及生活環境 而下一歩呢? 智慧穿戴的影響性將擴展至個人的每日活動, 不論是個人視野所看到的 身處的環境 正在進行的活動 健康照護 娛樂 安全監控 能源使用. 等, 都能隨時隨地產生互動 7
眼鏡式顯示器的發展 1999 年 2008 年 2009 年 2010 年 2012 年 Source: Steven Mann s Blog, Vuzix website, Engadget, Google Glass website 8
Google Glass 問世 Google Glass 的誕生提供了智慧眼鏡 產品發展與生活應用清楚的方向 9 Source: Google Glass 官網
智慧眼鏡的創新 物聯網生活 高度軟硬整合 非只有大廠主導的服務性產品 Location Temperature 10
智慧眼鏡的優勢 穿戴裝置中以智慧眼鏡擁有最多的輸出與輸入元件, 發展潛力最高 資訊隨看即算 視線隨看即錄 訊息隨看即得 訊息即時溝通 釋放雙手 顯示螢幕 工作時 : 醫生手術 警察執勤 問題維修 開車時 : 資訊查詢 接聽電話 訊息通知 工作時 : 訊息提醒 操作輔助 娛樂 :AR/VR 應用 11
大廠相繼投入智慧眼鏡 時間事件內容 2014/3 SONY 2014/3 Facebook 併購 Oculus 2014/9 Samsung 2015/1 Microsoft 2015/6 Intel 搭配 PlayStation 4 推出 VR 頭戴裝置 Project Morpheus, 預計 2016 年上半年推出 Facebook 以 20 億美元收購 Oculus VR, 跨入虛擬實境頭戴裝置市場 Oculus 於 2012 年成立, 主產品 Oculus Rift 提供沈浸式立體 3D 影像, 預計 2016 年第一季銷售予消費者 IFA 展上發表了 Gear VR, 與 Oculus 合作, 裝配 Galaxy 手機為顯示螢幕,2014 年 12 月開始銷售 發表虛擬實境智慧眼鏡 HoloLens, 智慧眼鏡, 支援遊戲, 可進行視訊通話 設計, 或是結合生活讓你看到成品 預計 2015 年夏季開始銷售 收購加拿大運動穿戴裝置廠商 Recon Instruments 12
未來 3 年智慧眼鏡產品市場需求量 支數 ( 單位 : 千 ) 30,000 25,000 20,000 15,000 10,000 歐洲美洲亞洲其他合計 5,000 0 105 106 107 年 合計 單位 : 千 105 年 106 年 107 年 4,400 13,275 28,200 13 Source:BI INTELLIGENCE 2014,,Juniper, 2014 年, 鉅景科技匯整
智慧眼鏡普及化階段 14 Source: AugmentedReality.Org
15 智慧眼鏡產業發展期程硬體軟體 App 雲端元件製造商晶片方案商系統整合商 App 開發商服務平台業者電信業者品牌廠商網路內容業者硬體裝置樣品已陸續推出,APP 軟體及雲端服務將帶動產業鏈的蓬勃發展第一階段 2013-2015 第二階段 2016 底 - 組裝代工廠
大綱 智慧眼鏡的發展與市場 智慧眼鏡的基本介紹 智慧眼鏡的應用 智慧眼鏡設計討論 16
智慧眼鏡分類 : 功能性 功能 分類 資訊型 娛樂型 相機型 產品 SiME Smart Glasses VuzixM100 EPSONBT-200 Oculus Rift HTC Vive Sony Project Morpheus Pivothead 顯示幕穿透式非穿透式 X 應用 即時資訊提供 博物館導覽 工作指導 VR 遊戲 動態影像即時拍照及錄影 17
智慧眼鏡運作方式 SiME Smart Glasses,Vuzix M100, Optinvent ORA-S 獨立運作 - 眼鏡裝置為獨立的 Android 系統 - 上網 Epson/BT-200, Sony SmartEyeglass, 連結搖控器 - 眼鏡裝置為顯示器功能, 另搭配 Android 搖控器,Sensor 感應設計於搖控器上 - 操作眼鏡時另外透過有線的搖控器 18
SiME 智慧眼鏡簡介 Smart Glasses 19
SiME 智慧眼鏡硬體 智慧眼鏡的硬體架構如同智慧平板 20
SiME 智慧眼鏡功能 Cloud Service Android Environment Cloud Smart Connection Environment Sensing 21
480p 顯示解析度 SiME 智慧眼鏡提供 480p 顯示解析度並具平板特色 Google Glass: 360p display resolution 22
獨立運作的 Android 眼鏡 SiME 智慧眼鏡提供獨立 Android 平板操作特性 Google Glass 需要新的 API 執行服務 SiME Smart Glasses Your Service 23
標準的 Android 平台 軟體開發者能快速的進行開發以產生更多具價值性的創意 SiME SDK Stand-alone functionality Generate new applications Android4.4 24
SiME 智慧眼鏡特色 When Picasso was 72 years, His painting style back to Nature and plane pattern. Live view sharing and chat Live AR information with audio 5 items comparison Live view shopping BUY IT! Image recognition
智慧眼鏡比較 26
產品定位 功能多元 待機時間長獨立運作美型輕巧 軟硬體高整合獨立運作雲端服務 消費市場 Optinvent ORA SiME Smart Glasses Epson BT-200 Lumus DK40 企業及垂直市場 Vuzix M100 輕薄易用隨身紀錄個人化 Google Glass Recon instruments JET 功能專一 27 擴增訊息安全 / 品質定點使用
大綱 智慧眼鏡的發展與市場 智慧眼鏡的基本介紹 智慧眼鏡的應用 智慧眼鏡設計討論 28
智慧眼鏡使用族群 消費市場 10% 專業市場 90% 工作指導 : 工廠 / 倉儲 / 工作流程服務市場 : 博物館 / 旅遊 / 教學商業市場 : 賣場 / 大型百貨 / 商店醫療救助 : 軍警 / 醫院 / 急難救助 29
商業應用推動 30
市場需求分析 消費目的消費者分類潛在消費者族群說明 ( 延展擴充智慧裝置介面功能 ) 功能應用 服務應用 ( 進行即時資訊的紀錄及管理 ) 一般消費者 企業 / 垂直市場領域 科技玩家 /DIY 玩家 工作指導 : 工廠 / 倉儲 / 工作流程 服務市場 : 博物館 / 旅遊 / 教學 商業市場 : 賣場 / 大型百貨 / 商店 醫療救助 : 軍警 / 醫院 / 急難救助 科技狂熱者或喜歡動手動腦的 DIY 玩家等, 喜歡尋找新穎的功能及應用即時視訊遠端監控及指導, 可提升現場作業的效率展覽活動可利用智慧眼鏡的視覺化影像搜尋及辨識功能, 提供更直覺性的參觀體驗 透過智慧眼鏡裝置連結其雲端資料庫能提供消費者即時視覺的購物 現場環境資訊收集以及在未知的環境提供現場視訊流, 後端能即時支援 31
消費市場 vs. 專業市場 智慧眼鏡目前在專業市場的適用性更勝消費市場 32 Source: MIC, 2014/8
智慧眼鏡應用市場觀察 智慧眼鏡帶來大量的影像資料 消費市場 GPS 利基市場 WiFi Camera Environment Sensors 即時影像分享 Eye Tracking Sensor 消防救援協助 AR Touch Sensor 觀看視野上能重疊文字資訊及圖像 Voice Recognition 33 Source: Google website, 日經技術在線, Golden-I, Recon Instruments, Vuzix website 運動記錄及分享 工作指導
智慧眼鏡裝置實際用途 日美民眾眼鏡型穿戴式裝置用途調查 34 Source: DIGITIMES, 2014/4
智慧眼鏡消費市場阻礙 售價高 App 數量少 操作 不順暢 35
智慧眼鏡商用市場應用 日美眼鏡型穿戴式裝置商用市場應用領域調查 36 Source: DIGITIMES, 2014/4
智慧眼鏡即時雲端 智慧眼鏡上特殊的應用軟體, 將同時需要新的雲端軟體及伺服器配合使用, 以實現各項的實境互動 37
智慧眼鏡商業應用 即時資訊 38
智慧眼鏡應用 ( 一 ): 智慧導覽 智慧眼鏡能提供文創場域更直覺性的資訊導覽方式 綜合 QR Code 以及 App 式導覽 解決 QR Code 的視覺影響 穿戴式裝置的直覺定向 Where you see, What you get 機動性高 39
智慧導覽服務運作 Real-time guiding service Cloud server Cloud database 40
視覺化導覽特色 第一人稱視角導覽視覺化導覽的主要特色, 即以第一人稱視角進行導覽, 在觀賞作品的同時, 無須任何操作, 自然而即時地提供正確導覽資訊, 如同貼身在耳邊適時提供導覽服務 無需操作, 看向何處導覽至何處參觀者無需透過繁瑣操作, 能即時取得所處的展示區域及前方展區的相關介紹 人性化的操作方式, 多樣化的導覽內容針對智慧眼鏡研發專用的控制介面, 並可提供圖 文 影音 3D AR 等多媒體互動應用內容 41
智慧導覽旅程及情境 展覽館 智慧眼鏡 圖像辨識 趣味互動 影音導覽 進入博物館智慧導覽進行即時辨識 & AR 互動解說 旅客進入展覽會館, 下載 APP 開始體驗智慧導覽服務 提供智慧眼鏡租賃, 讓遊客使用館內的視覺導覽服務 提供最佳導引路線 影音導覽 互動遊戲 線上排隊 透過圖像辨識, 即時提供展品相關的文字 圖片 影片 語音的內容介紹 透過 AR 擴增實境, 讓死氣沉沉的展品立刻活躍起來, 在玩樂中學習新知 行程結束 透過 APP 完成博物館館內參訪過的資訊記錄, 如 : 導覽路線 商品資訊等 館方可收集參觀者導覽歷程, 進行有效性資料分析 週邊商品導購 傳送展館內的優惠券予遊客 依據遊客參觀歷程的喜好, 提供相關的展物週邊商品的購買訊息 Beacon 定位 & 推播訊息 館方可利用 Beacon, 即時推播活動訊息至遊客 透過 Beacon 設計小遊戲, 例如收集隱藏寶物, 以提昇參觀者的參與感 定位追蹤 刺激消費 42 折價優惠 尋寶遊戲
台北國際藝術節應用案例 watch video
智慧眼鏡應用 ( 二 ): 工作場所 即時視訊遠端監控及指導, 可提升現場作業的效率 即時視訊溝通及決策 即時品質控制 遠端即時工作指導及訓練 即時問題排除, 提昇工作效率及生產力 44
工作流程協助範例 使用者觀看前方視線疊加的維修或操作流程影像, 可提昇現場作業的效率 45 Source: Vuzix, udn.com SLASH GEAR website
倉儲管理應用案例 貨物處理內容 工作人員身份識別 貨物處理內容確認 46
倉儲管理應用案例 貨物處理任務執行及確認 47
倉儲管理應用案例 工作人員在使用智慧眼鏡的過程, 只需要按一個功能鍵即可 Function Button 48
倉儲管理應用案例 影片 watch video 49 Source: DHL website
智慧眼鏡應用 ( 三 ): 商業市場 商家 即時銷售及促銷 消費者商品觀看紀錄 即時客戶訊息取得及互動 即時庫存資訊取得 Bag shop 50% discount Made in France You favorite shop route Lucky draw at 3:00 pm 消費者 商品資訊即時提供 實境影像購物 商店路徑導引 50
視覺購物範例 識別產品 Barcode 後, 提供產品基本介紹及價格, 並加入購物清單中 51 Source: Tesco Lab
購物商場應用範例 影片 watch video 52 Source: Youtube
創造消費目的及便利性 運用智慧眼鏡快拍的特色, 滿足生活的便利性同時刺激消費產生 案例 : 塗料廠商開發一款能自動獲取圖片顏色的 App, 能協助用戶便捷調整室內裝修設計顏色, 也能指引消費者最近的服務店家 53 Source: colorsnapglass.com
創造消費商機 營造消費情境 有效廣告投放 行銷 服務 互動性資訊服務 客戶個別需求服務 娛樂與 教育 聲光娛樂效果 54
智慧眼鏡應用 ( 四 ): 監控安全 後端單位在取得使用者前方標的物或環境的相關訊息後, 能提供即時支援 Location Temperature Video Streaming 55
實境影像監控 接收最新的工作指令及工作流程, 也能以影像串流方式讓作業團隊進行確認 56 Source: APX Labs
人臉辨識應用範例 即時人臉辨識並取得相關訊息應用場所 : 公共場所安檢 醫療問診 海關查詢 收費站檢測 Man A2948382022 Taipei city 57
智慧眼鏡應用 ( 五 ): 教學應用 在智慧眼鏡上運用擴增實境 (Augmented Reality), 能提供互動式的教學, 讓學習者更能融入教學內容中 58 Source: prefrontal cortex YouTube
遠距教學應用 智慧眼鏡能記錄課堂內容 遠端串流直播或是成為第一人稱式的教學教具等 59 Source: IfIHadGlass: Ben Foster, VYAU
智慧眼鏡應用 ( 五 ): 醫療輔助 透過智慧眼鏡配置的相機 感應器輔助, 能即時紀綠使用者的回饋資料 60 Source: interacoustics,utechzone 官網
即時視訊串流應用 使用智慧眼鏡紀錄外科手術過程, 作為醫療教學的教材, 更可以讓遠端同步觀看手術過程或進行專家問診, 可以減少施作手術過程會發生的錯誤 61 Source: Getty images, readwrite.com
智慧眼鏡應用 ( 六 ) 生活娛樂 提供球迷觀看由球員戴上智慧眼鏡視角呈現的臨場比賽內容, 可增進臨場新鮮感 watch video 62 Source: Kings go Glass
大綱 智慧眼鏡的發展與市場 智慧眼鏡的基本介紹 智慧眼鏡的應用 智慧眼鏡設計討論 63
智慧眼鏡設計要素 造型極致的工業設計 外觀設計 穿戴舒適 合宜人體的工學考證 重量體積 輕薄短小 順暢的人機介面與操作系統 使用方便 電池效率 至少連續使用 4 小時待機 24 小時 64
智慧眼鏡關鍵零件 零件處理器記憶體顯示器相機觸控聲音無線傳輸感應器電池電源管理 Dual cortex-a9 DDR3L / Flash LCoS Micro Display 5M Pixel 觸控板 觸控 IC 喇叭 麥克風 Wi-Fi/GPS/Bluetooth 9 軸感應 / 光源感應 Li-ion 電池 內容 65
智慧型眼鏡設計重點與趨勢 微型投影 低功耗 SoC 小型化 電池效率 元件整合 66
系統微型化核心 5-in-1 System SiP: Dual-core AP+ DDR3Lx2+NANDx2 WiFi+ BT + GPS 67
SiP 微型化設計 DRAM x 2 Dual Core AP Flash x 2 68
微投影技術 : 微型顯示器 輕薄 尺寸小 高亮度及低功耗需求 DLP LCoS OLED 69
微投影技術 : 光學設計 70 Source: EPSON, SONY, Optinvent 官網, techrader, tom s guide
穿戴式裝置電池設計 目前延長智慧眼鏡的電池續航力, 採外部供電或接行動電源 NOW FUTURE 小 使用使間短 鋰電池 體積太大 大 71 Source: Digitimes, ProLogium, DIGITAL TRENDS
互動人機介面設計 觸控技術 觸控板上滑動手指進行操控 語音技術 語音控制及辨識 依據環境選擇最適合的互動方式 物件辨識技術 透過鏡頭自動偵測辨識所看到的目標 眼動控制技術 偵測眼球動態, 辨識使使用者所注視的方向 手識辨識技術 偵測使用者手勢進行操控 感測技術 整合加速度 陀羅儀與磁力計等感測工具 72 腦波控制技術 利用腦波訊號進行操控 骨傳導技術 使用骨傳導技術傳遞音頻信號
智慧眼鏡核心技術及挑戰 微投影技術 系統微型化設計及電池的技術主導了智慧眼鏡的設計發展 Battery System Integration Microdisplay 73
智慧眼鏡使用挑戰 目前硬體規格 外型設計及搭配的應用皆有極大的升級空間 設計是否有美感 及方便性 結合時尚並具流行感 使用族群的特殊需求, 例如近視 設計要輕巧及配戴的要舒適 美感及使用容易 電池可否支援 長時間使用 不需要常常充電, 或電池可長效 便利的連網環境或獨立連網運作 特殊使用族群, 可內嵌至頭盔內 功耗及電池的突破 APP 軟體及雲端應用 可否滿足需求 導航及照相外, 另應增加生活應用功能 雲端及 4G 環境支援資料快速傳輸 與周邊智慧穿戴商品的介面整合性 創造必要性的應用 74
未來智慧眼鏡功能進化 薄型電池高效能電池延長電池續航力 元件整合度提高體積重量再微縮 微型投影新技術高亮度高解晰度 多核省電核心高效能多功能運作 多元感測器整合物聯網控制 + 3G/4G Smart Glass Phone 75
結論 智慧眼鏡發展最大挑戰 : 電池繼航力 使用體驗及提昇應用 而要提高普及率則要先化繁為簡 操作方式 : 依據不同的使用情境, 提供適合且自然直覺的使用方式 接收資訊 : 主動式 / 被動式提供使用者所需要的訊息, 並具有連續性 連網的環境 : 順暢的連網方式, 能讓資訊不中斷的進行傳輸及接收 76
結論 智慧眼鏡須結合雲端的運作, 才能真正提供其智慧及即時的服務價值 垂直市場 : 透過雲端提供即時的資訊, 能簡化工作流程並提昇工件效率 可靠度及安全性 消費市場 : 藉由即時資訊的接收, 能進行實境互動並享受生活的便利性 77
結論 運用穿戴裝置的便利性與其它智慧裝置連結, 形成物聯網運作的一部份 Any Content Cloud Hub Smart Wearable Device Any Place Anywhere 78
Thank You!! 79
更多 SiME Smart Glasses 資訊 80