體感裝置技術與應用Somatosensory Technology and Application

臺北科技大學 資工所 黃翊庭

2/13/2014

大綱

何謂體感裝置

硬體技術架構

IR SENSOR-深度影像

深度資訊-前景物件切割

骨架資訊誕生

Fusion-3D建模

近年相關應用(2010~2014)

軟體開發技術與工具

未來發展

何謂體感裝置

自然互動 Natural Interaction

用最直覺的自然方式，來當作人機介面

主要是聽覺或者是視覺，例如「語音」「手勢」、「身體動作」等等

非接觸式自然人機介面

何謂體感裝置

2010 Microsoft Xbox360 Kinect

動作體感器，身體就是控制器

何謂體感裝置

2012 ASUS Xtion

體感控制延伸服務應用層面

何謂體感裝置

2013 LeapMotion

手勢操作控制，突破性全新體驗

何謂體感裝置

2013 pmd

手勢辨識系統操作

何謂體感裝置

2014 Structure

The First 3D Sensor for Mobile Devices

何謂體感裝置

PrimeSense 3D Sensing Solution

Identification of people their body properties, movements and gestures

Classification of objects such as furniture

Location of walls and floor

硬體技術架構

IR SENSOR-深度影像出現

IR SENSOR-深度影像

彩色影像

深度影像

距離限制：0.8 公尺 – 4.0 公尺

深度資訊-前景物件切割

彩色影像

深度影像

光源不足下深度感測器效果佳

骨架資訊誕生

PrimeSense Skeleton tracking

Fusion-3D建模

近年相關應用

Kinect XBox360 體感互動遊戲

近年相關應用

Xtion 家電體感操作

近年相關應用

Xtion 手勢操作應用

近年相關應用

Xtion 商品與顧客分析

近年相關應用

Kinect 體感互動窗戶

近年相關應用

Leap Motion HP 筆記型電腦

近年相關應用

Leap Motion 機器手臂控制

近年相關應用

Xtion 環境3D建置

近年相關應用

Kinect 互動藝術創作

近年相關應用

Xtion 物品趣味辨識互動

近年相關應用

Leap Motion Kiosk

Prime Sight視障體感輔具

軟體開發技術與工具

Kinect for Windows SDK

軟體開發技術與工具

OpenNI SDK

www.openni.org

開發工具比較

Open NI+NITE V.S Kinect SDK

軟體開發技術與工具

Leap Motion SDK

developer.leapmotion.com

未來發展

體感互動設施普及

非接觸式手勢操作服務

3D模型建置客製化

人類行為內容分析

視覺內容分析

智慧型穿戴裝置

電腦視覺技術-數位影像處理