가까운 미래의 단말에 대한 소고
TRANSCRIPT
가까운 미래의 단말에 대한 소고
들어가기
생각하고 움직이는 단말로봇 컴퓨터
보이지 않는 단말Invisible Phone
결론& Q&A
Source: Hans Moravec “When Will Computer Hardware Match the Human Brain”, 1997
2014: Getting Lost 2019: Libraries 2020: Copyright 2030: Keys2033: Coins
2050+ : Ugliness Physical Pain Nation States Death
Biological evolution and human technology both show continual acceleration.The time between events continues to decrease; 2B years from the origin of
life to cells and 14 years between the PC and World Wide Web.
Product Goal
Hardware components Specifications
Main control board
(Contron) COM Express Embedded System- CPU: Intel ATOM processor X530- RAM: DDR2 1 GB- Graphic: Intel GMA 500, 2 RGB output- OS: Windows XP Embedded
Peripheral devicecontrol board
Customized Embedded Board- Cortex M3 Controller- ADCs for Sensors (Illumination Sensor etc.)- 3x4 Touch Sensors- 24 RGB LEDs
Projectors
(Optima) PK201 Pocket Projector- Resolution: Native WVGA(854x480)- Brightness: 650 ANSI lumens- Light Source: RGB LED
Cameras(Microsoft) LifeCam HD-5000- 16:9 widescreen, 720 (1280x720) capture- Auto Focus
Actuators
(Robotis) Dynamixel DX-117- Running Degree: 0 ~ 300 deg.- Resolution: 0.29 deg. - Stall Torque: 15kgf.cm(12.0V, 1.4A)
Microphone
Customized Sampler- 3 x Electret Condenser Microphone (ECMs)- Sampling frequency: 8KHz ~ 44.1KHz- 16-bit resolution
Technology Goals
User Interaction in FRC인간 친화적 상호작용
어떤 수준에서…
사람과 사람이 서로 소통하듯이
로봇이 사람과 서로 소통할 수 있는 기능을 로봇에 구현하는 것
As a companion (Doggie level of interaction)
- 원거리 (3~4m)에서 나를 알아보고,
- 부르면 바라보고 다가오고,
- 내가 하는 명령을 제한적이나마 알아듣고,
- 필요할 때 나를 따라다니고,
- 이야기 할 때 시선을 맞추면서 교감하는 정도…
As a computing device (Projector-camera interface)
- 실공간 또는 사물에 정보를 투사 (Robotic Spatial Augmented Reality)
- 손가락으로 투사된 화면을 제어
User Interaction in FRC인간 친화적 상호작용
사용자 추종
얼굴인식
화자인식
준생체인식
음원추적
호출 제스처 인식
음성인식
Who am I Follow me Do it
User Interaction in FRC인간 친화적 상호작용
Marauder’s Map: 누가, 어디서, 무엇을 하는가?
프로젝터/카메라를 이용한 가상 인터페이스
증강 현실 (Augmented Reality)공간 증강 현실 (Spatial Augmented Reality)로봇 공간 증강 현실 (Robotic Spatial Augmented Reality)
• 로보틱 공간 증강 현실 (Robotic Spatial Augmented Reality)
Projection Controlusing Inverse Kinematics
Image Pre-warping(Anamorphic Illusion)
Image Pre-warping(Non-planar surface
projection)
프로젝터/카메라를 이용한 가상 인터페이스
• 손끝 검출 및 추적을 이용한 가상 마우스 인터랙션
ImageAcquisition
PreliminaryImage
Processing
FingertipFinding
Labeling/Morphological
Processing
Triggering/Finger Rules
Checker
CoordinationMapping
Mouse Event
KBD Event
OS/Applications
- Grayscale conversion- Adaptive background
subtraction- Image thresholding
- Noise Filtering(Blob labeling &
Erode/Dilate)
- Template Matching- Palm Detection
프로젝터/카메라를 이용한 가상 인터페이스
Autonomous Behaviors사용자/환경과의 지속적 관계를 통한 자율행위 및 성장
MotivationalDrives
User Adaptation &Learning Proactive InteractionUser Feedback
Goal
UserPreference
User state
BehaviorSelection
PerceptionSubsystem
BehaviorSubsystem
Services
Task
User Preference LearningLearn user’s preferences from interaction with the user.Using dual-layer architecture (Top-layer rules and Bottom-layer learning)
InputContext
Explicit User ModelAssociative Rules
Condition(Context) → Conclusion(Service)
Implicit User ModelAssociative Memory
Probability(Service|Context)
Rule Extraction
ValidationTest
DescriptionGeneration
A Service
ServiceExecution
ServiceExecution
ServiceSuggestion
ServiceSuggestion
Service Alternatives
Service Alternatives
Ranked service list
상황별각서비스에대한사용자선호도확률값
명시적으로정의되거나암시적으로학습된규칙
Valid
Invalid
설명을통한상호작용
Motivation
Curiosity drive (Exploration)
s
Input Context (t-1) Knowledge GainComponent
SurpriseComponent
Prediction ErrorPrediction
Leaky Accumulator
Curiosity Measure
Selected Action (t-1)
‐
Error Change
+
PerrScSc tt )1( KGcScCm )1(
Input Context (t)
Socialitydrive (Adaptation)
sInput Context (t)
Condition a1
Condition an
…ω1
ωn
Time Component b(t)ωt
Sociality drive activation ds
n
i
iit atb1
)( d s
스마트 TV
가까운 미래의 IT 환경
스마트 가전
스마트 센서
스마트 자동차
스마트 사물
인공화분
Invisible Phone
Invisible hone환경지능공간 기반 미래 단말 컴퓨팅 패러다임
(공간 내 논리적 단말)
(최소한의 연결수단으로서의 단말)
(사람/물리공간과의 인터랙션)
(a) 주변의 최적의 기기를 활용한 통화
(b) 주변의 물체를 활용한 통화
(c) 소지한 최소 장치를 활용한 통화
(d) 원격지 공간과 장치의 연결
(e) 일반사물과의 인터랙션
(f) 일반사물에 정보 표출 및경험의 공유
<개인지능공간>나를 위해 반응.동작하는 개인지능공간 실현
<실감/체감 인터랙션>3차원 실감 표현/상호작용 및 감성 인터랙션 제시
기술 개발
•초고속 : > 10Gbps•초박형 : < 1mm•신개념 아키텍쳐Smart, Active and
Media Convergence
결론
for details about the presentation, please email to [email protected]