Body Gesture Recognition

2010-02-23안정호

목 차• 관련 최고 기술• 개발 환경• 개발 방법론• 개발 일정

연구목표• Body part location estimation

o Head, o Left hand, Right hand, o Left foot, Right foot

• Hand gesture recognitiono Defined several hand gesture(posture) recognition

개발 방법론Body part location estimation

• Detection Process

Head/Feet Detection(Head Silhouette by Bkg Subtraction)

Hands Detection(Color in Face Region by GMM)

Joint Detection(Silhouette Feature Analysis)

START TRACKING

개발 방법론Body part location estimation

• Tracking ProcessTracking Each Part(MeanShift Method by OpenCV)

Location Compensation(PCA and Nonlinear Regression,Training based Method)

Tracking Feature Update(Update Color Model and Define Search Regions)

Output Five 3D Locations(x1, y1, z1, x2, y2, z2, , x10, y10,

z10)

• Location Compensation Methodo Collecting Motion Clips and their true locationso Training them by PCA for location compensationo Estimating locations in occlusions.

개발 방법론Body part location estimation

Occlusion Loosing Feature

환경 설정• 장비

o 웹켐 두 대o 초고속 카메라

• 데이터 촬영o 학습 데이터o 테스트 데이터

환경 설정• Scenario

스크린 4 m

사용자

스크린가상물체존재공간

전방카메라

측면 카메라4 m

2 월 진행사항• 구현

o Background Subtractiono Face detectiono Moving area detection

개발 일정2 월 Background Subtraction

3 월 Head, Hand, Feet detection 8 월 System IntegrationHand Gesture Recognition

4 월 Joint detection 9 월 Hand Gesture Recognition

5 월 3D Position Estimation 10 월 Hand Gesture Recognition

6 월 3D Position Estimation 11 월 Hand Gesture Recognition

7 월 Body Part Tracking 12 월 System Integration

기타 고려 사항• Camera Upgrade

o CCD 카메라 사용

• Body part recognitiono 장갑 사용o Blue Screen 사용

• Hand Gesture recognitiono 컬러 골무 사용