[blt] 특허 관점에서 바라본 vr/ar_정태균 변리사_20170130

BLT 특허법률사무소

2017.01.30.

특허 관점에서 바라본

VR/AR

BLT 특허법률사무소 정태균 파트너변리사

BLT patent & law firm

정태균 변리사

2

• BLT특허법률사무소 파트너 변리사

• 연세대 공과대학 전기전자공학과

• 변리사 / 정보처리산업기사

• 前 변리사시험 학원 특허법 전임강사

• 국방부 지식재산권 관리

• 기술거래사회 주관 기술사업화 역량강화교육 강사 (조선대)

• 육군 분석평가자문위원 (지식재산권 분야)

• 서울지식재산센터, 창업진흥원, 서강대학교 등 강의

• 서울시 창업스쿨 지도위원


소 개

• 동아비즈리스리뷰 207호

<동아일보사 미래전략연구소>

가상현실(VR•virtual reality)과 증강현실(AR•augmented reality)은 어감도 비슷하고 실제로 유사한 측면이

많이 존재한다.

하지만, 서비스 구체화 및 아이디어 도출 방향에 있어서는 차이가 있다!

3


Beyond the Limit, Together!


Worlds.com, Inc. V. NCSoft Corp. - US6219045

5

2008.12.24. 소제기

2010.4.23 양자 합의 (합의조건은 비밀)


AR/VR 시장 형성 이전에 등록된 특허들

•어느 정도 구체화된 아이디어 단계에서 특허 확보

•특허출원 이후 새로운 장치에도 적용되는 특허

– 미래에 등장할 장치에 대해서도 염두하고

특정한 컴퓨터(디바이스) 형태에 한정되지 않는 특허

6


Worlds.com vs BLIZZARD System and Method for Enabling User to Interact in Virtual Space (US 7,181,690 )

7

2012년 3월 30일에 소제기


Worlds.com의 등록특허는 계속 유지되고 있다

8

NC소프트 공격특허

블리자드 공격특허


블리자드 공격 특허의 등록청구항 System and Method for Enabling User to Interact in Virtual Space (US 7,181,690 )

1. A method for enabling a first user to interact

with other users in a virtual space, wherein the

first user and the other users each have an

avatar and a client process associated

therewith, and wherein each client process is

in communication with a server process,

wherein the method comprises:

(a) receiving a position of less than all of the

other users' avatars from the server process;

and

(b) determining, from the received positions,

a set of the other users' avatars that are to be

displayed to the first user,

wherein steps (a) and (b) are performed by the

client process associated with the first user. 9


VR 장치에 대한 NPE의 공격

• ABARTA는 가상현실시스템(Virtual reality system)에

대한 등록특허(US 7224326)를 양수하여,

VR분야 업체들에게 침해소송을 제기하고 있음

10


GEOVECTOR v. SAMSUNG – AR 분야 특허분쟁

11


GEOVECTOR는?

12

보유 미국 특허


20년전 특허가 분쟁의 핵심!!

13


Vision imaging devices and methods exploiting position and attitude (US 5682332 A)

14

1. An apparatus for viewing a scene comprising: a camera; a

position determining means; an attitude determining means; a

computer; and a display,

the camera having a lens and transducer for converting an

optical image of a scene into an electronic signal, the lens

having a symmetry axis which defines a pointing direction of the

camera;

the position determining means being operable for determining

the position of the camera;

the attitude determining means being operable for determining

the attitude of the camera pointing direction;

the computer operable for receiving an image signal from the

camera and further operable for generating images relating to

the position and attitude of the apparatus and operable for

combining those images into a composite image and

transmitting a composite image signal to a;

display having a normal direction aligned with and colinear with

the camera pointing direction.

Geovector의 전신인 Criticom의 보유특허


Computer vision system with a graphic user interface and remote camera control (US 6037936)

15

1. A graphical user interface for a computer vision system,

the computer vision system having a camera with an optical axis, a

computer, position and attitude determining means, and a display having

a display field normally aligned to the optical axis,

said graphical user interface being comprised of:

a field region; and

a periphery,

said field region being an area fractional portion of the display field

enclosed by said periphery operable for displaying image and graphical

information while a scene is being addressed by said computer vision

system.

23. A method of displaying a graphical user interface in a computer

vision system comprising the steps:

addressing a scene with a computer vision system;

forming an image of the scene;

generating a graphical user interface;

combining the image of the scene with the graphical user interface to form

a composite image; and

displaying the composite image in a display field.

Geovector의 전신인 Criticom의 보유특허


GEOVECTOR의 특허포트폴리오 구조

16

1993년도 출원으로부터 파생된 특허들!!

“특허 분쟁”을 미리 대비!!!

- 경쟁사/NPE 특허 사전조사 및 대응전략 수립 - 특허 포트폴리오 구축 전략

AR/VR 선두업체의 특허 공격도 곧 시작된다!!



AR/VR 특허 도출 전략


AR기술 / VR기술이 지향하는 목표

VR 기술과 AR 기술은 현실 데이터와 가상 데이터를 연결하는 기술이라는 점에서

공통점이 있지만

지향하는 목표에서부터

명확하게 차이가 난다.

19


AR기술 / VR기술이 지향하는 목표

• VR 기술

– 가상공간을 실제공간과 같게 구현하는 것을 목표

– 사용자가 현실이 아닌 공간을 현실처럼 느끼게 하는 것!!

• AR 기술

– 가상 데이터를 현실 공간상에 더해 제공하는 것을 목표

– 현실환경에 가상환경이 결합돼 가상 데이터가 더 증대/증가된 현실을 구현하는 기술로서, 현실공간상의 부족한 정보 보완

20

가상환경 현실환경

가상환경 현실환경


AR 본질 기반의 디스플레이 기술

•AR 기술은,

사용자가 어색함이나 불편함이 없이

가상 영상을 현실 영상과 함께 활용하도록

사용자의 시선이 향하는 방향에

가상 영상을 적절한 크기로,

적절한 위치에 표시하는

디스플레이 기술이 필요하다.

21

https://www.google.co.kr/url?sa=i&rct=j&q=&esrc=s&source=images&cd=&cad=rja&uact=8&ved=0ahUKEwjGgq21nPDPAhVBwpQKHcrwAVsQjRwIBw&url=http://www.daum.oshokorea.com/bbs/board.php?bo_table%3Dcomm_free%26wr_id%3D27604%26sfl%3D%26stx%3D%26sst%3Dwr_good%26sod%3Dasc%26sop%3Dand%26page%3D57&psig=AFQjCNGSQQ7tyNCT20M_AyXHJZUy8K7KJw&ust=1477287875348667


VR 본질 기반의 디스플레이 기술

•VR 기술은,

현실 영상을 보는 것과 같이

사용자의 시야각 범위 전체에

가상 화면이 표현되도록

하는 광학기술 및 디스플레이 기술이 필요하다. 22

영상이 표시되지 않는 검은 영역이

시야범위 내에 존재하면 현실감이 떨어진다


AR 본질 기반의 HMD구조 기술

• AR 구현을 위한 HMD 중 일상생활 착용형은, 타인이 스마트안경을 착용했는지 인지하지 못하는

일반적인 안경구조로 접근

23

누가 봐도 구글글래스

어딜 보니?


VR 본질 기반의 HMD구조 기술

• VR을 구현하기 위한 HMD는

사용자가 착용하고

외부를 다니지는 않는다!

• ‘착용감 향상’과

‘무게 감소’가

개선 방향!! 24

www.mobiinside.com/kr/2016/02/25/virtual-reality/


‘본질’을 기반으로 문제점 탐구!!

기존의 제품 또는 서비스의 문제점을 발굴하기 위해서는,

처음으로 다시 돌아가 해당 제품 또는 서비스의

'본질'을 탐구하여야 한다

25



- HMD기술만 VR이 아니다



AR/VR기술은 ‘HMD’기술이 전부가 아니다!

• HMD 형태의 VR 장치는 VR 기술을 구현하기

위한 하나의 시각적 도구일 뿐!

• 가상 공간을 현실 공간과 같게 구현하기 위해선,

시각기술 이외에도 다양한 기술이 필요하다. 27


골프존의 ‘스크린골프’

28

스크린골프 = 가상골프

현재 160여 개의 등록특허를 보유한 ‘골프존’

실제 필드골프를 대신할 수 있도록 필드 골프를 가상공간에 구현한 VR 서비스

골프라는 특정한 현실 대상을 가상화(virtualization)하기 위한 다양한 기술 (실제 필드골프와 유사한 게임환경 제공 기술)

에 대한 특허 선점


시각 이외의 감각을 구현하는 기술 특허

29

• 기상 상태에 대한 입체 음향을 제공하는 가상 골프 시뮬레이션 장치 및 방법

골프존 등록특허 KR 10-1415944


실제공간(필드)와 유사한 현실공간 구현 기술

30

가상골프 게임 내 필드 경사도를 현실공간 상에 구현

스윙플레이트 장치 퍼팅플레이트 장치


VR/AR 분야의 시장상황

32

VR/AR 시장

시장 니즈 폭발 필요성 인지


AR/VR 시장의 현재 상황

• Greenlight VR에 따르면 미국 내 VR 연관 사업을 진행 중인 업체 수는 150개 이상(2015년 기준)

• AR/VR에 대한 수요자의 관심도도 급증

33

‘시장태동기’에 적합한 기술과

‘레드오션기’를 준비하는 기술들을 선점!!


VR 분야의 많은 Player의 등장

34


시장태동기

‘상용화 아이디어’ 그 발명이 목적하는 효과를 달성하기 위해 ‘본질적으로’ 필요한 기술

‘본질 강화 아이디어’ 원천 아이디어가 실제 시장에서 사용될 수 있도록 하는 아이디어

35


화면이 흔들지 않고 편한, HMD 장치 구조

• 혼자 착용하기 편한 구조!

• 활동할 때 움직이지 않는 고정성을 가지는 구조!

• 무겁지 않고 무게중심이 쏠리지 않는 구조

• 여러 사람이 함께 사용하는 경우, 조절이 간편한 구조

• ‘장치구조 특허’나 ‘디자인’으로 보호!!

36 Head mounted display(US D763256)


현실감 전달을 위한 감각 전달 기술

•오각(Five Sense) 만족!!

• 촉각을 느끼게 해줄 수 있을까?

• 실제 물건을 잡을 때의 느낌을 전달할 수 있을까?

37


SONY의 가상현실 장갑 특허출원

38

8. A peripheral device for use in interfacing with a virtual reality scene generated by a computer

for presentation on a head mounted display, comprising,

a haptic device capable of imparting haptic feedback to a user; and

a haptic feedback controller for processing instructions for outputting a haptic signal to the haptic

device, the haptic feedback controller using a haptic profile of a virtual object, the haptic feedback

controller configured to receive the instructions from the computer so that the haptic feedback of the

haptic device is defined by the haptic profile in response to an interaction by the peripheral device with

a virtual object in the virtual reality scene when presented on the head mounted display;

wherein the haptic feedback of the haptic device is modified by the haptic feedback controller in

response to an additional interaction with the virtual object using the peripheral device.

DYNAMIC GLOVES TO CONVEY SENSE OF TOUCH AND MOVEMENT FOR VIRTUAL OBJECTS IN HMD RENDERED ENVIRONMENTS (US 2016-0274662)


Latency를 줄이는 기술

39

Motion Display

방향 예측을 이용한 저 레이턴시 시뮬레이션 장치 및 방법과, 이를 위한 컴퓨터 프로그램 (출원번호: 10-2014-0125850)


현실감 제공을 위한 제반 상황 구현 기술

ex. VR의 무선화

40


레드오션(Red Ocean)기

너무 많은 제품이 쏟아지므로,

‘다양성’ 지향

or

수요자 ‘편의성’ 지향

* 2010년부터 2012년까지의 ‘Smart Phone’ 시장

41


‘사용성’을 높이기 위한 UI/UX특허

기존에 AR/VR을 사용하면서 불편하였던 점을 개선하는 User Interface 특징을 특허로 확보

Ex1) 실제현실과 가상/증강현실의 Switching

Ex2) HMD를 착용한 상태에서 핸드컨트롤러를 착용하도록 하는 User Interface

Ex3) 기존의 사용습관을 벗어나지 않고 유지시키는 방식

Ex4) 사용자 상태에 적합하게 설정하는 방식

42


애플의 치밀한 User Interface 디자인 전략

43 Android는…


VR USER Interface – SONY (US 9437159)

44

if. 고개움직임에 의해 시작포지션으로부터

현재포지션까지의 변화가 제어설정에 대응되는 수준 초과

가상환경 중단 & 메뉴 제공

HMD 착용한 상태에서 가상환경을 중단하는 방법


• 소규모 공간에서 가속도센서와 위치센서를 이용한 전방향 이동 발판 시스템

• 10-1617356(출원일자: 2014.04.01)

• 출원인: 도담시스템스

46

상용화 아이디어 - Simulator


Simulator가 새로운 기술?

47

Icaros

SKYTECHSPORT


Ski simulation apparatus (US 3455550 A)

48

1. In a ski simulating apparatus wherein an operators skiing movements thereon provide a response thereto

comparable to those skiing reactions and actions usually found in down-hill skiing, water skiing, surfing and similar

sports, the apparatus comprising: (1) at least one rotatable support roller; (2) a prime mover and a power

transmitting means extending therefrom and to the roller support and providing for the rotating of the support roller

at a selected speed; (3) at least one ski-like member supported intermediate its ends by said rotatable support

roller; (4) means for carrying the operator on the ski-like member in the manner of the sport being simulated; (5)

means on the ski-like member for engaging the support roller so that as said roller is rotated and the operator

cants the ski-like member the means for engaging is skewed to correspondingly skew the ski-like member and

move it laterally on the roller, and (6) means for retaining the ski-like member in a predetermined forward

relationship to the support roller.

출원일: 1966년 9월 22일


개선된 시뮬레이터 방식이 필요하다!

• 더욱 현실과 유사하게 만드는 기술이 적용!!

• 물리법칙을 적용한 실제 스키 움직임을 구현

• 현실감 있는 가상 스키 구현의 Key Factor고려

49

8 Key factors concerning the dynamics of skiing

실제 본인 보유 스키로 현실감 있는

가상 훈련 수행


Simulator기술의 접근 방향은?

특정 상황에 최적인 시뮬레이터를 구현

(각 상황의 현실감을 제공할 수 있는 기술)

여러 가지를 하나의 장치 내에서 구현해내는 시뮬레이터 구현

50


Game console +

구현/수행방법

Top Assignees of VR Patents (2014.9. 기준)

52

http://www.i-runway.com/blog/patentees-drive-to-make-the-virtual-real/


SONY의 게임 구현을 위한 기술특허

53

CALIBRATION OF PORTABLE DEVICES IN A SHARED VIRTUAL SPACE

(US 8537113)

DIRECTIONAL INPUT FOR A VIDEO GAME (US 8888593)

https://www.google.co.kr/url?sa=i&rct=j&q=&esrc=s&source=images&cd=&cad=rja&uact=8&ved=0ahUKEwjcuNOE_5zQAhWCUbwKHWtWBDUQjRwIBw&url=https://www.playstation.com/en-us/explore/playstation-vr/&psig=AFQjCNHrQOj7E3zSoH-At1DeYhAlE2MfLg&ust=1478826184408761


MAINTAINING MULTIPLE VIEWS ON A SHARED STABLE VIRTUAL SPACE (US 9310883)

54


가상현실공간 내 BM도!

• US 2011-0296318

• Virtual Reality Space Provision System, Virtual Reality Space Provision Method and Program

55

온라인상에 가상 현실 공간을 구축하고

가상 현실 공간 내에

아바타(Avatar)를 통해 참가하는

사용자의 행동을 평가하고,

가상 현실 공간 내에서 이용 가능한

포인트를 사용자에게 부여


누구나 가지고 싶은 광범위한 특허!

사업 또는 아이템 전체를 포괄하며

경쟁자 진입을 막는 넓은 특허를

가지고 싶다!!

57

Q: 이렇게 특허 받으면, 여기를 바꾸면

피해갈 수 있지 않나요?

A: 컨셉은 오래전부터 등장하였고,

관련 기술들이 개발된 지 오래되어, 넓은 특허 확보가 어려운 현실

신규성 진보성


특허 확보 전략!!

• 그렇기 때문에…

(1) 현실을 인식하고

(2) 독점 가능한 범위를 추려내고

(3) 선점 가능한 기술을 타겟팅하는 것이 중요함

58

집단의 힘 특허 포트폴리오


특허 포트폴리오 확보 전략

• 특허포트폴리오란?

– 특정한 제품이나 아이디어에 대한 특허권 간에 유기적인 결합상태

– 이미 선행기술이 공개됨에 따라 포괄적 특허 획득이 어려운 분야에 대해, 공백영역 특허와 개량기술 특허를 확보함에 따라 해당 제품에 대한 입체적인 보호

• Facebook에 인수된 오큘러스(Oculus)도 하나의 특허로 사업영역을 커버할 수 없음을 인식하고 사업영역을 방어하기 위한 특허포트폴리오 구축 시도 중

60

경쟁집중분야

경쟁집중 분야

공백영역특허

공백영역특허

개선발명 확보


OCULUS VR의 하드웨어 구성

61

비전센서

컨트롤러

HMD


Facebook에 인수된 Oculus VR

62

Oculus Lift의 디자인등록도 다수 보유!!

2017.1.30. 기준


Oculus VR의 특허포트폴리오

63

광학장치 구조에 대한 특허출원

사용자에게 현실감 있는 가상영상을 제공하기 위한 기술 -각 축 방향으로 머리가 움직이는 각속도를 측정하여 레이턴시를 미리 예측 (US 9348410 / US 9063330) -장치의 얼굴접촉영역에 구비된 변형센서를 착용자의 표정 변화를 인식하여 영상을 생성 (US 2016-0216760)


빠른 출원선점을 통한 특허 포트폴리오 구축

<국내우선권주장을 이용한 추가출원>


포트폴리오 구축을 위한 단기간 집중 특허출원

• 출원을 단기간 내에 구축하는 것이 필요 (1년 내외)

• 출원이 장기간에 거쳐 지속적으로 이어질 경우,

앞선 본인 특허문헌에 의한 거절 발생 65

최초출원 출원공개

1년 6개월

발명A, 발명B

출원 1

발명A’

출원 2

발명B’

최초출원의 발명A와 동일하지 않으면 문제X

최초출원의 발명B보다 진보되지

않으면 거절


66 *SIEMENS 아이디어 워크숍

의도적이고 의식적인 특허활동 필요


67


국내 특허는 해외 특허의 원재료

68

국내 특허 해외 특허

번역


69

한국출원 기반으로 해외 권리화!!

일반해외출원

PCT해외출원

글로벌 시장 기회/비즈니스를 검증

The PCT can buy time!!


Market 국가와 주요 Player 국가로 출원

70

US EP CN

JP TW


GOOGLE 투자를 받은, Magic Leap

71

• 2010년에 설립된 US Startup Company

• 가상의 이미지를 자연스럽게 연출하는 ‘Photonics light field’ 기술 보유

• 안경 형태의 증강현실 디바이스와 다양한 솔루션 개발 중

https://www.google.co.kr/url?sa=i&rct=j&q=&esrc=s&source=images&cd=&cad=rja&uact=8&ved=0ahUKEwiBx6yNzpvQAhWJTrwKHdrxCgoQjRwIBw&url=http://www.geekwire.com/2014/google-leads-542m-magic-leap-investment-doubling-augmented-reality/&bvm=bv.138169073,d.dGc&psig=AFQjCNGu4_656uqalOQEUMLezzVbAzwKMg&ust=1478778704755756


Magic Leap 특허 전략

• 월별 출원 개수

2011년 – 12월(1)

2012년 – 5월(1) 10월(1) 11월(1)

2013년 – 6월(1) 9월(1)

2014년 – 1월(1) 3월(2) 7월(1) 10월(2) 11월(1)

2015년 – 1월(3) 3월(1) 4월(3) 5월(156) 6월(1) 9월(1) 12월(2)

2016년 – 1월(4) 3월(5)

72


Magic Leap의 특허포트폴리오 확장

73

가출원 2건 US 61/909774 (2013.11.27) US 62/012273 (2014.06.14.) 를 기반으로, 특허포트폴리오 확장

2015년5월 특허출원들로

확장!!


Magic Leap의 등록특허 8건 – 광학구조 위주

74

US9470906

US9310559 US9348143

HW SW BM

발명도출 순서


비엘티 특허법률사무소

75

• 서울시 강남구 테헤란로 25길 15-5, IT빌딩 5층

• 전화번호 : 02-514-0104

• 이메일 : [email protected]

• 웹 : www.BLT.kr

[blt] 특허 관점에서 바라본 vr/ar_정태균 변리사_20170130

Business