windows 8 developers カンファレンス

Windowsストアプリにつながるデバイスたち

中村薫

Windows 8 Developers 第４回カンファレンス

今日のセッション

Copyright © 2013 Natural Software.jp All rights reserved.

今日のセッション


Windows 8.1

背景

• Windowsストアアプリにこだわる必要はない(個人の感想ですｗ)

• 目的に応じて使い分ければいい

–アプリの実行環境(ストア,デスクトップ)

–開発環境(Visual Studio,Xamarin,Unity)

– OS(Windows,OSX,Linux,iOS,Android)


ただし

多くのコンシューマーにアプローチするには、

Windowsストアは素晴らしい

プラットフォーム


Windows 8.1につながるデバイスたち

中村薫

Windows 8 Developers 第４回カンファレンス

このスライドは後で公開します

スライドのメモは不要です


Windowsストアアプリについては、

認定が取れたものを紹介しますが、

自己責任にてお願いします。


注意！！

自己紹介

中村薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Visual Studio ALM

[email protected]


mailto:[email protected]

Tokyo MotionControl Network


https://www.facebook.com/TokyoMotioncontrolNetwork

https://www.facebook.com/TokyoMotioncontrolNetwork


http://atnd.org/events/47533

http://mvp.microsoft.com/ja-jp/ComCamp2014.aspx



http://atnd.org/events/47533


12月のできごと


2月のできごと


今日は？


なんでセンサー・デバイス？

• Windowsで動くものが多いから

–もともとWindowsアプリをやってた

• 楽しいから


Windowsで動くものが多いから

• USB接続系は特に

– Kinect for Windows(Windowsのみ)

– Creative Senz3D(Windowsのみ)

– Leap Motion(Windows,OSX,Linux)

– Eye Tribe(Windowsのみ)


ちょっと残念

KinectはWindowsアプリケーション開発者が頭角をあらわすチャンスだった。

コミュニティでは

Kinectが出たてのころは8,9割がMacの人

今は感覚的にWeb,モバイル(iOS,Android)を主戦場にしている人が多い


今日のデバイスたち

• Kinect,Kinect v2• Creative Senz3D(Intel PerC)• Leap Motion• RICOH THETA• Sphero• Oculus Rift• LEGO Mindstorms EV3• Eye Tribe


さまざまなセンサー&デバイス


Windows 8.1につながるセンサー&デバイス


Kinect/Kinect2 Creative Camera

THETAOculus Rift

Leap Motion

LEGO EV3

Eye Tribe

Sphero※Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり、正式版では変更される可能性があります。※何かあっても責任は負いません。自己責任でお願いします。

接続の種類


Bluetooth Wifi 内部ソケットUSB

Windows 8.1につながるセンサー&デバイス


Kinect/Kinect2 Creative Camera

THETAOculus Rift

Leap Motion

LEGO EV3

Eye Tribe

Sphero※Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり、正式版では変更される可能性があります。※何かあっても責任は負いません。自己責任でお願いします。

デバイスの実行環境(OS)


Windowsストアアプリ

Windowsデスクトップ

MacOSX

Linux iOS Android

Kinect v1 × ◎ × × × ×

Kinect v2 × ◎ × × × ×

Senz3D × ◎ × × × ×

Leap Motion ○ ◎ ◎ ○ × ×

Oculus Rift × ◎ ◎ ◎ × ×

Sphero ◎ × ○ × ◎ ◎

EV3 ○ ◎ ◎ × ◎ ◎

THETA ○ ◎ ◎ × ◎ ◎

Eye Tribe ○ ◎ × × × ×

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

凡例 ◎：公式にサポート ○：公式サポートではないが動く ×：非対応(ライブラリなしを含む)

デバイスの実行環境(開発環境、言語)


WinRT(C++,C#,VB)

C++.NET

(C#,VB)Unity(C#)

Xamarin(C#)

Processing

Kinect v1 × ◎ ◎ ○ × ○

Kinect v2 × ◎ ◎ △ × ×

Senz3D × ◎ ◎ ◎ × ○

Leap Motion △ ◎ ◎ ◎ × ×

Sphero ◎ × × ◎ ○ ×

Oculus Rift × ◎ × ◎ × ×

EV3 ○ × ○ × × ×

THETA △ × △ × × ×

Eye Tribe △ ◎ ◎ ◎ × ×


凡例 ◎：公式にサポート ○：非公式ライブラリあり △：作ればある(作った) ×：ない(誰か作って!!)

デバイスの実行環境(開発環境、言語)

Copyright © 2014 Natural Software.jp All rights reserved.Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

凡例 ◎：公式にサポート ○：非公式ライブラリあり △：作ればある(作った) ×：ない(誰か作って!!)

WinRT(C++,C#,VB)

C++.NET

(C#,VB)Unity(C#)

Xamarin(C#)

Processing

Kinect v1 × ◎ ◎ ○ × ○

Kinect v2 × ◎ ◎ △ × ×

Senz3D × ◎ ◎ ◎ × ○

Leap Motion △ ◎ ◎ ◎ × ×

Sphero ◎ × × ◎ ○ ×

Oculus Rift × ◎ × ◎ × ×

EV3 ○ × ○ × × ×

THETA △ × △ × × ×

Eye Tribe △ ◎ ◎ ◎ × ×

デバイスを使ったWINDOWSストアアプリ


Sphero



https://developer.gosphero.com/

SDKをダウンロード(GitHub)

https://developer.gosphero.com/

ストアを検索


Lego EV3


NuGetから取得


ストアを検索


WINDOWSストアアプリに未対応のデバイスを対応させる


対応のポイント

• WACK(Windows App Certification Kit :Windowsアプリ認定キット)を通す

• 最小の実装で認定を通してみる

• デバイス専用アプリでOK

• Wifi、Bluetoothなど通信接続系はOK

• USB接続は内部ソケットでOK


Leap Motion


Leap Motion

• .NET Framework用のDLLあり

• Windowsストアアプリでも動くが、WACKが通らない


Leap Motionのデータ取得


https://developer.leapmotion.com/documentation/csharp/devguide/Leap_Architecture.html

https://developer.leapmotion.com/documentation/csharp/devguide/Leap_Architecture.html

データの取り方を変える

• ローカルのWebサーバーからWebSocket+JSONでデータを取得する

• WinRTにはWebSocketのクラスがある


JSONを簡単にC#へ

Visual Studio 2012 の

「JSON / XML をクラスとして貼り付ける」

機能が便利すぎるけど - しばやん雑記


http://shiba-yan.hatenablog.jp/entry/20130711/1373549632



認定！！


Leap Motionの注意

• ただし、Windows 8.1の場合、ローカルのループバックアドレス(127.0.0.1)が閉じているので、開けてあげる

• Windows 8 AppContainer Loopback Utilityを使うと簡単– http://hatsunejournal.jp/w8/LeapSimonSays/

• About Windows Store App with Leap Motion device– http://ppe.blogs.msdn.com/b/shozoa/archive/2013/

11/08/about-windows-store-app-with-leap-motion-device.aspx


http://hatsunejournal.jp/w8/LeapSimonSays/

http://ppe.blogs.msdn.com/b/shozoa/archive/2013/11/08/about-windows-store-app-with-leap-motion-device.aspx

ローカルにソケットのインタフェースを持っているセンサー

• Kinect v1(SDK v1.8で対応)

• Leap Motion

• The Eye Tribe

(※審査が通ることは保障しません)


THETA


THETA

• APIは公開されていない

• Wifiで接続でき、プロトコル(PTP/IP)が有志によって解析されている


http://mobilehackerz.jp/contents/Review/RICOH_THETA




APIを作る


認定！！


http://apps.microsoft.com/windows/ja-jp/app/theta-remote-shutter/9187edac-286f-430f-acad-7f80751cae9c

http://apps.microsoft.com/windows/ja-jp/app/theta-remote-shutter/9187edac-286f-430f-acad-7f80751cae9c

THETAの注意

• THETAとPCとのネットワークを使うので、マニフェストの「プライベートネットワーク」にチェック

• プライバシーポリシーを忘れずに


Eye Tribe


Eye Tribe

• .NET用のライブラリが公開されている

• データのやり取りはTCP+JSON


https://github.com/EyeTribe/tet-csharp-client

https://github.com/EyeTribe/tet-csharp-client

ライブラリを書き替え

• TcpClientをStreamSocketに

• ThreadをTaskに


結果…

• WACKは通った！！

• たぶん審査も通るハズ

• Leap Motionと同じでループバックアドレス(127.0.0.1)を空ける必要あり？


おまけ


Unity未対応のデバイスを対応させる

1. .NET Framework 3.5のクラスライブラリを作る

2. Kinect v1、Kienct v2のように.NET 4.5のライブラリはダメ

– ただし、ネイティブDLLを.NET 3.5でラップし直せばOK


Kinect v2のUnity対応



https://github.com/kaorun55/Kinect2UnityWrapper

Bodyが動かないので、pull reqお待ちしてますｗ

https://github.com/kaorun55/Kinect2UnityWrapper

Xamarin未対応のデバイスを対応させる

• ポータブルクラスライブラリを作る

• .NET 用のライブラリを作る(?)


まとめ

• Windowsに対応しているデバイスは多い

• Windowsのみに対応しているデバイスも

• 開発環境の選択肢が多い

• Windowsストアアプリに未対応でも、対応する方法がある


Windows&デバイスで

楽しいプログラムライフを!!


windows 8 developers カンファレンス

Technology