vr e kinect - mtcube.com · nel tab .net, scegliete “microsoft. research.kinect” e fate click...
TRANSCRIPT
VR e Kinect
Prof. Raffaella Folgieri
Dipartimento DEMM – Dipartimento di Economia, Management e Metodi quantitativi, Università Statale di Milano – Italy
Riferimenti: ufficio: stanza 22, secondo piano DEMM via Conservatorio 7 email: [email protected]
Kinect e SDK
Con l’SDK messo a disposizione (gratuitamente) da Microsoft, sviluppare applicazioni che utilizzino la kinect è diventato estremamente semplice. La versione dell’SDK a disposizione è quella per Windows 7. Non è garantito che funzioni anche su W8. Un modo semplice per iniziare è quello indicato da Doug Bergmans (http://www.kinecteducation.com/blog/2011/12/22/doug‐bergmans‐beginners‐guide‐to‐kinect‐programming/)
REQUISITI ‐ PC (Win 7) ‐ Visual Studio Express 2010 C# (free): http://www.microsoft.com/express
‐ XNA 4.0 (free): http://www.microsoft.com/download/en/details.aspx?id=23714
‐ Kinect SDK Beta 2 (free): http://www.kinectforwindows.org/ ‐ Kinect
INSTALLAZIONE
1.Download Visual Studio C# Express 2.Click “Install NOW” 3.Selezionate il link “Install Visual Studio 2010 Express C#” (non fate click
su TRIAL). Installerete, così, il Visual Studio installer sul vostro pc.
Source: Visual Studio 2010
4.Doppio click per avviare il processo di installazione. 5.Togliete il check “SQL server.” Vedrete la schermata che segue:
Image Description: Beginning of installing Visual Studio Express
Ci vorrà un po’ per completare l’installazione (sono 100 MB circa)
Downloading & Installing XNA 4.0:
Installiamo il game environment per Xbox (XNA 4.0). Con questo tool potrete creare giochi per Windows, Windows Phone o Xbox.
XNA 4.0: http://www.microsoft.com/download/en/details.aspx?id=23714
Downloading & Installing Kinect SDK Beta 2:
Ora, installiamo la Kinect SDK Beta 2, per far sì che l’hw e il sw del vostro pc possa interagire con la Kinect camera e con i dati che invia o riceve.
Determinate, innanzitutto, se il vostro sistema è 32-bit o 64-bit. (tasto ds del mouse su My Computer”, selezionando “properties”).
Download la Kinect SDK Beta 2 dal link: http://www.microsoft.com/download/en/details.aspx?id=27876.
Trovate il download appropriato per il vostro sistema operativo.
Source: Kinect for Windows
A questo punto siamo pronti per dare uno sguardo più approfondito alla Kinect!
INTRODUZIONE ALLA PROGRAMMAZIONE DELLA KINECT Qui vedremo una breve introduzione alla programmazione della kinect (da Doug Berman). Chi desidera approfondire, può trovare ulteriore materiale a questo link: https://www.facultyresourcecenter.com/curriculum/8965-Kinect-Development.aspx?EulaRedir=1&c1=en-us&c2=0 Aprite un nuovo progetto in visual studio:
Nella finestra che compare, scegliete Windows Game…
Avremo così a disposizione un framework generico da personalizzare (contiene le stesse library utilizzate per i giochi Xbox). Sulla destra, fate click su “reference” con il tasto destro del mouse e selezionate “add reference” per ottenere la reference e Morgan scroll da dotnet
Nel tab .NET, scegliete “Microsoft. research.kinect” e fate click su ok per averle a disposizione. Un altro sito da cui scaricare took utili è coding4fun (molti code‐source, free): http://c4fkinect.codeplex.com/
Attraverso i tool di coding4fun è possibile interpretare facilmente molti dati provenienti dalla kinect camera, quindi fatene il download, poi ancora tasto destro su “reference” e “add reference”. Stavolta dovrete andare sul tab BROWSE, cercare coding4fun.kinect e fare click su ok. Aggiungiamo queste due reference al codice (click e ve li ritroverete sulla sinistra). Avremo accesso a molte funzionalità che ci torneranno utili. Il programma che vogliamo realizzare mostra semplicemente uno scheletro del vostro corpo. Nel codice, dopo runtime_kincect, vedete il codice che permette la visualizzazione dello scheletro. Nel costruttore (graphics) avete le specifiche di quello che potrete replicare sullo schermo.
Il kinect_initialize ci permetterà di realizzare un semplice track del nostro corpo. Kinect_camera.skeletonFrameReady è quello che ci permette di “monitorare” continuamente quello che succede (ogni nostro movimento). Lo scheletro viene tracciato così:
Qui trovate tutte le API per programmare la kinect (ed anche altre informazioni utili) http://www.microsoft.com/en‐us/kinectforwindowsdev/Downloads.aspx In RESOURCES è possibile seguire molti video‐tutorial che introducono alla programmazione attraverso semplici esempi: http://www.microsoft.com/en‐us/kinectforwindowsdev/Resources.aspx
Vedremo le basi di come gestire le API della kinect: Come gestire lo stato della kinect: ‐ Connessa ‐ Abilitazione dei sensori di colore, profondità, rilevazione dello scheletro ‐ Come avviare la kinect
Come acquisire i dati: ‐ eventi – AllFrameReady ‐ polling – OpenNextFrame Molti video anche qui:
http://channel9.msdn.com/Series/KinectQuickstart/RSS
vediamo insieme il secondo (come impostare l’ambiente), per 5 minuti. Ora proviamo a ripetere le operazioni passo per passo…
Innanzitutto avviamo Visual Studio e facciamo CLICK su NEW PROJECT:
Scegliete WPF Application
Compare quello che vedete in figura:
Sulla destra, fate click su “reference” con il tasto destro del mouse e selezionate “add reference” per ottenere la reference
Scegliere existing…
A questo punto:
Scegliete Dependencies
Kinect viewer
Add reference di nuovo
Ora il setup è completo
Ora guardiamo la seconda parte del video per capire come programmare un evento…
Ricapitoliamo… proviamo a programmare un evento
Click on loaded
Doppio click
Aggiungo la ms kinect library
Poi dichiaro il sensore
Proviamo a scrivere
cioè quando la finestra si chiude, lo fa anche la kinect
metto un breakpoint
Con la levetta sulla sinistra lo aggiusto
tolgo kinect…
selezioniamo try