Passa ai contenuti principali

Kinect V2: supporto per le Windows Store App

Alla fine di Aprile è stata rilasciata una nuova versione dell’SDK per Kinect V2 e questa porta con se alcune novità interessanti tra le quali spicca il supporto per le Windows Store Apps.

Questo significa che, nel momento in cui il device sarà commercializzato (presumibilmente in estate), potremo cominciare a pubblicare applicazioni WinRT per Windows 8.1 che supportino il Kinect.

In questo post vedremo come utilizzare le API esposte dall’SDK in un contesto Windows Store App.

Per prima cosa, ovviamente, creiamo il nostro progetto Windows Store App:

image

Una volta che il progetto e i file relativi sono stati creati da Visual Studio, abbiamo la necessità di referenziare la dll contenente le classi per la gestione del Kinect.

Questa, a differenza della versione per applicazioni desktop “classiche”, si chiama WindowsPreview.Kinect (invece che Microsoft.Kinect):

image

Rispetto alla versione desktop “classica”, nella versione WinRT possiamo riscontrare due macro differenze:

  • la classe KinectSensor mette a disposizione il metodo statico GetDefault() per recuperare l’istanza di default del device anzichè la proprietà Default;
  • la classe KinectSensor non implementa l’interfaccia IDisposable. Non è necessario, quindi, eseguire il dispose dell’istanza del device alla chiusura per rilasciare correttamente l’istanza..

A parte questo, tutto il resto continua a funzionare allo stesso modo visto nei precedenti post della serie Kinect V2 senza alcuna modifica.

Se abbiamo intenzione di gestire l’interazione con il device utilizzando gli eventi, dobbiamo prestare attenzione a rilasciare in breve tempo i frame recuperati.
Gli eventi, infatti, vengono richiamati nel thread principale dell’applicazione e, questo, facilita l’aggiornamento dell’interfaccia non dovendo eseguire uno switch di contesto tramite il dispatcher. Dobbiamo essere, però, rapidi nella gestione dei dati provenienti dal device stesso per lasciare libero il prima possibile il thread.

Nel seguente esempio di codice gestiamo l’evento MultiSourceFrameArrived per visualizzare nell’interfaccia il frame proveniente dalla sorgente colore:

  1. Private Async Sub FrameArrivedHandler(sender As Object, e As MultiSourceFrameArrivedEventArgs)
  2.     Dim colorFrameProcessed As Boolean = False
  3.     Using frame = e.FrameReference.AcquireFrame()
  4.         If frame IsNot Nothing Then
  5.             Using colorFrame = frame.ColorFrameReference.AcquireFrame()
  6.                 If colorFrame IsNot Nothing Then
  7.                     CameraSettings = colorFrame.ColorCameraSettings
  8.                     ColorFrameDescription = colorFrame.FrameDescription
  9.                     If ColorFrameDescription.Width = CInt(Bitmap.PixelWidth) _
  10.                         And ColorFrameDescription.Height = CInt(Bitmap.PixelHeight) Then
  11.  
  12.                         If colorFrame.RawColorImageFormat = ColorImageFormat.Bgra Then
  13.                             colorFrame.CopyRawFrameDataToArray(Me.ColorPixels)
  14.                         Else
  15.                             colorFrame.CopyConvertedFrameDataToArray(Me.ColorPixels, ColorImageFormat.Bgra)
  16.                         End If
  17.                         colorFrameProcessed = True
  18.                     End If
  19.                 End If
  20.             End Using
  21.         End If
  22.     End Using
  23.  
  24.     If colorFrameProcessed Then
  25.         Await DrawImage(ColorPixels)
  26.     End If
  27. End Sub

Osserviamo che il recupero dei dati colore viene eseguito il piu’ velocemente possibile e, solo dopo aver rilasciato il frame, viene creata l’immagine da proporre a video utilizzando un metodo asincrono.

  1. Private Async Function DrawImage(pixels As Byte()) As Task
  2.     ColorPixelStream.Seek(0, SeekOrigin.Begin)
  3.     Await ColorPixelStream.WriteAsync(pixels, 0, pixels.Length)
  4.     Bitmap.Invalidate()
  5. End Function

Il fatto che la dll contenente le classi utilizzabili per gestire il Kinect si chiami WindowsPreview fa presagire che qualcosa potrebbe cambiare prima del rilascio definitivo (che dovrebbe avvenire con la messa in commercio del sensore) ma, d’altro canto la possibilità di usare il Kinect per applicazioni NUI immersive in Windows 8.1 solletica la fantasia e apre nuovi scenari che, allo stato attuale, altri device dello stesso tipo non permettono.

 

Commenti

Alessandro Morvillo ha detto…
Il supporto alle Windows Store App è compatibile solo con il Kinect 2? Non è possibile utilizzare il vecchio sensore?

Post popolari in questo blog

VB.NET for Dummies: Gli Eventi

Vorrei iniziare con questo post una serie dedicata ad aspetti di VB.NET di base che possono essere utile a coloro che si avvicinano al mondo .NET e che, in genere, non vengono trattati a livello base. La serie di post non ha la pretesa di essere assolutamente esaustivi sugli argomenti che tratterò In questo primo post parleremo degli eventi. Cosa sono e a cosa servono Un evento è la “notifica” dell’accadimento di qualcosa. Quando, ad esempio, premiamo un bottone della finestra di un’applicazione, dietro le quinte, il bottone stesso “notifica” al mondo circostante che qualcuno, in quell’istante, lo ha premuto. Sta, poi, al mondo circostante preoccuparsi di “intercettare” l’evento stesso per gestirlo (tramite un gestore di evento). Attenzione a non confondere la pressione del tasto con la “notifica” della pressione del tasto: l’evento è la “notifica” dell’accadimento, non l’accadimento stesso. Ma a cosa serve tutto ciò? Utilizzare gli eventi è un modo per disaccoppiare ...

VB.NET: SplashScreen con effetto fade-in

In questo post vorrei proporvi un modo per realizzare una splash screen per le nostre applicazioni Windows Form che appare progressivamente con un effetto fade. Supponiamo di avere il nostro progetto VB.NET in una soluzione Visual Studio 2008 in cui abbiamo il sorgente della nostra applicazione Windows Form. Inseriamo una splash screen utilizzando il menù Progetto->Aggiungi Nuovo Elemento e selezionando il tipo di elemento “Schermata Iniziale” A questo punto Visual Studio creerà, automaticamente, la schermata iniziale che possiamo personalizzare graficamente come vogliamo. Per poter fare in modo che questa finestra appaia nel momento in cui avviamo l’applicazione, è necessario aprire le proprietà del progetto e impostare la maschera di avvio: In questo modo, all’avvio dell’applicazione, la schermata appare immediatamente e scompare un attimo prima della visualizzazione della finestra dell’applicazione. Possiamo far apparire la schermata iniziale con un ef...

Alla scoperta del Kinect: presentazioni e convenevoli

Oggi è arrivato un Kinect nuovo nuovo su cui cominciare a fare sperimentazione ed ho, quindi, deciso di condividere tutto ciò che scopro, le cavolate che faccio e i segreti che scopro con chi mi segue. I post che cercherò di scrivere con frequenza sono post di un neofita che si avvicina all’”Aggeggio” e che quindi sono diretti a chi nulla dell’argomento. Gli esperti troveranno noiosi e banali questi post, ma non si può aver tutto dalla vita. Per cominciare, scartato l’”Aggeggio” ho cominciato a preparare l’ambiente di sviluppo: 1) Visual Studio 2010 Ultimate (che uso normalmente ma che non è necessario in quanto si può sviluppare tranquillamente con la express edition); 2) Kinect SDK, scaricabile all’indirizzo http://research.microsoft.com/en-us/um/redmond/projects/kinectsdk/download.aspx 3) DirectX Software Development Kit scaricabile all’indirizzo http://www.microsoft.com/download/en/details.aspx?displaylang=en&id=6812 A questo punto vi basta connettere il Kinect al...