capita selecta: Kinect presentation

Kinect

The i-Team:Niels BuekersJan GrauwelsKenneth Devloo

Overzicht

Concept Technologiescan Iteratie 1: Prototype Iteratie 2: Implementatie Besluit

Concept

Kinect

Gestures

Mac OS X

Concept: Doel

De kinect op een nuttige manier gebruiken om met gestures een computer te besturen.

Overzicht

Concept Technologiescan Iteratie 1: Prototype Iteratie 2: Implementatie Besluit

Technologiescan

Gestures detecteren Vocabulary Gesture mapping

Objecten waarnemen: Kinect Registreren van handen Diepte: binnen bepaald afstandsinterval

objecten waarnemen -> enkel handen

Technologiescan

Voorbeelden met kinect: Mario kart Chrome extentie TUIO

▪ http://www.youtube.com/watch?v=fWEXuxKqJbw▪ http://vimeo.com/17180651▪ http://vimeo.com/17221217

Overzicht

Concept Technologiescan Iteratie 1: Prototype Iteratie 2: Implementatie Besluit

Iteratie 1 - Prototype

Doel Evaluatie Resultaat Besluit

Doel

Tests vooraf aan implementatie

Welke gestures?

Hulpmiddelen?

Evaluatie

Usertest op whiteboard (6 personen) Vensters met papier voorgesteld 1 persoon verplaatst, 1 begeleidt

Gestures Basishand om te richten, iets vast te

nemen, slepen, lasso maken om vensters te clusteren

Extra hand voor zoom, klik http://www.youtube.com/watch?v=9vqyZYv9Ha0

Resultaat

Hoge drempel 2 handen

Lasso niet aanvaard

Clusteren wel aanvaard

Geen hulpmiddelen

Potentieel in gebruik van gestures

Iteratie 1 - Besluit

Gestures niet aanvaard Andere gestures

Feedback Motivatie scenario?

Nieuw scenario Kennis over gewenste gestures

Overzicht

Concept Technologiescan Iteratie 1: Prototype Iteratie 2: Implementatie Besluit

Iteratie 2 - Implementatie

Doel Implementatie Architectuur Usertests Besluit

Doel

Aanpassing scenario

Aanpassing gestures

Implementatie

Aanpassing scenario

Presentatie Aansturen presentatie Tussen spaces wisselen▪ Space 1: presentatie▪ Space 2: extra materiaal

Aanpassing gestures

Algemeen Space wisselen: swipe 2 handen

Presentatie Navigeren: swipen 1 hand

Documentatie Klikken: vuist Muis: bewegen Verplaatsen: vuist draggen Resizen: Pinch

Implementatie

Mac-omgeving besturen AppleScript Carbon

Detectie lichaamsdelen ofxKinect/openFrameworks

Herkenning gestures KinectJesture

Architectuur

Usertests: Scenario

Vragenreeks vooraf

Uitvoeren scenario http://www.youtube.com/watch?v=QN3uUswyFGY

Evaluatie-vragen achteraf

Usertests: Resultaat

Verbeterpunten:

Gestures ontdekken

Gestures niet robuust genoeg

Focus op Kinect

Usertests: Resultaat

Positief: Graag met kinect werken

Soms aangenamer dan muis

Gestures beter aanvaard (tov iteratie 1)

Iteratie 2 - Besluit

Grotere robuustheid

Betere detectie

Gestures Betere afstemming nodig Meer variatie

Overzicht

Concept Technologiescan Iteratie 1: Prototype Iteratie 2: Implementatie Besluit

Algemeen Besluit

Doel: Kinect nuttig gebruiken om met gestures een computer te besturen. Scenario moeilijk bedenken Gebruikers accepteren de nieuwe manier Veel finetuning nodig

Pijnpunten

Scenario Nuttig en realistisch

Objective-C Koppeling

Applescript Aansturen van vensters

Tijdsbesteding