Die Präsentation wird geladen. Bitte warten

Die Präsentation wird geladen. Bitte warten

Multimediapraktikum SS07 Vision-Based Motion Analysis Handgestenerkennung.

Ähnliche Präsentationen


Präsentation zum Thema: "Multimediapraktikum SS07 Vision-Based Motion Analysis Handgestenerkennung."—  Präsentation transkript:

1 Multimediapraktikum SS07 Vision-Based Motion Analysis Handgestenerkennung

2 Übersicht 1. Aufgabenstellung 2. Handtracking 1. Farbsegmentierung 2. Camshift 3. Klassifizierung 1. Features 2. Naive Bayes 4. Funktionsweise 5. Demo

3 Aufgabenstellung Programm zur Erkennung von Händen und Bestimmung ihrer Positionen über Kamera- Aufnahme, Klassifizierung der Handgesten mit Hilfe berechneter Merkmalen

4 Implementierung Handtracking (OpenCV) 1. 1. Farbsegmentierung der rechten und linken Hand (verschieden farbige Handschuhe) mit hilfe eines Farbraumes. Z.b. La*b* oder YCbCr Farbräume 2. 2. Tracking mit Hilfe des Camshift-Algorithmus 1. 1. 2D-Histogramme 2. 2. Backproject

5 Implementierung Klassifizierung (Weka) 1. 1. Features berechnen 1. 1. 13 verschiedene Features für jede Hand 2. 2. 1 Feature für den Abstand der zwei Händen 2. 2. Klassifizierung mittels Naive Bayes

6 Funktionsweise Training 1. 1. Name der Geste in Textfeld schreiben 2. 2. Training-Button klicken. 3. 3. Positioniere die Hände so vor der Kamera, dass jede Hand auf ein Rechteck liegt. 4. 4. Sobald Elipsen im Bild zu sehen sind, Geste vorführen. 5. 5. Geste beendet sobald beide Hände aus dem Bild genommen werden. (3-4 wiederholen) 6. 6. Ende-Button drücken  Trainingsende 7. 7. Save-Button: Trainingsdaten werden in eine arff- Datei gespeichert.

7 Funktionsweise Gestenerkennung 1. 1. Hände vor der Kamera positionieren, so dass jede Hand auf ein Rechteck liegt. 2. 2. Sobald Elipsen im Bild zu sehen sind, Geste vorführen. 3. 3. Geste beendet sobald beide Hände aus dem Bild genommen werden. 4. 4. Berechnete Features werden dem Klassifikator übergeben und basierend auf den Trainingsdaten wird die Geste einer Klasse zugewiesen. (Nur bei mind. 70% Übereinstimmung)


Herunterladen ppt "Multimediapraktikum SS07 Vision-Based Motion Analysis Handgestenerkennung."

Ähnliche Präsentationen


Google-Anzeigen