Semantic Media Showcase – Universität Potsdam Gesichts-erkennung Michael Hübner 706771 Semantic Media Showcase – Universität Potsdam November 2003

Grundlagen der Erkennung Möglichkeiten der Erkennung face detection, face recognition, face tracking Gesichtserkennung (face detection) anhand von Merkmalen Augen, Augenbrauen, Nase, Mund etc. von Formen Kopf + Körper, Bereiche des Kopfes Wiedererkennung (face recognition) Bewegungserkennung (motion detecting, tracking) Positionsänderung der Person (Gestik, Mimik) Räumliche Änderung (in Relation zur Kamera) Software-Beispiele Bedeutung: Gesichtserkennung heißt Erkennen, Erfassen der Person -> face detection Gesichtserkennung im Sinne von Wiedererkennung -> face recognition Auf die Bereich wird im folgenden eingegangen Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Face Detection Grundlage jeder Bilderkennung-Software umfasst Gesichtsdetektion, Gesichtslokalisierung und Normalisierung Normalisierung: transformiert das lokalisierte Gesicht auf eine Standardgröße und Standardorientierung Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Beispiel SeeStorm Merkmale von Personen: Augen, Augenbrauen, Lippen, Nase etc. Vektor-Speicherung der Daten Grundlage für weitere SeeStormface Produkte recognition, mimic recognition, head modeling usw. SDK verfügbar Open Source CV Lib ist bereits vorgestellt worden Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Face Recognition 1. Phase Neue Person erfassen Erfassen der Person durch Kamera Speichern der Bildinformation dieser Person -> Erstellung evtl. 3D Modelle dieser Person (muss nicht hier stattfinden 2. Phase Wiederkennung Verarbeitung & Vergleich der biometrischen Daten der Person Probleme: Veränderung: rasieren, Bart, Make-Up, (Sonnen-)Brille, Altern Zwillinge lassen sich kaum unterscheiden - Problem derzeitiger Systeme extreme Lichtverhältnisse: Schatten, Blendung, Position der zu identifizierenden Person zur Kamera, Austricksen mit Fotos, Masken, Videos Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Open CV - Beispiel Zum Ausprobieren: Download der Intel® Open Source Computer Vision Library http://sourceforge.net/projects/opencvlibrary/ Enthält Binaries (ausführbare Dateien) und zugehörigen Quellcode Unterstützt folgende Compiler: Microsoft Visual C++ 6.0, Borland C++ 5.5Mingw32 und Intel Proton 5.0 Toolsammlung: Camera Calibration Tool, Face Recognition Tool, CamShift Tracker, Kalman Tracker, ConDensation Tracker Zu jedem Tool: Makefiles & Workspace Face Recognition: HMMDemo.exe Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Tracking Erkennung der Gestik / Mimik der Person(en) Bewegungen der Person (vor zurück, links, rechts) Sensorik – Feststellen was eine Person gerade tut z.B. Blickrichtung, Körperhaltung etc. Beispiele: Head Tracking, Eye Tracking Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung 3D Modell - Beispiel CyberLink Co. VR-FACE v0.2 http://www.cyberlink.com.tw Aufnahme der Person, Festlegen von 3 Punkten Standard 3D Gesicht reagiert auf Veränderung der Punkte Erweiterung der Version Generierung eines 3D Modells mit Texture der Person vor der Kamera Vorraussetzung: USB-WebCam Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Für das Projekt Gesichtserkennung (einfach): Falls SeeStorm SDK verfügbar  Eye tracking möglich 3D Modell der Person als Bild auf Leinwand  3D Entwicklung / Kenntnisse / Interesse ? Face Recognition  Erkennen einer Person Motion Detection – Tracking: Irgendwelche Ideen Aufbau Ausleuchtung des Kamera-Bereichs UV-Licht -> erkennen von Formen (schwierig) Face Recognition  Erkennen einer Person, Von allen Personen werden zu Beginn der Veranstaltung einige Bilder gemacht Bilder + Annotation von Textinformationen = Person Befindet sich eine Person vor einer Leinwand, können Information der Personen Angezeigt, benutzt werden -> Frau: „Was benutzen Sie für ein Parfum“ Semantic Media Showcase - Gesichtserkennung

Semantic Media Showcase - Gesichtserkennung Quellen & Links Viisage Face Recognition Software http://www.viisage.com/facefinder.htm SeeStorm Face Feature Extraction and Tracking Head Tracking Mimic & Face & Gesture Recognition Motion Detection Bildquellen www.seestorm.com/techCV.jsp Open Source Computer Vision Library http://sourceforge.net/projects/opencvlibrary/ Semantic Media Showcase - Gesichtserkennung