Die Präsentation wird geladen. Bitte warten

Die Präsentation wird geladen. Bitte warten

Schneller hybrider Disparitätsschätzer 1 Nicole Brandenburg and Serap Askar Schneller hybrider Disparitätsschätzer für ein 3D-Echtzeit-Videokonferenzsystem.

Ähnliche Präsentationen


Präsentation zum Thema: "Schneller hybrider Disparitätsschätzer 1 Nicole Brandenburg and Serap Askar Schneller hybrider Disparitätsschätzer für ein 3D-Echtzeit-Videokonferenzsystem."—  Präsentation transkript:

1 Schneller hybrider Disparitätsschätzer 1 Nicole Brandenburg and Serap Askar Schneller hybrider Disparitätsschätzer für ein 3D-Echtzeit-Videokonferenzsystem Heinrich Hertz Institut für Nachrichtentechnik Berlin Nicole Brandenburg and Serap Askar

2 Schneller hybrider Disparitätsschätzer 2 Nicole Brandenburg and Serap Askar Überblick 3D-Echtzeit-Videokonferenzsystem Konzept der Disparitätsschätzung Struktur des schnellen hybriden Disparitätsschätzers Nachverarbeitung Ergebnisse Zusammenfassung

3 Schneller hybrider Disparitätsschätzer 3 Nicole Brandenburg and Serap Askar Virtual Scene 3D Echtzeit-Videokonferenzsystem Konferenzteilnehmer an verschiedenen Orten Display Virtuelle Kamera Bewegungs-Parallaxe Steuerung der virtuellen Kamerabewegung durch Head Tracking

4 Schneller hybrider Disparitätsschätzer 4 Nicole Brandenburg and Serap Askar 3D Echtzeit-Videokonferenzsystem Synthese einer virtuellen Ansicht

5 Schneller hybrider Disparitätsschätzer 5 Nicole Brandenburg and Serap Askar Konzept der Disparitätsschätzung Rektifikation Hybrider rekusiver Disparitätschätzer Segmentgestützte Nachverarbeitung Konsistenztest Segmentgestützte Interpolation Segmentgestützte Nachverarbeitung linkes Bildrechtes Bild R -> L DisparitätL -> R Disparität Hautfarben- Segmentierung

6 Schneller hybrider Disparitätsschätzer 6 Nicole Brandenburg and Serap Askar Pixel- rekursion Auswahl der besten Disparität Disparitäts- speicher Struktur des hybriden Disparitätsschätzers Block- rekursion 3 Kandidaten Disparitäts- vektor linkes Bild Start-Vektor Update- Vektor rechtes Bild

7 Schneller hybrider Disparitätsschätzer 7 Nicole Brandenburg and Serap Askar Block-Rekursion 3 Kandidaten werden getestet Vorgängerbildaktuelles Bild zeitlich horizontal vertikal Keine Definition eines Suchbereichs um die Kandidaten Auswahl des besten Kandidaten mittels DBD

8 Schneller hybrider Disparitätsschätzer 8 Nicole Brandenburg and Serap Askar Pixel- rekursion Auswahl der besten Disparität Disparitäts- speicher Struktur des hybriden Disparitätsschätzers Block- rekursion 3 Kandidaten Disparitäts- vektor linkes Bild Start-Vektor Update- Vektor rechtes Bild

9 Schneller hybrider Disparitätsschätzer 9 Nicole Brandenburg and Serap Askar Pixel-Rekursion Initialisierung von zwei pixel-rekursiven Prozessen Berechnung der Update-Vektoren mit Hilfe des optischen Flusses Auswahl des besten Update-Vektors anhand der DPD Start- Vektor update vector d incremental update initial vector d

10 Schneller hybrider Disparitätsschätzer 10 Nicole Brandenburg and Serap Askar Pixel- rekursion Auswahl der besten Disparität Disparitäts- speicher Struktur des hybriden Disparitätsschätzers Block- rekursion 3 Kandidaten Disparitäts- vektor linkes Bild Start-Vektor Update- Vektor rechtes Bild

11 Schneller hybrider Disparitätsschätzer 11 Nicole Brandenburg and Serap Askar Ergebnisse des HRM LR L->R Originalbilder Disparitäten Große Verdeckungen ! R->L Falsche Disparitäten !

12 Schneller hybrider Disparitätsschätzer 12 Nicole Brandenburg and Serap Askar Konsistenztest Vergleich der L->R und R->L Disparitäten Ersetzen der unzuverlässigen Disparitäten

13 Schneller hybrider Disparitätsschätzer 13 Nicole Brandenburg and Serap Askar Segmentierung der Hände mittels Hautfarbe Segmentierung innerhalb der Bounding Boxen Tracking der Bounding Boxen Hautfarbensegmentierung mit Region Growing Tracken der Bounding Boxen Unterabtastung Bounding Boxen

14 Schneller hybrider Disparitätsschätzer 14 Nicole Brandenburg and Serap Askar Segmentgestützte Nachverarbeitung Disparitäten Handmaske Disparitäten Handmaske Verwendung von Disparitäten des gleichen Objekts Disparitätssprünge bleiben erhalten

15 Schneller hybrider Disparitätsschätzer 15 Nicole Brandenburg and Serap Askar Dense Field Interpolation Segmentgestütztes Interpolieren der Disparitäten sparse field 4x4 dense field

16 Schneller hybrider Disparitätsschätzer 16 Nicole Brandenburg and Serap Askar Experimentelle Ergebnisse ohne Nachverarbeitung Einfache Nachverarbeitung Segmentgestützte Nachverarbeitung

17 Schneller hybrider Disparitätsschätzer 17 Nicole Brandenburg and Serap Askar Experimentelle Ergebnisse ohne Nachverarbeitung einfache Nachverarbeitung segmentgestützte Nachverarbeitung

18 Schneller hybrider Disparitätsschätzer 18 Nicole Brandenburg and Serap Askar Rechenzeiten für ITU-Rec. 601, 25 Hz, 1:1 Zeiten enthalten:a) unabhängige L R and R L Schätzung b) Konsistenztest c) Interpolation der unzuverlässigen Disparitäten ----8x8 < 40 ms4x4 Zielaktuell Pentium III, 700 MHz 87 ms 22 ms Rastergröße

19 Schneller hybrider Disparitätsschätzer 19 Nicole Brandenburg and Serap Askar Zusammenfassung Schneller hybrider Disparitätsschätzer Blockrekursion : Auswahl aus drei Kandidaten Pixelrekursion : Nutzung des optischen Flusses Nachverarbeitung Verwerfen unzuverlässiger Disparitäten Segmentgestütztes Füllen der Löcher Segmentgestützte Dense Field Berechnung Echtzeitfähigkeit Echtzeitfähig für ein 8x8 Grid, optimierbar für 4x4

20 Schneller hybrider Disparitätsschätzer 20 Nicole Brandenburg and Serap Askar Ende


Herunterladen ppt "Schneller hybrider Disparitätsschätzer 1 Nicole Brandenburg and Serap Askar Schneller hybrider Disparitätsschätzer für ein 3D-Echtzeit-Videokonferenzsystem."

Ähnliche Präsentationen


Google-Anzeigen