Multimedia und Virtual Reality

Präsentation zum Thema: "Multimedia und Virtual Reality"—  Präsentation transkript:

1 Multimedia und Virtual Reality
Vorlesung am Martin Kurze Video (lat.: ich sehe)

2 (Visuelle) Wahrnehmung
Bestimmende Faktoren: Umgebung (gibt es diese?) Stimuli (Reize), woher? wohin? Sensoren, Nerven, usw. Das Gehirn (der Forschung eher unzugänglich) Aber: beliebtes Betätigungsgebiet der Psychologie Das effektorische System Die Handlung als Ergebnis der Wahrnehmung

3 Optische Täuschungen Subjektive Konturen Müller-Lyer-Illusion
Spirale des Archimedes

4 Spirale des Archimedes

5 Licht als „Medium“ ziemlich schnell Dualismus von Welle und Korpuskel
(299)792,458 km/s im Vakuum) Dualismus von Welle und Korpuskel Wellennatur bewirkt Lichtbeugung Teilchennatur als Modell beim „Ray tracing“

6 Spektrum elektromagnetischer Wellen

7 Das sichtbare Licht Das menschliche Auge ist besonders empfindlich für grün Umsetzung unssichtbaren Lichts in sichtbaren Bereich => „Falschfarben-Bild“

8 Wir sehen kaum Licht (???) Reflexionen von Licht an Körpern
nur ein Teil des Spektrums wird reflektiert Das hat Folgen für das Rendering ... und für die Bildschirmarbeit!! wird auch im Glasfaserkabel genutzt.

9 Lichtbrechung keine optische Täuschung! wird von Prismen genutzt
... und von Linsen (!!)

10 Seh-Sinn Licht (emittiertes und reflektiertes) fällt durch die Linse auf die Netzhaut.

11 Seh-Sinn (2) Die Netzhaut hat lichtempfindliche Zapfen und Stäbchen
120 Mio Stäbchen für Helligkeit 5 Mio Zapfen für Farben (3 verschiedene Sorten für 3 Frequenzbereiche) „scharfes Sehen“ nur am „gelben Fleck“

12 etwas Psychologie des Sehens
Warme Farben (z.B. rot oder gelb) wirken nahe kalte Farben (z.B. grün oder blau) wirken fern Pastelltöne wirken entspannt und entspannend gelb auf blau ist gut lesbar wirkt aber etwas aggressiv

13 RGB-Farbmodell als Würfel
cyan white magenta blue gray line G yellow green R black red

14 Bild und Bedeutung Zeichen (sign) - Jedes physische Objekt, dem eine Gesellschaft eine Bedeutung zugewiesen hat Semiotik - Zeichenkunde Anzeiger (signifier) - physische Entität, die das Zeichen trägt/ausdrückt Bezeichnung (signified) - Konzept oder Gefühl, das von dem Zeichen transportiert wird Signification - Verknüpfung zwischen Ausdruck und Konzept (kulturell unterschiedlich!)

15 Alles eine Frage der Perspektive
Illusions- Perspektive geometrische Perspektive konzeptionelle Perspektive

16 Video-Technik ... Film Video Animation Daumenkino

17 Multimedia und Virtual Reality
Vorlesung am Martin Kurze Audio (lat.: ich höre)

18 Schallwellen Frequenz Amplitude Harmonie
Anzahl der Schwingungen pro Sekunde bestimmt Tonhöhe Amplitude Intensität/Lautstärke eines gehörten Geräuschs Harmonie Schallwellen haben Frequenzen, die sich in bestimmten Verhältnissen unterscheiden

19 Harmonische Schwingung
Ruhe Kompression „Unterdruck“ Wellen- bewegung

20 Harmonien von (Schall-)Wellen

21 Schallwellen Materie-Wellen

22 Fourier-Spektral-Analyse

23 Schall-Ausbreitung Reflexion - Schall wird von Oberflächen in verschiedene Richtungen zurückgeworfen direkter Sound - Schall wird ohne Reflexion gehört „early sound“ - Schall wird nach einer Reflexion gehört Echo - Schall wird nach vielen Reflexionen gehört

24 Schall-Ausbreitung (2)

25 Beugung Schall dringt durch Spalten, z.B. von offenen Türen
Beugung ist frequenzabhängig

26 Doppler-Effekt Sich nähernde Geräuschquellen klingen höher
Sich entfernende klingen tiefer Ursache: relative Wellenlängen/Frequenz-Verschiebungen wahrnehmbar ab ca. 30 km/h

27 Hören und Zuhören (hearing and listening)
Hören - unbewußtes physisches Empfangen von Schall Zuhören - Schallwahrnehmung mit genauer Unterscheidung und Zuordnung. Man untersucht den Schall, seine eigene Erfahrung und Reaktion darauf einschließlich der emotionalen. „Cocktail-Party-Effekt“

28 Eingeschränkte Wahrnehmung
Man hört Frequenzen von ca. 20 bis Hz Frequenzen über 16 kHz werden als Pfeifen wahrgenommen Frequenzumfang des Gehörs schrumpft im Alter

29 Dimensionen des Hörens
Hörebenen - physisch, abstrakt Bedeutung - wird aus dem Verhältnis der verschiedenen Ebenen abgeleitet Lokalisierung - Fähigkeit den Ort einer Schallquelle festzustellen (Richtung und Entfernung) Identifikation - Fähigkeit Stimmen, Instrumente und andere Schallquellen zu erkennen

30 Schall als Datenmaterial
Digitales Sampling Frequenz (z.B. 44,1 kHz bei CDs) Komprimierung z.B. MP3 für Musik „Codecs“ für verschiedene Quellen (Sprache, Musik) verschiedene Bandbreiten Symbolisch (MIDI, Sprachsynthese, ...)

31 Übungsaufgaben zu Audio/Video
Suchen Sie im WWW nach Audio-Dateien Finden Sie Audio-Dateien zu folgenden Themen: Hubschrauber Türklappen (Stall, Zimmer, Enterprise) Bar-Gespräche,... Finden Sie eine MIDI-Datei, die sich als Loop im Hintergrund für bestimmte Stimmungen/Szenen eignet (Wald, Stadt, Disco, Uni, ...). Konvertieren Sie die Dateien ins wav- und MPEG-Format.