Multimedia und Semiotik Ein Vortrag im Rahmen des Seminars zur Lehrveranstaltung GIS IV von Stefan Hoersch

Multimedia und Semiotik Inhaltsübersicht: 1. Einleitung 1.1 Begriffsbestimmung von Multimedia 1.1 Begriffsbestimmung von Multimedia Multimedialität Multimedialität Multimodalität Multimodalität 2. Semiotik 2.1 Graphische Variablen 2.1 Graphische Variablen 2.2 Erweiterung der graphischen Variablen 2.2 Erweiterung der graphischen Variablen 2.3 Veränderungseigenschaften 2.3 Veränderungseigenschaften 2.4 akustische Variablen 2.4 akustische Variablen

Begriffsbestimmung von Multimedia Mulimedia = multiple Medien ??? Mulimedia = multiple Medien ??? Multimedia = multiple Medien + Interaktivität Multimedia verbindet die Aspekte der Multimedialität und der Multimodalität !!!

Multimedialität Multimedialität bildet die Basis der verschiedenen Medien. Unterscheidungen dabei:  zeitunabhängige Medien wie Text, Graphik und Bild  zeitabhängige Medien wie Audio, Video und Animation

Multimodalität Multimodalität wird durch die Begriffe Inter- aktivität, Parallelität und Multitasking geprägt:  Interaktivität: ermöglicht es dem Anwender die Medienpräsentation zu steuern  Parallelität: parallele und gleichzeitige Ausgabe von mehreren Medien sowie die gleichzeitige Eingabe über verschiedene Geräte (Tastatur, Maus,...)  Multitasking: zeitlich paralleler Ablauf komplexer Prozesse

Multimedia und Semiotik Wozu braucht man da die Semiotik ??? Um eine gute Multimediapräsentation (Karte, Video, Animation,...) zu gestalten, muss man natürlich wissen, welche Mittel zu Verfügung stehen und wie sie untereinander korrespondieren

Semiotik Zu den Grundlagen der Semiotik siehe Vorlesung „Kartographie II Kapitel 2“ von Herrn Prof. Morgenstern. Unser Einstieg: graphische Variablen nach Bertin (1982)

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe und Helligkeitswert

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe und Helligkeitswert  und trennende Variablen (Muster,

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe und Helligkeitswert  und trennende Variablen (Muster, Farbe,

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe und Helligkeitswert  und trennende Variablen (Muster, Farbe, Richtung

graphische Variablen nach Bertin  Ortsvariablen (in X- und Y-Richtung)  sowie Größe und Helligkeitswert  und trennende Variablen (Muster, Farbe, Richtung und Form)

Kartengraphisches Zeichensystem Nach Hake und Grünreich (1994) in drei- stufigem Aufbau:  graphische Elemente (Punkt, Linie, Fläche)  zusammengesetzte Zeichen (Diagramm, Halbton, Schrift)  graphische Gefüge (räumlicher Bezug, Pro- portionen)

Erweiterungen der graphischen Variablen Nach MacEachren (1995): ABER: Erweiterung kann auf Bertin zurückgeführt werden! Klarheit (Auflösung) Transparenz Füllung Helligkeit Muster Flächenfüllung Schärfe

Erweiterungen der graphischen Variablen Motivation zur weiteren Erweiterung: Graphische Variablen nach Bertin und MacEachren sind für Anwendung in der XY-Ebene ausgerichtet. Raumwahr- nehmung wird durch Variation von Signaturgrößen und Helligkeit erreicht.  Anwendung perspektivischer Abbildung mit 3D- Computergraphik

Erweiterungen der graphischen Variablen 1.Raumwahrnehmung:  Neue Variable: Raumdimension  Zeichenelement: Volumen

Erweiterungen der graphischen Variablen 2.Veränderung mit den Eigenschaften:  Eintrittszeitpunkte  Dauer der Elementveränderung  Reihenfolge der Eintrittszeitpunkte  Intensität  Frequenz  Synchronisation

Eintrittzeitpunkte Zeit Oben: plötzliches Eintreten Unten: fließendes Eintreten

Eintrittzeitpunkte abruptes Erscheinen: starke Aufmerksam- keitsreaktion fließendes Erscheinen: Signatur fügt sich harmonisch in Darstellung ein, aber Aufmerksamkeitseffekt nimmt ab

Dauer  wirkt ordnend auf Mengen gleicher Zeichen mit gleichem Eintrittszeitpunkt  kann unterstützt werden mit den graphischen Variablen (Größe, Helligkeit und Muster) ABER: bei unterschiedlichen Eintrittszeitpunkten nimmt Eindruck der Ordnung ab, da kein gemeinsamer Bezugs- punkt gefunden werden kann

Reihenfolge Zeit Oben: gemeinsamer Eintrittspunkt Unten: unterschiedliche Eintrittspunkte

Reihenfolge Legt Eintrittszeitpunkte fest und wirkt dadurch chronologisch ordnend.

Intensität Zeit Oben: Intensitätsveränderung unterstützt durch die Veränderung der graphischen Variablen Größe Unten: Intensitätsveränderung unterstützt durch die Veränderung der graphischen Variablen Größe und Helligkeit

Frequenz Wirkt ordnend und zusammen mit Synchronisation gruppenbildend

Synchronisation Bedeutet: es werden synchronisiert zwei oder mehrere Variablen verändert. Dient der Gruppenbildung und der Verstärkung.

Fazit Veränderungseigenschaften und graphische Variablen können sinnvoll kombiniert werden. Vorteile:  zeitliche Objekteigenschaften können so beschrieben werden  Möglichkeit die Aufmerksamkeit gezielt zu steuern, die im Gegensatz zu statischen Karten zeitabhängig ist

Erweiterungen der graphischen Variablen Einführung von akustischen Variablen: Graphische VariablenAkustische Variable DimensionRaumposition GrößeLautheit Farbe/HelligkeitTonhöhe MusterKlang Farbton/SättigungSchärfe RichtungSchwankungsstärke FormRhythmus

Erweiterungen der graphischen Variablen Akustisch dargebotene Informationen müssen mit Objekten verknüpft werden.  Veränderung und die akustischen Darstellung bedürfen der Synchronisation

Danke für die Aufmerksamkeit!