Reliabilität von Ratings

Slides:



Advertisements
Ähnliche Präsentationen
Polynomial Root Isolation
Advertisements

Abschlussprüfung an Realschulen
Thema der Stunde I. Einführung in die Varianzanalyse:
Klicke Dich mit der linken Maustaste durch das Übungsprogramm!
Klicke Dich mit der linken Maustaste durch das Übungsprogramm! Ein Übungsprogramm der IGS - Hamm/Sieg © IGS-Hamm/Sieg 2007 Dietmar Schumacher Die Wertetabelle.
Klicke Dich mit der linken Maustaste durch das Übungsprogramm! Ein Übungsprogramm der IGS - Hamm/Sieg © IGS-Hamm/Sieg 2007 Dietmar Schumacher Zeichnerische.
Klicke Dich mit der linken Maustaste durch das Übungsprogramm!
Klicke Dich mit der linken Maustaste durch das Übungsprogramm!
Einfaktorielle Varianzanalyse
Forschungsstatistik II
Klassische Testtheorie
Forschungsstatistik II Prof. Dr. G. Meinhardt SS 2006 Fachbereich Sozialwissenschaften, Psychologisches Institut Johannes Gutenberg Universität Mainz KLW-26.
Fehlererkennende Codes
WS Algorithmentheorie 02 - Polynomprodukt und Fast Fourier Transformation Prof. Dr. Th. Ottmann.
Algorithmentheorie 02 – Polynomprodukt und Fast Fourier Transformation
Geometrisches Divide and Conquer
Ein frohes und erfolgreiches Jahr
Experimente in der Linguistik
Institut für Kartographie und Geoinformation Dipl.-Ing. J. Schmittwilken Diskrete Mathe II Übung
Reliabilitätsanalysen
Latente Variablen – Kennwerte zur Beurteilung von Modellen
Was steht in einer ANOVA - Tabelle?
Fragen Was wird mit der Alphafehler-Kumulierung bzw. –inflation bezeichnet? Wie hoch ist die Wahrscheinlichkeit bei einer Untersuchung mit 4 Gruppen einen.
Nachholung der Vorlesung vom Freitag
Ab nächster Woche wird die Übungsgruppe Gruppe 2: Henrike Berg Di SR 222 wegen Personalmangel eingestellt.
Allgemein definiert man:. Bedingte Wahrscheinlichkeiten Die Belegschaft eines Betriebes wird nach Rauchern und Nicht- rauchern eingeteilt. Dabei ergibt.
Kolmogorov-Smirnov-Test. A. N. Kolmogorov Geboren in Tambov, Russland. Begründer der modernen Wahrscheinlichkeitstheorie.
Median Merkmal Geordneter Datensatz
Streuungsparameter Median Mittlere Abweichung vom Median Die Ungleichung gilt für jede Konstante c.
Häufigkeiten Gegeben ist eine Datenliste (Urliste) (hier z. B. die Klausur-Noten von 50 Studenten)
Bedingte Wahrscheinlichkeiten Die Belegschaft eines Betriebes wird nach Rauchern und Nicht- rauchern eingeteilt. Dabei ergibt sich die folgende Tabelle:
Streuungsparameter für Median Mittlere Abweichung vom Median Die Ungleichung gilt für jede Konstante c.
Bedingte Wahrscheinlichkeiten
Streuungsparameter Median Mittlere Abweichung vom Median
Statistische Methoden I WS 2002/2003 Probeklausur Freitag, 13. Dezember statt Vorlesung - Nächsten Freitag!!!
Klausur am :00 bis 13:00 Hörsaal Loefflerstraße und Hörsaal Makarenkostraße.
Rating Ratingvalidierung – quantitative Validierung
Folie 1 § 29 Determinanten: Eigenschaften und Berechnung (29.1) Definition: Eine Determinantenfunktion auf K nxn ist eine Abbildung (im Falle char(K) ungleich.
Unser schönstes Tutorium Materialien unter:
3. Sitzung: Güterangebot und Güternachfrage
Varianzanalyse IV: Messwiederholung
Wdh. Letzte Stunde 1.Hauptsatz
Information und Kommunikation Hartmut Klauck Universität Frankfurt SS
1 J4 Hash-Join R und S werden mittels der gleichen Hashfunktion h – angewendet auf R.A und S.B – auf (dieselben) Hash- Buckets abgebildet Hash-Buckets.
Einfaktorielle Varianzanalyse (ANOVA)
Versuch zur Messung der Geschwindigkeit
Die Herleitung der Lösungsformel für gemischt quadratische Gleichungen
STATISIK LV Nr.: 0021 WS 2005/06 8. November 2005.
Tutorial Preisbildung auf dem Bodenmarkt
Designerkurven - Bézierkurven im Unterricht
Abtragen von Strecken P Q O H t 1-t und Daraus folgt:
1. Grundkörper Verschmelzung Unregelmäßiges Dreikant- und Vierkantprisma x y z 0/ Dreikantprisma x y z /
1. Grundkörper Verschmelzung Vierkantpyramide und Dreikantprisma
Das Gesetz von Boyle-Mariotte Referat anlässlich der TL1-Theorie 2011 in Frankfurt Referent: Martin Haas Zielgruppe: CMAS** Quellen: Ausbildungs-CD VDST.
Testpräsentation V 0.12 Hier steht ein einfacher Fließtext. Er soll zur Beurteilung der Schriftgröße dienen. Gegebenenfalls kann man die Schriftart noch.
Varianz einer Binomialverteilung
Java-Kurs - 6. Übung Besprechung der Hausaufgabe
Die einfache/multiple lineare Regression
Testtheorie (Vorlesung 7: ) Rekapitulation: Modellierungsansatz
Format Zeilenabstand (doppelt) Fußnoten (oder Endnoten) mit Seitenzahl
Varianzanalyse Teststatistik: F – Test -> vergleich zweier Varianzen -> Grundlage der Varianzanalyse Welche „Varianzen“ werden miteinander verglichen?
Thema der Stunde Varianzanalyse mit Messwiederholung
Phi-Koeffizient: Alternative Berechnungsart
Testtheorie (Vorlesung 11: ) Wiederholung: Reliabilität
Testtheorie (Vorlesung 10: ) Wiederholung: Reliabilität
(Wirtschafts-)mathematik I Mathe im Wandel der Zeit Volksschule 1960: Ein Bauer verkauft einen Sack Kartoffeln für 50 DM. Die Erzeugerkosten betragen 40.
Testtheorie (Vorlesung 14: ) Testtheorie allgemein:  Ziele und Inhalte der Testtheorie:  Beurteilung der Eigenschaften von Tests  Speziell: Güte.
Der Satz von VIETA OTTO SIEGELE 2014 „Francois Viete“ von Original uploader was Dr. Manuel at de.wikipedia - and.ac.uk/PictDisplay/Viete.html,
J. NürnbergerSchuljahr 2007 /081 Quadratische Gleichungen Der Satz des Vieta.
Die Varianzanalyse Jonathan Harrington library(lattice) library(ez)
 Präsentation transkript:

Reliabilität von Ratings Logik der 2-Weg-Varianzanalyse für die Berechnung von Intraklassenkorrelationen

Reliabilität von Ratings – ein Beispiel

Reliabilität von Ratings Reliabilität von Ratings – ein Beispiel Ebel- und Horst-Koeffizient und Reliabilität eines typischen Raters WS01-02 Reliabilität von Ratings

Reliabilität von Ratings 1. Ebel-Koeffizient (Frage nach Abstands- und Relationsgleichheit) N Proben (oder Personen) k Rater WS01-02 Reliabilität von Ratings

N Proben (oder Personen) 1. Ebel-Koeffizient (Frage nach Abstands- und Relationsgleichheit) N Proben (oder Personen) k Rater N Proben (oder Personen) k Rater   Wenn gleiches Urteil der Rater bezügl. Abstand u. Relation dann: 1 2 3 für eine Probe P Xp1 Xp2 Xp3 für jede Probe   Abstände jeweils 6 und 2, Relation jeweils 2 Beispiel für P 2 4 6 4 = 12 / 3 3 * 4 8 10 12 3 * 10 14 eine mittlere Probe für eine mittlere Probe   für die Varianz aller Proben Quadratsumme Vp = QSp / N-1 = QS / df Varianz Beurteilen Rater nicht vergleichbar, dann ergibt sich Fehlervarianz. Diese ist hier die gesamte Restvarianz (Ve = Vtotal-Vp-Vr). Reliabilitätsdefinition: rkk(E) zeigt den %-Satz, zu dem die Ratings hinsichtlich Abstände und Relationen austauschbar sind, d.h. inwiefern die Proportionen übereinstimmen (Proportionalitätsindex), nicht aber, in wiefern die Niveaus der Rater übereinstimmen.

Reliabilität von Ratings 2. HORST-Koeffizient (für Frage nach Niveaugleichheit) N Proben (oder Personen) k Rater WS01-02 Reliabilität von Ratings

Reliabilität von Ratings 3. Reliabilität eines typischen Raters N Proben (oder Personen) k Rater WS01-02 Reliabilität von Ratings

Reliabilität von Ratings Anhang: Herleitung der Rechenformeln in 2-Weg-Varianzanalyse Noch zu beweisen ist: WS01-02 Reliabilität von Ratings

Reliabilität von Ratings Anhang: Herleitung der Rechenformeln in 2-Weg-Varianzanalyse WS01-02 Reliabilität von Ratings

Reliabilität von Ratings Anhang: Herleitung der Rechenformeln in 2-Weg-Varianzanalyse WS01-02 Reliabilität von Ratings