18
Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Embed Size (px)

Citation preview

Page 1: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Page 2: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Messung / Erfassung von Persönlichkeitsmerkmalen

• Lassen sich zeitlich stabile Persönlichkeitsmerkmale wie Intelligenz, Kreativität, Motivation, Handgeschick, Ausdauer, Konzentration, Selbstkontrolle, Fleiß… messen wie z. B. die Körpergröße oder das Gewicht eines Menschen?

Page 3: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Hypothetische oder theoretische Konstrukte

• Die genannten Merkmale einer Person setzen sich in der Regel aus einer Vielzahl innerer Voraussetzungen (Variablen) zusammen, die auf Anlagen und/oder Lernerfahrungen eines Menschen zurückgehen.

• Da man sie selber nicht unmittelbar beobachten kann, sondern nur ihre Auswirkungen im Verhalten, spricht man von „Hypothetischen Konstrukten“

• Eine begründete Anweisung wie bzw. durch welches Verhalten man ein theoretisches Konstrukt messen kann heißt

Operaionalisierung

Page 4: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Normen / Vergleichswissen

• Die Ausprägung eines Merkmals erschließt sich nur durch den Vergleich der Ausprägungen dieses Merkmals bei einer Vielzahl anderer Personen:

• Beispiel: Nur wenn ich weiß, dass die meisten Menschen zwischen 1,60 und 1,90 m groß sind, kann ich sagen, dass ein 1,95 m großer Mensch größer ist als die Mehrzahl der Menschen

Page 5: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

• Um also eine genaue Aussage über den Ausprägungsgrad eines (arbeits-)verhaltens-bestimmenden Merkmals zu machen ist es nötig, ein für dieses Merkmal relevantes (Arbeits)Verhalten möglichst exakt zu erfassen (messen) und das Beobachtungsergebnis (Messung) mit einer möglichst repräsentativen Menge an anderen Messergebnissen zu vergleichen zu können.

• Die Vergleichbarkeit ist nur dann gegeben, wenn die unterschiedlichen Messungen unter den gleichen Bedingungen ablaufen. Die Messung muss also objektiv sein (Bedingungskonstanz, einschließlich des Verhaltens der untersuchenden Person).

Page 6: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

• Die Mittel, Instrumente, die ich zur Datenerfassung benötige, sollten zuverlässig sein, also bei wiederholtem Einsatz am gleichen Menschen nicht zu unterschiedlichen Ergebnissen führen (Zuverlässigkeit, Fachbegriff = Reliabilität eines Tests).

• Beispiel: Ein Zollstock wäre ein reliables Instrument zur Messung der Körpergröße, ein Gummiband hingegen wäre unzuverlässig, nicht reliabel.

Page 7: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

• Schließlich sollte die Messung eine gültige Aussage über das zu erfassende Persönlichkeitsmerkmal liefern, es sollte valide sein.

• Beispiel: Ein Test , der vorgibt die Konzentration zu messen, sollte auch wirklich einen starken Bezug zur Konzentrationsfähigkeit von Menschen haben und nicht z. B. deren Angst messen.

Page 8: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Testgütekriterien nach Lienert (1969):

• Objektivität• Reliabilität (Zuverlässigkeit)• Validität (Gültigkeit)

• Normierung (statistisches Vergleichswissen)• Vergleichbarkeit (Parallelformen bzw.

Alternativen)• Ökonomie• Nützlichkeit

Page 9: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Wie nun lassen sich Messergebnisse statistisch anschaulich aufbereiten bzw. präsentieren und welche Kennwerte sind dabei von

besonderer Bedeutung?

• Hierzu ein Beispiel:• Es wurde ein arbeitsdiagnostischer Test /

eine Arbeitsprobe entwickelt, bei dem Patienten / Probanden unter gleichen Bedingungen ein Produkt erstellen bzw. eine Leistung erbringen, der man anschließend nach genau festgelegten Kriterien 0 – 10 Punkte zuordnen kann, also einen numerischen Wert.

Page 10: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

1. Schritt: Erfassung des Ergebnisses auf einem Protokollbogen:

Page 11: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

2. Schritt: Zusammenfassung der Daten in einer Gesamtdatei:

Erkrankung1 = Patient mit Schizophrenie-Erkrankung

2 = Patient mit Depressions-Erkrankung3 = Patient mit Persönlichkeitsstörung

4 = Patient mit Suchterkrankung5 = Patient mit unbekannter oder anderer

Erkrankung6 = Mitarbeiter der Klinik

Diagnose: ICD-Nr.

Aufnahme-Nr. (nur bei

Patienten ausfüllen)

Höchster Schulabschluß0= Hauptschule ohne Abschluß oder Sonderschulabschluß1= Hauptschulabschluß2= Realschulabschluß3= Fachhochschulreife4= Abitur

Beschäftigungsstatus0= keine Arbeit1= geschützt beschäftigt2 = Hausfrau/mann3 = Schüler(in)4 = Student(in)5 = allgem. Arbeitsmarkt (ungelernte Tätigk.) / vergleichbare selbstständige Tätig.6 = allgem. Arbeitsmarkt (Fach- /Ausbildungsberuf) / vergleichb. selbstst. Tätig.7 = akademische Tätigkeit / leitende(r) Angestellte(r) / vergleichb. selbstst. Tätig.

Nr.Test-

Datum

9 = sonstig. (nicht Patient)

  9 =unbek.

Geschl w/m Alter

9= unbekannt

Zeit in Sek. (1. Durchgang)

Zeit in Sek. (2. Durchgang)

Muster 00.00.2000 6 F20.0   4 m 44 7 420 350

1 27.03. 3 F65.4   1 m 62 0 333 272

2 27.03. 3F70.1 F60.8   0 m 31 0 1465 Abbruch

3 27.03. 2 F32.1   1 w 24 5 687 541

4 28.03. 2 F32.2   2 m 43 0 669 443

5 28.03. 4 F10.2   1 m 39 0 424 389

6 28.03. 1 F20   1 m 63 0 1369 Abbruch

7 5.04. 1 F25.2   4 w 37 0 394 396

8 5.04. 4 F19   1 m 47 0 767 738

9 6.04. 1 F20   1 m 28 0 678 677

0 6.04. 2 F33   2 w 37 5 817 793

11 12.04. 1 F20   1 m 39 0 801 786

12 12.04. 4 F19   1 m 43 6 515 507

13 19.04. 0 F07.8   1 m 36 0 2037 2016

14 19.04. 1 F20   2 m 22 5 587 589

Page 12: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

3. Schritt: Darstellung aller Messergebnisse in einer Häufigkeitstabelle

Page 13: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Wesentliche Kennwerte einer Häufigkeitsverteilung

• Anhand einer Häufigkeitsverteilung können verschiedene Kennwerte berechnet werden:

• Der Mittelwert, das arithmetische Mittel aller Werte (Durchschnittswert: Summe aller Werte geteilt durch die Anzahl der Werte);

• Die Standardabweichung oder Streuung ist ein Wert, der angibt wie weit oder eng die verschiedenen Werte sich um den Mittelwert herum verteilen. Je kleiner die Streuung desto schmaler ist die Verteilung und umgekehrt. Die Standardabweichung wird aus der sog Varianz der Verteilung berechnet (mathematisch berechnet sich die Varianz aus der Summe der quadratischen Abweichungen aller Werte vom Mittelwert, geteilt durch die Anzahl der Werte – die Standardabweichung oder Streuung ist die Wurzel der Varianz).

• Weitere beschreibende statistische Kennwerte sind der Modalwert (der Wert, der am häufigsten vorkommt) und der Medianwert (Mitte der Verteilung mittlerer Wert).

Page 14: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Beispiele unterschiedlicher Formen von Häufigkeitsverteilungen:

Page 15: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren
Page 16: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Die Standard-Normalverteilung und unterschiedliche Normskalen:

Page 17: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Jetzt noch eine Zumutung aus der schlussfolgernden Statistik und dann haben Sie es

geschafft:

• Der Korrelationskoeffizient ist ein Begriff aus der Statistik / lineare Regression: es wird mathematisch geprüft wie stark der lineare Zusammenhang zwischen zwei Messungen ist; das Ergebnis kann zischen 0 und 1 liegen; bei 0 besteht kein, bei 1 ein perfekter lineare Zusammenhang zwischen beiden Messungen

Page 18: Statistische und testtheoretische Grundlagen für die Anwendung, Auswertung und Interpretation psychometrischer Verfahren

Darstellung einer Korrelation (Viersener Sortierprobe)

Zusammenhang zwischen erster und zweiter Messung Gruppe P., N=169, r.tt=0,90, M=588, s=381; bzw. r.tt=0,83, M=488, s=146 bei reduzierter

Stichprobe ohne Extremw. (N=146)

200

500

800

200 500 800

Zeit in Sek. 1. Messung

Zeit

in S

ek. 2

. Mes

sung