zur Pretest Datenbank Pretest-Datenbank
Projektname:Projekt „Evaluierung neuer Kurz- und Langversionen soziodemographischer Standarditems“
  2. Fragetext: Welchen höchsten allgemeinbildenden Schulabschluss haben Sie?
  3. Instruktionen: Split A (Kurzversion): Hinweis: Wenn Sie Ihren Abschluss im Ausland erworben haben, ordnen Sie sich bitte den Kategorien 2 oder 3 zu.
    Split B (Langversion): Hinweis: Wenn Sie Ihren Abschluss im Ausland erworben haben, ordnen Sie sich bitte den Kategorien 2 bis 8 zu. Falls diese nicht passend sind, nutzen Sie Kategorie 9 für eine offene Angabe
  5. Antwortkategorien:

    Split A (Kurzversion):

    1. (Noch) kein Schulabschluss

    2. Hauptschulabschluss (Volksschulabschluss), Realschulabschluss (Mittlere Reife), Polytechnische Oberschule der DDR oder vergleichbar

    3. (Fach-)Hochschulreife/Abitur (auch EOS oder EOS mit Lehre)

    Weiß nicht

    Keine Angabe

    Split B (Langversion):
    1. Schüler/-in, besuche eine allgemeinbildende Vollzeitschule

    2. Von der Schule abgegangen ohne Schulabschluss

    3. Hauptschulabschluss (Volksschulabschluss) oder gleichwertiger Abschluss

    4. Polytechnische Oberschule der DDR mit Abschluss der 8. oder 9. Klasse

    5. Realschulabschluss (Mittlere Reife) oder gleichwertiger Abschluss

    6. Polytechnische Oberschule der DDR mit Abschluss der 10. Klasse

    7. Fachhochschulreife

    8. Abitur/Allgemeine oder fachgebundene Hochschulreife (Gymnasium bzw. EOS, auch EOS mit Lehre)

    9. Einen anderen Schulabschluss, und zwar:

    Weiß nicht

    Keine Angabe

    1. Empfehlungen: In beiden Frageversionen ordneten fast alle Testpersonen ihren höchsten allgemeinbildenden Schulabschluss korrekt einer der vorgegebenen Antwortkategorien zu. Da die Kurzversion (Split A) weniger Bearbeitungszeit erfordert als die Langversion (Split B), empfehlen wir, diese zu verwenden, sofern die Granularität der dreistufigen Abfrage ((noch) kein Schulabschluss, Abschluss der Sekundarstufe I, Abschluss der Sekundarstufe II) für die gewünschten Analysen ausreichend ist. Dies ist beispielsweise ausreichend, um ISCED herleiten zu können. Soll jedoch Bildung in das CASMIN-Schema kodiert werden, welches für Deutschland valider ist als ISCED, muss zwischen Haupt- und Realschulabschlüssen unterschieden werden, so dass die Kurzversion hier unzureichend wäre. Entsprechend wäre eine alternative Kurzversion empfehlenswert, die Haupt- und Realschulabschlüsse unterscheidet, aber auf die Differenzierung von Schülern, Fachhochschulreife und auf die halboffene Angabe verzichtet:
      • (Noch) kein Schulabschluss
      • Hauptschulabschluss (Volksschulabschluss) oder gleichwertiger Abschluss, Polytechnische Oberschule der DDR mit Abschluss der 8. oder 9. Klasse
      • Realschulabschluss (Mittlere Reife) oder gleichwertiger Abschluss, Polytechnische Oberschule der DDR mit Abschluss der 10. Klasse
      • (Fach-)Hochschulreife/Abitur (auch EOS oder EOS mit Lehre)
      • Weiß nicht
      • Keine Angabe
      Diese alternative Kurzversion würde vermutlich etwas mehr Befragungszeit kosten als die ursprüngliche Kurzversion, da sie mehr Text enthält und insbesondere die POS über zwei Kategorien differenziert werden muss, jedoch immer noch weniger als die Langversion. Zuordnungsprobleme sollten hier nicht höher ausfallen als mit den getesteten Versionen.
  2. Eingesetzte kognitive Technik/en:Information Bild/Link zu Kognitives Pretesting Category Selection Probing, Specific Probing
  3. Befund zur Frage: Informationen zur Frage und Ziel der Testung:
    Mit Frage 1 soll der höchste allgemeinbildende Schulabschluss der Befragten erfasst werden. Verglichen wurde eine (insbesondere für selbstadministrierte Umfragen) neu entwickelte Kurzversion mit der Frageversion aus den Demographischen Standards (Langversion). Die Kurzversion ist einerseits durch deutlich reduzierten Text gekennzeichnet, andererseits aber auch durch geringeren Informationsgehalt aufgrund der Zusammenfassung von Abschlüssen innerhalb der Sekundarstufe I einerseits und innerhalb der Sekundarstufe II andererseits.
    Ziel der kognitiven Nachfragen war es herauszufinden, ob die Testpersonen ihren Abschluss korrekt einer der vorgegebenen Antwortkategorien zuordnen und ob es hierbei Unterschiede zwischen der neu entwickelten Kurzversion und der Langversion aus den Demographischen Standards gibt. Darüber hinaus sollte analysiert werden, ob die Kurzversion die Zuordnung von ausländischen Abschlüssen zu den vorgegebenen Kategorien erleichtert (da nur Abschlüsse der Sekundarstufe I und II unterschieden werden müssen) und ob sich die Antwortzeiten zwischen den beiden Frageversionen unterscheiden.

    Befund:
    Es gab bei keiner der beiden Frageversionen Item Nonresponse, d. h. alle 480 Testpersonen beantworteten die Frage nach ihrem höchsten allgemeinbildenden Schulabschluss. Bezüglich des Anteils der Testpersonen, die einen Abschluss der Sekundarstufen I und II angaben, unterschieden sich die Frageversionen kaum. In beiden Frageversionen wurde jede Antwortkategorie mindestens einmal ausgewählt. Eine Testperson selektierte in der Langversion (Split B) die halboffene Antwortoption „anderer Schulabschluss“ und trug „Matura, Schweiz“ (TP935) in das offene Textfeld ein.

    Ordnen die Testpersonen ihren höchsten Schulabschluss korrekt den vorgegebenen Antwortkategorien zu?
    Die Nachfragen zum konkret erworbenen höchsten Schulabschluss wurden jeweils etwa einem Viertel der Stichprobe gestellt (Split A: n = 119, Split B: n = 123). Fast alle Testpersonen, die interpretierbare Antworten auf die Nachfrage gaben, ordneten ihren Schulabschluss in beiden Frageversionen eindeutig korrekt einer der vorgegebenen Antwortkategorien zu (Split A: 96,5 %, n = 111; Split B: 99,2 %, n = 118). Die Häufigkeit korrekter Antworten unterschied sich dabei nicht statistisch signifikant zwischen den beiden Frageversionen (χ2(1) = 1.95, p > .05). Im Folgenden sind einige Beispielantworten auf die Nachfragen zum höchsten erlangten Schulabschluss aufgeführt:

    Split A, Kurzversion
    • „Hauptschulabschluss“ (TP247, Antwort: Hauptschulabschluss (Volksschulabschluss), Realschulabschluss (Mittlere Reife), Polytechnische Oberschule der DDR oder vergleichbar)
    • „Ich habe einen Realschulabschluss (Mittlere Reife) und mache aktuell Abitur.“ (TP1042, Antwort: Hauptschulabschluss (Volksschulabschluss), …)
    • „Abschluss der POS“ (TP855, Antwort: Hauptschulabschluss (Volksschulabschluss), …)
    • „EOS“ (TP307, Antwort: (Fach-)Hochschulreife/ Abitur (auch EOS oder EOS mit Lehre))
    • „Fachhochschulreife, anschließend Berufsausbildung.“ (TP930, Antwort: (Fach-)Hoch-schulreife/ Abitur (auch EOS oder EOS mit Lehre))
    • „Allgemeines Abitur“ (TP1093, Antwort: (Fach-)Hochschulreife/ Abitur (auch EOS oder EOS mit Lehre))
    Split B, Langversion
    • „Hauptschulabschluss 9. Klasse“ (TP397, Antwort: Hauptschulabschluss (Volksschulabschluss) oder gleichwertiger Abschluss)
    • „Ich habe die 10. Klasse auf einem Gymnasium beendet, also den Sek I.“ (TP975, Antwort: Realschulabschluss (Mittlere Reife) oder gleichwertiger Abschluss)
    • „Ich besuchte bis zur 10. Klasse die Realschule und habe die Mittlere Reife erlangt.“ (TP873, Antwort: Realschulabschluss (Mittlere Reife) oder gleichwertiger Abschluss)
    • „Abschluss 10. Klasse POS“ (TP222, Antwort: Polytechnische Oberschule der DDR mit Abschluss der 10. Klasse)
    • „Fachhochschulreife nach Abgang von der Jahrgangsstufe 13.1“ (TP179, Antwort: Fachhochschulreife)
    • „Abitur auf einem Gymnasium“ (TP260, Antwort: Abitur/Allgemeine oder fachgebundene Hochschulreife (Gymnasium bzw. EOS, auch EOS mit Lehre))
    Inkorrekt ordneten sich in der Kurzversion (Split A) nur vier Personen, in der Langversion (Split B) nur eine Testperson zu:

    Split A, Kurzversion
    • „Abiturzeugnis“ (TP238, Antwort: Hauptschulabschluss (Volksschulabschluss), Realschulabschluss (Mittlere Reife), Polytechnische Oberschule der DDR oder vergleichbar)
    • „Gymnasium“ (TP882, Antwort: Hauptschulabschluss (Volksschulabschluss), …)
    • „Hauptschule mit Lehre“ (TP968, Antwort: (Fach-)Hochschulreife/ Abitur (auch EOS oder EOS mit Lehre))
    • „Ich habe einen Realschulabschluss.“ (TP1025, Antwort: (Noch) kein Schulabschluss)
    Split B, Langversion
    • „Abitur“ (TP182, Antwort: Fachhochschulreife)
    Jeweils eine Testperson pro Frageversion gab auf die Nachfrage nach dem höchsten Schulabschluss einen im Ausland erworbenen Schulabschluss an. Beide ordneten sich korrekt einer der angebotenen Antwortkategorien zu, wobei TP935 in der Langversion von der halb-offenen Antwortkategorie Gebrauch machte, anstatt alternativ die Antwortkategorie „Abitur/Allgemeine oder fachgebundene Hochschulreife (Gymnasium bzw. EOS, auch EOS mit Lehre)“ auszuwählen:
    • „Matura“ (TP224, Split A, Antwort: (Fach-)Hochschulreife/ Abitur (auch EOS oder EOS mit Lehre))
    • „Matura, Schweiz“ (TP935, Split B, Antwort: Anderer Schulabschluss)
    Unterscheiden sich die Antwortzeiten zwischen den beiden Frageversionen?
    Vor der Analyse der Antwortzeiten wurde eine Ausreißerbereinigung gemäß den Empfehlungen von Höhne & Schlosser (2018) durchgeführt, d. h. der untere Schwellenwert wurde mit der Formel Q.50 – (3 x (Q.50 – Q.25)), der obere Schwellenwert mit der Formel Q.50 + (3 x (Q.75 – Q.50)) bestimmt. Befragte, welche die Kurzversion der Frage (Split A) erhalten hatten, benötigten zur Beantwortung von Frage 1 weniger Zeit (M = 8.20, SD = 3.58, n = 215) als Befragte, welche die Langversion (Split B) erhalten hatten (M = 11.46, SD = 4.40, n = 213). Dieser Unterschied war statistisch signifikant (Welch’s F (1, 407.80) = 70.47, p < .001).
  2. Thema der Frage: Soziodemographie
  3. Konstrukt: Höchster Schulabschluss