Informationen zur Frage und Ziel der Testung:
Frage 4 soll die externe Selbstwirksamkeit im politischen System messen. Das Ziel der kognitiven Nachfragen bestand darin, das Verständnis der einzelnen Items sowie die Fähigkeit, sich auf der Antwortskala zu verorten, zu untersuchen. Insbesondere wurde die siebenstufige, endpunktbenannte Antwortskala von Frage 4 mit der fünfstufigen, voll-verbalisierten Antwortskala in Frage 3 verglichen.
Leitfragen und Befunde:
Mit Ausnahme einer Testperson, die zwei Items (Items c und d) unbeantwortet ließ, beantworteten alle Testpersonen alle vier Items. Insbesondere fiel auf, dass die einzelnen Testpersonen für verschiedene Items hohe, mittlere und niedrige Werte der Selbstwirksamkeit angaben. Mehrere Testpersonen gaben an, dass ihnen die Beantwortung der Itembatterie schwerer fiel als die Einschätzung der persönlichen Selbstwirksamkeit im schulischen Kontext, was sich zusätzlich durch zögerliches Antworten und vermehrtem Abändern der Antwort vor und nach dem Probing zeigte.
Welche Art der Antwortskala bevorzugen die Testpersonen?
Nach dem Beantworten der Fragen 3 und 4 wurden die Testpersonen gebeten, die Antwortskalen der beiden Fragen zu bewerten. Vier der Testpersonen sprachen sich klar dafür aus, nur fünf Antwortoptionen anzuzeigen und diese voll zu beschriften. Durch die Beschriftung werde deutlicher, was man genau mit seiner Antwort sage (TP01). Bei der siebenstufigen Skala sei zwar ebenfalls klar, wo sich die Mitte befinde, allerdings sei die Abstufung zwischen den Werten 2 und 3 bzw. 5 und 6 nicht eindeutig, und werde durch die fehlende Beschriftung auch nicht klar. Eine weitere Testperson fand, dass beide Antwortskalen gleichermaßen verständlich seien und es frageabhängig sei. Eine Testperson fand die siebenstufige Skala besser, konnte dies aber nicht weiter begründen.
Item Text | Actively tested |
---|---|
a. Wenn ich eine politische Aktion organisieren will (z.B. eine Demo), traue ich mir das zu.Item Text:
a. Wenn ich eine politische Aktion organisieren will (z.B. eine Demo), traue ich mir das zu.
Recommendations:
Die Ergebnisse des Pretests deuten auf keine Probleme des Items hin, weshalb es in seiner jetzigen Form belassen werden kann.
Findings:Was verstehen die Testpersonen unter dem Begriff „politische Aktion“? Alle Testpersonen dachten vorwiegend an Demonstrationen, und begründeten dies damit, dass das Beispiel im Itemtext genannt wurde. Zudem beriefen sich einzelne Testpersonen auf verwandte politische Aktionsformate wie Kundgebungen und Umläufe (z. B. Black lives matter, TP03), bei denen Plakate oder Transparente genutzt werden und „protestiert wird“ (TP06) oder bei denen Reden gehalten werden („Ich habe an Situationen gedacht, in denen sich viele Menschen auf der Straße, im öffentlichen Bereich, treffen, um ein Thema zu besprechen.“, TP05). Zudem nannten einzelne Testpersonen das Sammeln von Unterschriften (TP01) und das Erheben von Umfragen zu politischen Meinungen (TP02), gaben aber an, nicht primär an diese Art der politischen Aktion gedacht zu haben. Wie verorten sich die Testpersonen bei Item a auf der Antwortskala? Keine der Testpersonen war politisch aktiv, hatte in der Vergangenheit an einer Demonstration oder anderen politischen Aktion teilgenommen, oder eine politische Aktion (mit)organisiert. In dieser Hinsicht stellte das Item für alle Testpersonen ein hypothetisches Szenario dar. Dennoch ordneten sich die Testpersonen ohne Probleme auf der Antwortskala ein. Die Testpersonen, die der Aussage eher nicht zustimmten (Werte 1 bis 3) erklärten, dass sie große Unsicherheit beim Planen einer politischen Aktion verspürten. Dabei zeigte sich keine deutliche Differenzierung zwischen den Werten 1 bis 3:
Auch die Testpersonen, die der Aussage eher zustimmten, gaben an, dass sie nicht vorhatten, eine politische Aktion zu organisieren, sprachen sich im Gegensatz zu den Testpersonen am unteren Ende der Skale allerdings die Kompetenz zu, dies zu können:
Auch bei der Testperson, die die mittlere Antwortkategorie auswählte, passte ihre Begründung zu ihrer Antwort („Ich weiß nicht, ob ich mich allein trauen würde, eine Demo zu organisieren. Wenn, dann eher mit mehreren Personen zusammen, so dass man sich gegenseitig bestärken kann und man weiß, dass man nicht am Ende allein dasteht.“, TP01). Question Topic:
Politik/ Einstellungen, Bewertungen & Ideologien
Construct:Individuelle Selbstwirksamkeit im politischen Kontext
|
Ja |
b. Von der Politik fühle ich mich fair behandelt.Item Text:
b. Von der Politik fühle ich mich fair behandelt.
Recommendations:
Mehrere Testpersonen gaben an, bisher eher wenige Berührungspunkte mit der Politik gehabt zu haben und äußerten Schwierigkeiten, eine klare Meinung zu formulieren, was sich im Antwortverhalten in einer Tendenz zur Mitte äußerte. Wenn dies vermieden werden soll, sollte das Item durch eine Aussage ersetzt werden, die einen direkten Bezug zu der Auswirkung von Politik auf die Lebensumstände von Kindern und Jugendlichen hat.
Findings:Was verstehen die Testpersonen unter einer „fairen Behandlung“ durch die Politik? Alle Testpersonen bezogen das Item darauf, ob sie sich als Jugendliche und Minderjährige von der Politik fair behandelt fühlten. Eine Testperson erwähnte als Beispiel die Regelungen im Zuge der Corona-Pandemie, die Kinder und Jugendliche besonders stark betrafen, insbesondere die Lockdowns mit den eingeschränkten Möglichkeiten, Sport zu treiben und ins Kino zu gehen (TP01). Zudem erwähnten zwei Testpersonen die zeitweilige Notwendigkeit einer Corona-Impfung, um bestimmte Teile des gesellschaftlichen Lebens wahrzunehmen (TP01, 06) und dass es eine starre Altersgrenze von 12 Jahren gab, ab der Jugendliche die Erwachsenendosis nehmen mussten. Eine Testperson bezog finanzpolitische Themen ein, namentlich ob man als Kind bzw. Jugendlicher bei der Auszahlung der Energiepauschale im Herbst 2022 berücksichtigt werde oder ob es Freibeträge auf Minijobs für Jugendliche gibt (TP05). Meist bezogen sich die Testpersonen aber auf den allgemeinen Umgang der Politik mit Kindern und Jugendlichen (TP02) oder auf allgemeine Grundrechte wie die Meinungsfreiheit (TP03). Wie verorten sich die Testpersonen bei Item b auf der Antwortskala? Drei Testpersonen betonten, dass sowohl ihr Interesse an der Politik als auch ihre direkten Berührungspunkte mit der Politik bisher gering waren, und sie daher Schwierigkeiten hatten, das Item zu beantworten (TP03, 04, 06). Vor diesem Hintergrund lässt sich erklären, warum vier der sechs Testpersonen die Werte 3 und 4 in der Skalenmitte auswählten.
Question Topic:
Politik/ Einstellungen, Bewertungen & Ideologien
Construct:Individuelle Selbstwirksamkeit im politischen Kontext
|
Ja |
c. Das politische System in Deutschland bietet mir Möglichkeiten, aktiv Einfluss auf die Politik zu nehmen.Item Text:
c. Das politische System in Deutschland bietet mir Möglichkeiten, aktiv Einfluss auf die Politik zu nehmen.
Recommendations:
Die Ergebnisse des Pretests deuten auf keine Probleme des Items hin, weshalb es in seiner jetzigen Form belassen werden kann.
Findings:Im Gegensatz zum zweiten Item verorteten sich alle Testpersonen bei Item c an einem der Skalenenden oder direkt daneben (mit Ausnahme der Testperson, die das Item unbeantwortet ließ). Was verstehen die Testpersonen unter dem „politischen System in Deutschland“? Den meisten Testpersonen fiel es schwer zu erläutern, was sie unter dem politischen System in Deutschland verstanden, zeugten aber von einem grundsätzlich richtigen Verständnis, dass es sich um die demokratische Grundordnung handelte. Die Testpersonen umschrieben das politische System in Deutschland als das „Wahlsystem und Wahlrecht“ (TP01), als die „Demokratie“ (TP03) oder allgemein, „wie es in Deutschland funktioniert“ (TP06). Was verstehen die Testpersonen darunter, „aktiv Einfluss auf die Politik zu nehmen“ und wie verorten sie sich auf der Antwortskala? Die Testpersonen unterschieden sich nach den Möglichkeiten, die ihnen einfielen, aktiv Einfluss auf die Politik zu nehmen, und dieses Verständnis beeinflusste ihr Antwortverhalten systematisch. Vier Testpersonen dachten bei dem Ausdruck „aktiv Einfluss auf die Politik zu nehmen“ ausschließlich daran, ob sie wählen durften. Diese Testpersonen erklärten alle, dass sie noch nicht wählen dürften und somit nicht aktiv Einfluss auf die Politik nehmen könnten. Sie stimmten der Aussage (eher) nicht zu oder ließen sie unbeantwortet:
Die beiden Testpersonen, die der Aussage (eher) zustimmten, dachten hingegen auch an die Möglichkeit, sich politisch zu engagieren, zum Beispiel in politischen Parteien, Umweltorganisationen oder über Aktionen in der Schule (TP02, 05). Dass man in der Gruppe mehr Einfluss nehmen kann als Einzelpersonen war ihnen bewusst und irritierte sie dabei nicht („Wenn ich versuchen würde, aktiv etwas zu verändern, kriegt man das auch hin. Vielleicht nicht als einzelne Person […] Es ist ja klar, dass man als einzelner Mensch kein Gesetz stoppen kann, aber man kriegt auf jeden Fall die Möglichkeit.“, TP05) Question Topic:
Politik/ Einstellungen, Bewertungen & Ideologien
Construct:Individuelle Selbstwirksamkeit im politischen Kontext
|
Ja |
d. Politiker kümmern sich nicht darum, was ich denke.Item Text:
d. Politiker kümmern sich nicht darum, was ich denke.
Recommendations:
Die Verneinung im Itemtext irritierte mehrere Testpersonen und führte dazu, dass sie sich teilweise verkehrt auf der Antwortskala einordneten. Wir empfehlen daher, das Item ohne Negation zu formulieren.
Findings:Was verstehen die Testpersonen unter den „Politikern“ in dieser Frage? Vier Testpersonen dachten an Politiker im Allgemeinen, also nicht an spezielle Personen (TP01, 02, 04, 05). Dabei präzisierten einzelne, dass es um Politiker aus dem Landtag oder Bundestag gehe, sekundär noch um Lokalpolitiker (TP05) oder um alle Menschen, die in Parteien aktiv seien (TP04). Zwei Testpersonen dachten explizit an den amtierenden Bundeskanzler Olaf Scholz (TP03, 06). Item d beinhaltete eine Negation, so dass die Richtung der Antwortskala andersherum zu interpretieren ist als bei den drei vorausgehenden Items. Alle Testpersonen, die der Aussage (eher) zustimmten, argumentierten logisch korrekt, dass sie der Meinung seien, dass Politiker sich nicht für ihre individuelle Meinung interessieren würden:
Testperson 06 schien allerdings zunächst von der geänderten Skalenrichtung verwirrt zu sein, da sie erst den Wert 2 auswählte, und nach längerem Zögern auf den Wert 6 wechselte. Zudem verortete sich eine Testperson, die der Aussage eher nicht zustimmte, klar auf der falschen Seite der Antwortskala:
Eine weitere Testperson kommentierte die geänderte Richtung der Skala. Auch bei dieser Testperson deutete die Begründung ihrer Antwort allerdings darauf hin, dass sie eher einen Wert auf der anderen Seite der Antwortskala hätte wählen müssen:
Schließlich ließ eine Testperson das Item unbeantwortet, weil sie nicht wisse, ob Politiker sich darum kümmern würden, was sie denke (TP04).
Question Topic:
Politik/ Einstellungen, Bewertungen & Ideologien
Construct:Individuelle Selbstwirksamkeit im politischen Kontext
|
Ja |