Einleitungstext: Im Folgenden möchten wir Ihre Meinung zu einigen politischen Sachfragen erfahren.
Fragetext: Bitte geben Sie zu jeder der folgenden Maßnahmen an, inwieweit Sie diese befürworten oder ablehnen:
Antwortkategorien
Absolut dafür

Eher dafür

Teils teils

Eher dagegen

Absolut dagegen
- Befund zu Antwortkategorien
- Empfehlungen zu Antwortkategorien

Befund/Empfehlungen zur Multi-Item-Skala:
- Befund zur Multi-Item-Skala
- Empfehlungen zur Multi-Item-Skala
Befund zur Multi-Item-Skala: Der Fragetext passt nicht genau zu den Antwortoptionen (befürworten/ablehnen vs. dafür/dagegen).
Empfehlungen zur Multi-Item-Skala: Eine bessere Passung könnte auf zwei Arten erzielt werden.

1. Beibehaltung der Frageformulierung und Anpassung der Antwortoptionen:
Bitte geben Sie zu jeder der folgenden Maßnahmen an, inwieweit Sie diese befürworten oder ablehnen.
Befürworte ich stark, Befürworte ich eher, Teils teils, Lehne ich eher ab, Lehne ich stark ab

2. Umformulierung der Frage und Beibehaltung der Antwortoptionen:
Bitte geben Sie bei jeder der folgenden Maßnahmen an, ob Sie dafür oder dagegen sind.

Eingesetzte kognitive Technik/en: Comprehension Probing, Difficulty Probing, Specific Probing, Category Selection Probing

Items

Itemtext

Item getestet

a) Um die Zuwanderung nach Deutschland zu begrenzen, sollte das Recht auf Asyl eingeschränkt werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: a) Um die Zuwanderung nach Deutschland zu begrenzen, sollte das Recht auf Asyl eingeschränkt werden.
Empfehlungen: Wir empfehlen, das Item zu belassen. Der Begriff „Recht auf Asyl“ ist zwar relativ vage und wird von den Testpersonen unterschiedlich interpretiert, die konkrete Interpretation scheint jedoch auch bereits die Einstellung zum Thema widerzuspiegeln: Personen, die dem Asylrecht positiv gegenüber stehen, assoziieren den Begriff eher mit Asyl für politisch Verfolgte; Personen, die ihm kritisch gegenüber stehen eher mit einem Missbrauch des Asylrechts. Eine Konkretisierung des Begriffs (z.B. „Recht auf Asyl für politisch Verfolgte“) würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise die Einstellung zum Asylrecht für bestimmte Zielgruppen (z.B. politisch Verfolgte) erfasst werden soll. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind dafür, das Recht auf Asyl für politisch Verfolgte zu begrenzen“) ist dann nicht zulässig.

Befund zum Item: Etwas mehr als die Hälfte (56,6%) der Testpersonen befürwortete diese Maßnahme und ein knappes Viertel (24,2%) lehnte sie ab. Die Antworten der Testpersonen verteilten sich dabei über die gesamte Skalenbreite.

Durch den Einsatz eines Comprehension Probings wurde bei diesem Item untersucht, was die Testpersonen unter dem Begriff „Recht auf Asyl“ verstehen. Die Antworten der Testpersonen lassen sich in insgesamt vier Kategorien einteilen (s. Tabelle F1_1), die sich dahingehend unterscheiden, mit welchem Grad der Spezifizität der Begriff interpretiert wird.

Tabelle F1_1. Verständnis des Begriffs „Recht auf Asyl“ und Anzahl der Nennungen.

Verständnis von „Recht auf Asyl“	Anzahl der Nennungen
1. Recht auf Aufenthalt für politisch Verfolgte und Flüchtlinge aus Kriegsgebieten (z.B. TP 83: „Politisch Verfolgte oder Menschen aus Kriegsgebieten bekommen bei uns Hilfe.“)	43
2. Allgemein Schutz/Unterstützung/Bleiberecht (z.B. TP 104: „Recht in Deutschland zu leben, vom Staat finanziell unter- stützt zu werden. Hier Recht auf Arbeit und Bildung, Familiennachzug.“)	28
3. Recht auf Aufenthalt unter bestimmten Voraussetzungen oder für einen begrenzten Zeitraum (z.B. TP 113: „Unter bestimmten Voraussetzungen in einem Land Asyl zu erhalten.“)	22
4. Recht auf Aufenthalt für jeden (ohne Bedingungen) (z.B. TP 106: „Jeder Nichtdeutsche kann in Deutschland Asyl beantragen, egal aus welchem Grund.“)	16
Nicht kodierbare Antwort /Antwort auf Probing-Frage verweigert	11

Während etwas mehr als die Hälfte der Testpersonen (n=65) das Recht auf Asyl an bestimmte Bedingungen knüpft (z.B. nur für politisch Verfolgte oder nur für einen bestimmten Zeitraum; siehe Kategorien 1 und 3 in Tabelle F1_1), interpretiert ein gutes Drittel der Befragten (n=44) den Begriff eher allgemein oder knüpft das Recht auf Aufenthalt in Deutschland explizit nicht an bestimmte Bedingungen (siehe Kategorien 2 und 4 in Tabelle F1_1). Dieser Befund zeigt, dass der Begriff „Recht auf Asyl“ recht vage ist und verschiedene Facetten enthält (Asyl für bestimmte Gruppen, für einen bestimmten Zeitraum, etc.). Die konkrete Interpretation des Begriffs, d.h. ob er eher eng oder weit gefasst wird, hat folglich auch einen Einfluss auf die Beantwortung des Items. Während Testpersonen in Kategorie 1 eine Einschränkung des Asylrechts eher ablehnen (M = 2,91), sprechen sich Testpersonen in Kategorie 3 eher dafür aus (M = 1,95; niedrigere Werte bedeuten hier eher Zustimmung, höhere Werte eher Ablehnung). Der Begriff „Recht auf Asyl“ wird von den Testpersonen zwar unterschiedlich interpretiert, die konkrete Interpretation scheint jedoch auch bereits die Einstellung zum Thema widerzuspiegeln: Personen, die dem Asylrecht positiv gegenüberstehen, assoziieren den Begriff eher mit Asyl für politisch Verfolgte; Personen, die ihm kritisch gegenüberstehen eher mit einem Missbrauch des Asylrechts. Eine Konkretisierung des Begriffs (z.B. „Recht auf Asyl für politisch Verfolgte“) würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise die Einstellung zum Asylrecht für bestimmte Zielgruppen (z.B. politisch Verfolgte) erfasst werden soll. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind dafür, das Recht auf Asyl für politisch Verfolgte zu begrenzen“) ist dann nicht zulässig.

Die Testpersonen wurden darüber hinaus gefragt, wie schwer es ihnen gefallen ist anzugeben, ob sie die Maßnahme in Item a) befürworten oder ablehnen (Difficulty Probing). Befragte, welche diese Nachfrage mit „eher schwer“ oder „sehr schwer“ beantworteten, wurden gebeten, die Gründe für die wahrgenommene Schwierigkeit zu erläutern. Insgesamt 9% der Testpersonen (n=11) gaben an, dass ihnen das Beantworten „eher schwer“ oder „sehr schwer“ gefallen sei, wobei dies hauptsächlich mit der Komplexität des Themas (und nicht etwa mit der Formulierung des Items) begründet wurde (TP 229: „Weil das Thema hochkomplex ist“; TP 109: „Weil ich es einfach schwer finde, gefühlsmäßig.“; TP 314: „Es sind verschiedene Aspekte zu berücksichtigen.“).

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

b): Hohe Einkommen sollten in Deutschland deutlich stärker besteuert werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: b): Hohe Einkommen sollten in Deutschland deutlich stärker besteuert werden.
Empfehlungen: Item belassen.

Befund zum Item: Die Mehrheit der Testpersonen (59,2%) befürwortete diese Maßnahme, während nur 12,5% sie ablehnten. Im Vergleich zu Item a) scheint Item b) also weniger kontrovers wahrgenommen zu werden. Die Antworten der Testpersonen verteilten sich jedoch über die gesamte Skalenbreite.

Bei diesem Item erhielten die Testpersonen eine Nachfrage dazu, ab welchem monatlichen Betrag sie ein Einkommen als „hoch“ bezeichnen würden. Sieben Antworten auf diese Nachfrage mussten von den folgenden Analysen ausgeschlossen werden, da hier entweder unplausibel niedrige (z.B. 50 Euro) oder hohe Beträge (z.B. 120.000 Euro) genannt wurden. Nach Ausschluss dieser „Ausreißer“ ergab sich ein Mittelwert von 6.472 Euro. Die genannten Einkommensbeträge lassen sich in die folgenden vier Bereiche unterteilen:

• 1.000 Euro – 2.500 Euro (n=9)
• 3.000 Euro – 5.000 Euro (n=47)
• 6.000 Euro – 10.000 Euro (n=48)
• 12.000 Euro – 30.000 Euro (n=9)

Diese unterschiedlichen Einschätzungen dessen, was ein „hohes Einkommen“ ausmacht, hatten keinen Einfluss auf die Beantwortung von Item b). Die Mittelwerte für die vier Bereiche lagen zwischen M = 2,23 und M = 2,44, was einer tendenziellen Befürwortung der Maßnahme entspricht.

Die Testpersonen wurden zudem gefragt, wie schwer es ihnen gefallen ist anzugeben, ob sie die Maßnahme in Item b) befürworten oder ablehnen (Difficulty Probing). Insgesamt 15% der Testpersonen (n=18) haben auf diese Difficulty Probe mit „eher schwer“ oder „sehr schwer“ geantwortet. Dies wurde zum einen damit begründet, dass unklar sei, wie der Begriff „hohes Einkommen“ verstanden werden sollte, da im Item kein konkreter Einkommensbetrag genannt wird (n=7, z.B. TP 115: „Wo ist hier die Grenze? Für den einen ist es viel, für den anderen wenig.“), Zum anderen wurde argumentiert, dass die Beantwortung schwer fiele, da man Leistungsträger (mit hohen Einkommen) auch nicht bestrafen wolle (n=7, z.B. TP 183: “Weil somit Leistungsträger, die viel leisten und viel verdienen vielleicht bestraft werden.“). Beide Befunde legen jedoch keine Umformulierung des Items nahe. Eine Konkretisierung des Begriffs „hohe Einkommen“ wäre nur dann angebracht, wenn sich die Interpretation des Begriffs systematisch auf die Beantwortung des Items auswirken würde (was aber nicht der Fall ist, s. Erläuterung im vorherigen Absatz). Die zweite genannte Schwierigkeit geht nicht auf die Formulierung des Items zurück, sondern auf die wahrgenommene Komplexität des Themas.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

c): Die sozialstaatlichen Leistungen für Arbeitslose sollten deutlich erhöht werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: c): Die sozialstaatlichen Leistungen für Arbeitslose sollten deutlich erhöht werden.
Empfehlungen: Item belassen.

Befund zum Item: Etwa jeweils ein Drittel der Testpersonen befürwortete diese Maßnahme (36,6%), lehnte sie ab (29%) oder antwortete mit „teils/teils“ (33,3%). Hierbei scheint es sich also um ein recht kontroverses Thema zu handeln.

Mit Hilfe eines Comprehension Probings sollte bei diesem Item untersucht werden, was die Testpersonen unter dem Begriff „sozialstaatliche Leistungen für Arbeitslose“ verstehen und ob es ggfs. besser wäre, direkt von „Arbeitslosengeld II“ oder „Hartz IV“ zu sprechen. Knapp 20% der Antworten auf diese Probing Frage ließen sich nicht sinnvoll kodieren bzw. wurden verweigert (s. Fußnote zu „nicht kodierbaren Antworten“ oben). Die übrigen Antworten der Testpersonen lassen sich in zwei Kategorien kodieren: Gut 50% der Testpersonen verbinden mit dem Begriff konkret „Arbeitslosengeld I & II“ bzw. „Hartz IV“ (TP 196: „ALG I und II“; TP 205: „Hartz IV und Arbeitslosengeld“). Die verbleibenden 30% der Testpersonen fassen den Begriff etwas weiter und denken ganz allgemein an (finanzielle) Unterstützung von Seiten des Staates (TP 98: „Leistungen des Staates an Arbeitslose wie Wohnung, Essen, Ausbildung, Krankenversicherung usw.“; TP 146: „Ausreichend materielle Mittel um ein menschenwürdiges Leben zu führen.“). Das Verständnis des Begriffs „sozialstaatliche Leistungen für Arbeitslose“ hatte jedoch keinen Einfluss auf die Beantwortung des Items (enge Interpretation: M = 2,84, SD = 1,16; weite Interpretation: M = 3,03, SD = 1,28; t(96)= -,76, p = .449).

Die Testpersonen wurden darüber hinaus gefragt, wie schwer es ihnen gefallen ist anzugeben, ob sie die Maßnahme in Item c) befürworten oder ablehnen (Difficulty Probing). Insgesamt 20% der Testpersonen (n=24) haben auf diese Difficulty Probe mit „eher schwer“ oder „sehr schwer“ geantwortet, wobei dies hauptsächlich damit begründet wurde, dass es schwierig sei, eine pauschale Entscheidung für alle Arbeitslosen zu treffen. Hier müsse z.B. zwischen solchen unterschieden werden, die sich um Arbeit bemühen und solchen, die das nicht tun (TP 87: „Weil ich mir nicht sicher bin, ob es nicht zu viele Sozialschmarotzer gibt.“; TP 89: „Nicht jeder hat es verdient mehr zu bekommen. Viele Menschen haben es verdient, da es sich mit diesem Geld kaum leben lässt. Allerdings gibt es auch genug Menschen die es ausnutzen.“; TP 141: „Es muss zwischen Menschen die wirklich arbeiten wollen und Menschen, die sich auf Kosten des Staates ausruhen wollen unterschieden werden.“). Die wahrgenommenen Schwierigkeiten hingen also wiederum nicht mit der Formulierung des Items, sondern der Komplexität des Themas zusammen.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

d): Die Vertretung von Frauen in allen wichtigen Gremien in Politik, Wirtschaft und Gesellschaft sollte mit einer verpflichtenden Frauenquote durchgesetzt werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: d): Die Vertretung von Frauen in allen wichtigen Gremien in Politik, Wirtschaft und Gesellschaft sollte mit einer verpflichtenden Frauenquote durchgesetzt werden.
Empfehlungen: Item belassen.

Befund zum Item: Die Maßnahme wurde von mehr Testpersonen befürwortet (42,5%) als abgelehnt (30%) und von einem knappen Drittel (27,5%) mit „teils/teils“ beantwortet. Auch hier scheint es sich also um ein kontroverses Thema zu handeln.

Mit Hilfe eines Comprehension Probings sollte bei diesem Item untersucht werden, was die Testpersonen unter dem Begriff „Frauenquote“ verstehen. Die Antworten der Testpersonen lassen sich in insgesamt vier Kategorien kodieren (s. Tabelle F1_2). Knapp die Hälfte der Testpersonen (n=55) assoziiert mit dem Begriff „Frauenquote“ eine festgelegte Mindestanzahl von Stellen, die durch Frauen besetzt werden müssen (z.B. TP 100: „Eine feste Quote, die angibt, wie viele Positionen von Frauen belegt werden sollen.“). Etwa 20% der Befragten beziehen sich in ihrer Definition explizit auf den Anteil von Frauen in Führungspositionen (z.B. TP 175: „Mehr Frauen in höheren Positionen.“) und etwas mehr als 10% der Testpersonen auf eine Gleichverteilung im Sinne von 50/50 (z.B. TP 105: „Gleiche Anzahl von Frauen wie Männern.“). Für sieben Testpersonen ist der Begriff negativ konnotiert, d.h. sie verstehen darunter eine Bevorzugung von Frauen (z.B. TP 161: „Bestimmter Anteil dieser Stellen muss von Frauen besetzt werden, auch wenn männliche Bewerber gleich oder besser geeignet wären.“). Die konkrete Interpretation des Begriffs „Frauenquote“ hatte jedoch keinen Einfluss auf die Beantwortung von Item e): Die Mittelwerte für die vier Kategorien in Tabelle F1_2 lagen zwischen 2,44 (Kategorie 3) und 3,0 (Kategorie 4; niedrigere Werte = eher Zustimmung).

Tabelle F1_2. Verständnis des Begriffs „Frauenquote“ und Anzahl der Nennungen.

Verständnis von „Frauenquote“	Anzahl der Nennungen
1. Festgelegter Anteil / Mindestanzahl an Frauen (z.B. TP 83: „Wenn ein festgelegter Anteil z.B. 40%, von Frauen besetzt werden muss.“)	55
2. Mehr Frauen in Führungspositionen (z.B. TP 88: „Mindestanzahl von Frauen in Vorständen bzw. Chefetagen.“)	23
3. Gleiche Anzahl Frauen und Männer (z.B. TP 143: „50:50 Frauen und Männer.“)	16
4. Bevorzugung von Frauen (z.B. TP 229: „Dass Menschen weiblichen Geschlechts aus Gründen der Emanzipation und nicht aus leistungsorientierten Gründen Ämter höheren Grades besetzen sollen.“)	7
Nicht kodierbare Antwort /Antwort auf Probing-Frage verweigert	19

Auch bei diesem Item wurden die Testpersonen gefragt, wie schwer es ihnen gefallen ist anzugeben, ob sie die Maßnahme befürworten oder ablehnen (Difficulty Probing). Insgesamt 23% der Testpersonen (n=27) haben auf diese Difficulty Probe mit „eher schwer“ oder „sehr schwer“ geantwortet, was zum einen mit der Komplexität des Themas (TP 246: „Weil es eine schwierige Frage ist, mit welcher ich mich noch nicht auseinander gesetzt habe.“), zum anderen mit einer Unsicherheit auf Seiten der Testpersonen, ob eine Frauenquote sinnvoll und erfolgsversprechend sei, begründet wurde (TP 111: „Das Hauptziel, nämlich die Frauenquote in den Vorständen von Unternehmen auf 30 Prozent zu bringen, ist nicht immer effektiv.“). Als dritter Grund für die Schwierigkeit der Beantwortung wurde argumentiert, dass Positionen generell nach Leistung und nicht nach Geschlecht besetzt werden sollten (TP 231: „Weil ich finde, dass man eine Position durch Leistung erlangen sollte und nicht über das Geschlecht.“). Wie bei den Items zuvor hängen die wahrgenommenen Schwierigkeiten hier nicht mit der Formulierung des Items, sondern der Komplexität des Themas zusammen und legen daher keine Modifikation des Items nahe.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

e): Sterbehilfe sollte in Deutschland zulässig sein.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: e): Sterbehilfe sollte in Deutschland zulässig sein.
Empfehlungen: Item belassen.

Befund zum Item: Die große Mehrheit der Testpersonen (70%) befürwortete diese Maßnahme. Nur 7,5% der Testpersonen lehnten sie (eher) ab und 22,5% antworteten mit „teils/teils“. Item e) scheint also eher weniger kontrovers wahrgenommen zu werden. Die Antworten der Testpersonen verteilten sich jedoch über die gesamte Skalenbreite.

Die Testpersonen wurden gebeten anzugeben, wie schwer ihnen die Beantwortung von Item c) gefallen ist (Difficulty Probing). Insgesamt 17% der Testpersonen (n=20) haben auf diese Difficulty Probe mit „eher schwer“ oder „sehr schwer“ geantwortet. Begründet wurde diese Antwort entweder damit, dass es sich hier um ein sensibles, schwieriges Thema handele (TP 83: „Das ist ein sehr sensibles Thema. Ich hätte ein Problem, wenn ich aktiv Sterbehilfe leisten sollte.“), man sich mit dem Thema noch nicht ausreichend beschäftigt habe (TP 337: „Ich habe mich nicht viel damit beschäftigt.“) oder man Sterbehilfe aus religiösen oder ethischen Gründen ablehne (TP 187: „Weil der christliche Glaube das nicht gut heißt.“). Wie bei den Items zuvor hängen die wahrgenommenen Schwierigkeiten hier nicht mit der Formulierung des Items, sondern der Komplexität des Themas zusammen und legen daher keine Modifikation des Items nahe.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

f): Deutsche Firmen sollten durch Importbeschränkungen vor ausländischer Konkurrenz geschützt werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: f): Deutsche Firmen sollten durch Importbeschränkungen vor ausländischer Konkurrenz geschützt werden.
Empfehlungen: Wir empfehlen, das Item zu belassen. Der Begriff „Importbeschränkungen“ ist zwar relativ vage und wird von den Testpersonen unterschiedlich interpretiert, die konkrete Interpretation scheint jedoch auch bereits die Einstellung zum Thema widerzuspiegeln: Personen, die einem Eingriff in die freie Marktwirtschaft generell kritisch gegenüberstehen, assoziieren mit dem Begriff einen relativ starken Eingriff in die Marktwirtschaft. Personen, die einem Eingriff in die Wirtschaft weniger kritisch gegenüberstehen, assoziieren damit eher milde Eingriffe. Eine Konkretisierung des Begriffs (z.B. „Einfuhrverbote für ausländische Produkte“) würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise Beschränkungen der Importmenge von Produkten (und nicht von Produkten generell) von Interesse sind. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind für eine Einschränkung der Importmenge“) ist dann nicht zulässig.

Befund zum Item: Dieses Item fand mehr Befürworter (38,2%) als Gegner (22,5%) und wurde von fast 40% der Testpersonen mit „teils/teils“ beantwortet. Die Testpersonen benutzten wiederum die gesamte Skalenbreite.

Um zu untersuchen, wie die Befragten das Item interpretiert und woran sie bei der Beantwortung gedacht haben, wurden sie gebeten, ihre Antwort näher zu erläutern (Category Selection Probing). Die Antworten der Testpersonen auf diese Nachfrage lassen sich in insgesamt fünf Kategorien kodieren (s. Tabelle F1_3).

Interessanterweise argumentieren gleich viele Testpersonen für bzw. gegen Importbeschränkungen (jeweils etwa 23%; s. Kategorien 1 und 2 in Tabelle F1_3). Ein beinahe ebenso großer Anteil an Befragten gibt an, sich mit dem Thema nicht sehr gut auszukennen (n=27, 22,5%). Hiervon haben 15 Testpersonen die Mittelkategorie ausgewählt und 11 Befragte die Maßnahme befürwortet. Dies erklärt, weshalb die Häufigkeitsverteilung eher in Richtung Zustimmung weist: Personen mit einer unsicheren Meinung haben sich eher auf der Befürworter- als auf der Gegner-Seite einsortiert. Weitere 16 Testpersonen begründen ihre Antwort damit, dass es auf die konkrete Branche oder das Produkt ankomme, ob man Importbeschränkungen befürworte oder ablehne (TP 91: „Kommt auf die Produkte an.“). Dazu passend hat der Großteil dieser Testpersonen die Mittelkategorie (teils/teils) ausgewählt. Zu guter Letzt haben drei Testpersonen ihre Antwort mit dem Zweifel daran begründet, dass Importbeschränkungen im Zeitalter der Globalisierung überhaupt möglich seien (TP 93: „Natürlich müssen unsere Firmen geschützt werden. Aber wir haben Globalisierung und das kann man nicht aufhalten. Wie will man das schaffen?").

Tabelle F1_3. Begründungen für Antworten auf Item f) und Anzahl der Nennungen.

Begründungen für die Antwortauswahl	Anzahl der Nennungen
1. Importbeschränkungen sind schlecht für die Wirtschaft (Contra Importbeschränkungen) (z.B. TP 146: „Importbeschränkungen stehen dem gesunden Wettbewerb entgegen, wenn die Firmen nicht in der Lage sind durch Qualität und Preis konkurrenzfähig zu sein, haben sie keine Daseinsberechtigung.“)	28
2. Importbeschränkungen sind gut für die Wirtschaft (Pro Importbeschränkungen) (z.B. TP 105: „Arbeitsplätze in Deutschland sollten gegenüber Billigimporten geschützt sein. Wir möchten als Arbeitnehmer leistungsgerecht bezahlt werden.“)	28
3. Komplexes Thema/Nicht genug Wissen über das Thema (z.B. TP 179: „Weil ich mich damit nicht gut auskenne.“)	27
4. Es kommt darauf an (z.B. TP 123: „Es kommt immer etwas auf die Branche an. Regionale Produkte, wie Kartoffeln oder Milch, sollten geschützt werden. Globale Produkte sollten sich mit der ausländischen Konkurrenz messen und demnach keine Hilfen erwarten.“)	16
5. Unklar, inwiefern Beschränkungen im Zeitalter der Globalisierung überhaupt möglich sind (z.B. TP 161: „Wir können uns heute nicht mehr von der Globalisierung zurückziehen.“)	3
Nicht kodierbare Antwort /Antwort auf Probing-Frage verweigert	18

Mit Hilfe eines Comprehension Probings sollte darüber hinaus untersucht werden, was die Testpersonen unter dem Begriff „Importbeschränkungen“ verstehen. Die Antworten der Testpersonen lassen sich in insgesamt vier Kategorien kodieren (s. Tabelle F1_4). Am häufigsten assoziieren die Testpersonen mit diesem Begriff eine Beschränkung der Importmenge (36,7%), gefolgt von einer höheren Verzollung oder eines Einfuhrverbots für ausländische Produkte (22,5%), einer Importbeschränkung nur fürbestimmte Produkte (11,7%) und einer Bevorzugung von deutschen Produkten (8,3%). Testpersonen, die mit dem Begriff die Bevorzugung deutscher Produkte (M = 2,50), eine Beschränkung des Imports bestimmter Produkte (M = 2,60) oder eine Beschränkung der Importmenge (M = 2,60) assoziierten, befürworteten die Maßnahme eher als Befragte, die damit eine höhere Verzollung oder ein Einfuhrverbot für ausländische Produkte assoziierten (M = 3,33; höhere Werte = eher Ablehnung). Die Interpretation des Begriffs „Importbeschränkungen“ hatte also einen Einfluss auf die Beantwortung von Item f).

Tabelle F1_4. Verständnis des Begriffs „Importbeschränkungen“ und Anzahl der Nennungen.

Verständnis von „Importbeschränkungen“	Anzahl der Nennungen
1. Beschränkung der Importmenge (z.B. TP 108: „Mengenmäßige Beschränkung von Importen aus anderen Ländern.“)	44
2. Zölle, Einfuhrverbote, Sanktionen (z.B. TP 85: „Zölle und Einfuhrverbote. Eventuell Sanktion gegen Länder, die sich nicht an Recht und Ordnung halten.“)	27
3. Beschränkung des Imports bestimmter Produkte (z.B. TP 113: „Bestimmte Produkte von der Einfuhr zu beschränken.“)	14
4. Deutsche Firmen sollten bevorzugt werden (z.B. TP 93: „Dass deutsche Produkte hier Vorrang haben und nur bei Mehrbedarf Produkte ins Land gelassen werden.“)	10
Nicht kodierbare Antwort /Antwort auf Probing-Frage verweigert	25

Wie bereits bei Item a) ist hier anzumerken, dass der Begriff „Importbeschränkungen“ relativ vage ist und daher von den Testpersonen unterschiedlich interpretiert wird, was wiederum einen Einfluss auf die Beantwortung des Items hat. Die konkrete Interpretation scheint jedoch auch hier bereits die Einstellung zum Thema widerzuspiegeln: Personen, die einem Eingriff in die freie Marktwirtschaft generell kritisch gegenüberstehen, assoziieren mit dem Begriff einen relativ starken Eingriff in die Marktwirtschaft. Personen, die einem Eingriff in die Wirtschaft weniger kritisch gegenüberstehen, assoziieren damit eher milde Eingriffe. Eine Konkretisierung des Begriffs (z.B. „Einfuhrverbote für ausländische Produkte“) würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise Beschränkungen der Importmenge von Produkten (und nicht von Produkten generell) von Interesse sind. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind für eine Einschränkung der Importmenge“) ist dann nicht zulässig.

Abschließend wurden die Testpersonen gebeten anzugeben, wie schwer ihnen die Beantwortung von Item f) gefallen ist (Difficulty Probing). Insgesamt 31% der Testpersonen (n=37) haben auf diese Nachfrage mit „eher schwer“ oder „sehr schwer“ geantwortet. Begründet wurden die Schwierigkeiten zum einen damit, dass es sich hier um ein kompliziertes Thema handele, mit dem man sich noch nicht ausreichend beschäftigt habe (TP 89: „Kenne mich nicht genug aus mit dem Thema.“; TP 314: „Es handelt sich um eine schwierige Frage.“). Zum anderen wurde argumentiert, dass Importbeschränkungen sowohl Vor- als auch Nachteile hätten (TP 88: „Bringt ja auch Nachteile mit sich, zum Beispiel könnten deutsche Produkte im Ausland auch höher besteuert werden.“; TP 219: „Weil es sowohl Vor- als auch Nachteile hat.“). Wie zuvor hängen die wahrgenommenen Schwierigkeiten hier also nicht mit der Formulierung des Items, sondern der Komplexität des Themas zusammen.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen

g): Die Kompetenzen der Europäischen Union (EU) sollten reduziert werden.

Getestetes Item und Empfehlungen
Befund zum Item
Thema und Konstrukt

Itemtext: g): Die Kompetenzen der Europäischen Union (EU) sollten reduziert werden.
Empfehlungen: Wir empfehlen, das Item zu belassen. Der Begriff „Kompetenzen der EU“ ist zwar relativ vage und wird von den Testpersonen unterschiedlich interpretiert, die konkrete Interpretation scheint jedoch auch bereits die Einstellung zum Thema widerzuspiegeln: Personen, die der EU kritisch gegenüberstehen, assoziieren mit dem Begriff eher den Erlass von (sinnlosen) Gesetzen und Richtlinien; Personen, die der EU weniger kritisch gegenüberstehen, assoziieren damit eher die Entscheidungsspielräume und Befugnisse der EU allgemein. Eine Konkretisierung des Begriffs „Kompetenzen der EU“ würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise ein bestimmter Kompetenzrahmen von Interesse ist. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind dafür, dass die Gesetzgebungskompetenz der EU reduziert wird“) ist dann nicht zulässig.

Befund zum Item: Die Mehrheit der Testpersonen (43,3%) entschied sich hier für die Mittelkategorie, 35,9% befürworteten die Maßnahme und 20,9% lehnten sie ab. Die Antworten der Testpersonen verteilten sich dabei über die gesamte Skalenbreite.

Mit Hilfe eines Comprehension Probings sollte untersucht werden, was die Testpersonen unter dem Begriff „Kompetenzen der EU“ verstehen. Die Antworten der Testpersonen lassen sich in insgesamt drei Kategorien kodieren (s. Tabelle F1_5). Auffällig ist hier der große Anteil an nicht kodierbaren Antworten bzw. Antwortverweigerungen (n=39) und nicht zur Nachfrage passenden Antworten (n=21), d.h. solche Antworten, in denen die Testpersonen anstatt einer Definition des Begriffs „Kompetenzen der EU“ lediglich ihre Meinung zum Thema äußern. Dies deutet darauf hin, dass es sich hier sowohl um ein emotional aufgeladenes als auch eher komplexes Thema handelt. Diejenigen Testpersonen, die auf die Comprehension Probe auswertbare Antworten liefern, assoziieren mit dem Begriff hauptsächlich Gesetze und Richtlinien, welche die EU erlässt (TP 131: „Als Beispiel: Wattbegrenzung der Staubsauger, Verbot von Glühbirnen etc.“; TP 161: „Die Entscheidungen der EU sind bindend für die Mitgliedsstaaten (krumme Gurken) im Supermarkt.“) oder deren Entscheidungsspielräume und Befugnisse allgemein (TP 119: „Inwieweit die EU in nationale Angelegenheiten der Mitgliedstaaten eingreifen darf. Wer in welcher Angelegenheit das letzte Wort hat.“; TP 333: „Handlungsmöglichkeiten und -spielräume.“).

Tabelle F1_5. Verständnis des Begriffs „Kompetenzen der EU“ und Anzahl der Nennungen.

Verständnis von „Kompetenzen der EU“	Anzahl der Nennungen
1. Erlass von Gesetzen und Richtlinien (z.B. TP 110: „Gesetz- und Richtlinienkompetenz, z.B. EU-DSGVO.“)	33
2. Entscheidungsspielräume und Befugnisse allgemein (z.B. TP 108: „Zuständigkeitsbereiche und Befugnisse der EU.“)	27
3. TP hat nur Meinung zur EU kommuniziert (meist negativ) (z.B. TP 178: „Die EU hat sich nicht in alle Dinge einzumischen. Die einzelnen Länder sollten selbst entscheiden was für ihr Land gut oder schlecht ist.“)	21
Nicht kodierbare Antwort /Antwort auf Probing-Frage verweigert	39

Die jeweilige Interpretation beeinflusst dabei die Beantwortung des Items: Testpersonen mit dem erstgenannten Begriffsverständnis befürworten die Maßnahme eher (M = 2,67, SD = 1,27; geringere Werte = eher Zustimmung) als Testpersonen mit dem zweitgenannten Begriffsverständnis (M = 3,15, SD = 0,86; t(56) = -1,68, p = .087).

Wie bereits bei Item a) und Item f) ist hier anzumerken, dass der Begriff „Kompetenzen der EU“ relativ vage ist und daher von den Testpersonen unterschiedlich interpretiert wird, was wiederum einen Einfluss auf die Beantwortung des Items hat. Die konkrete Interpretation scheint jedoch auch hier die Einstellung zum Thema widerzuspiegeln: Personen, die der EU kritisch gegenüberstehen, assoziieren mit dem Begriff eher den Erlass von (sinnlosen) Gesetzen und Richtlinien; Personen, die der EU weniger kritisch gegenüberstehen, assoziieren damit eher die Entscheidungsspielräume und Befugnisse der EU allgemein. Eine Konkretisierung des Begriffs „Kompetenzen der EU“ würde vermutlich dazu führen, dass das Item diese unterschiedlichen Positionen weniger deutlich abbilden würde. Gleichwohl könnte man je nach Erkenntnisinteresse eine Konkretisierung vornehmen, sofern beispielsweise ein bestimmter Kompetenzrahmen von Interesse ist. Wird an der allgemeinen Begrifflichkeit festgehalten, so muss bei der Interpretation der Umfrageergebnisse berücksichtigt werden, dass sie verschiedene Facetten enthält. Eine Fokussierung auf nur eine dieser Facetten (z.B. „X% der Befragten sind dafür, dass die Gesetzgebungskompetenz der EU reduziert wird“) ist dann nicht zulässig.

Auch bei diesem Item sollten die Testpersonen bewerten, wie schwer es ihnen gefallen ist anzugeben, ob sie die Maßnahme befürworten oder ablehnen (Difficulty Probing). Insgesamt 29% der Testpersonen (n=35) haben auf diese Difficulty Probe mit „eher schwer“ oder „sehr schwer“ geantwortet, was ausschließlich damit begründet wurde, dass es sich hierbei um ein kompliziertes Thema handele, mit dem man sich noch nicht ausreichend beschäftigt habe (n=26; z.B. TP 235: „Damit kenne ich mich nicht aus.“; TP 237: „Ich bin mir nicht sicher gewesen, was genau unter Kompetenzen der EU fällt.“; TP 246: „Noch nicht darüber nachgedacht.“; TP 264: „Komplexität.“). Die wahrgenommene Schwierigkeit hing also nicht mit der Formulierung des Items zusammen.

Thema der Frage: Politik/ Einstellungen, Bewertungen & Ideologien
Konstrukt: Politische Einstellungen