PIAAC-Studie

PIAAC steht für Programme for the International Assessment of Adult Competencies.[1] Ähnlich wie bei PISA (Programme for International Student Assessment) handelt es sich dabei um eine von der Organisation für wirtschaftliche Zusammenarbeit und Entwicklung (OECD) in Auftrag gegebene internationale Vergleichsstudie zur Erfassung von grundlegenden Kompetenzen. Untersucht wird eine Stichprobe der erwachsenen Wohnbevölkerung im Alter von 16 bis 65 Jahren.[1]

Ziele der Studie

[Bearbeiten | Quelltext bearbeiten]

Nach Veranstalterangaben werden mit PIAAC „grundlegende Kompetenzen untersucht, die notwendig sind, um den alltäglichen und beruflichen Anforderungen erfolgreich begegnen zu können.“ PIAAC liefere „Anhaltspunkte, inwiefern Schul- und Ausbildungssysteme der einzelnen Länder in der Lage sind, die erforderlichen Kompetenzen zur erfolgreichen Teilnahme an der Gesellschaft zu fördern. Diese Erkenntnisse bieten eine wissenschaftliche Grundlage für mögliche politische Interventionen und gesellschaftliche Veränderungen.“[2]

Untersucht werden Lesekompetenzen, alltagsmathematische Kompetenzen sowie technologiebasierte Problemlösekompetenzen Erwachsener. Mit zusätzlich erhobenen soziodemografischen Merkmalen und Hintergrundinformationen können zudem Indikatoren identifiziert werden, die mit dem Erlangen von Kompetenzen im Zusammenhang stehen. Somit liefere PIAAC „sowohl auf nationaler Ebene als auch im internationalen Vergleich ein umfassendes Bild des Humankapitals der teilnehmenden Länder.“[3]

Inhalt der Studie

[Bearbeiten | Quelltext bearbeiten]

In PIAAC werden die folgenden Kompetenzen untersucht:

  • Lesekompetenz (Literacy) sowie grundlegende Komponenten der Lesekompetenz (Reading Components): Damit wird das Verstehen, Nutzen und Interpretieren von geschriebenen Texten verstanden. Die Lesekompetenz ist die Voraussetzung, um eigene Ziele zu erreichen, das eigene Wissen und Potenzial weiterzuentwickeln und am gesellschaftlichen Leben teilzunehmen. Neben Aufgaben wie dem Lesen und Verstehen eines Medikamentenbeipackzettels oder eines kurzen Zeitungsartikels sind ebenso Aufgaben enthalten, die das Lesen in elektronischen Medien erfordern, wie z. B. einer Stellenanzeige in einem Onlineportal.[4]
  • Alltagsmathematische Kompetenz (Numeracy): Es bezeichnet die Fähigkeit, alltägliche mathematische Informationen abzurufen, zu verwenden, zu interpretieren und den unterschiedlichen mathematischen Anforderungen im Alltag erfolgreich zu begegnen. Operationalisiert wird alltagsmathematische Kompetenz mit Aufgaben wie z. B. der Einschätzung eines Sonderangebots oder der Interpretation von numerischen Informationen in Grafiken und Tabellen.[5]
  • Technologiebasiertes Problemlösen (Problem Solving in Technology-Rich Environments): Das technologiebasierte Problemlösen ist als Kompetenzdomäne erstmals in PIAAC operationalisiert. Sie bezeichnet die Verwendung digitaler Technologien, Kommunikationshilfen und Netzwerke zur erfolgreichen Informationssuche, -vermittlung und -interpretation. Im Fokus der ersten Befragungswelle bei PIAAC steht hierbei, wie Personen sich Informationen in einer computergestützten Umgebung erfolgreich beschaffen und wie sie diese verwenden. Diese Domäne beinhaltet Aufgaben wie das Sortieren und Versenden von E-Mails, die Bearbeitung von virtuellen Formularen und die Beurteilung des Informationsgehalts sowie der Vertrauenswürdigkeit von verschiedenen Internetseiten.[6]

Zusätzlich werden in einem umfassenden Hintergrundfragebogen Informationen zu den befragten Personen aus den folgenden Bereichen erfragt:[7]

  • soziodemografische Merkmale (z. B. Alter, Geschlecht)
  • Aus- und Weiterbildung (z. B. höchster Bildungsabschluss, Fachrichtung und Weiterbildungsbeteiligung)
  • Erwerbsstatus, Erwerbsbiografie und Arbeitsplatzmerkmale (z. B. Beruf der derzeitigen oder letzten Erwerbstätigkeit, Erwerbseinkommen)
  • Gesellschaftliches Engagement, Einstellungen und Gesundheit (z. B. ehrenamtliche Tätigkeiten, Selbsteinschätzung der eigenen Gesundheit)
  • allgemein und beruflich ausgeübte Tätigkeiten (z. B. Häufigkeit von unterschiedlichen Lese- und Schreibaktivitäten)

Methodik

[Bearbeiten | Quelltext bearbeiten]

Projektstruktur

[Bearbeiten | Quelltext bearbeiten]

Internationale Projektstruktur

[Bearbeiten | Quelltext bearbeiten]

PIAAC wird im Auftrag der OECD durchgeführt, das die internationale Projektdurchführung Anfang 2008 einem Konsortium unter Leitung von Educational Testing Service (ETS) übertragen hat. Zentrales Entscheidungsorgan für PIAAC ist das Board of Participating Countries (BPC), in welchem die Geldgeber der beteiligten Länder vertreten sind.

Teilnehmende Länder waren in Runde I: Australien, Dänemark, Deutschland, England/Nordirland (GB), Estland, Finnland, Flandern (Belgien), Frankreich, Irland, Italien, Japan, Kanada, Niederlande, Norwegen, Österreich, Polen, Russische Föderation, Schweden, Slowakische Republik, Spanien, Südkorea, Tschechische Republik, Vereinigte Staaten, Zypern; in Runde II: Chile, Griechenland, Indonesien, Israel, Litauen, Neuseeland, Singapur, Slowenien, Türkei[8]

Die internationale Studie wurde von Andreas Schleicher geleitet. Der deutsche Teil der Studie wurde vom sozialwissenschaftlichen Forschungsinstitut Gesis in Mannheim unter Leitung der Psychologin Beatrice Rammstedt durchgeführt. Weltweit wurden 166.000 Menschen repräsentativ getestet, in Deutschland 5.465.[1]

Projektstruktur in Deutschland

[Bearbeiten | Quelltext bearbeiten]

In Deutschland wurde PIAAC unter der Leitung von Beatrice Rammstedt von GESIS – Leibniz-Institut für Sozialwissenschaften durchgeführt. Finanziert wurde die deutsche Durchführung vom Bundesministerium für Bildung und Forschung unter Beteiligung des Bundesministeriums für Arbeit und Soziales. Von GESIS wurden im Rahmen der nationalen PIAAC-Umsetzung weitere Institutionen mit Aufgaben betraut:

In Deutschland wird PIAAC durch vernetzte Studien ergänzt, die Zusatzstichproben erheben. Zum gegenwärtigen Zeitpunkt gibt es zwei Ergänzungsstudien:

  • CiLL – Competencies in Later Life: Durchführung der PIAAC-Studie mit Älteren (66- bis 80-Jährigen)[9]
  • PIAAC-Erweiterung zu „gering Qualifizierten“: Studie zum Zusammenhang von Kompetenzen und Arbeitsmarktchancen von gering Qualifizierten in Deutschland[10]

Darüber hinaus wird im Rahmen einer Kooperation zwischen GESIS, dem Sozio-oekonomischen Panel (SOEP) und dem Leibniz-Institut für Bildungsverläufe (LIfBi) die Langzeitstudie PIAAC-L durchgeführt, bei der die PIAAC-Stichprobe weiterbegleitet wird, um die Entwicklung der Kompetenzen von Erwachsenen und deren Bedeutung im Zeitverlauf untersuchen zu können.

Testzyklus und Stichprobe

[Bearbeiten | Quelltext bearbeiten]

PIAAC 2012 stellt den Startpunkt dar, wobei in einem 10-Jahres-Turnus Wiederholungen geplant sind. Die erste Erhebung von PIAAC wurde in fast allen teilnehmenden Ländern zwischen Sommer 2011 und Frühjahr 2012 durchgeführt.

Die Grundgesamtheit in PIAAC besteht aus in Privathaushalten lebenden Personen eines Landes im Alter von 16 bis 65 Jahren, unabhängig von deren Nationalität und Aufenthaltsstatus. In jedem Teilnehmerland beruht die Stichprobe auf einer repräsentativen Zufallsauswahl aus dieser Grundgesamtheit. Pro Teilnehmerland wurden dafür mindestens 5.000 zufällig ausgewählte Erwachsene im Alter von 16 bis 65 Jahren befragt und getestet.

Datenauswertung

[Bearbeiten | Quelltext bearbeiten]

→ Siehe auch: Methodik der PISA-Studien

Wie bei PISA ist die Datenauswertung rein quantitativ-reduktionistisch: Teilnehmerleistungen werden als richtig oder falsch codiert und in „Kompetenzpunkte“ umgerechnet, wobei Leistungen von Teilnehmern, die unterschiedliche Aufgabensätze zu bearbeiten hatten, mithilfe des Rasch-Modells aufeinander skaliert werden; diese Skalierung sorgt zugleich dafür, dass die Kompetenzpunkte für die OECD-Gesamtheit annähernd nach Gauß verteilt sind. Aus der so ermittelten Punktwertung werden dann Ländermittelwerte gebildet und als Ranglisten veröffentlicht.

Zur Interpretation der Punktwerte wird die kontinuierliche Gauß-Verteilung willkürlich in Kompetenzklassen unterteilt. Anhand von Aufgaben, die typischerweise ab einem bestimmten Punktergebnis bewältigt werden, wird dann eine qualitative Beschreibung der Anforderungen erarbeitet. Besonders herausgestellt und von den Medien besonders beachtet wird der Bevölkerungsanteil auf der niedrigsten Kompetenzstufe („kann lesen wie ein Zehnjähriger“).

Sprach- und kulturblinder Test

[Bearbeiten | Quelltext bearbeiten]

→ Siehe auch: Kritik an den PISA-Studien

Eine zentrale Annahme bei PIAAC ist, dass es möglich und gelungen ist, einen Test zu konstruieren, der unabhängig von Sprache und Kultur in verschiedenen Staaten dasselbe Konstrukt, z. B. Lesekompetenz, misst. Dieser Ansatz lag schon den PISA-Studien zugrunde und ist dort heftig kritisiert worden: Unter anderem wurde herausgearbeitet, dass es zu Übersetzungsfehlern gekommen ist, dass Texte beim Übersetzen tendenziell länger werden und dass deutsche Texte ohnehin schon länger sind als englische, und dass die überwiegende Herkunft der Testaufgaben aus dem angelsächsischen Kulturkreis eine erhebliche Verzerrung verursachen könnte. Für all diese Faktoren gibt es im Auswerteverfahren von PIAAC jedenfalls keinen Ausgleichsmechanismus. Neben der Fähigkeit zu sinnerschließendem Lesen dürfte PIAAC auch eine durch das Schulsystem geprägte Testfähigkeit[11] messen.

Ergebnisse

[Bearbeiten | Quelltext bearbeiten]

Erste Ergebnisse wurden am 8. Oktober 2013 veröffentlicht. Die Presse berichtete, wie schon bei PISA, vor allem über das Länderranking (Finnland und Japan vorne, Deutschland im Mittelfeld) und griff ansonsten auf, was in den nationalen Ergebnispräsentationen herausgestellt wurde (in Deutschland: starke Abhängigkeit der Kompetenzen vom Elternhaus). Die Ergebnisse zeigen, dass die Grundkompetenzen der in Deutschland lebenden Erwachsenen in allen drei Domänen im Mittel relativ durchschnittlich sind. So weist Deutschland eine leicht unterdurchschnittliche Lesekompetenz, eine leicht überdurchschnittliche alltagsmathematische Kompetenz und eine durchschnittliche technologiebasierte Problemlösekompetenz auf.[12]

Ergebnisse Lesekompetenz

[Bearbeiten | Quelltext bearbeiten]
Lesekompetenz[13]
Land Mittelwert Standardfehler
Japan Japan 296 (0.7)
Finnland Finnland 288 (0.7)
Niederlande Niederlande 284 (0.7)
Australien Australien 280 (0.9)
Schweden Schweden 279 (0.7)
Norwegen Norwegen 278 (0.6)
Estland Estland 276 (0.7)
Flandern Flandern 275 (0.8)
Tschechien Tschechien 274 (1.0)
Slowakei Slowakei 274 (0.6)
Kanada Kanada 273 (0.6)
OECD-Durchschnitt 273 (0.2)
Korea Sud Südkorea 273 (0.6)
Vereinigtes Konigreich Vereinigtes Königreich 272 (1.0)
Danemark Dänemark 271 (0.6)
Deutschland Deutschland 270 (0.9)
Vereinigte Staaten Vereinigte Staaten 270 (1.0)
Osterreich Österreich 269 (0.7)
Zypern Republik Zypern 269 (0.8)
Polen Polen 267 (0.6)
Irland Irland 267 (0.9)
Frankreich Frankreich 262 (0.6)
Spanien Spanien 252 (0.7)
Italien Italien 250 (1.1)
Erklärung der Farben
Statistisch signifikant über dem OECD-Durchschnitt Statistisch nicht signifikant verschieden vom OECD-Durchschnitt Statistisch signifikant unter dem OECD-Durchschnitt

Anmerkungen. Länder sind absteigend sortiert nach ihrer mittleren Lesekompetenz. Der OECD-Durchschnitt beinhaltet alle an PIAAC beteiligten Länder außer Zypern. Statistische Signifikanz (p < 0,05) bezieht sich auf Mittelwertunterschiede zwischen Land und OECD-Durchschnitt.

Alltagsmathematische Kompetenz

[Bearbeiten | Quelltext bearbeiten]
Alltagsmathematische Kompetenz[14]
Land Mittelwert Standardfehler
Japan Japan 288 (0.7)
Finnland Finnland 282 (0.7)
Flandern Flandern 280 (0.8)
Niederlande Niederlande 280 (0.7)
Schweden Schweden 279 (0.8)
Norwegen Norwegen 278 (0.8)
Danemark Dänemark 278 (0.7)
Slowakei Slowakei 276 (0.8)
Tschechien Tschechien 276 (0.9)
Osterreich Österreich 275 (0.9)
Estland Estland 273 (0.5)
Deutschland Deutschland 272 (1.0)
OECD-Durchschnitt 269 (0.2)
Australien Australien 268 (0.9)
Kanada Kanada 265 (0.7)
Zypern Republik Zypern 265 (0.8)
Korea Sud Südkorea 263 (0.7)
Vereinigtes Konigreich Vereinigtes Königreich 262 (1.1)
Polen Polen 260 (0.8)
Irland Irland 256 (1.0)
Frankreich Frankreich 254 (0.6)
Vereinigte Staaten Vereinigte Staaten 253 (1.2)
Italien Italien 247 (1.1)
Spanien Spanien 246 (0.6)
Erklärung der Farben
Statistisch signifikant über dem OECD-Durchschnitt Statistisch nicht signifikant verschieden vom OECD-Durchschnitt Statistisch signifikant unter dem OECD-Durchschnitt

Anmerkungen. Länder sind absteigend sortiert nach ihrer mittleren alltagsmathematischen Kompetenz. Der OECD-Durchschnitt beinhaltet alle an PIAAC beteiligten Länder außer Zypern. Statistische Signifikanz (p < 0,05) bezieht sich auf Mittelwertunterschiede zwischen Land und OECD-Durchschnitt.

Technologiebasiertes Problemlösen

[Bearbeiten | Quelltext bearbeiten]

Da diese Kompetenzdomäne definitionsbedingt ausschließlich computerbasiert erhoben wurde, konnten für Personen, die keine hinreichenden Computerkenntnisse hatten oder die Befragung am Computer aus anderen Gründen verweigerten, keine Werte für diese Kompetenz bestimmt werden. Daher können auch keine Mittelwerte für die Gesamtbevölkerung geschätzt werden. Stattdessen werden die Resultate lediglich in Form von Bevölkerungsanteilen in den drei Kompetenzstufen des technologiebasierten Problemlösens berichtet.

Technologiebasiertes Problemlösen[15]
Länder Personen mit Kompetenzwerten in Technologiebasiertem Problemlösen nach Kompetenzstufen
Unter Stufe I Stufe I Stufe II Stufe III
% Standardfehler % Standardfehler % Standardfehler % Standardfehler
Schweden Schweden 13.1 (0.5) 30.8 (0.8) 35.2 (0.9) 8.8 (0.6)
Finnland Finnland 11.0 (0.5) 28.9 (0.8) 33.2 (0.7) 8.4 (0.6)
Niederlande Niederlande 12.5 (0.6) 32.6 (0.7) 34.3 (0.8) 7.3 (0.4)
Norwegen Norwegen 11.4 (0.6) 31.8 (0.8) 34.9 (0.9) 6.1 (0.4)
Danemark Dänemark 13.9 (0.6) 32.9 (0.8) 32.3 (0.7) 6.3 (0.4)
Australien Australien 9.2 (0.6) 28.9 (0.8) 31.8 (1.0) 6.2 (0.5)
Kanada Kanada 14.8 (0.4) 30.0 (0.7) 29.4 (0.5) 7.1 (0.4)
Deutschland Deutschland 14.4 (0.8) 30.5 (0.8) 29.2 (0.8) 6.8 (0.6)
Vereinigtes Konigreich Vereinigtes Königreich 15.1 (0.8) 33.9 (1.0) 29.1 (0.9) 5.6 (0.5)
Japan Japan 7.6 (0.6) 19.7 (0.8) 26.3 (0.8) 8.3 (0.5)
Flandern Flandern 14.8 (0.6) 29.8 (0.8) 28.7 (0.8) 5.8 (0.4)
OECD-Durchschnitt 12.3 (0.1) 29.4 (0.2) 28.2 (0.2) 5.8 (0.1)
Tschechien Tschechien 12.9 (0.9) 28.8 (1.3) 26.5 (1.1) 6.6 (0.6)
Osterreich Österreich 9.9 (0.5) 30.6 (0.9) 28.1 (0.8) 4.3 (0.4)
Vereinigte Staaten Vereinigte Staaten 15.8 (0.9) 33.1 (0.9) 26.0 (0.9) 5.1 (0.4)
Korea Sud Südkorea 9.8 (0.5) 29.6 (0.9) 26.8 (0.8) 3.6 (0.3)
Estland Estland 13.8 (0.5) 29.0 (0.7) 23.2 (0.6) 4.3 (0.4)
Slowakei Slowakei 8.9 (0.5) 28.8 (0.9) 22.8 (0.7) 2.9 (0.3)
Irland Irland 12.6 (0.7) 29.5 (0.9) 22.1 (0.8) 3.1 (0.3)
Polen Polen 12.0 (0.6) 19.0 (0.7) 15.4 (0.7) 3.8 (0.3)

Anmerkungen: Länder sind absteigend sortiert nach Anteilen Erwachsener auf Stufe II und III der technologiebasierten Problemlösekompetenz. Der OECD-Durchschnitt beinhaltet alle an PIAAC beteiligten Länder außer Frankreich, Italien, Spanien und Zypern. Statistische Signifikanz (nach OECD Skills Outlook, 2013) bezieht sich auf Unterschiede der summarischen Anteile auf Stufe II und III zwischen Land und OECD-Durchschnitt.

17,5 Prozent der getesteten Menschen in Deutschland verfügen nicht über Basiskenntnisse in Lesen und in Mathematik.[1]

Die Studie stellte für Deutschland einen starken Zusammenhang zwischen sozialer Herkunft und Leseleistung fest; nur in den Vereinigten Staaten ist dieser Zusammenhang stärker ausgeprägt.[1]

Literatur

[Bearbeiten | Quelltext bearbeiten]

Einzelnachweise

[Bearbeiten | Quelltext bearbeiten]
  1. ↑ a b c d e Üben, üben, üben. In: Die Zeit. Nr. 42, 2013, ISSN 0044-2070, S. 71 f.
  2. ↑ PIAAC im Überblick - Website von PIAAC. Abgerufen am 1. Oktober 2013.
  3. ↑ Ziele von PIAAC – Website von PIAAC. Abgerufen am 1. Oktober 2013.
  4. ↑ Lesekompetenz (Literacy) – Website von PIAAC. Abgerufen am 1. Oktober 2013.
  5. ↑ Alltagsmathematische Kompetenz (Numeracy) - Website von PIAAC. Abgerufen am 1. Oktober 2013.
  6. ↑ Technologiebasiertes Problemlösen (Problem Solving in Technology Rich Environments) - Website von PIAAC. Abgerufen am 1. Oktober 2013.
  7. ↑ B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
  8. ↑ Teilnehmende Länder – Website von PIAAC. Abgerufen am 1. Oktober 2013.
  9. ↑ Projekthomepage von CiLL DIE – Deutsches Institut für Erwachsenenbildung. Abgerufen am 1. Oktober 2013.
  10. ↑ Studie zum Zusammenhang von Kompetenzen und Arbeitsmarktchancen von gering Qualifizierten in Deutschland (Memento des Originals vom 1. Oktober 2016 im Internet Archive)  Info: Der Archivlink wurde automatisch eingesetzt und noch nicht geprüft. Bitte prüfe Original- und Archivlink gemäß Anleitung und entferne dann diesen Hinweis.@1@2Vorlage:Webachiv/IABot/www.gesis.org – Website von PIAAC. Abgerufen am 1. Oktober 2013.
  11. ↑ Wolfram Meyerhöfer: PISA - Ein Test im Test. Vortrag auf der GDM-Jahrestagung Klagenfurt, März 2000. In: kentron. Journal zur Lehrerbildung. extra 2004, S. 4–7.
  12. ↑ B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
  13. ↑ B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
  14. ↑ B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
  15. ↑ B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
[Bearbeiten | Quelltext bearbeiten]