Von Athen nach PISA – und zurück

Im letzten Kapitel seines Buches über Politik diskutiert Aristoteles das Erziehungswesen. Er spricht dabei fast alle Fragen zu Schule und Lehrplan an, die wir uns heute auch noch stellen. Dabei findet sich am Rande eine bemerkenswerte Beobachtung:

Ein nicht unbedeutendes Indiz dafür, dass Zwang bei Diät und Übungen negative Wirkungen haben kann, liefern die Sieger bei Olympischen Spielen. Man kann nur zwei oder drei finden, die zuvor auch als Jugendliche gesiegt haben. Die anderen haben durch ihr Training im jungen Alter und durch die Übungen, die ihnen Gewalt antun, ihre Kraft verloren.

(Aristoteles: 1339, 1-5).

Gäbe es einen modernen Aristoteles, könnte der anlässlich der PISAKonkurrenz vergleichbares feststellen. Nationaler Erfolg in PISA wiederholt sich – wie jüngst eine andere OECDStudie belegte – nicht automatisch im späteren Berufsleben. Im Gegenteil: Nicht wenige Länder, die in PISA ganz vorne liegen, haben wie Finnland erhebliche Probleme beim Übergang von der Schule zu Beruf und Gesellschaft, während Länder wie Österreich, die in PISA bescheiden abschneiden, regelmäßig weitaus bessere Übergänge erreichen. Die den Aufwand motivierende Gleichsetzung von PISA mit Leistung und künftigem Erfolg stimmt weder individuell noch gesellschaftlich.

Warum aber dann der große Aufwand und die ungeheure Spannung, die jedes Mal der Verkündung neuer PISA-Ergebnisse vorausgehen? Wenn man das verstehen will, muss man sich zunächst vergegenwärtigen, was PISA leistet und was nicht. Technisch gehört PISA zum besten, was es je in der empirischen Bildungsforschung gegeben hat. Für die Qualitätssicherung von Test, Durchführung und Auswertung werden auch in Österreich enorme Anstrengungen unternommen. Gemessen wird mit PISA die Verteilung von ausgewählten Kompetenzen in einer bestimmten Population, nämlich bei den 15-jährigen in den teilnehmenden Ländern. Soweit diese Kompetenzen dahinter liegendes Wissen spiegeln, kann man auch von einer vergleichen-

Politik, Buch

VIII;

Stefan Thomas Hopmann

geb. 1954 in Deutschland, ist seit 2005 Universitätsprofessor für Bildungswissenschaften in Wien. Er forscht insbesondere über Schul- und Qualitätsentwicklung in Bildungs- und anderen sozialen Systemen. den Untersuchung von Wissensdistributionen sprechen.

Allerdings muss man bei dem Wort Kompetenzen genau hinhören. PISA misst nämlich genau genommen, ob die Fähigkeit und der Wille dazu vorhanden sind, Testaufgaben zu lösen. Testfähigkeit und Testlust sind aber zwei voneinander unabhängige Konstrukte, die beide nur teilweise von dahinter stehenden schulfachlichen Fähigkeiten abhängen. Gleichwohl kann man auch auf dieser Grundlage spannende Untersuchungen durchführen, warum etwa bestimmte Aufgaben in manchen Ländern oder für bestimmte Teilgruppen unterschiedlich schwierig sind, oder warum manche Länder bei solchen Verfahren besser abschneiden, andere schlechter und manche je nach Testzugang sehr unterschiedlich. Keine Aussagen über Schulqualität. Was PISA aber nicht misst und auch nicht messen kann, ist, was die Öffentlichkeit meist mit den Testergebnissen verbindet. Mit PISA lassen sich keine zuverlässigen Aussagen über die Qualität von Schulsystemen, Schulstrukturen, Einzelschulen, Schulklassen oder gar einzelne Lehrkräfte oder Schülerinnen und Schüler begründen. Das hat im Wesentlichen drei Gründe:

1.) Testfähigkeit und Testlust sind nur zu einem bestimmten Teil von der Schule selbst abhängig. Beispielsweise lässt sich im besten Fall bis zu einem Drittel der Unterschiede mit Eigenschaften des besuchten Unterrichts erklären. Kulturelle und soziale Unterschiede in Herkunftsmilieus wie in der Gesellschaft als Ganzem spielen einen bedeutenderen Part.

2.) Egal, wie gut Tests sind, es gibt keine, die allen Zielgruppen und deren sprachlichen und fachlichen Eigenheiten in gleicher Weise gerecht werden können. Dementsprechend misst PISA zunächst und vor allem den Abstand zu sich selbst, also wie PISA-tauglich die jeweils Untersuchten sind.

3.) Schließlich bilden die in PISA erfassten Kompetenzen nur eine kleine Schnittmenge dessen ab, was innerhalb und außerhalb der Schulen gelehrt und gelernt wurde. Wie bedeutsam das jeweils Gemessene im Verhältnis zu all dem anderen ist, was nicht gemessen wurde, kann man anhand PISA selbst gar nicht feststellen. Zudem gibt es auch da erhebliche soziale und kulturelle Unterschiede. Ein Politikprodukt. All das ist denen, die PISA verantworten, bekannt. Warum wehren sie sich dann nicht gegen all die überschießenden Deutungen, die in der Öffentlichkeit und Politik vorherrschen? Die Antwort auf diese Frage ist verblüffend einfach: PISA ist in erster Linie kein Forschungsprojekt, sondern Politikproduktion. PISA wurde erfunden, um die Bildungsstatistik der OECD (Education at a Glance) um eine inhaltliche Komponente zu ergänzen, mit der sich mehr Aufmerksamkeit erregen und mehr Druck auf die beteiligten Länder ausüben lassen sollte. Dieser, von der OECD von Anfang an immer eingeräumte politökonomische Zweck wurde übererfüllt. Selbst die Beteiligten hatten nicht erwartet, wie viel nationaler und internationaler Furor sich mit den radikal vereinfachenden Ligatabellen nationaler Kompetenzverteilungen erzeugen ließ. Deswegen wird PISA heute auch fast überall (und nicht nur in Österreich) in enger Anbindung an die jeweils zuständigen Regierungen durchgeführt, denn die haben ja ein vitales Eigeninteresse daran, durch die jeweilige Rahmenerzählung zu beeinflussen, wie PISA in ihren eigenen Ländern wahrgenommen wird.

Solche Indikatorensysteme gab es schon früher in anderen öffentlichen Dienstleistungsbereichen und inzwischen meist auch in nationaler Ausgestaltung (z. B. als Bildungsstandards, Lesetests etc.). Allen diesen Monitoringsystemen ist gemeinsam, dass sie nur sehr begrenzt die zugrunde liegende Wirksamkeit sozialer Systeme und in keiner Weise individuelle Leistungen abbilden können, weshalb ihre Verwendung für Dinge wie Notenfestsetzungen oder gar die Zentralmatura reiner Missbrauch ist. Sie ermöglichen aber etwas ganz anderes, was ihre Überlebensfähigkeit sichert. Mit ihrer scheinbaren statistischen Genauigkeit erlauben sie, politische Entscheidungen als Sachzwänge zu verkaufen, bei denen es um normative Setzungen und gesellschaftliche Inter-