SchulberichtRückmeldung an die Schulleitung und SchulpartnerStandardüberprüfung E8 – 2013Rückmeldung der Ergebnisse Ihrer Schule

(1)

Schulbericht

Rückmeldung an die Schulleitung und Schulpartner

Standardüberprüfung E8 – 2013

Rückmeldung der Ergebnisse Ihrer Schule

Schule: Musterschule der Musterstraße 1 Adresse: Musterstraße 1

1000 Musterort

Schulkennzahl: 999992

(2)

Direktoren: MMag. Christian Wiesner & Mag. Martin Netzer, MBA

Für den Inhalt verantwortlich: BIFIE – Department Bildungsstandards & Internationale Assessments (Mag. Dr. Claudia Schreiner, Mag. Simone Breit)

Kontakt: 0662/620088-3000; office.bista@bifie.at www.bifie.at

Bei Fragen zur Rückmeldung kontaktieren Sie bitte unsere Hotline:

Telefon: 0662/620088-3700; E-Mail: bist8-rm@bifie.at

Die Überprüfung und Rückmeldung der Bildungsstandards ist rechtlich verpflichtend verankert und zählt zu den gesetzlichen Kernaufgaben des Bundesinstituts BIFIE (BIFIE-Gesetz 2008).

Bundesministerium für Unterricht, Kunst und Kultur Minoritenplatz 5/1014 Wien

(3)

Hinweis

Kursiv gedruckte Begriffe werden im Glossar erklärt.

Inhalt

3 1. Einleitung

4 2. Informationen zur Standardüberprüfung 15 3. Ihre Schulergebnisse

15 3.1 Information über die Schüler/innen an Ihrer Schule 18 3.2 Hör-, Lese- und Schreibkompetenz an Ihrer Schule 26 3.3 Englischkompetenz an Ihrer Schule

36 4. Von den Ergebnissen zur Qualitätsentwicklung

(4)

(5)

Mit der Einführung der Bildungsstandards (BIST) und deren regelmäßiger Überprüfung wird ein bemerkenswerter Reformprozess in Gang gesetzt, der den Fokus auf die Kompetenzen der Schüler/innen richtet.

Bildungsstandards legen jene Kompetenzen fest, die Schülerinnen und Schüler bis zum Ende der 4. Schulstufe in Deutsch/Lesen/Schreiben und Mathematik sowie bis zum Ende der 8. Schulstufe in Deutsch, Mathematik und Englisch erworben haben sollen. Dabei handelt es sich um Fähigkeiten, Fertigkeiten und Haltungen, die für die weitere schulische und berufliche Bildung von zentraler Bedeutung sind. Bildungsstandards wurden als konkret formulierte Lernergebnisse aus den Lehrplänen abgeleitet. Daher treten Bildungsstandards und Lehr- plan nicht in eine konkurrierende oder widersprüchliche Position, sondern ergänzen einander positiv.

Bildungsstandards sollen einen nachhaltigen Kompetenzaufbau und ergebnisorientierten Unterricht bewirken.

Lehrkräften wird es ermöglicht, einen Vergleich zwischen dem von den Bildungsstandards vorgegebenen „Soll“

und den von ihren Schülerinnen und Schülern tatsächlich erworbenen Kompetenzen anzustellen. Dies bildet die Grundlage für eine Reflexion des eigenen Unterrichts.

Durch die regelmäßige Überprüfung der Bildungsstandards wird festgestellt, ob und in welchem Ausmaß Schü- ler/innen die gewünschten Kompetenzen erreichen und wie sich der Ist-Stand der Kompetenzen der Schüler/

innen mit dem angestrebten Soll (Bildungsstandards) deckt. Die externe Überprüfung zeigt auch, inwieweit Schulen ihre Kernaufgabe der Vermittlung von allgemein als notwendig angesehenen Kompetenzen erfüllen. Die zentral vorgegebenen Standardüberprüfungen verfolgen weiters das Ziel, die Ergebnisse für Schul- und Unter- richtsentwicklung nutzbar zu machen. Die Rückmeldung der Testleistungen dient als Impuls für Qualitätsent- wicklungsprozesse am jeweiligen Schulstandort sowie landes- und bundesweit.

Bildungsstandards sind daher ein bedeutendes Instrument der Qualitätssicherung und bilden eine wichtige Datengrundlage für die Initiative „Schulqualität Allgemeinbildung“ (SQA). Dieses Instrument ist mit der Novellie- rung des § 18 Bundes-Schulaufsichtsgesetz mit 1. September 2012 in Kraft getreten. Ziel von SQA ist es, durch pädagogische Qualitätsentwicklung und -sicherung bestmögliche Lernbedingungen für Schüler/innen zu gewährleisten (vgl. BMUKK, 2012).

Der erste Überprüfungszyklus auf der 8. Schulstufe startete im Mai 2012 mit Mathematik und wurde mit Englisch im April schriftlich bzw. im Mai/Juni 2013 mündlich fortgesetzt. Der vorliegende Bericht beinhaltet nun die Ergebnisse Ihrer Schule aus der Standardüberprüfung in Englisch. In Kapitel 2 erhalten Sie detaillierte Infor- mationen zur Durchführung der Standardüberprüfung. Die grafisch aufbereiteten Ergebnisse Ihrer Schule werden in Kapitel 3 dargestellt. Abschließend wird in Kapitel 4 ein Ausblick über nachfolgende Schritte gegeben.

Als Ergänzung für die Schulleitung werden die Ergebnisse der Unterrichtsgruppen in einem weiteren Bericht zur Verfügung gestellt. Die Unterrichtsgruppe ist jene Einheit, in der die Schüler/innen der 8. Schulstufe in Englisch gemeinsam unterrichtet wurden.

Weiterführende Informationen zu verwendeten Begriffen finden Sie im Glossar, welches Sie als eigenständiges PDF-Dokument lokal speichern und ausdrucken können. Im vorliegenden PDF-Dokument sind erklärte Begriffe kursiv gedruckt. Die Ergebnisse können bis Ende Juni 2014 online abgerufen werden. Es empfiehlt sich, den Ergebnisbericht als PDF-Dokument lokal zu speichern und ggf. auszudrucken.

Auf Wunsch können Sie als Schulleiter/in über die Pädagogische Hochschule eine/n Rückmeldemoderatorin/- moderator zur Unterstützung bei der sachlichen Analyse und objektiven Interpretation der Ergebnisse anfordern.

Genauere Informationen dazu finden Sie in Kapitel 4.

1. Einleitung

(6)

Welches Kompetenzmodell liegt der Standardüberprüfung in Englisch zugrunde?

Den in den Bildungsstandards festgelegten Kompetenzen liegt ein aus dem jeweiligen Lehrplan abgeleitetes fachspezifisches Kompetenzmodell zugrunde. Das Kompetenzmodell strukturiert die wesentlichen Kernbereiche eines Unterrichtsgegenstands. Für die lebende Fremdsprache Englisch basiert der Lehrplan – wie die Bildungs- standards – auf dem Gemeinsamen Europäischen Referenzrahmen für Sprachen (GERS). Im Zentrum des GERS stehen Sprachkompetenzbeschreibungen für die in Abbildung 1 angeführten Kompetenzbereiche.

Abbildung 1: Kompetenzmodell Englisch 8. Schulstufe

Für die Standardüberprüfung und Rückmeldung werden die Fertigkeiten An Gesprächen teilnehmen und Zusammenhängend sprechen zum Kompetenzbereich Sprechen zusammengefasst. Beide, Lehrplan wie Bildungsstandards, definieren als wesentliche Kriterien des Fremdsprachenunterrichts die grundsätzliche Gleichwertigkeit der Kompetenzbereiche sowie seine Handlungsorientierung (die Entwicklung kommunikativer Kompetenz). Die Lernenden sollen demnach durch den Unterricht befähigt werden, Alltagssituationen kommu- nikativ erfolgreich und sozial angemessen zu bewältigen.

Wie wurden die Testaufgaben entwickelt?

Die Verantwortung für die Item- und Testentwicklung und die wissenschaftliche Qualität der Überprüfung trägt das Department Bildungsstandards & Internationale Assessments des Bundesinstituts BIFIE. Die fachlichen Entwicklungsarbeiten in Deutsch, Mathematik und Englisch erfolgen in Kooperation mit Arbeitsgruppen an Pädagogischen Hochschulen und Universitäten. Diese bestehen aus Fachdidaktikerinnen und Fachdidaktikern, die ihre Expertise einbringen, sowie Lehrerinnen und Lehrern mit langjähriger praktischer Erfahrung.

Die Vorarbeiten zur Standardüberprüfung in Englisch 2013 durchliefen drei Phasen:

Seit 2004 entwickelten Lehrer/innen mit Unterstützung von Fachdidaktikerinnen und Fachdidaktikern Items zur kompetenzorientierten Leistungsmessung in Deutsch, Mathematik und Englisch. In mehr als 300 Schulen wurden Aufgabensammlungen auf der 4. und 8. Schulstufe praktisch erprobt und die von den Schülerinnen und Schülern erzielten Ergebnisse analysiert. Diese Erfahrungen flossen in die Verordnung der Bildungs- standards 2009 ein.

Im Schuljahr 2008/09 hat das Bundesinstitut BIFIE erstmals in einer repräsentativen Stichprobe auf der 8. Schulstufe (HS, AHS) mit einer Bestandsaufnahme begonnen, der Baseline-Testung in Mathematik,

2. Informationen zur

Standardüberprüfung

An Gesprächen

teilnehmen Zusammenhängend

sprechen

Kompetenzbereiche Englisch 8. Stufe

Hören Lesen Schreiben

(7)

Deutsch und Englisch. Für Deutsch/Lesen/Schreiben und Mathematik auf der 4. Schulstufe fand diese Baseline-Testung im Schuljahr 2009/10 statt. Damit war ein verlässliches Bild vom bisher erzielten Leistungs- stand möglich und eine Ausgangsmessung für spätere Vergleiche erstellt.

Für jedes Fach und jede Schulstufe übernehmen Entwicklungsgruppen, bestehend aus Lehrerinnen und Lehrern, die vertraglich mit dem BIFIE zusammenarbeiten, die Entwicklung der Items (Testaufgaben). Koope- rationspartner/innen von Pädagogischen Hochschulen und Universitäten begleiten und unterstützen mit ihrer fachlichen Expertise diesen Arbeitsprozess. Die entwickelten Items und Tests durchlaufen mehrere Begutachtungen und Bewertungen durch Fachexpertinnen und -experten sowie Praktiker/innen. Ein bis zwei Jahre vor der jeweiligen Standardüberprüfung werden die Items und Tests an mehreren tausend Schü- lerinnen und Schülern nochmals pilotiert, um die am besten geeigneten Testinstrumente für die Standard- überprüfungen auswählen zu können. Die fachdidaktische Begleitung bei der Itementwicklung für die Standardüberprüfung in Englisch auf der 8. Schulstufe übernahmen das Norwich Institute for Language Education – NILE (Leitung: Dave Allan, Keith Morrow) für Hören und Lesen sowie die Expertenteams unter der Leitung von Prof. Dr. Otmar Gassner (PH Vorarlberg) für Schreiben und Prof. Dr. Claudia Mewald (PH Niederösterreich) für Sprechen.

Auf diesen Vorarbeiten beruht die nun im April 2013 vom BIFIE durchgeführte erste flächendeckende Über- prüfung in Englisch auf der 8. Schulstufe, deren Ergebnisse Sie in diesem Bericht erhalten. Damit wurde der erste Überprüfungszyklus der Bildungsstandards auf dieser Schulstufe fortgesetzt, der 2012 mit Mathematik begonnen hat und 2014 mit Deutsch beendet wird.

Wer hat 2013 an der Standardüberprüfung in Englisch (8. Schulstufe) teilgenommen?

Die schriftliche Standardüberprüfung in Englisch (Hören, Lesen, Schreiben) auf der 8. Schulstufe fand an den Testtagen 17. April bzw. 25. April 2013 (Ersatztermin) in ganz Österreich statt. Zur Zielgruppe gehörten rund 80 200 Schüler/innen in 1 410 Schulen (898 HS, 243 NMS, 267 AHS, 2 VS-Ost). Am Testtag (bzw. Ersatztermin) fehlten insgesamt rund 4 % der zu überprüfenden Schüler/innen, sodass rund 76 700 Schüler/innen getestet wurden und eine Teilnahmequote von rund 96 % erzielt wurde. Aus organisatorischen Gründen fand die Über- prüfung des Kompetenzbereichs Sprechen im Zeitraum vom 6. Mai bis 7. Juni 2013 nur an einer Teilstichprobe statt. Dafür erfolgte in einem ersten Schritt eine Stichprobenziehung von 120 Schulen. In jeder der für die Über- prüfung ausgewählten Schulen wurden aus allen Schülerinnen und Schülern auf der 8. Schulstufe in der Regel 12 Testpaare (24 Schüler/innen) plus 2 Ersatzschüler/innen klassenübergreifend und zufällig gezogen.

Die Teilnahme an der Standardüberprüfung war laut Gesetz verpflichtend für alle Schülerinnen und Schüler der 8. Schulstufe an allen öffentlichen und privaten Schulen mit gesetzlich geregelten Schulartbezeichnungen (Volks- schuloberstufe, Hauptschule, Neue Mittelschule¹, allgemeinbildende höhere Schule) und mit Öffentlichkeits- recht. Von der Überprüfung ausgenommen waren alle außerordentlichen Schüler/innen sowie Schüler/ innen mit sonderpädagogischem Förderbedarf (SPF), die im Testfach nach dem Lehrplan der Allgemeinen Sonderschule (ASO) oder nach dem Lehrplan einer niedrigeren Schulstufe unterrichtet wurden. Schüler/innen mit Körper- oder Sinnesbehinderung nahmen dann nicht an der Überprüfung teil, wenn sie selbst mit allenfalls im Unterricht zur Verfügung stehenden Unterrichts- oder Hilfsmitteln unter den standardisierten Testbedingungen die gestellten Aufgaben aller Voraussicht nach nicht hätten lösen können. Von der Überprüfung in Englisch waren zudem Schüler/innen ausgenommen, die nicht Englisch als erste lebende Fremdsprache hatten. Detaillierte Informatio- nen zu den Teilnahmekriterien können der Verordnung über Bildungsstandards im Schulwesen (vgl. BGBl. II Nr.

1/2009) sowie deren Novelle (vgl. BGBl. II Nr. 282/2011) entnommen werden.

1 Für die vorliegende Rückmeldung trifft die Zuordnung zur seit 2012 gesetzlich geregelten Schulart „Neue Mittelschule“ nur auf jene Schulen zu, die durch die Teilnahme am Modellversuch seit dem Schuljahr 2009/10 zum Zeitpunkt der Überprüfung bereits Schüler/

innen im Rahmen des Modellversuchs vier Jahre unterrichteten. Nähere Informationen zur Neuen Mittelschule finden Sie unter www.

neuemittelschule.at.

(8)

Wie ist die Überprüfung an den Schulen praktisch abgelaufen?

Standardisiertes Verfahren

Bei der Standardüberprüfung sollen die Kompetenzen aller Schüler/innen unter den gleichen Rahmenbedingun- gen getestet werden, damit die Ergebnisse vergleichbar sind. Aus diesem Grund sind die Testabläufe durch schriftliche Testanweisungen „standardisiert“. Das heißt, dass der Testablauf, die Arbeitsanweisungen sowie die Testzeiten genau vorgegeben werden und die Testleiter/innen dafür sorgen müssen, dass die Durchführungs- regeln in der Praxis strikt eingehalten werden. Das wurde auch durch eine spezielle Schulung der Testleiter/innen unterstützt, die von den Pädagogischen Hochschulen im Frühjahr 2013 regional durchgeführt wurde.

Die korrekte Abwicklung in der Vor- und Nachbereitung der Überprüfung sowie die Zusammenarbeit mit dem BIFIE liegen im Verantwortungsbereich der Schulleiterin/des Schulleiters. Die Testleiter/innen bei der Über- prüfung waren in rund 93 % der Fälle Lehrer/innen aus der eigenen Schule (= interne Testleitung). Diese wurden von der Schulleitung nominiert. Aus Objektivitätsgründen sollten die Lehrpersonen fachfremd (also keine Englischlehrer/innen) sein und wenn möglich die getesteten Schüler/innen der 8. Schulstufe auch in keinem anderen Fach unterrichten.

Als nationale Qualitätssicherungsmaßnahme wurden 7 % der Klassen per Zufall ausgewählt und von einer externen Testleiterin oder einem externen Testleiter getestet. In 3 % aller Klassen wurde zusätzlich zur internen Testleitung eine beobachtende Qualitätsprüferin/ein beobachtender Qualitätsprüfer eingesetzt. Diese Vorge- hensweise diente dazu, eventuelle Unterschiede in den Testbedingungen festzustellen. Externe Testleiter/innen sind – genauso wie die internen – geschulte Lehrpersonen, die den Test nicht an der eigenen Schule, sondern an einer anderen Schule durchführten. Qualitätsprüfer/innen sind Personen mit Testerfahrung, die für die Beob- achtung und Protokollierung der Abläufe zuständig waren. Durch ihren Beitrag können etwaige Abweichungen vom standardisierten Vorgehen oder Probleme bei der Testdurchführung festgestellt sowie zukünftig Testab läufe optimiert werden.

Testverfahren und Testzeit

Bei der Überprüfung der Kompetenzbereiche Hören, Lesen und Schreiben wurden schriftliche Verfahren („Papier-und-Bleistift-Tests“) eingesetzt. Die verwendeten Testaufgaben bzw. Items bezogen sich auf die in der Anlage zur Verordnung der Bildungsstandards im Schulwesen (BGBl. II Nr. 1/2009) genannten Kompetenzen und Kompetenzbereiche. Jede Schülerin/Jeder Schüler bearbeitete pro Kompetenzbereich ein Testheft.

Um eine möglichst breite Abdeckung der Kompetenzbereiche in Englisch auf Schul- und Systemebene zu ge- währleisten, wurden mehrere Testformen eingesetzt. Dies erhöht die Aussagekraft der Ergebnisse. Durch verschiedene Testformen in einer Klasse wurde in den Kompetenzbereichen Lesen und Schreiben zudem das Abschreiben verhindert. Die Vergleichbarkeit verschiedener Testformen wurde durch sogenannte Link-Items, also Aufgaben, die in mehreren Testformen an unterschiedlichen Positionen vorkommen, gewährleistet. Zudem haben alle Testformen etwa den gleichen Schwierigkeitsgrad. Die Zuteilung von Testformen zu Schülerinnen und Schülern erfolgte zufällig, unabhängig von der besuchten Schulart.

Ein Testheft in Hören enthielt in der Regel 33 Items. Die Durchführung dieses Testteils dauerte ca. 32 Minuten.

In der Standardüberprüfung bestand dieser Testteil aus mehreren Abschnitten, deren Abfolge variabel war.

Jeder Abschnitt fokussierte jeweils auf eine spezifische Fertigkeit. Es wurden geschlossene Antwortformate (Multiple Choice und Zuordnungsitems) und halboffene Antwortformate (Vervollständigungsitems) verwendet.

Für den Kompetenzbereich Lesen wurden in der Regel 16 Items pro Testheft in einem Zeitraum von 35 Minuten bearbeitet. Der Leseteil der Überprüfung war ähnlich aufgebaut wie der Hörteil. Das Leseverständnis wurde mittels kürzerer (max. 35 Wörter) und längerer (max. 220 Wörter) Input-Texte überprüft. Auch in diesem Teil war die Abfolge der Abschnitte variabel. Es wurden geschlossene Antwortformate (Multiple-Choice-, Richtig-falsch- und Zuordnungsitems) und halboffene Antwortformate (Lückentexte) verwendet.

(9)

Beispieleitems für die Kompetenzbereiche Hören und Lesen fi nden Sie auf der BIFIE-Homepage unter www.

bifie.at/node/1702 bzw. unter www.bifie.at/node/1724.

Im Bereich Schreiben verfassten die Schüler/innen zwei Texte unterschiedlicher Länge. Der kürzere Text sollte 40 bis 70 Wörter umfassen und war in zehn Minuten fertigzustellen. Der längere Text sollte 120 bis 180 Wörter umfassen und war in zwanzig Minuten zu erstellen. Die inhaltlichen Punkte, die zu bearbeiten waren, wurden in der Aufgabenstellung vorgegeben. Nach den 30 Minuten Arbeitszeit standen den Schülerinnen und Schülern fünf Minuten für die Überarbeitung der beiden Texte zur Verfügung. Danach zählten die Schüler/innen die Wörter.

Im Anschluss an den Test der drei Kompetenzbereiche bearbeiteten die Schüler/innen einen Fragebogen, welcher verschiedene Aspekte schulischer Lern- und außerschulischer Lern- und Lebensbedingungen erfasste.

Gemeinsam mit dem von der Schulleitung ausgefüllten Schulbogen (und Angaben der Statistik Austria über die Gemeinde) liefern die erhobenen Daten die benötigten Informationen über das Vorhandensein und das Ausmaß jener Faktoren, die in Zusammenhang mit dem Kompetenzerwerb stehen könnten. Ein möglichst breites Verständnis für die Notwendigkeit und den Nutzen der Kontexterhebung ist ein wesentliches Moment für die Qualität der Datenerhebung. Daher werden die Schulpartner-Vertretungen in den Diskussionsprozess über die Inhalte der Befragung eingebunden. Nähere Informationen zu den Themenfeldern der Fragebögen finden Sie unter www.bifie.at/node/2119.

Im Bereich Sprechen wurden die Schüler/innen paarweise getestet. Das Gespräch wurde von einem so genannten Interlocutor geleitet, ein Assessor beurteilte die Schülerleistungen anhand einer vorgegebenen Bewertungsskala (Assessment Scale). Das Gespräch begann mit einem Interview, das als Aufwärmphase gedacht war und nicht in die Beurteilung einbezogen wurde. Dabei beantworteten die Schüler/innen einfache Fragen des Interlocutors über ihre Person. Das Interview dauerte insgesamt ca. zwei Minuten. Im ersten Testteil, dem monologischen Teil, erhielt jede Schülerin/jeder Schüler drei Themen zur Wahl und sprach nach einer Vorbereitungszeit von einer Minute, in der keine Notizen gemacht werden durften, ca. zwei bis drei Minuten lang über das gewählte Thema. So genannte Content Points gaben inhaltliche und strukturelle Hilfestellung. Der zweite, dialogische Teil der Überprüfung war zweiteilig. Hier wurde ein schriftlicher und/oder bildlicher Impuls gegeben. Die beiden Schüler/innen sprachen miteinander über ein vorgegebenes Thema. Im ersten Dialog sollten die Schüler/innen ein einfaches Alltagsgespräch führen (z. B. Vereinbarungen treffen). Der zweite Dialog war ein ausführlicheres Gespräch, das auch den Austausch von Meinungen verlangte. Die Vorbereitungszeit für den zweiten Teil betrug eine Minute, die gemeinsame Sprechzeit vier bis fünf Minuten.

Beispieleitems für die Kompetenzbereiche Schreiben und Sprechen finden Sie auf der BIFIE-Homepage unter www.bifie.at/node/1826 bzw. unter www.bifie.at/node/1821.

Zudem sind seit der Ergebnisveröffentlichung Beispiele für verwendete Testitems mit Lösungshäufigkeiten unter www.bifie.at/node/2486 verfügbar.

Wie wurden die Tests ausgewertet?

Bevor die Daten zur Berechnung der Ergebnisse für die einzelnen Rückmeldungen verwendet werden konnten, war eine umfangreiche Datenerfassung und -aufbereitung notwendig. Die in der Überprüfung gewonnenen Daten wurden auf zwei verschiedene Arten verarbeitet.

Bei Items mit geschlossenem Antwortformat (Multiple-Choice-, Richtig-falsch- und Zuordnungsitems) wurde automatisch erfasst, ob die richtige Antwort ausgewählt wurde.

Items mit halboffenem Antwortformat, bei denen die Schüler/innen eine kurze Antwort selbst formulieren (z. B. ein Wort oder eine Zahl), wurden von geschultem Personal kontrolliert.

Die Beurteilung der Schreib- bzw. Sprechkompetenz der Schüler/innen wird als Rating bezeichnet. Die Beurteilung schriftlicher Texte erfolgte durch sogenannte Raters nach einer vorgegebenen Bewertungsskala (Writing Rating Scale). Für die Beurteilung der mündlichen Leistungen der Schüler/innen wurden sogenannte

(10)

Assessors eingesetzt. Sie bewerteten die Sprechleistungen der Schüler/innen ebenfalls anhand einer vor- gegebenen Bewertungsskala (Assessment Scale). Multiple Ratings (mehrere Raters bzw. alle Assessors beurteilten dieselben Texte oder dieselbe Sprechleistung auf Video) dokumentieren die Reliabilität der Be- urteilung. Raters und Assessors waren erfahrene Lehrer/innen, welche in einer mehrphasigen Fortbildung für ihre Tätigkeiten geschult wurden.

Nach Abschluss der Bewertung der Schülerantworten und der elektronischen Datenerfassung der Ergebnisse wurden die erzielten Rohdaten statistisch in eine Punktskala überführt, um die Leistung aller Schüler/innen gemeinsam abbilden zu können. Dieser Prozess wird als Skalierung bezeichnet und macht die Schülerleis - t ungen in den einzelnen Kompetenzbereichen über alle Testformen hinweg miteinander vergleichbar. In den Bereichen Schreiben und Sprechen wurde darüber hinaus die Strenge/Milde der Person, die die Sprechleistung bzw. Texte bewertete, mitberücksichtigt.

Was bedeuten die verwendeten Skalen?

Die Ergebnisse werden auf drei verschiedenen Skalen rückgemeldet:

a) 500er-Skala (Englischwerte und Ergebnisse in den Kompetenzbereichen) b) Skalen für die Rückmeldung von Teilkompetenzen

Für die Teilkompetenzen von Schreiben und Sprechen: Skala von 0–7 Punkten

Für die Teilkompetenzen von Hören und Lesen: Prozentskala mit Prozentanteil von 0–100 Prozent richtig gelöster Items.

a) Die 500er-Skala:

Im Zuge einer Ausgangsmessung zur Überprüfung der Bildungsstandards (Baseline-Testung) im Jahr 2009 wurde für die Rückmeldung der Kompetenzen in einem Fach bzw. in den einzelnen Kompetenzbereichen eine einheitliche Skala festgelegt. Bei dieser Baseline-Testung wurden die Testergebnisse österreichweit so skaliert, dass sich ein Mittelwert (MW) von 500 Skalenpunkten mit einer Standardabweichung von 100 ergab. Um die Leistungen aller österreichischen Schüler/innen aus der Standardüberprüfung 2013 mit denen der Baseline- Testung vergleichen und somit eine Veränderung sichtbar machen zu können, wurden die Ergebnisse der Standardüberprüfung 2013 auf die Punktskala der Ausgangsmessung von 2009 übertragen.

Die durchschnittliche Leistung aller in der Standardüberprüfung 2013 getesteten Schüler/innen beträgt 519 Skalenpunkte. Das bedeutet, dass ein/e Schüler/in mit einem Testergebnis von 519 Punkten im Jahr 2013 genau dem österreichischen Durchschnitt entspricht. Zwei Drittel aller getesteten Schüler/innen erreichten bei der Standardüberprüfung 2013 ein Ergebnis zwischen 417 und 621 Punkten. Die Darstellung der Skala wurde auf den Wertebereich 200 bis 800 Punkte begrenzt.

b) Skalen für die Rückmeldung von Teilkompetenzen

Aus methodischen Gründen werden die Ergebnisse der Teilkompetenzen in Englisch nicht auf der 500er-Skala, sondern auf einer Skala von 0–7 Punkten bzw. einer Prozentskala rückgemeldet.

Die Rückmeldung der Teilkompetenzen der produktiven Kompetenzbereiche Schreiben und Sprechen erfolgt anhand der Writing Rating Scale für Schreiben (0–7 Punkte) bzw. der Assessment Scale für Sprechen (0–7 Punkte), die zur Beurteilung der Schreib- bzw. Sprechkompetenzen herangezogen wurden. Ein höherer Punktwert geht dabei mit einer höheren Kompetenz einher. Etwaige Strenge- oder Mildetendenzen der Raters werden bei der Ergebnisbewertung mitberücksichtigt. Eine Kompetenzbeschreibung der Punktwerte finden Sie unter www.bifie.at/node/1826 für Schreiben bzw. unter www.bifie.at/node/1821 für Sprechen.

Für die Teilkompetenzen der rezeptiven Kompetenzbereiche Hören und Lesen wird der Prozentanteil der richtig gelösten Items unter Berücksichtigung der Itemschwierigkeit in jeder Teilkompetenz dargestellt.

(11)

Wie wurden die Referenzniveaus (Kompetenzstufen) festgelegt?

Die Überprüfung der Kompetenzen in Englisch basiert auf dem Gemeinsamen Europäischen Referenzrahmen für Sprachen (GERS), der eine gemeinsame Basis für die Entwicklung von zielsprachlichen Lehrplänen, curricu- laren Richtlinien, Prüfungen, Lehrwerken usw. in ganz Europa darstellt.

Der GERS beschreibt umfassend, was zu lernen ist, um eine Sprache für kommunikative Zwecke benutzen zu können, und welche Kenntnisse und Fertigkeiten dementsprechend entwickelt werden müssen. Er bietet Sprachkompetenzbeschreibungen für sechs verschiedene Niveaus an (A1, A2, B1, B2, C1, C2). Dabei wird definiert, was auf den einzelnen Niveaus von Sprachlernenden erwartet werden kann. Die drei großen Niveaus A, B und C entsprechen einer elementaren, einer selbstständigen und einer kompetenten Sprachverwendung (vgl. Tabelle 1).

Kompetente Sprachverwendung

(hohes Sprachniveau bis hin zu fast muttersprachlicher Kompetenz) C C2 C1 Selbstständige Sprachverwendung

(mittleres allgemeines und berufsbezogenes Niveau) B B2

B1 Elementare Sprachverwendung

(grundlegendes oder fortgeschrittenes Anfängerniveau) A A2

A1 Tabelle 1: GERS-Niveaus

In Österreich ist der GERS sowohl Grundlage des Lehrplans für die lebenden Fremdsprachen als auch der Verordnung der Bildungsstandards. Nach dem 4. Lernjahr (für Englisch in der Regel auf der 8. Schulstufe) ist im Lehrplan für die lebenden Fremdsprachen als Grundanforderung definiert, dass Schüler/innen in allen Kompe- tenzbereichen das Niveau A2 erreichen sollen, unter förderlichen Begleitumständen jedoch auch die Erreichung von ausgewiesenen Fertigkeiten auf B1 möglich ist. Die Bildungsstandards wiederum beschreiben fachliche Grundkompetenzen auf den Niveaus A2 und B1, die die Schüler/innen in der Regel erreichen sollten (vgl. Abbil- dung 2). Um den Grad der Kompetenzerreichung darzustellen, werden im Fach Englisch, basierend auf dem GERS, folgende Referenzniveaus rückgemeldet:

B1 oder darüber

A2

A1 oder darunter

Folgende Grafik verdeutlicht die Zusammenhänge:

Abbildung 2: GERS-Levels und Bildungsstandards selbstständige Sprachverwendung

B

B2 B1

elementare Sprachverwendung

A

A1 A2

Bildungs- standards

(12)

Die in der Verordnung zu den Bildungsstandards angeführten Deskriptoren (Beschreibungen) stellen die Fähig- keiten und Fertigkeiten dar, die im jeweiligen Kompetenzbereich in der Regel erreicht werden sollten. Wie aus Tabelle 2 ersichtlich, sind die Deskriptoren der Bildungsstandards für die erste lebende Fremdsprache Englisch überwiegend den Niveaus A2 und B1 zuzuordnen. Bei der Betrachtung der verschiedenen Kompetenzbereiche fällt auf, dass in den einzelnen Kompetenzbereichen die Anzahl und Anteile der Deskriptoren auf unterschied- lichem Niveau variieren.

Kompetenzbereiche A1 A2 B1 Anzahl der

BIST-Deskriptoren

Anzahl % Anzahl % Anzahl %

Hören 1 16,7 1 16,7 4 66,7 6

Lesen 0 0 3 50,0 3 50,0 6

Schreiben 0 0 4 50,0 4 50,0 8

Sprechen 0 0 9 60,0 6 40,0 15

Tabelle 2: Anzahl der Deskriptoren

Für die GERS-Referenzniveaus wurden in einem ersten Schritt inhaltliche Beschreibungen für die Niveaus A2 und B1 oder darüber entwickelt. Um die Schüler/innen auf Basis ihrer erbrachten Testleistung den GERS-Refe- renzniveaus zuordnen zu können, wurde in weiterer Folge eine repräsentative Auswahl an verwendeten Test- items (bei Hören und Lesen) und Schülerperformanzen (produzierte Texte bei Schreiben bzw. Videos bei Spre- chen) durch Expertinnen und Experten aus Schulpraxis (Sekundarstufe I und II), Fachdidaktik, Pädagogik und Psychologie den verschiedenen Referenzniveaus zugeordnet. Die Schwierigkeiten der Items und Schülerper- formanzen wurden dabei auf derselben Punktskala gemessen wie die Leistungen. Daher ließen sich Schwellen- werte auf der Punktskala bestimmen, die die Referenzniveaus voneinander abgrenzen.

Inwiefern ist ein Vergleich der Baseline-Testung mit der Standardüberprüfung möglich?

Für die Baseline-Testung auf der 8. Schulstufe wurde 2009 eine repräsentative Stichprobe von insgesamt 204 Schulen gezogen. An jedem dieser Schulstandorte wurden bis zu drei Klassen getestet. Durch die Verlinkung der Skala aus der Baseline-Testung mit jener der Standardüberprüfung haben Schulleiter/innen dieser Schulen die Möglichkeit, die Ergebnisrückmeldungen beider Erhebungen auf Schulebene miteinander zu vergleichen, um so etwaige Leistungsveränderungen festzustellen. Bei einer Gegenüberstellung dieser Rückmeldungen sollte allerdings berücksichtigt werden, dass neben tatsächlichen Kompetenzunterschieden folgende Faktoren ebenso eine Rolle gespielt haben könnten:

Beim österreichweiten Vergleich mit allen getesteten Schülerinnen und Schülern sollte in Betracht gezogen werden, dass sich eine veränderte durchschnittliche Leistung evtl. aufgrund einer anderen Schülerzusam- mensetzung ergeben konnte (z. B. anderer Anteil an Schülerinnen und Schülern mit Migrationshintergrund).

Zudem wurden die bei der Standardüberprüfung getesteten Schüler/innen ggf. von anderen Lehrpersonen unterrichtet als die Schüler/innen der Baseline-Testung.

Ebenso wurde für die Standardüberprüfung 2013 das Test-Design in den einzelnen Kompetenzbereichen weiterentwickelt, um die Kompetenzen der Schüler/innen noch zuverlässiger erfassen zu können.

Werden die Ergebnisse im fairen Vergleich einander gegenübergestellt, muss beachtet werden, dass die Merkmale, die zur Berechnung des fairen Vergleichs herangezogen wurden, gegenüber der Baseline-Testung geringfügig verändert wurden.

Aufgrund der angeführten Einschränkungen wurde auf eine vergleichende statistische Auswertung und grafi- sche Darstellung beider Erhebungen verzichtet. Eine Gegenüberstellung der Berichte unter Berücksichtigung der o. a. Hinweise kann trotzdem die Reflexion unterstützen, indem vor allem folgende Aspekte betrachtet werden:

(13)

Absolute Veränderung in Punkten in Relation zur Veränderung aller österreichischen Schüler/innen (Öster- reichschnitt).

Vergleich der Verteilung der Schüler/innen auf die verschiedenen GERS-Referenzniveaus.

Wer erhält in welcher Form Rückmeldung über die Testergebnisse?

a) Rückmeldung an die Schulleitung

Die Rückmeldung an Schulleiterinnen und Schulleiter erfolgt online und besteht aus dem Schulbericht „Rück- meldung an die Schulleitung und Schulpartner“ sowie aus dem Schulbericht „Ergänzung für die Schulleitung, Ergebnisse der Unterrichtsgruppen“. Beide Schulberichte können als jeweils eigenständiges PDF-Dokument abgespeichert und ausgedruckt werden.

Schulbericht „Rückmeldung an die Schulleitung und Schulpartner“

Dieser Schulbericht ist von der Schulleitung innerhalb einer angemessenen Frist den Mitgliedern des Schulgemeinschaftsausschusses bzw. Schulforums zu übergeben und in den Gremien zu besprechen.

Die Ergebnisse der Schule untergliedern sich in

Informationen über die getesteten Schüler/innen an der Schule,

Testergebnisse in Englisch und

Testergebnisse aus den einzelnen Kompetenzbereichen.

Die Ergebnisse in Englisch (Hören, Lesen, Schreiben) erhalten Schulleiter/innen in Form von Punktwerten.

Zusätzlich werden Informationen über die Streuung der Leistung in der Schule sowie Vergleiche getrennt nach Geschlecht, Migrationshintergrund und Erstsprache Deutsch rückgemeldet. Die Darstellung der Test- ergebnisse in den einzelnen Kompetenzbereichen erfolgt in Form von erreichten GERS-Referenzniveaus (kriteriale Rückmeldung), Punktwerten und Streuungsinformationen. Die Gesamtleistung der Schule wird sowohl dem Österreich-Schnitt als auch einem Erwartungsbereich für die Schule gegenübergestellt, der unter anderem die besonderen demografischen und sozioökonomischen Merkmale der Schülerpopulation berücksichtigt (fairer Vergleich). Wurde an der Schule auch der Kompetenzbereich Sprechen getestet, werden die Ergebnisse in einem eigenen PDF-Dokument zur Verfügung gestellt.

Schulbericht „Ergänzung für die Schulleitung, Ergebnisse der Unterrichtsgruppen“

Die Ergebnisse der einzelnen Unterrichtsgruppen enthalten

Testergebnisse in Englisch,

Testergebnisse aus den einzelnen Kompetenzbereichen und

Testergebnisse aus den einzelnen Teilkompetenzen.

Die Ergebnisse der einzelnen Unterrichtsgruppen werden in Form von Punktwerten rückgemeldet. Die Dar- stellung der Testergebnisse in den einzelnen Kompetenzbereichen erfolgt analog zu den Schulergebnissen in Form von GERS-Referenzniveaus (kriteriale Rückmeldung) und Punktwerten. Zusätzlich werden die Ergeb- nisse aus den einzelnen Teilkompetenzen rückgemeldet. Die Leistungen der Unterrichtsgruppen werden sowohl dem Österreich-Schnitt und dem Schulmittelwert als auch einem Erwartungsbereich für die Unter- richtsgruppe (fairer Vergleich) gegenübergestellt.

Die Ergebnisse der Unterrichtsgruppen können als eigenständiges PDF-Dokument abgespeichert und ausgedruckt werden.

b) Rückmeldung an die Lehrer/innen

Die Rückmeldung an die Lehrer/innen erfolgt online. Sie erhalten die Ergebnisse im Wesentlichen analog zum Schulbericht „Rückmeldung an die Schulleitung und Schulpartner“, jedoch ausschließlich für ihre Unter- richtsgruppe. Zusätzlich erhalten die Lehrer/innen Streuungsinformationen in den einzelnen produktiven

(14)

Teilkompetenzen. Die Rückmeldung über die Unterrichtsgruppe enthält im Vergleich zum Schulbericht zu- sätzliche Streuungsinformationen, im Falle leistungsgruppengemischter Gruppen auch über die einzelnen Leistungsgruppen. Als Referenzwerte dienen sowohl der Österreich-Schnitt, der Schulmittelwert als auch der Erwartungsbereich für die Unterrichtsgruppe (fairer Vergleich).

Wurde an der Schule auch der Kompetenzbereich Sprechen getestet, erhalten auch die Lehrer/innen die Ergebnisse der Schülerstichprobe Sprechen für die gesamte Schule (jedoch nicht für ihre Unterrichtsgruppe) als eigenes PDF-Dokument.

c) Rückmeldung an die Schüler/innen

Ebenfalls online erfolgt die Rückmeldung an die Schüler/innen. Für den Zugang zu den individuellen Ergeb- nissen in Englisch sowie den Kompetenzbereichen haben die Schüler/innen am Testtag einen Zugangscode erhalten, den nur die Schüler/innen selbst kennen und mit dem sie ihre persönlichen Ergebnisse im Internet abrufen können. Die Ergebnisse werden den Schülerinnen und Schülern in Form des Punktwerts und des erreichten Referenzniveaus (kriteriale Rückmeldung) mitgeteilt. Referenzwerte für die Schüler/innen sind der Österreich-Schnitt sowie der Prozentrang des Schülers/der Schülerin in Österreich.

d) Rückmeldung an die Schulaufsicht

Die Landes- und Bezirksschulinspektorinnen und -inspektoren erhalten auf der Rückmelde-Plattform einen Schulaufsichtsbericht mit einer tabellarischen Übersicht ausgewählter Ergebnisse der Schulen des Zustän- digkeitsbereichs sowie zur Information jeweils den Landesergebnisbericht des Bundeslands. Darüber hinaus können alle Schulberichte „Rückmeldung an die Schulleitung und Schulpartner“ (siehe Punkt a) der getesteten Schulen des Zuständigkeitsbereichs als PDF-Dokument abgerufen werden.

e) Landesergebnisberichte/Bundesergebnisbericht

Die für das regionale Schulwesen verantwortlichen Amtsführenden Präsidentinnen und Präsidenten der Landesschulräte/des Stadtschulrats in den neun Bundesländern erhalten jeweils einen zusammenfassenden Ergebnisbericht der Schülerpopulation des jeweiligen Bundeslands. Darin werden die Ergebnisse verschiedener Schülergruppen zusammengefasst und Zusammenhänge zwischen Leistung und Rahmenbedingun- gen im Bundesland aufgezeigt. Der Bundesergebnisbericht enthält die bundesbezogenen, statistisch zusammengefassten Ergebnisse der Schüler/innen. Er wird vom BIFIE erstellt und dem zuständigen Bundes- ministerium übermittelt. Sowohl die Landesergebnisberichte als auch der Bundesergebnisbericht werden veröffentlicht.

Musterrückmeldungen für alle Ebenen mit fiktiven Daten bzw. Ergebnissen finden Sie unter www.bifie.at/node/64.

(15)

Aufbau des Schulberichts

In der vorliegenden Rückmeldung werden zunächst die Ergebnisse der einzelnen Kompetenzbereiche getrennt beschrieben und anschließend das Ergebnis in Englisch (Hören, Lesen und Schreiben). Wurde an Ihrer Schule der Kompetenzbereich Sprechen getestet, werden die Ergebnisse für die gesamte Stichprobe der Schule in einem separaten PDF-Dokument rückgemeldet. Zur schnelleren Übersicht finden Sie nachstehend eine grafi- sche Darstellung des vollständigen Aufbaus der Ergebnisrückmeldung an die Schulleitung:

Wohlbefinden motivationale Merkmale Anzahl der Schüler/innen

demografische/sozio- ökonomische Merkmale Informationen über

die Schüler/innen

Hören Lesen Schreiben

Schulbericht

Rückmeldung an die Schulleitung und Schulpartner

Ergänzung für die Schulleitung, Ergebnisse der Unterrichtsgruppen

Geschlecht Migrationshintergrund Englisch (H, L, S)

österr. & fairer Vergleich Streuung Subgruppen

Englisch (H, L, S)

Hören Lesen Schreiben von Hören von Lesen von Schreiben Teilkompetenzen

österr. Vergleich fairer Vergleich

österr. Vergleich fairer Vergleich GERS-Niveaus

Kompetenzbereiche Kompetenzbereiche

GERS-Niveaus

fairer Vergleich österr. Vergleich

(m. Streuung)

österr. Vergleich (m. Streuung) Teilkompetenzen

GERS-Niveaus Repräsentativität

Sprechen

Streuung

Erstsprache

zusätzliches PDF-Dokument, wenn Sprechen an der Schule getestet wurde

Abbildung 3: Aufbau des Schulberichts

(16)

Diese Rückmeldung enthält Informationen in Form von anonymisierten Einzelergebnissen sowie Gruppen- und Schulwerten, deren Darstellung von der Anzahl und Zusammensetzung der getesteten Schüler/innen einer Schule abhängt. Änderungen in der Darstellung werden fallweise vorgenommen, um jederzeit folgende Faktoren zu gewährleisten:

Anonymität aller Schüler/innen: Grafiken mit Einzelwerten entfallen, wenn einzelne Schüler/innen eindeutig identifizierbar wären.

Aussagekraft statistischer Berechnungen: Mittelwerte, Erwartungsbereiche usw. entfallen bei Unterschrei- tung einer Mindestschüleranzahl. Bei weniger als zwei Schülerinnen und Schülern entfallen alle Kennwerte und die Grafiken werden nicht dargestellt. Der faire Vergleich und Grafiken zu Geschlecht und Migrations- hintergrund entfallen bei weniger als fünf Schülerinnen und Schülern. Die Mindestschüleranzahl für die Kenn- zeichnung der mittleren 75 % beträgt acht.

Übersichtlichkeit der Darstellung: Veränderte Anordnung der Grafikelemente bei sehr wenigen oder sehr vielen Schülerinnen und Schülern.

Um Ihnen den Einstieg in die Arbeit mit dieser Form der Rückmeldung zu erleichtern, wurden für jede Abbildung beispielhaft Fragen formuliert. Sie dienen als Anregung für die erste Interpretation und Reflexion und sind in Leitfragen und weiterführende Fragen gegliedert:

Leitfragen dienen zum Lokalisieren der Ergebnisse und Vergleichen mit Referenzwerten. Die Antworten auf diese Fragen können aus den einzelnen Abbildungen abgelesen werden.

Weiterführende Fragen sollen dazu anregen, auf Besonderheiten der Ergebnisse zu achten und einen Abgleich mit den eigenen Erwartungen anzustellen. Zusätzlich sollte über mögliche Erklärungsansätze für die erhaltenen Ergebnisse reflektiert werden. Zur Beantwortung dieser Fragen in Form einer zuverlässigen Ergebnisinterpretation ist schulinternes Wissen über Wirkfaktoren notwendig (vgl. auch Kapitel 4).

Schülerkompetenzen entstehen in einem komplexen Zusammenspiel aus individuellen Voraussetzungen, der Lernumgebung und weiteren inner- und außerschulischen Faktoren. Diese Komplexität spiegelt sich auch in den Schülerleistungen wider, die in der Standardüberprüfung gezeigt wurden.

(17)

3. Ihre Schulergebnisse

Im nachstehenden Kapitel finden Sie jenen Teil der Ergebnisrückmeldung, der die Ergebnisse auf Schulebene enthält. Dieser Teil untergliedert sich in (3.1) deskriptive Informationen über die Schüler/innen an Ihrer Schule, (3.2) Hör-, Lese- und Schreibkompetenz und (3.3) Englischkompetenz an Ihrer Schule. Sollte ein Teil Ihrer Schüler/ innen an der Testung in Sprechen teilgenommen haben, erhalten Sie die Ergebnisse hierzu in einem gesonderten Dokument.

Beim Lesen der Tabellen und Abbildungen sind folgende Aspekte zu beachten:

Gerundete Werte: Alle in Tabellen/Abbildungen enthaltenen Werte wurden unter Berücksichtigung entsprechender Nachkommastellen berechnet und dann auf ganze Zahlen gerundet. Daher kann es vorkommen, dass die Summe der gerundeten Prozentangaben nicht exakt 100 ergibt oder Summen von Werten inkon- sistent erscheinen.

Vorzeitiger Testabbruch: Auch für Schüler/innen, die die Testung vorzeitig abgebrochen haben, wird der Englischwert berechnet. Die Rückmeldung eines Kompetenzbereichs erfolgt nur dann, wenn ein Testheft des jeweiligen Kompetenzbereichs bearbeitet wurde.

Keine Schülerangaben: Unter „keine Angabe“ werden auch jene Schüler/innen angeführt, die die Testung vorzeitig abgebrochen haben und deshalb am Ende der schriftlichen Überprüfung keinen Fragebogen bearbeiteten.

3.1 Information über die Schüler/innen an Ihrer Schule

* n steht für die Anzahl der Schüler/innen Ihrer Schule.

** aufgrund von z. B. Körper- oder Sinnesbehinderung, Status als außerordentliche Schülerin/außerordentlicher Schüler, ASO-Lehrplan Englisch.

*** keine Auswertung vorliegend (z. B. aufgrund von Abwesenheit, vorzeitigem Testabbruch); Anzahl kann je nach Bereich unterschiedlich sein.

(18)

Die Angaben in den nachfolgenden Tabellen beziehen sich ausschließlich auf jene Schüler/innen, die an allen Testteilen (Hören, Lesen, Schreiben) teilgenommen haben. Daten aus dem Kontextfragebogen, die nicht oder nicht eindeutig beantwortet wurden, sind in der Spalte „keine Angabe“ zusammengefasst. Die Prozentangaben in der Zeile „Ihre Schule“ beziehen sich immer nur auf die gültigen Angaben.

* Mit Ausnahme des Geschlechts (wird von der Schulleitung vorab übermittelt) stammen die Angaben aus dem Schülerfragebogen.

** Für die Standardüberprüfung gilt eine Jugendliche/ein Jugendlicher dann als Schüler/in mit Migrationshintergrund, wenn beide Eltern- teile im Ausland (Ausnahme: Deutschland) geboren wurden. Für nähere Erläuterungen lesen Sie bitte die genaue Definition im Glossar.

*** Simultan bilingual aufgewachsene Schüler/innen mit Deutsch als einer der Erstsprachen werden zur Gruppe der Schüler/innen mit Erst- sprache Deutsch gezählt.

* Folgende Merkmale aus dem Schülerfragebogen fließen in die Berechnung des Sozialstatus-Index ein: Beruf der Eltern, höchste abge- schlossene Ausbildung der Eltern und Anzahl der Bücher im Haushalt. Die Bevölkerung wurde nach der Verteilung aller getesteten Schü- ler/innen in Österreich in drei Gruppen geteilt: untere 25 %, mittlere 50 % und obere 25 %.

(19)

* Das Selbstkonzept in und die Freude an Englisch wurden im Schülerfragebogen (Frage 37) mit jeweils vier konkreten Aussagen über das Lernen in Englisch erhoben.

** Die zugehörige Frage im Fragebogen lautete: „Wie sehr hast du dich im Vergleich zu einer Schularbeit bei diesem Test bemüht?“

* Die zugehörige Frage im Fragebogen lautete: „Wie gern gehst du in die Schule?“

** Die zugehörige Frage im Fragebogen lautete: „Wie zufrieden bist du mit deiner Klasse (deinen Mitschülerinnen und Mitschülern) insgesamt?“

(20)

3.2 Hör-, Lese- und Schreibkompetenz an Ihrer Schule

Verteilung der Schüler/innen an Ihrer Schule auf die GERS-Referenzniveaus

Die nachstehenden Grafiken stellen jeweils die Verteilung der Schüler/innen Ihrer Schule auf die verschiedenen GERS-Referenzniveaus in den Kompetenzbereichen Hören, Lesen und Schreiben dar (kriteriale Rückmeldung).

Sie geben an, wie viele Schüler/innen Ihrer Schule jeweils das GERS-Referenzniveau A1 oder darunter, A2 bzw.

B1 oder darüber aufweisen. Als Vergleich dient die Verteilung aller in der Standardüberprüfung getesteten Schü- ler/innen in Österreich auf die einzelnen Referenzniveaus.

Eine inhaltliche Beschreibung der Referenzniveaus A2 und B1 oder darüber in den einzelnen Kompetenz- bereichen finden Sie jeweils nach der Grafik. Auf eine inhaltliche Beschreibung des Referenzniveaus A1 wurde verzichtet, da man im Rahmen der Standardüberprüfung keine Aussagen darüber tätigen kann, inwieweit Schüler/innen das Referenzniveau A1 tatsächlich erreichen. In der Regel können Schüler/innen auf diesem Ni- veau in den Kompetenzbereichen Lesen und Hören vertraute, alltägliche Ausdrücke und ganz einfache Sätze verstehen, die auf die Befriedigung konkreter Bedürfnisse abzielen. Es geht dabei v. a. um persönliche Themen (Bekanntmachung, Wohnort, Bekanntschaften, Besitz). In den Kompetenzbereichen Schreiben und Sprechen können Schüler/innen in der Regel sehr kurze und sehr einfach strukturierte Sätze oder Aussagen produzieren.

Dabei werden sehr einfache grammatikalische Strukturen und ein extrem eingeschränktes Vokabular verwendet.

Die linke Säule (Ihre Schule) zeigt die Verteilung der Schüler/innen Ihrer Schule auf die einzelnen Referenz- niveaus in Prozentwerten. Die unterschiedlichen Farbabstufungen beziehen sich auf die einzelnen Referenz- niveaus, die links der Grafik angeführt sind.

Die rechte Säule (mit der rot-weiß-roten Flagge) zeigt die Verteilung aller getesteten Schüler/innen in Öster- reich auf die unterschiedlichen Referenzniveaus.

Die Anzahl der getesteten Schüler/innen (n) Ihrer Schule sowie die Verteilung der Schüler/innen auf die einzelnen Referenzniveaus in absoluten Zahlen können Sie unterhalb der Grafik in der Tabelle ablesen.

Leitfrage:

Wie verteilen sich Ihre Schüler/innen in den einzelnen Kompetenzbereichen auf die einzelnen Refe- renzniveaus im Vergleich zu allen getesteten Schülerinnen und Schülern in Österreich?

Weiterführende Fragen:

Welche Ergebnisse hatten Sie erwartet?

Welche Besonderheiten gibt es in den Ergebnissen?

Welche Erklärungsansätze für diese Ergebnisse könnte es geben?

(21)

(22)

(23)

(24)

Streuung an Ihrer Schule in den Kompetenzbereichen

Die Grafik zeigt das durchschnittliche Ergebnis der Schüler/innen Ihrer Schule in den Kompetenzbereichen Hö- ren, Lesen, und Schreiben, die Werte der einzelnen Schüler/innen in den Kompetenzbereichen und die Vertei- lung dieser Schüler/innen auf die einzelnen Referenzniveaus. Als Referenzwert dient jeweils der Mittelwert aller in der Standardüberprüfung getesteten Schüler/innen in Österreich. Dies ermöglicht eine Lagebestimmung im österreichweiten Vergleich. Zudem können die Streuungen Ihrer Schule in den verschiedenen Kompetenzberei- chen miteinander verglichen werden.

(25)

Dieses Symbol zeigt jeweils das durchschnittliche Ergebnis Ihrer Schule. Die jeweilige Raute ist von einer vertikalen Linie mit einer horizontalen Unter- und Oberbegrenzung durchlaufen, die das Vertrauensintervall markiert, also jenen Wertebereich, in dem die wahre Leistung mit 90 % Sicherheit liegt. Der entsprechende Punktwert des Vertrauensintervalls ist in der Legende in Klammer neben dem jeweiligen Mittelwert der Schu- le angeführt.

Die schwarze Linie (mit der rot-weiß-roten Flagge) zeigt jeweils den Durchschnitt aller getesteten Schüler/

innen in Österreich.

Die grauen Punkte repräsentieren jeweils die Ergebnisse der einzelnen Schüler/innen Ihrer Schule. Anhand der Streuung dieser Werte können Sie sowohl ablesen, wie unterschiedlich die Schüler/innen Ihrer Schule bei der Überprüfung in den einzelnen Kompetenzbereichen abgeschnitten haben, als auch die Leistungen der besten und schwächsten Schüler/innen entnehmen.

Die farblich unterlegten Felder beziehen sich jeweils auf die einzelnen Referenzniveaus, die links der Farb- felder angeführt sind.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Ebenso können Sie die Anzahl der getesteten Schüler/innen (n) Ihrer Schule ablesen.

Leitfragen:

Wie liegt Ihr Schulergebnis in Hören, Lesen und Schreiben unter Berücksichtigung des jeweiligen Vertrauensintervalls im Vergleich zum Durchschnitt aller getesteten Schüler/innen in Österreich?

Beim Vergleich der einzelnen Kompetenzbereiche müssen auch die österreichweiten Ergebnisse be- rücksichtigt werden. Stärken bzw. Schwächen treten stärker auf, je deutlicher sich die Ergebnisse in einem Kompetenzbereich vom jeweiligen österreichweiten Ergebnis unterscheiden.

Wie unterscheiden sich in Ihrem Fall die Ergebnisse in den einzelnen Kompetenzbereichen voneinander, auch unter Berücksichtigung des Abstands zum jeweiligen österreichweiten Ergebnis?

Wie groß ist die Streuung der Leistung (Verteilung der Punkte) an Ihrer Schule in den einzelnen Kom- petenzbereichen?

Wie verteilen sich die Schüler/innen Ihrer Schule in den Kompetenzbereichen innerhalb der einzelnen Referenzniveaus?

(26)

Kompetenzbereiche an Ihrer Schule im fairen Vergleich

Die Grafik zeigt das durchschnittliche Ergebnis der Schüler/innen Ihrer Schule in den Kompetenzbereichen Hö- ren, Lesen, und Schreiben. Als Referenz wird für Ihre Schule für jeden Kompetenzbereich ein entsprechender Erwartungsbereich ausgewiesen. Der Erwartungsbereich ist jener Bereich um einen berechneten Wert, den Schulen mit ähnlichen strukturellen Rahmenbedingungen (Standort und Zusammensetzung der Schülerpopula- tion) durchschnittlich erreichen. Liegt der Wert der einzelnen Kompetenzbereiche Ihrer Schule ober- oder unterhalb des jeweiligen Erwartungsbereichs, sind die Ergebnisse Ihrer Schule besser bzw. schwächer, als aufgrund der Standortbedingungen der Schule sowie der demografischen und sozioökonomischen Merkmale der Schü- ler/innen (statistisch) zu erwarten gewesen wäre. Zudem wird der Mittelwert aller in der Standardüberprüfung getesteten Schüler/innen in Österreich angegeben. Dies ermöglicht eine Lagebestimmung im österreichweiten Vergleich.

(27)

Dieses Symbol zeigt jeweils das durchschnittliche Ergebnis Ihrer Schule. Die jeweilige Raute ist von einer vertikalen Linie mit einer horizontalen Unter- und Oberbegrenzung durchlaufen, die das Vertrauensintervall markiert, also jenen Wertebereich, in dem die wahre Leistung mit 90 % Sicherheit liegt. Der entsprechende Punktwert des Vertrauensintervalls ist in der Legende in Klammer neben dem jeweiligen Mittelwert der Schu- le angeführt.

Der graue Balken repräsentiert den jeweiligen Erwartungsbereich für Ihre Schule. Er zeigt jeweils den Be- reich um einen berechneten Wert an, der aufgrund der gegebenen strukturellen Rahmenbedingungen (statistisch) zu erwarten wäre, d. h. jenen Wert, den Schulen mit ähnlichen strukturellen Rahmenbedingungen durchschnittlich erreichen.

Die schwarze Linie (mit der rot-weiß-roten Flagge) zeigt den Durchschnitt aller getesteten Schüler/innen in Österreich.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Ebenso können Sie die Anzahl der getesteten Schüler/innen (n) Ihrer Schule ablesen. Zudem ist in der Legende angeführt, ob der jeweils durchschnittlich erreichte Punktwert der Schule über [ ], unter [ ] oder im [ ] Erwartungsbereich liegt. Die Berech- nung dieser Information erfolgt auf Basis exakter Daten mit Nachkommastellen, weshalb unter Umständen Abweichungen zu den angeführten gerundeten Werten in der Grafi k und der Legende auftreten können.

Leitfrage:

Wie liegt das Ergebnis Ihrer Schule in den einzelnen Kompetenzbereichen ohne Berücksichtigung des Vertrauensintervalls im Vergleich zum jeweiligen Erwartungsbereich?

(28)

3.3 Englischkompetenz an Ihrer Schule Ergebnis Ihrer Schule im fairen Vergleich

Die Grafik zeigt das durchschnittliche Ergebnis der Schüler/innen Ihrer Schule bei der Standardüberprüfung in Englisch. Für den Englischwert werden die Kompetenzbereiche Hören, Lesen und Schreiben gleichwertig be- rücksichtigt. Als Referenzwert dient zunächst der Mittelwert aller in der Standardüberprüfung getesteten Schü- ler/innen in Österreich. Dies ermöglicht eine Lagebestimmung im österreichweiten Vergleich. Als weitere Refe- renz wird für Ihre Schule ein entsprechender Erwartungsbereich ausgewiesen. Der Erwartungsbereich ist jener Bereich um einen berechneten Wert, den Schulen mit ähnlichen strukturellen Rahmenbedingungen (Standort und Zusammensetzung der Schülerpopulation) durchschnittlich erreichen. Liegt der Wert Ihrer Schule ober- oder unterhalb des Erwartungsbereichs, sind die Ergebnisse Ihrer Schule besser bzw. schwächer, als aufgrund der Standortbedingungen der Schule sowie der demografischen und sozioökonomischen Merkmale der Schü- ler/innen (statistisch) zu erwarten gewesen wäre.

(29)

Dieses Symbol zeigt das durchschnittliche Ergebnis Ihrer Schule. Die Raute ist von einer vertikalen Linie mit einer horizontalen Unter- und Oberbegrenzung durchlaufen, die das Vertrauensintervall markiert, also jenen Wertebereich, in dem die wahre Leistung mit 90 % Sicherheit liegt. Der entsprechende Punktwert des Vertrauensintervalls ist in der Legende in Klammer neben dem Mittelwert der Schule angeführt.

Der graue Balken repräsentiert den Erwartungsbereich für Ihre Schule. Er zeigt den Bereich um einen berechneten Wert an, der aufgrund der gegebenen strukturellen Rahmenbedingungen (statistisch) zu erwarten wäre, d. h. jenen Wert, den Schulen mit ähnlichen strukturellen Rahmenbedingungen durchschnittlich erreichen.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Ebenso können Sie die Anzahl der getesteten Schüler/innen (n) Ihrer Schule ablesen. Zudem ist in der Legende angeführt, ob der durchschnittlich erreichte Punktwert der Schule über [ ], unter [ ] oder im [ ] Erwartungsbereich liegt. Die Berechnung dieser Information erfolgt auf Basis exakter Daten mit Nachkommastellen, weshalb unter Umständen Abwei- chungen zu den angeführten gerundeten Werten in der Grafi k und der Legende auftreten können.

Leitfragen:

Wie liegt das Ergebnis Ihrer Schule unter Berücksichtigung des Vertrauensintervalls im Vergleich zum Durchschnitt aller getesteten Schüler/innen in Österreich?

Wie liegt das Ergebnis Ihrer Schule ohne Berücksichtigung des Vertrauensintervalls im Vergleich zum Erwartungsbereich?

Welches Ergebnis hatten Sie erwartet?

Welche Besonderheiten gibt es im Ergebnis?

Welche Erklärungsansätze für dieses Ergebnis könnte es geben?

(30)

Streuung an Ihrer Schule

Die Grafik zeigt das durchschnittliche Ergebnis Ihrer Schule, die Werte der einzelnen Schüler/innen in Englisch und den Leistungsabstand der mittleren 75 % an Ihrer Schule. Für den Englischwert werden die Kompetenzbe- reiche Hören, Lesen und Schreiben gleichwertig berücksichtigt. Als Referenzwert dient neben dem Mittelwert aller in der Standardüberprüfung getesteten Schüler/innen in Österreich der mittlere Leistungsabstand der mitt- leren 75 % innerhalb aller österreichischen Schulen. Dieser erlaubt eine Interpretation der Leistungsstreuung an Ihrer Schule.

(31)

Die grauen Punkte repräsentieren die Ergebnisse der einzelnen Schüler/innen Ihrer Schule. Anhand der Streuung dieser Werte können Sie sowohl ablesen, wie unterschiedlich die Schüler/innen Ihrer Schule bei der Überprüfung abgeschnitten haben, als auch die Leistungen der besten und schwächsten Schüler/innen entnehmen.

Der hellblaue Bereich markiert den Leistungsabstand der mittleren 75 %. In der Legende fi nden sie den Abstand als Punktwert. Außerdem wird in der Legende zusätzlich der mittlere Leistungsabstand der mittleren 75 % innerhalb aller österreichischen Schulen angegeben. Beachten Sie bei einem Vergleich dieser beiden Werte: Bei weniger als 20 Schülerinnen und Schülern an Ihrer Schule sind Unterschiede von unter 35 Punk- ten zu vernachlässigen. Ab 20 Schülerinnen und Schülern an Ihrer Schule sind Unterschiede von weniger als 20 Punkten vernachlässigbar.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Außerdem können Sie die An- zahl der getesteten Schüler/innen (n) Ihrer Schule ablesen.

Leitfragen:

In welchem Bereich streuen die Leistungen (Verteilung der grauen Punkte) an Ihrer Schule?

Wie homogen bzw. heterogen sind die Leistungen der Schüler/innen, d. h. wie groß bzw. klein ist der Leistungsabstand der mittleren 75 % Ihrer Schule im Vergleich zum mittleren Leistungsabstand der mittleren 75 % innerhalb aller österreichischen Schulen? Unterschiede von weniger als 35 bzw. weni- ger als 20 Punkten (je nach Schulgröße) sind dabei zu vernachlässigen.

Welches Ergebnis hatten Sie erwartet?

Welche Besonderheiten gibt es im Ergebnis?

Welche Erklärungsansätze für dieses Ergebnis könnte es geben?

(32)

Ergebnis Ihrer Schule nach Geschlecht

Die Grafik zeigt die einzelnen Werte sowie das durchschnittliche Ergebnis der Schüler/innen Ihrer Schule bei der Standardüberprüfung in Englisch getrennt nach Geschlecht. Für den Englischwert werden die Kompetenzberei- che Hören, Lesen und Schreiben gleichwertig berücksichtigt. Als Referenzwert dient die mittlere Differenz zwi- schen Mädchen und Burschen an österreichischen Schulen. Die Mädchen und Burschen an Ihrer Schule unterscheiden sich dann in ihrer durchschnittlichen Leistung, wenn sich die jeweiligen Vertrauensintervalle nicht überlappen. Im Falle fehlender Angaben zum Geschlecht werden die Testergebnisse als graue Punkte ausgewiesen.

(33)

Das gelbe Dreieck repräsentiert den Mittelwert der Mädchen Ihrer Schule, das blaue Dreieck jenen der Burschen. Die Dreiecke befi nden sich jeweils in der Mitte einer vertikalen Linie mit einer horizontalen Unter- und Oberbegrenzung, die das Vertrauensintervall markiert, also jenen Wertebereich, in dem die wahre Leis- tung mit 90 % Sicherheit liegt. Der entsprechende Punktwert des Vertrauensintervalls ist in der Legende in Klammer neben dem Mittelwert der jeweiligen Subgruppe angeführt.

Die gelben Punkte repräsentieren die Ergebnisse der einzelnen Mädchen Ihrer Schule. Die blauen Punkte repräsentieren die Ergebnisse der einzelnen Burschen Ihrer Schule. Anhand der Darstellung können Sie sowohl die Streuung der Werte beider Subgruppen als auch die Leistungen der besten und schwächsten Schüler/innen jeder Subgruppe ablesen.

Die grauen Punkte – sofern vorhanden – repräsentieren die Ergebnisse jener Schüler/innen, deren Angabe zum Geschlecht fehlt.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Ebenso können Sie die Anzahl der getesteten Schüler/innen (n) Ihrer Schule getrennt nach Mädchen und Burschen ablesen. Zudem wird in der Legende angeführt, wie groß die Differenz zwischen Mädchen und Burschen an Ihrer Schule sowie die mittlere Differenz an österreichischen Schulen ist. Beachten Sie beim Vergleich der Differenz Ihrer Schule mit jener aller österreichischen Schulen, dass sich die Differenz an Ihrer Schule aus den jeweiligen Gruppen-Mittelwerten errechnet. Da bei allen Gruppen-Mittelwerten das Vertrauensintervall mitzuberücksichtigen ist, kann auch die angegebene Subgruppen-Differenz möglicherweise nicht der wahren Differenz entsprechen.

Leitfragen:

Wie liegen an Ihrer Schule die durchschnittlichen Ergebnisse der Mädchen und Burschen im Vergleich zueinander, unter Berücksichtigung einer evtl. Überlappung der Vertrauensintervalle?

Wie stark unterscheiden sich die Mädchen und Burschen Ihrer Schule in ihren Leistungen verglichen mit der mittleren Differenz an österreichischen Schulen?

Wie groß ist die Streuung der Leistungen der Mädchen und Burschen an Ihrer Schule?

(34)

Ergebnis Ihrer Schule nach Migrationshintergrund

Die Grafik zeigt die einzelnen Werte sowie das durchschnittliche Ergebnis der Schüler/innen Ihrer Schule bei der Standardüberprüfung in Englisch getrennt nach Herkunft: einmal für Schüler/innen mit Migrationshintergrund, einmal für Schüler/innen ohne Migrationshintergrund. Die Zuordnung beruht auf den Angaben der Schüler/innen im Fragebogen zum Geburtsland ihrer Eltern. Für den Englischwert werden die Kompetenzbereiche Hören, Lesen und Schreiben gleichwertig berücksichtigt. Als Referenzwert dient die mittlere Differenz zwischen Schü- lerinnen und Schülern mit bzw. ohne Migrationshintergrund an österreichischen Schulen. Die Schüler/innen mit und jene ohne Migrationshintergrund an Ihrer Schule unterscheiden sich dann in ihrer durchschnittlichen Leis- tung voneinander, wenn sich die jeweiligen Vertrauensintervalle nicht überlappen. Im Falle fehlender Angaben zum Migrationshintergrund werden die Testergebnisse als graue Punkte ausgewiesen.

(35)

Das violette Dreieck repräsentiert den Mittelwert Ihrer Schüler/innen ohne Migrationshintergrund, das rote Dreieck jenen der Schüler/innen mit Migrationshintergrund an Ihrer Schule. Die Dreiecke befi nden sich in der Mitte einer vertikalen Linie mit einer horizontalen Unter- und Oberbegrenzung, die das Vertrauens- intervall markiert, also jenen Wertebereich, in dem die wahre Leistung mit 90 % Sicherheit liegt. Der entspre- chende Punktwert des Vertrauensintervalls ist in der Legende in Klammer neben dem Mittelwert der jeweiligen Subgruppe angeführt.

Die violetten Punkte repräsentieren die Ergebnisse der einzelnen Schüler/innen ohne Migrationshintergrund Ihrer Schule. Die roten Punkte repräsentieren die Ergebnisse der einzelnen Schüler/innen mit Migrationshin- tergrund Ihrer Schule. Anhand der Darstellung können Sie sowohl die Streuung der Werte beider Subgrup- pen als auch die Leistungen der besten und schwächsten Schüler/innen jeder Subgruppe ablesen.

Die grauen Punkte – sofern vorhanden – repräsentieren die Ergebnisse jener Schüler/innen, deren Angabe zum Migrationshintergrund fehlt.

Die entsprechenden Punktwerte fi nden Sie unterhalb der Grafi k in der Legende. Ebenso können Sie die Anzahl der getesteten Schüler/innen (n) Ihrer Schule getrennt nach Schülerinnen und Schülern mit bzw. ohne Migrati- onshintergrund ablesen. Zudem wird in der Legende angeführt, wie groß die Differenz zwischen den Schülerin- nen und Schülern mit und jenen ohne Migrationshintergrund an Ihrer Schule sowie die mittlere Differenz an ös- terreichischen Schulen ist. Beachten Sie beim Vergleich der Differenz Ihrer Schule mit jener aller österreichischen Schulen, dass sich die Differenz an Ihrer Schule aus den jeweiligen Gruppen-Mittelwerten errechnet. Da bei allen Gruppen-Mittelwerten das Vertrauensintervall mitzuberücksichtigen ist, kann auch die angegebene Subgrup- pen-Differenz möglicherweise nicht der wahren Differenz entsprechen.

Leitfragen:

Wie liegen an Ihrer Schule die durchschnittlichen Ergebnisse der Schüler/innen mit und jener ohne Migrationshintergrund im Vergleich zueinander, unter Berücksichtigung einer evtl. Überlappung der Vertrauensintervalle?

Wie stark unterscheiden sich an Ihrer Schule die Schüler/innen mit Migrationshintergrund von denen ohne Migrationshintergrund in ihren Leistungen verglichen mit der mittleren Differenz an österreichi- schen Schulen?

Wie groß ist die Streuung der Leistungen der Schüler/innen mit bzw. ohne Migrationshintergrund an Ihrer Schule?