Forschungsprojekt / Projet de recherche

ID: 203947
Projektnummer / No de projet 99:001
Beginn / Début1995
Ende / Fin1998

Titel, Thema / Titre, thématique

TIMSS Performance Assessment: Erträge aus dem «Experimentiertest»

Titel, Thema übersetzt / Titre ou thématique, traduction

TIMSS Performance Assessment: les tests pratiques utilisés dans le cadre de TIMSS

Forschende Institution(en) / Institution(s) de recherche

Erziehungsdirektion des Kantons Bern – Generalsekretariat – Abteilung Bildungsplanung und Evaluation (BiEv), Bern 
Universität Zürich (UZH) – Institut für Erziehungswissenschaft (IfE), Zürich 

Forschende (alphabetisch geordnet) / Chercheurs, chercheuses (par ordre alphabétique)

Erich Ramseier    
Kurt Reusser    
Rita Stebler    

Zusammenfassung

Grossflächig angelegte Tests tendieren oft dazu, sich auf einfach mess- und überprüfbare Inhalte zu beschränken und mit Fragen zu begnügen, die durch Ankreuzen eines Kästchens zu beantworten sind. Vor allem in den USA, wo Tests dieser Art weit verbreitet sind, beginnt man sich seit einiger Zeit auch der negativen Auswirkungen derartiger schulischer Leistungsbeurteilung bewusst zu werden (Schülerinnen und Schülern wird implizit die Überzeugung vermittelt, auf jede Frage gebe es je eine korrekte Antwort, die man auswendig lernen müsse; Lehrpersonen beginnen sich auf einen Unterricht zu beschränken, der für Tests nützliches Faktenwissen vermittelt, mit dem man im übrigen aber wenig anfangen kann, usw.). Aus diesem Grund hat man Prüfungsverfahren zu entwickeln begonnen, die auf das Erfassen von Problemlösefähigkeiten in offenen Situationen abzielen. Solche Verfahren wurden auch im Rahmen von TIMSS (Third International Mathematics and Science Study; vgl. 93:070) verwendet, allerdings nicht mit der gesamten Stichprobe, da natürlich der Aufwand sowohl für die Durchführung wie auch für die Auswertung wesentlich höher ist.
In der Deutschschweiz sind bei 44 Klassen der TIMSS-Stichprobe derartige Verfahren eingesetzt worden. Die insgesamt 396 Schülerinnen und Schüler dieser Klassen (7. Schuljahr) mussten im Rahmen der Tests Experimente planen und durchführen, die Ergebnisse protokollieren und auswerten, Trends aus den erhobenen Daten herauslesen, Schlussfolgerungen ziehen und diese anhand mathematischer und naturwissenschaftlicher Fachbegriffe erklären. Im internationalen Vergleich haben die Schweizer Jugendlichen in diesen Tests hervorragend abgeschnitten. Anders als in den ansonsten bei TIMSS verwendeten Tests unterschieden sich hier die Leistungen von Mädchen und Jungen nicht; beim "simpleren" Prüfungsverfahren haben sich bekanntlich für die Schweiz signifikante Unterschiede nach Geschlecht ergeben (vgl. Information 98:075). Allerdings existieren noch etliche messtheoretische Probleme, so dass der Einsatz solcher klassenvergleichender Instrumente vorläufig erst bedingt zu empfehlen ist. Auf der anderen Seite gilt es zu unterstreichen, dass der Einsatz derartiger Anwendungsaufgaben dem Erwerb und dem Training integrierter materialer und formaler Kompetenzen beim Problemlösen förderlich ist und somit auch den Leitzielen der hierzulande gültigen Lehrpläne entspricht.
Dieses Forschungsprojekt ist im Rahmen des Nationalen Forschungsprogramms 33 ("Wirksamkeit unserer Bildungssysteme") vom Schweizerischen Nationalfonds zur Förderung der wissenschaftlichen Forschung finanziert worden.

Description du projet

Trop souvent, les tests utilisés sur une grande échelle ont tendance à se limiter à des questions auxquelles on peut répondre par "oui" ou pas "non", et à se focaliser sur des contenus facilement mesurables. Mais principalement aux États-Unis - où les tests standardisés sont très répandus - on devient toujours plus conscient du fait que de telles stratégies d'appréciation du rendement des élèves ont un impact négatif sur la culture d'apprentissage. En effet, les élèves acquièrent la conviction implicite que, pour chaque problème, il existe une seule solution correcte qu'il faut avoir apprise par coeur; et les enseignants ont tendance à se limiter à un enseignement inculquant à leurs élèves des savoirs utiles en des situations de test, mais difficilement en dehors de celles-ci, etc. C'est dans ce contexte qu'on a commencé à élaborer des épreuves visant à apprécier les aptitudes mises en oeuvre par les élèves dans des situations problématiques ouvertes. De telles épreuves, désignées sous le terme de "Performance assessment", ont également été utilisées dans le cadre de la recherche TIMSS (cf. 93:070) - toutefois pas avec l'échantillon entier, étant donné le supplément conséquent de travail suscité par la passation et le dépouillement des résultats dans ces situations.
En Suisse alémanique, 44 classes TIMSS de 7e année ont été soumises à une telle épreuve. Les élèves (N = 396) ont dû planifier et réaliser une expérience empirique, en noter et interpréter les résultats, dégager des tendances sur la base des données obtenues, en tirer des conclusions et les expliquer dans une terminologie scientifique. Au niveau international, les élèves suisses ont obtenu des résultats excellents, sans qu'il y ait eu cette fois de différences entre filles et garçons (dans les tests plus "simplistes", l'échantillon TIMSS suisse avait été caractérisé par des différences relativement grandes entre les sexes; cf. 98:075). S'agissant d'une comparaison entre différentes classes, il existe encore certaines difficultés à résoudre concernant les critères théoriques d'application, et il convient de limiter pour l'instant la confiance que l'on peut placer dans ce type d'évaluation comparative. Ce type d'expérimentations pratiques visant à développer les aptitudes pratiques des élèves en les mettant en situation de devoir résoudre un problème donné semble pourtant bien conforme aux grandes lignes de nos plans d'études. Cette recherche a été financée par le Fonds national suisse de la recherche scientifique dans le cadre du Programme national de recherche 33 ("Efficacité de nos systèmes de formation").

Schlüsselbegriffe

(NFP 33); (TIMSS); *Leistungsmessung; *Kenntnisstand; *Mathematik; *Naturwissenschaften; Evaluation; Curriculum; vergleichende Erziehungswissenschaft; (performance assessment); Test

Mots-clés

(PNR 33); (TIMSS); *mesure du rendement; *niveau de connaissances; *mathématiques; *sciences naturelles; évaluation; programme d'études; éducation comparée; (performance assessment); test

Publikationen / Publications

Harmon, M., Smith, T. A., Martin, M. O., Kelly, D. L., Beaton, A. E., Mullis, I. V. S., Gonzales, E. J., & Orpwood, G. Performance Assessment in IEA's Third International Mathematics and Science Study. Chestnut Hill, MA: TIMSS International Study Center, Boston College, 1997
Stebler, R., Reusser, K., & Ramseier, E. (1997). Spitzenleistungen der Schweizer Siebtklässler im TIMSS-Experimentiertest. In: Schweizer Lehrerinnen- und Lehrerzeitung, 10/1997, S. 18-21
Stebler, R., Reusser, K., & Ramseier, E. Praktische Anwendungsaufgaben zur integrierten Förderung formaler und materialer Kompetenzen - Erträge aus dem TIMSS-Experimentiertest. Bildungsforschung und Bildungspraxis, 20. Jg. (1/1998), S. 28-53

Methodologie / Méthodes de recherche

Werkstatt bzw. Postenlauf, bei dem die Schülerinnen und Schüler nach schriftlicher Anleitung in Einzelarbeit Experimente durchführten und protokollierten

Geographische Angaben / Délimitation géographique

Deutschschweiz

Projekttyp / Type de recherche

Analyse des handlungsbezogenen Teils der Third International Mathematics and Science Study, eingebettet ins Forschungsprojekt

Auftraggeber / Mandant de la recherche

kein Auftraggeber

Finanzierung / Financement

Schweizerischer Nationalfonds zur Förderung der wissenschaftlichen Forschung und Stiftung für wissenschaftliche Forschung an der Universität Zürich