Étude PISA

Le programme PISA (acronyme pour « Programme international pour le suivi des acquis des élèves ») est un ensemble d'études de l'OCDE visant à mesurer les performances des systèmes éducatifs des pays membres. Leur publication est triennale. La première étude fut menée en 2000, deux autres suivirent en 2003 et en 2006. Les méthodes et les objectifs de PISA évoluent au cours du temps.

Sommaire 1 Objectifs 2 Méthodologie 2.1 Domaine d'évaluation 2.2 Administration de l'évaluation 2.3 Les résultats 2.3.1 2000 et 2003 2.3.2 2006 3 Réactions 3.1 Intérêt 3.2 Limites 3.3 Risques 4 Notes et références 5 Voir également 5.1 Articles connexes 5.2 Liens externes 5.2.1 Sites officiels 5.2.2 Débat

Objectifs

• Comparer les performances de différents systèmes éducatifs en évaluant les compétences acquises par les élèves en fin d'obligation scolaire (quinze ans). Ces compétences sont définies comme celles dont tout citoyen européen moyen peut avoir besoin pour réussir dans sa vie quotidienne, ce que l'anglais appelle literacy (par exemple reading literacy, mathematical literacy et scientific literacy) difficilement traduisibles en français, qui parle plus vaguement de culture mathématique ou de savoir lire par exemple. Il s'agit plus d'évaluer la façon dont les jeunes sont capables d'exploiter leurs connaissances dans leur pratique quotidienne que leur niveau théorique dans tel ou tel domaine des sciences ou des lettres.
• Identifier les facteurs de succès, facteurs exogènes, notamment le milieu social économique et culturel des familles, le cadre scolaire offert par l'établissement, et le système éducatif national, mais aussi subjectifs, comme la motivation des élèves, l'estime qu’ils ont d’eux-mêmes, les stratégies d’apprentissage qu’ils mettent en œuvre.
• Suivre l'évolution de l'enseignement dans les pays membres de l'OCDE et les pays partenaires (près d'une soixantaine de pays) en conduisant des évaluations périodiques.

Méthodologie

Domaine d'évaluation

Chaque évaluation met l'accent sur une compétence particulière, en 2000 sur la lecture^[1], en 2003 sur les mathématiques^[1] et en 2006 sur les sciences ^[1]. Un nouveau cycle (2009, 2012, 2015) s'articulera sur ces mêmes compétences.

Administration de l'évaluation

Au cours du premier cycle d'évaluation, plus d'un million d'élèves, sélectionnés de façon aléatoire dans les établissements publics ou privés, ont été évalués^[2] à l'aide de tests écrits (épreuve de deux heures). Élèves et chefs d'établissements ont également rempli des questionnaires qui ont permis d'établir des corrélations entre les performances et l'environnement des élèves, notamment leur accès aux TIC et leur maîtrise de ces derniers. Lors du second cycle d'évaluation l'accent sera mis sur l'informatisation des épreuves et de la collecte des données. En 2005, 13 pays ont été volontaires pour informatiser les épreuves de sciences.

Les résultats

2000 et 2003

Le dépouillement des tests et enquêtes^[3] a révélé des disparités entre les différents pays participants, mais également entre les différents établissements^[4].

Il faut environ un an pour dépouiller les résultats et les analyser. Ainsi les résultats de la première campagne de tests Pisa 2000 ont-ils été publiés en 2001 (OECD, 2001a) et suivis de rapports thématiques qui étudiaient certains aspects de ces résultats. L'évaluation de Pisa 2003 est parue sous la forme de deux volumes : Apprendre aujourd'hui, réussir demain – Premiers résultats de PISA 2003^[4] (OECD, 2004) et Problem Solving for Tomorrow’s World – First Measures of Cross-Curricular Competencies from PISA 2003 (OECD, 2004d)

Voici un aperçu des six pays qui ont obtenus les meilleurs scores en 2003 :

Mathématiques	Savoir lire	Science	Résolution de problèmes
1. Hong Kong 550 2. Finlande 544 3. Corée du Sud 542 4. Pays-Bas 538 5. Liechtenstein 536 6. Japon 534	1. Finlande 543 2. Corée du Sud 534 3. Canada 528 4. Australie 525 5. Liechtenstein 525 6. Nouvelle-Zélande 522	1. Finlande 548 2. Japon 548 3. Hong Kong 539 4. Corée du Sud 538 5. Liechtenstein 525 6. Australie 525 7. Macao 525	1. Corée du Sud 550 2. Finlande 548 2. Hong Kong 548 4. Japon 547 5. Nouvelle-Zélande 533 6. Macao 532

Le professeur Jouni Välijärvi, chargé de l'étude Pisa finlandaise, a conclu que les scores élevés de la Finlande étaient dus à l'excellence des enseignants finnois et au programme LUMA développé en 1990 pour améliorer les performances des élèves en mathématiques et en sciences. Il a attiré l'attention sur le caractère homogène du contenus des programmes dans le système finlandais et de fait les résultats ont été très homogènes d'une école finlandaise à l'autre.

En revanche, le professeur Pauli Siljander pense que les bons résultats de la Finlande sont dus aux politiques socio-éducatives et à d'autres facteurs liés à l'histoire des idées et de l'éducation. Il est impossible pour lui de séparer l'évolution des mentalités et des idées en matière d'apprentissage et les réformes de fond qui l'ont accompagnée. Il fait remarquer que l'éducation est une priorité de l'état providence finlandais et qu'il est par conséquent impossible de parler d'éducation sans replacer le problème dans son contexte sociopolitique (Siljander, 2005).

L'examen des résultats de la campagne 2003 a montré que les pays qui dépensaient plus n'obtenaient pas forcément de meilleurs résultats que ceux qui dépensent moins pour l'éducation. L'Australie, la Belgique, le Canada, la République tchèque, la Finlande, le Japon, la Corée du Sud^[5] et les Pays-Bas dépensent moins par élève et obtiennent des résultats assez satisfaisants, alors que les États-Unis dépensent plus et obtiennent des résultats sensiblement en dessous de la moyenne des pays européens. La République tchèque, par exemple, qui se trouve parmi les dix premiers pays, dépense environ un tiers de la somme que les États-Unis consacrent à chaque élève alors que ce dernier pays arrive en vingt-quatrième position sur vingt-neuf pays étudiés.

Il ressort également de l'étude que les jeunes issus de milieux plus favorisés, avec un niveau d'instruction plus élevé, obtiennent en général de meilleurs résultats. Cette différence apparaît dans tous les pays étudiés, mais elle est particulièrement criante dans certains pays comme l'Allemagne^[6].

2006

Les résultats de la campagne PISA 2006 font apparaître une détérioration de la situation du système scolaire français ^[7]. En mathématiques, ce mauvais résultat est dû à l'augmentation des élèves en difficulté^[7].

Voici un aperçu des dix pays qui ont obtenus les meilleurs scores en 2006 :

Mathématiques	Savoir lire
1. Finlande 548 2. Hong Kong 547 2. Corée du Sud 547 4. Pays-Bas 531 5. Suisse 530 6. Macao 525 6. Liechtenstein 525 8. Japon 523 9. Nouvelle-Zélande 522 10. Australie 520	1. Corée du Sud 556 2. Finlande 547 3. Hong Kong 536 4. Canada 527 5. Nouvelle-Zélande 521 6. Irlande 517 7. Australie 513 8. Liechtenstein 510 9. Pologne 508 10. Pays-Bas 507 10. Suède 507

Réactions

Les réactions aux enquêtes sont nombreuses. Elles proviennent tout d'abord de la presse nationale, surtout intéressée par le classement des pays participants : « Les élèves allemands sont-ils des imbéciles ? » demande le magazine d'actualité Der Spiegel du 10 décembre 2001^[8]. « L'école suisse a reçu la fessée, La Suisse est-elle le cancre de l'Europe? » s’inquiète La Tribune de Genève^[9]. D'autres commentaires viennent d'enseignants ou de spécialistes de l'éducation qui en soulignent soit l'intérêt, soit les limites, voire pour certains les risques.

Intérêt

La plupart des commentateurs notent que l'enquête a eu un effet salutaire en attirant l'attention des pouvoirs et de l'opinion publique sur la nécessité de réformer les différents systèmes éducatifs^[10]. Les questionnaires, notamment, ouvrent des pistes de réforme possible en identifiant certains facteurs de réussite^[11]. Comme les concepteurs de l'étude PISA ont dû se poser la question des compétences nécessaires à des jeunes de 15 ans pour faire face au monde d'aujourd'hui, avant de mettre en place les protocoles d'évaluation, il s'avère que le Haut Conseil de l'Education Nationale a bien dû admettre que l'Education Nationale n'a jamais posé la question en ces termes, - les compétences à acquérir à 15 ans. L'école française vise des savoirs acquis, matière par matière : ceci aboutit à enseigner par exemple les Mathématiques non comme un outil au service d'apprentissages futurs, mais comme une discipline en elle-même. D'où le malaise face aux résultats PISA d'une partie des enseignants français.

Enfin, l'étude pose la question de la culture éducative en France : la France est non seulement un des pays qui consacre les plus forts moyens à l'éducation par élève, mais c'est aussi le pays où les élèves sont 'les plus stressés', et se sentent peu soutenus par leurs enseignants. (Corpus attitudes par rapport à l'école de l'enquête).

Limites

Les critiques soulignent la difficulté à comparer des systèmes éducatifs différents, animés de philosophies différentes, et donc à exploiter les résultats des tests. Ainsi en France, l'APMEP (association des professeurs de mathématiques de l'enseignement public), notant les meilleures performances des élèves finlandais aux tests de mathématiques, souligne-t-elle la différence entre l'enseignement français, soucieux de développer l’« accès à l’abstraction, à la symbolisation, à la rigueur », et l'enseignement des mathématiques appliquées au réel et aux situations concrètes tel qu'il se pratique dans d'autres pays  : « rien ne prouve que l’accent mis sur les mathématiques du « réel » soit corrélatif d’avancement dans le développement de compétences spécifiques dans le domaine mathématique »^[12]

La naturalisation de l'intelligence qui fonde ces méthodes d'évaluation, présenterait l'inconvénient général de tous les tests psychotechniques basés sur les sciences cognitives. En effet, ils réduisent l'activité spirituelle à ce qu'elle a de plus prosaïque - les manipulations de symboles que pourraient faire des machines - et ils n'accordent aucune place au jeu, au mensonge, à l'humour, au simulacre, à la colère, au rêve, et à toutes les passions qui font le socle de l'esprit humain et de la vie sociale^[13],[14].

Risques

L'AMPEP voit également un risque possible induit par les enquêtes PISA : « Déjà, dans plusieurs pays, on observe une incitation des responsables des systèmes éducatifs à modifier l’enseignement, la formation des enseignants et même les programmes, pour s’adapter aux conceptions et aux tests de PISA »^[12].

Notes et références

Voir également

Articles connexes

• Évaluation

Liens externes

Sites officiels

• (en) Site officiel du programme PISA
• (fr) Résultats de l'évaluation PISA en France (2003)

Débat

• (de) (en) Joachim Wuttke: Critical bibliography
• National IQ means transformed from PISA Scores
• (fr) Bain, D (2003) Pisa et la lecture: un point de vue de didacticien. Revue suisse des sciences de l'éducation 25 (1) 59–78. sommaire
• (fr) Direction générale de l'Enseignement scolaire Ministère de l'Éducation nationale (2003) Évaluation des connaissances et des compétences des élèves de 15 ans: questions et hypothèses formulées à partir de l'étude de l'OCDE. Rencontres de la DESCO, 31 mai 2002. en ligne
• (de) (en) Stefan T. Hopmann, Gertrude Brinek, Martin Retzl (Hrsg.): PISA zufolge PISA. PISA According to PISA. LIT-Verlag, Wien (2007). ISBN 978-3-8258-0946-1 Recueil de critiques
• (de) Jahnke, Thomas und Meyerhöfer, Wolfram (Hrsg.): PISA & Co – Kritik eines Programms. Franzbecker, Hildesheim, 2ème ed., 2007, ISBN 978-388120-464-4. Recueil de critiques
• (fr) Rocher, Thierry (2003) La méthodologie des évaluations internationales de compétences. Psychologie et Psychométrie 24 (2–3) [Numéro spécial : Mesure et Éducation], 117–146.
• (fr) Terrail, Jean-Pierre (2009), « PISA. Commentaires et enseignements d’une comparaison internationale », sur le site du Groupe de Recherches sur la Démocratisation Scolaire, 21 mai 2009

• Portail de l’éducation