Evaluer l’expérimentation, expérimenter dans l’évaluation: un Q-sort

François Muller
16 mars 2024
5 min de lecture

Dernière mise à jour : 4 déc. 2024

Nous sommes dans une période saturée d’évaluations de toutes natures. PISA, tests CM2, socle commun, pour les plus « nouveaux », mais nous pourrions penser aussi à ce que permet l

L'article L 401-1 du Code de l'Education concerne le: droit d’expérimenter, et même d’aller assez loin dans la dérogation, mais entraine la responsabilité et l'obligation d’évaluation, de « rendre compte ». Les premières expérimentations sous ce « label » ont été conduites dès 2006 à Paris (et dans bien d'autres académies depuis), et nous tendons vers les évaluations de ces dispositifs. C'est assez récurrent, même dans la presse (nationale).

Plus que des procédures « standard » à appliquer (à l’instar de ce qui a pu se faire au collège CLISTHENE à Bordeaux(1) , avec les corps d’inspection) pour un bilan très mitigé au vu des résultats pourtant positifs – ne dit-on pas que l’évaluation renseigne plus sur l’évaluateur que sur l’évalué ? – , il s’agira donc de prendre juste le temps et l’assurance d’avoir une représentation partagée de l’évaluation, tout au moins de ses finalités;

voir le livre de Luc CEDELLE, « Un plaisir de collège, le collège CLISTHENE DE BORDEAUX, voir la chronique à son sujet de Claude LELIEVRE.- Voir aussi la video de Luc Cedelle sur l’expérimentation

Un Q-sort pour entrer en évaluation

Afin de préparer les esprits et de travailler ensemble et le concept et les pratiques de l’évaluation, afin d’éviter tout risque de couperet, afin (enfin) de permettre des sorties honorables et intéressantes de ces expérimentations, pour tout le monde, une équipe de directeurs/trices du groupe expérimental « SOLEIL » (4 écoles en réseau, dans le 19ème arr.) ont élaboré, avec notre aide, un Q-SORT à destination de leurs personnels.

Je rappelle juste la méthodologie du Q-SORT ici (mode d’emploi et support).

Si vous aviez à ne retenir de deux items valables pour vous et votre pratique d’évaluation, quels seraient-ils ? Et quels sont les deux autres que vous réfuterions résolument ? Pouvons-nous en discuter ?

Ainsi donc, s’attaquer de front à l’évaluation de dispositif nous renvoie assez vite à des questions souvent essentielles (du mot « sens) en évaluation: sur les finalités d’abord, sur les intentions (ce qui n’est pas forcément la même chose), sur les modalités ensuite, sur les acteurs enfin.

Evaluer un dispositif expérimental, c’est…

1- Evaluer un dispositif c’est inspecter tous les acteurs. 2- Evaluer un dispositif sert à classer les écoles. 3- Il suffit d’évaluer les élèves pour évaluer le système. 4- Evaluer un dispositif, c’est faire un 360 degrés. 5- Evaluer est un régulateur de l’action. 6- Evaluer, c’est une négociation entre les différentes parties en présence 7- Evaluer ne sert à rien sans base de référence. 8- Ce n’est pas aux enseignants d’évaluer. 9- Evaluer c’est contraindre à rendre les objectifs plus visibles. 10- Evaluer c’est juger de ce qui est efficace. 11- Evaluer un dispositif, c’est déjà l’enterrer. 12- Evaluer c’est distinguer les acteurs et leurs rôles. 13- Evaluer c’est recueillir des données et voir comment elles évoluent. 14- Evaluer conduit à interpréter. 15- Si on n’évalue pas nous-mêmes, nous serons les « sujets » de l’évaluation 16- Evaluer c’est juger. 17- L’évaluation est déterminée par le choix des critères d’évaluation. 18- On ne peut pas tout évaluer. 19- Un outil d’évaluation n’a de valeur que s’il est reproductible. 20- Evaluer, c’est communiquer 21- Pour les acteurs du système éducatif les attentes de l’évaluation sont identiques. 22- Evaluer c’est s’accorder sur des indicateurs pouvant mesurer l’activité. 23- Evaluer c’est se mettre d’accord sur les indicateurs mesurant l’impact sur les parcours scolaires. 24- Evaluer c’est se mettre d’accord sur les indicateurs qualitatifs (satisfaction des acteurs, dysfonctionnement) 25- Evaluer oui, mais il faut avoir des outils pour exploiter les résultats.

Planche élaborée après consultation des personnels du Groupe « Soleil » (quatre écoles de la circonscription 19D-Paris) –juin 2008

L'évaluation de l'innovation en éducation : une approche multidimensionnelle

L'évaluation de l'innovation en éducation est un processus complexe qui nécessite une approche multidimensionnelle pour tenir compte de la diversité des initiatives, des contextes et des acteurs impliqués. Les sources et la conversation précédente mettent en évidence plusieurs éléments clés pour guider cette évaluation.

1. Définir les objectifs et les critères d'évaluation:

Avant de pouvoir évaluer une innovation, il est essentiel de définir clairement les objectifs poursuivis et les critères qui permettront de juger de son succès.

Objectifs spécifiques et mesurables: Les objectifs de l'innovation doivent être précis, mesurables, atteignables, pertinents et limités dans le temps (SMART).
Critères d'évaluation adaptés au contexte: Les critères d'évaluation doivent être adaptés au contexte spécifique de l'innovation, en tenant compte des caractéristiques des élèves, de l'établissement et des objectifs visés.
Indicateurs quantitatifs et qualitatifs: L'évaluation peut s'appuyer sur des indicateurs quantitatifs (taux de réussite, résultats aux évaluations, etc.) et qualitatifs (perception des élèves et des enseignants, évolution des pratiques pédagogiques, etc.).

2. Mettre en place un dispositif d'évaluation rigoureux:

L'évaluation de l'innovation doit s'appuyer sur un dispositif rigoureux, permettant de collecter des données fiables et de formuler des conclusions pertinentes.

Protocole d'évaluation clair et précis: Le protocole d'évaluation doit définir les méthodes de collecte de données, les outils utilisés, le calendrier et les responsabilités de chaque acteur.
Implication des différents acteurs: L'évaluation doit impliquer les différents acteurs concernés par l'innovation: enseignants, élèves, parents, administration, etc.
Recueil de données multiples et variées: Il est important de collecter des données provenant de sources multiples et variées (observations, entretiens, questionnaires, analyses de documents, etc.) pour obtenir une vision complète de l'innovation.

3. Analyser les résultats et formuler des recommandations:

L'évaluation ne se limite pas à la collecte de données, mais doit également inclure une analyse approfondie des résultats et la formulation de recommandations pour améliorer l'innovation ou décider de sa généralisation.

Analyse des données quantitatives et qualitatives: L'analyse des données doit tenir compte des aspects quantitatifs et qualitatifs de l'innovation, en croisant les informations provenant des différentes sources.
Identification des facteurs de réussite et des points faibles: L'analyse doit permettre d'identifier les facteurs qui ont contribué à la réussite de l'innovation, ainsi que les points faibles qui nécessitent des améliorations.
Formulation de recommandations concrètes et opérationnelles: Les recommandations doivent être concrètes, opérationnelles et adaptées aux besoins des acteurs impliqués dans l'innovation.

4. Tenir compte de l'approche systémique de l'innovation:

L'évaluation de l'innovation doit tenir compte de son caractère systémique, en analysant son impact non seulement sur les élèves, mais aussi sur les pratiques pédagogiques, l'organisation de l'établissement et le développement professionnel des enseignants.

Effets sur les apprentissages des élèves: L'évaluation doit analyser l'impact de l'innovation sur les apprentissages des élèves, en mesurant les progrès réalisés et l'acquisition des compétences visées.
Évolution des pratiques pédagogiques: L'évaluation doit observer l'évolution des pratiques pédagogiques des enseignants impliqués dans l'innovation, en analysant les changements observés et leur impact sur les élèves.
Transformation de l'organisation de l'établissement: L'évaluation doit analyser l'impact de l'innovation sur l'organisation de l'établissement, en observant les changements mis en place et leur contribution à la réussite des élèves.
Développement professionnel des enseignants: L'évaluation doit prendre en compte le développement professionnel des enseignants impliqués dans l'innovation, en mesurant l'acquisition de nouvelles compétences et l'évolution de leurs pratiques.

5. S'appuyer sur les ressources et les dispositifs institutionnels:

L'évaluation de l'innovation peut s'appuyer sur les ressources et les dispositifs institutionnels mis en place pour accompagner les équipes éducatives.

Rôle des CARDIE: Les CARDIE (Cellules Académiques Recherche et Développement en Innovation et en Expérimentation) jouent un rôle central dans l'accompagnement des équipes et l'évaluation des innovations. Elles peuvent fournir des outils, des méthodes et des conseils pour mettre en place un dispositif d'évaluation rigoureux.
Base de données Innovathèque: La base de données nationale permet de consulter des exemples d'innovations et d'expérimentations menées dans d'autres établissements, ce qui peut inspirer les équipes et les aider à concevoir leur propre dispositif d'évaluation.

Evaluer l'innovation en éducation est un processus crucial pour garantir son efficacité et sa pertinence. En adoptant une approche multidimensionnelle, rigoureuse et systémique, en impliquant les différents acteurs et en s'appuyant sur les ressources institutionnelles, l'évaluation peut contribuer à la transformation du système éducatif et à la réussite de tous les élèves.