Comment améliorer les performances académiques ?

Titre de l'article : Incitations et services pour la réussite universitaire : données probantes issues d'un essai randomisé

Chercheuse responsable : Viviane Pires Ribeiro

Auteurs : Joshua Angrist, Daniel Lang et Philip Oreopoulos

Lieu d'intervention : Canada

Taille de l'échantillon : 1 600 étudiants

Grand thème : l'éducation

Variable d'intérêt principal : Résultats académiques

Type d'intervention : Évaluation des principales stratégies utilisées pour améliorer les performances scolaires

Méthodologie : Étude randomisée

Angrist, Lang et Oreopoulos (2009) rapportent une évaluation expérimentale de stratégies conçues pour améliorer les résultats scolaires des étudiants de première année. Un groupe de traitement a reçu des services de soutien académique. Un autre a reçu des incitations financières pour de bonnes notes. Un troisième groupe a combiné les deux interventions. L'utilisation du service était plus grande pour les femmes et les individus du groupe combiné. Le traitement combiné a également amélioré les notes et les résultats scolaires des femmes. Ces différences ont persisté jusqu'à la fin de la deuxième année, même si les incitations n'ont eu lieu que la première année.

Contexte d'évaluation

Au cours des dernières décennies, les interventions visant à accroître la fréquentation et l’achèvement des études supérieures aux États-Unis ont suscité un intérêt croissant, en particulier pour les étudiants à faible revenu. Cet intérêt s'est traduit par des efforts visant à augmenter les inscriptions, et parmi ces efforts figurent une aide aux étudiants basée sur les besoins et le mérite des étudiants, des programmes d'exonération fiscale, des subventions pour les frais de scolarité, une aide à l'emploi et des améliorations des infrastructures. Ainsi, les dépenses qui en résultent sont justifiées en partie par des preuves empiriques suggérant que les études collégiales et l’obtention d’un diplôme présentent des retombées économiques substantielles.

Les résultats scolaires des étudiants ne sont pas toujours satisfaisants. De nombreux étudiants mettent plus de temps à terminer le cours que le temps prévu – et l’une des raisons possibles de ces mauvais résultats est un manque de préparation. En particulier, de nombreux étudiants ont de faibles capacités d’étude. Cependant, motivée par l'idée que le rendement de ces compétences est élevé, la réponse traditionnelle aux problèmes de performance académique a été une série de stratégies de service académique (par exemple, ateliers de gestion du temps, définition d'objectifs, conseils académiques, etc.). De plus, dans certains cas précis, les services d’accompagnement des étudiants sont combinés à des services de soutien psychologique.

Une autre stratégie visant à améliorer les performances des étudiants est celle des programmes de bourses d’excellence – qui se concentrent principalement sur un petit nombre d’étudiants très performants. Cherchant à augmenter le nombre d'étudiants bénéficiant de ces programmes, une tentative a émergé dans le domaine des bourses d'études pour utiliser des prix et des incitations financières pour motiver les étudiants ayant de bons résultats académiques et pas seulement ceux ayant des performances spectaculaires. Ces programmes visent en partie à attirer de meilleurs étudiants vers les établissements publics. Mais ils sont également motivés par l’idée que l’aide au mérite accroît l’intérêt pour l’école et incite les étudiants à développer de bonnes habitudes d’étude.

Les preuves non expérimentales sur l’efficacité des services aux étudiants sont mitigées. Des études plus rigoureuses avec des modèles , en particulier pour les étudiants du secondaire, présentent un tableau plus prometteur. Cependant, dans la mesure où cela est indiqué dans la littérature, ni les stratégies de soutien académique ni les incitations financières n’ont fait l’objet d’évaluations à grande échelle utilisant des modèles de recherche par assignation aléatoire C’est donc cette lacune que cherchent à combler Angrist, Lang et Oreopoulos (2007).

Détails de l'intervention

Angrist, Lang et Oreopoulos (2009) rapportent une vaste expérience randomisée sur le terrain conçue pour évaluer les stratégies clés utilisées pour améliorer les performances scolaires à court et à long terme des étudiants. Plus précisément, l'étude cherche à déterminer si les étudiants ayant de faibles résultats scolaires obtiennent de meilleurs résultats lorsqu'ils se voient proposer des services universitaires supplémentaires, des bourses d'excellence, ou les deux, et si les effets de ces interventions s'étendent au-delà de la période pendant laquelle elles ont été mises à disposition.

L'étude rend compte du Student Achievement and Retention Project (STAR), une évaluation randomisée des services académiques et des incitatifs qui a été menée sur l'un des campus satellites d'une grande université canadienne. En termes américains, cette institution peut être considérée comme une grande école publique, avec des frais de scolarité fortement subventionnés. Ainsi, environ 1 600 étudiants de première année ont participé au projet, dont la majorité étaient originaires de la région et avaient une formation secondaire commune.

La démonstration STAR implique trois types de traitement : une stratégie de service connue sous le nom de Programme de soutien aux étudiants (SSP), une stratégie d'incitation connue sous le nom de Programme de bourses d'études (SFP) et une intervention offrant les deux stratégies, appelée SFSP. Le SSP a offert à 250 étudiants l'accès à un service de conseil par les pairs et à un service d'enseignement supplémentaire sous la forme de groupes d'études facilités (FSG). Les pairs conseillers sont des étudiants formés par le programme d'études pour proposer des suggestions académiques pour soutenir l'étudiant en première année d'école. Les FSG sont des séances de cours spécifiques conçues pour améliorer les habitudes d'étude et les stratégies d'apprentissage des étudiants, sans se concentrer uniquement sur le contenu spécifique du cours.

SFP a offert à 250 étudiants la possibilité d'obtenir des bourses d'excellence pour conserver de bonnes notes, mais pas nécessairement les meilleures, au cours de leur première année d'école. Les participants à ce programme ont reçu 5 000 $ en espèces pour une note de B (une note moyenne de 3,0) ou plus, ou 1 000 $ en espèces pour une note C+ ou B- (une note moyenne de 2,3 à 2,9). Cependant, pour être admissible à une bourse, les étudiants devaient suivre au moins 4 cours par trimestre et s'inscrire pour suivre la deuxième année de leur programme.

Le troisième groupe traité de 150 étudiants s'est vu proposer à la fois le SSP et le SFP. Enfin, la démonstration STAR comprenait un groupe témoin de 1 006 étudiants, avec lesquels les opérateurs du programme n'avaient aucun contact.

Détails de la méthodologie

L'étude d'Angrist, Lang et Oreopoulos (2009) rend compte d'une expérience randomisée sur le terrain impliquant deux stratégies conçues pour améliorer le rendement scolaire des étudiants de premier cycle à temps plein dans une grande université canadienne. Un groupe de traitement (« services ») a reçu des conseils par les pairs et des groupes d'étude organisés. L'autre groupe (« incitations ») s'est vu offrir des bourses d'excellence afin que l'étudiant de première année conserve de bonnes notes, mais pas nécessairement excellentes. Un troisième groupe de traitement combinait les deux interventions.

Aux fins de l'analyse, tous les étudiants de première année entrés en septembre 2005, à l'exception de ceux dont les notes moyennes se situaient dans le quartile supérieur, ont été répartis au hasard dans l'un des trois groupes de traitement ou dans un groupe témoin. Un groupe de traitement a reçu une gamme de services de soutien, notamment l'accès au mentorat par d'autres étudiants de la classe supérieure et à une instruction supplémentaire pour promouvoir la pensée critique. Un deuxième groupe a reçu des prix en espèces pour avoir atteint un certain score moyen. De plus, un troisième groupe de traitement a reçu une combinaison de services et d'incitations, une intervention qui n'a pas été analysée auparavant. Le groupe témoin était éligible aux services de soutien universitaires standard mais ne recevait rien de plus.

Résultats

Le premier résultat de l’étude est que les jeunes femmes utilisent beaucoup plus les services que les jeunes hommes. Le deuxième constat lié à l'utilisation du service est l'apparition d'une forte interaction entre l'offre de bourses et l'adhésion au service ; les étudiants du groupe combiné étaient plus susceptibles d'utiliser les services que ceux offerts sans possibilité d'obtenir des bourses. Les incitations ont donc eu pour effet immédiat à court terme d’augmenter le rythme auquel les étudiants recherchaient un soutien académique.

Les effets de l'intervention STAR sur les résultats scolaires des étudiants sont plus variés. Parallèlement à la différence entre les sexes dans les taux d'acceptation, les résultats scolaires montrent un impact significatif sur les notes uniquement pour les femmes. Les effets sur les femmes sont plus importants dans le groupe combiné (bourses et services). Le groupe combiné a également obtenu plus de crédits et avait un taux de probation académique nettement inférieur à la fin de l'année.

Les auteurs soulignent que les femmes du groupe combiné ont continué à surpasser le reste de la population STAR au cours de la deuxième année – malgré le fait que les subventions et les services ne soient disponibles que la première année. Ce résultat suggère que les compétences ou habitudes d’étude acquises au cours de la première année ont contribué à augmenter les performances ultérieures.

L’intérêt des étudiants pour les services de soutien était inférieur aux attentes. D’un autre côté, l’intérêt pour les services, reflété dans les taux d’adhésion et d’utilisation des services, était nettement plus élevé dans le groupe qui recevait également des incitations monétaires. L’intérêt pour les services et leur utilisation était également beaucoup plus élevé chez les jeunes femmes que chez les jeunes hommes. Le conseil par les pairs était considérablement plus populaire que l'enseignement complémentaire pour les deux sexes. L'intervention de conseil par les pairs mérite clairement une exploration plus approfondie, tout comme le recours à des incitations à la réussite pour accroître l'intérêt pour les services.

Plusieurs tendances ressortent des résultats du STAR. Premièrement, les étudiants qui ont bénéficié de conseils par les pairs et de services d’enseignement supplémentaire sans bourse n’ont pas obtenu de meilleurs résultats que les étudiants du groupe témoin. Cela peut être dû au fait que les taux d'observance étaient relativement faibles dans les groupes de traitement, car de faibles taux de consentement diluent les effets de l'intention de traiter. D'autre part, une analyse 2SLS qui ajuste les effets d'intention de traiter pour la non-participation révèle un niveau de précision suffisant pour détecter des effets de service théoriques égaux à 0,25σ dans l'échantillon combiné d'hommes et de femmes. Les résultats suggèrent donc que les bénéfices des services à eux seuls sont relativement modestes.

Leçons de politique publique

Sur la base des résultats de l'étude, il est possible de soulever certaines questions, telles que : pourquoi les effets étaient plus importants dans le groupe combiné ; et pourquoi les femmes ont mieux réagi aux programmes que les hommes.

Angrist, Lang et Oreopoulos (2009) suggèrent deux raisons possibles pour expliquer l'impact plus important du programme combiné. L’impact significatif des notes d’automne sur les groupes SFP et SFSP suggère que les bourses d’études à elles seules constituaient une forte force de motivation. Le groupe SFSP a cependant bénéficié d'un accompagnement et d'un soutien permanents. Ces étudiants ont reçu des contacts plus fréquents sous la forme de courriels bihebdomadaires de la part de pairs conseillers. Une plus grande interaction avec les camarades de classe au cours de la dernière année aurait pu faciliter l’adaptation et l’intégration dans le nouvel environnement universitaire. Le groupe réservé aux services (SSP) avait un accès similaire, mais les taux d'acceptation dans le SSP étaient faibles. Pour le service de conseil, les taux d’acceptation des femmes SFSP étaient presque le double des taux d’acceptation des femmes SSP. Ainsi, le SFSP semble avoir réussi à combiner une motivation accrue avec un canal bien défini pour une amélioration durable des résultats.

Bien qu’il n’existe pas d’explication simple aux différences entre les sexes en matière de réponse aux mesures incitatives et aux services, les auteurs soulignent que les femmes semblent généralement plus engagées que les hommes dans les études postsecondaires. Une partie de cette différence semble être due à de meilleures habitudes d'étude chez les femmes, ce qui suggère qu'elles pourraient être plus motivées à réussir à l'école et donc profiter de programmes comme STAR.

Des études antérieures ont également confirmé les différences entre les sexes en matière de réponse aux incitations et aux services, les femmes réagissant mieux aux programmes.

Références

ANGRIST, Josué ; LANG, Daniel ; OREOPOULOS, Philippe. Incitations et services pour la réussite universitaire : données probantes issues d'un essai randomisé. American Economic Journal : Économie appliquée , vol. 1, non. 1, p. 136-63, 2009.