Titre du document : Incitations et services pour la réussite universitaire : données issues d'un essai randomisé
Chercheur principal : Viviane Pires Ribeiro
Auteurs: Joshua Angrist, Daniel Lang et Philip Oreopoulos
Lieu de l'intervention : Canada
Taille de l'échantillon : 1600 XNUMX étudiants
Thème principal : Éducation
Variable principale d'intérêt : Résultats scolaires
Type d'intervention : Évaluation des principales stratégies utilisées pour améliorer les performances scolaires.
Méthodologie: Étude randomisée
Angrist, Lang et Oreopoulos (2009) présentent une évaluation expérimentale de stratégies visant à améliorer la réussite scolaire des étudiants de première année universitaire. Un groupe a bénéficié de services de soutien scolaire, un autre de primes pour de bonnes notes, et un troisième a combiné les deux interventions. Le recours aux services était plus élevé chez les femmes et dans le groupe combinant les deux. Ce dernier a également permis d'améliorer les notes et le statut universitaire des femmes. Ces différences se sont maintenues jusqu'à la fin de la deuxième année, alors que les primes n'ont été versées qu'en première année.
Contexte d'évaluation
Ces dernières décennies, on a constaté un intérêt croissant pour les interventions visant à accroître la fréquence et l'obtention d'un diplôme d'études supérieures aux États-Unis, notamment pour les étudiants issus de milieux défavorisés. Cet intérêt s'est traduit par des efforts pour augmenter les inscriptions, parmi lesquels on peut citer l'aide financière aux étudiants fondée sur les besoins et le mérite, les programmes d'exonération fiscale, les bourses d'études, l'aide à l'emploi et l'amélioration des infrastructures. Les dépenses engagées sont ainsi justifiées en partie par des données empiriques suggérant des retombées économiques substantielles des études supérieures et de l'obtention d'un diplôme.
Les résultats scolaires des étudiants ne sont pas toujours satisfaisants. Nombre d'entre eux mettent plus de temps que prévu à terminer leurs cours, et l'une des raisons possibles de ces mauvais résultats est un manque de préparation. En particulier, beaucoup d'étudiants ont des difficultés avec leurs méthodes de travail. Cependant, partant du principe que le développement de ces compétences est très rentable, la réponse traditionnelle aux problèmes de réussite scolaire consiste en une série de services d'aide à la réussite (ateliers de gestion du temps, définition d'objectifs, orientation pédagogique, etc.). De plus, dans certains cas spécifiques, ces services sont associés à un soutien psychologique.
Une autre stratégie visant à améliorer la réussite scolaire consiste en des programmes de bourses au mérite, qui se sont principalement concentrés sur un petit nombre d'élèves brillants. Afin d'élargir le nombre d'élèves bénéficiant de ces programmes, une initiative a émergé dans le domaine des bourses d'études : utiliser des récompenses et des incitations financières pour motiver les élèves ayant de bons résultats scolaires, et non plus seulement ceux aux performances exceptionnelles. Ces programmes visent, en partie, à attirer les meilleurs élèves dans les établissements publics. Mais ils sont également motivés par l'idée que l'aide au mérite accroît l'intérêt pour les études et incite les élèves à adopter de bonnes méthodes de travail.
Les données non expérimentales sur l'efficacité des services aux étudiants sont mitigées. Des études plus rigoureuses avec en pixel, Les études expérimentales et quasi-expérimentales, notamment auprès des lycéens, présentent des résultats plus prometteurs. Cependant, d'après la littérature, ni les stratégies de soutien scolaire ni les incitations financières n'ont fait l'objet d'évaluations à grande échelle utilisant unique Les recherches sur l'assignation aléatoire dans un contexte universitaire traditionnel constituent une lacune que Angrist, Lang et Oreopoulos (2007) cherchent à combler.
Détails de l'intervention
Angrist, Lang et Oreopoulos (2009) présentent les résultats d'une vaste expérience de terrain randomisée visant à évaluer les principales stratégies d'amélioration des performances scolaires des étudiants à court et à long terme. Plus précisément, l'étude cherche à déterminer si les étudiants en difficulté scolaire obtiennent de meilleurs résultats lorsqu'ils bénéficient de services universitaires supplémentaires, de bourses au mérite, ou des deux, et si les effets de ces interventions se prolongent au-delà de la période pendant laquelle elles ont été mises en œuvre.
L'étude porte sur le projet STAR (Student Achievement and Retention Project), une évaluation randomisée des services et incitations offerts aux étudiants dans l'un des campus satellites d'une grande université canadienne. Aux États-Unis, cet établissement pourrait être considéré comme une grande université publique aux frais de scolarité fortement subventionnés. Environ 1 600 étudiants de première année ont participé au projet ; la plupart étaient originaires de la région et possédaient un diplôme d'études secondaires classique.
Le projet STAR comprend trois types d'intervention : un service d'accompagnement appelé Programme de soutien aux étudiants (PSE), un programme incitatif appelé Programme de bourses d'études (PBE) et une intervention combinant les deux, appelée Programme de soutien aux étudiants en difficulté (PSED). Le PSE a permis à 250 étudiants d'accéder à un soutien par les pairs et à un enseignement complémentaire sous forme de groupes d'étude animés (GEA). Les pairs-aidants sont des étudiants formés par le programme pour offrir des conseils pédagogiques aux étudiants en première année. Les GEA, quant à eux, sont des séances de classe spécifiques conçues pour améliorer les méthodes de travail et les stratégies d'apprentissage des étudiants, sans se concentrer uniquement sur le contenu des cours.
Le programme SFP offrait à 250 étudiants la possibilité d'obtenir des bourses au mérite pour avoir maintenu de bonnes notes, sans pour autant nécessairement obtenir les meilleures, durant leur première année d'études. Les participants recevaient 5 000 $ pour une note de B (moyenne de 3,0) ou plus, ou 1 000 $ pour une note de C+ ou B- (moyenne de 2,3 à 2,9). Toutefois, pour être admissibles, les étudiants devaient suivre au moins quatre cours par semestre et s'inscrire en deuxième année.
Le troisième groupe de 150 étudiants s'est vu proposer à la fois le SSP et le SFP. Enfin, la démonstration STAR comprenait un groupe témoin de 1 006 étudiants, avec lesquels les responsables du programme n'ont eu aucun contact.
Détails de la méthodologie
L'étude menée par Angrist, Lang et Oreopoulos (2009) présente une expérience de terrain randomisée comparant deux stratégies visant à améliorer la réussite scolaire des étudiants de premier cycle à temps plein d'une grande université canadienne. Un premier groupe (« services ») a bénéficié de conseils entre pairs et de groupes d'étude organisés. Le second groupe (« incitations ») s'est vu offrir des bourses au mérite pour aider les étudiants de première année à maintenir de bonnes notes, sans nécessairement viser l'excellence. Un troisième groupe a combiné les deux interventions.
Pour les besoins de cette analyse, tous les étudiants de première année inscrits en septembre 2005, à l'exception de ceux dont la moyenne générale se situait dans le quartile supérieur, ont été répartis aléatoirement dans l'un des trois groupes d'intervention ou dans un groupe témoin. Un groupe d'intervention a bénéficié de divers services de soutien, notamment du mentorat par des étudiants de cours plus avancés et un enseignement complémentaire visant à développer l'esprit critique. Un deuxième groupe a reçu des primes en espèces pour l'atteinte d'une certaine moyenne générale. De plus, un troisième groupe d'intervention a bénéficié d'une combinaison de services et de primes, une intervention qui n'avait pas été analysée auparavant. Le groupe témoin avait accès aux services de soutien universitaires habituels, mais n'a reçu aucun avantage supplémentaire.
Résultats
Le premier constat de l'étude est que les jeunes femmes utilisent les services beaucoup plus que les jeunes hommes. Le second constat, relatif à l'utilisation des services, est l'émergence d'une forte interaction entre l'offre de bourses et le recours aux services : les étudiants du groupe combiné étaient plus susceptibles d'utiliser les services que ceux qui n'avaient pas la possibilité d'obtenir de bourse. Les incitations ont donc eu pour effet immédiat, à court terme, d'accroître le nombre d'étudiants sollicitant un soutien scolaire.
Les effets du programme STAR sur la réussite scolaire des étudiants sont plus variés. Outre l'écart entre les sexes en matière de taux d'admission, les résultats montrent un impact significatif sur les notes uniquement pour les femmes. Cet impact est plus marqué chez les femmes du groupe combinant bourse et services. Ce groupe a également obtenu davantage de crédits et a présenté un taux de stages universitaires significativement plus faible en fin d'année.
Les auteurs soulignent que les femmes du groupe combiné ont continué à obtenir de meilleurs résultats que le reste de la population STAR au cours de la deuxième année, malgré le fait que les bourses et les services n'étaient disponibles que durant la première année. Ce résultat suggère que les compétences et les habitudes d'étude acquises durant la première année ont contribué à améliorer les performances ultérieures.
L'intérêt des étudiants pour les services de soutien s'est avéré inférieur aux prévisions. En revanche, cet intérêt, reflété par les taux d'utilisation et de recours aux services, était nettement plus élevé dans le groupe ayant également bénéficié d'incitations financières. L'intérêt et le recours aux services étaient également beaucoup plus importants chez les jeunes femmes que chez les jeunes hommes. Le soutien par les pairs a rencontré un succès considérable par rapport aux cours de soutien, et ce, pour les deux sexes. L'intervention de soutien par les pairs mérite clairement d'être approfondie, de même que le recours à des incitations liées à la réussite pour accroître l'intérêt pour les services.
Plusieurs tendances se dégagent des résultats de l'étude STAR. Premièrement, les étudiants ayant bénéficié d'un soutien par les pairs et d'un enseignement complémentaire sans bourse n'ont pas obtenu de meilleurs résultats que ceux du groupe témoin. Ceci pourrait s'expliquer par des taux d'adhésion relativement faibles dans les groupes ayant reçu ces services, car un faible taux de consentement atténue les effets de l'analyse en intention de traiter. Par ailleurs, une analyse par la méthode des doubles moindres carrés (2SLS), ajustant les effets de l'analyse en intention de traiter pour tenir compte de la non-participation, révèle un niveau de précision suffisant pour détecter des effets théoriques des services équivalents à 0,25σ dans l'échantillon combiné d'hommes et de femmes. Les résultats suggèrent donc que les bénéfices des services seuls sont relativement modestes.
Leçons de politique publique
À partir des résultats de l'étude, il est possible de soulever certaines questions, telles que : pourquoi les effets ont-ils été plus importants dans le groupe combiné ; et pourquoi les femmes ont-elles mieux réagi aux programmes que les hommes ?
Angrist, Lang et Oreopoulos (2009) avancent deux raisons possibles expliquant l'impact plus important du programme combiné. L'influence significative des notes du semestre d'automne sur les deux groupes (SFP et SFSP) suggère que les bourses d'études constituaient à elles seules un puissant facteur de motivation. Le groupe SFSP bénéficiait toutefois d'un mentorat et d'un soutien continus. Ces étudiants étaient contactés plus fréquemment par courriel toutes les deux semaines par des conseillers pairs. Cette interaction accrue avec des étudiants plus avancés a probablement facilité leur adaptation et leur intégration au sein du nouvel environnement universitaire. Le groupe « services seulement » (SSP) offrait un accès similaire, mais son taux d'admission était faible. Concernant le service de mentorat, le taux d'admission des femmes du SFSP était presque le double de celui des femmes du SSP. Ainsi, le SFSP semble avoir combiné avec succès une motivation accrue et un dispositif bien défini pour une amélioration durable des résultats.
Bien qu'il n'existe pas d'explication simple aux différences de réaction entre les sexes face aux incitations et aux services, les auteurs soulignent que les femmes semblent généralement plus engagées dans les études postsecondaires que les hommes. Cette différence semble en partie attribuable à de meilleures habitudes d'étude chez les femmes, ce qui laisse supposer qu'elles sont peut-être plus motivées à réussir leurs études et, par conséquent, à tirer parti de programmes comme STAR.
Des études antérieures ont également confirmé les différences entre les sexes dans la réaction aux incitations et aux services, les femmes montrant de meilleures réponses aux programmes.
Références
ANGRIST, Joshua; LANG, Daniel; OREOPOULOS, Philip. Incitations et services pour la réussite universitaire : données issues d'un essai randomisé. American Economic Journal: économie appliquée, v. 1, non. 1, p. 136-63, 2009.
