Automated Feedback to Peer Tutors Increases Their Talk Moves and Learner Reasoning but Not the Balance of Talk

Dorottya Demszky; Yann Hicke; Joy Yun; Mariah Olson; Max Karpawich; Anees Iqbal; Matt Wu; Jimmy Huang; Akshay Ravikumar; Drew Bent

Résumé IA · arXiv: 2611.07072v1 · cs.CL

Automated Feedback to Peer Tutors Increases Their Talk Moves and Learner Reasoning but Not the Balance of Talk

Dorottya Demszky, Yann Hicke, Joy Yun, Mariah Olson, Max Karpawich, Anees Iqbal, Matt Wu, Jimmy Huang,

et 2 autres auteurs

Akshay Ravikumar, Drew Bent

Article original Soumis à arXiv le 04 Nov. 2026 Licence : CC BY 4.0 Aussi en : en

Comment lire ce résumé ? Guide illustré

L’essentiel

Dans deux bootcamps SAT, le retour automatisé aux tuteurs augmente certaines pratiques favorisant le raisonnement des apprenants, mais ne modifie pas la répartition de la parole.

Question

L’étude examine si un retour automatisé après les séances modifie les pratiques des tuteurs bénévoles et les résultats des apprenants en tutorat de groupe. Elle teste aussi si un retour adressé aux apprenants, avec différents cadrages motivationnels, renforce ces effets.

Méthode

Essai randomisé dans deux bootcamps de quatre semaines sur Schoolhouse.world : 1 030 tuteurs ont été répartis entre un groupe témoin, un retour aux tuteurs seuls et deux conditions combinant ce retour à un retour aux apprenants. L’analyse porte sur 5 653 séances de 899 tuteurs, à partir de mesures calculées sur des transcriptions automatisées; des entretiens ont été menés avec 17 tuteurs et 13 apprenants.

Résultats

Résultat Le retour aux tuteurs a augmenté les sollicitations d’idées des apprenants de 8 %, la reprise de leurs contributions de 9 % et leur raisonnement de 15 % dans l’analyse regroupée.
Voir le passage dans l’article
Pooling both bootcamps, treated tutors elicited learner ideas 1.41 more times per hour than control tutors, an 8% increase over the control mean of 17.16 ($p=.005$). They built on learner contributions 0.52 more times per hour, a 9% increase ($p=.004$), and their learners expressed reasoning 0.24 more times per hour, a 15% increase ($p=.001$).
Résultat La part du temps de parole des tuteurs n’a pas changé; elle était de 91,5 % dans le groupe témoin.
Voir le passage dans l’article
In contrast, we find no effect on tutor talk time ($-0.001$, $p=.803$), which averaged 91.5% in the control group.
Résultat Le retour destiné aux apprenants n’a pas produit de changement mesurable supplémentaire dans les pratiques discursives par rapport au retour destiné aux tuteurs seuls.
Voir le passage dans l’article
We find no effect of learner feedback on any measure of instructional practice, in the pooled model or in either bootcamp, including the measures that credit learners for typing in the chat: the tutor’s share of words across both channels is $-0.004$ ($p=.42$) and the proportion of learners participating in any channel $+0.008$ ($p=.24$).
Résultat Les résultats regroupés ne montrent pas d’effet significatif du retour aux tuteurs sur les mesures de résultats des apprenants.
Voir le passage dans l’article
Turning to learner outcomes (Table 3), we find no significant effects in the pooled models.
Interprétation des auteurs Les entretiens suggèrent que les tuteurs ont essayé d’appliquer les stratégies proposées, mais que l’absence de réponse des apprenants constituait un obstacle fréquent.
Voir le passage dans l’article
The main barrier to acting on the feedback was learners who did not respond.

Limites

La livraison du retour était incomplète et certains tuteurs témoins avaient déjà reçu un retour, ce qui peut atténuer les estimations.
Voir le passage dans l’article
Our estimates are intention-to-treat under incomplete delivery, and some control tutors had received feedback before the trial; both likely attenuate them (Section 5.2).
La période d’observation de quatre semaines ne permet pas de déterminer si les changements persistent ni s’ils influencent les résultats au SAT ultérieur.
Voir le passage dans l’article
Our outcome window is four weeks, and without scores from the subsequent SAT administration we cannot say whether the changes in discourse persist or affect learning.
L’étude porte sur des tuteurs bénévoles, principalement lycéens, d’une seule plateforme, ce qui limite la généralisation à d’autres contextes.
Voir le passage dans l’article
Finally, our sample consists of volunteer, mostly high school tutors on a single platform, preparing learners for a high-stakes test in sessions where learners rarely spoke.

Portée

Les auteurs montrent qu’un retour automatisé peut modifier des actions pédagogiques que le tuteur contrôle directement et favoriser davantage de raisonnement chez les apprenants, sans réduire la domination du tuteur dans la conversation. Ils avancent que rééquilibrer la parole pourrait nécessiter des retours mieux adaptés aux apprenants et des structures de séance leur donnant davantage d’occasions d’interagir.

Rédigé par une IA à partir de l’article. Les passages cités sont vérifiés mot pour mot dans le texte analysé ; le reste peut contenir des erreurs.

Mots clés générés par l'IA : tutorat entre pairs ; retour automatisé ; participation des apprenants ; pratiques de discussion ; essai randomisé

Pour aller plus loin

Résumé Complet
Résumé vulgarisé
Article de blog
Abstract original

Cette étude examine si un retour automatisé sur les échanges en séance peut améliorer les pratiques de tuteurs bénévoles animant de petits groupes, et si l’ajout d’un retour destiné aux apprenants peut renforcer leur participation. La question est importante pour les programmes de tutorat entre pairs, où les tuteurs bénéficient souvent de peu de coaching individuel. Les auteurs s’intéressent notamment à la capacité des tuteurs à solliciter les idées des apprenants, à reprendre leurs contributions et à encourager leur raisonnement, ainsi qu’à la répartition du temps de parole. L’essai randomisé a été mené au printemps 2024, lors de deux stages intensifs de préparation au SAT en mathématiques organisés sur Schoolhouse.world. Au total, 1 030 tuteurs bénévoles et 7 443 apprenants y ont participé. L’analyse porte sur 6 508 séances enregistrées, dont 5 653 composent l’échantillon principal après les exclusions et la suppression des cas incomplets. Les tuteurs ont été répartis entre quatre groupes : aucun retour, retour automatisé destiné au tuteur, ou retour au tuteur accompagné d’un message pour les apprenants. Ce message était axé soit sur les objectifs personnels, soit sur les bénéfices collectifs. Généré à partir des transcriptions, le retour destiné aux tuteurs comprenait des statistiques, des extraits de séance et des suggestions produites à l’aide de GPT-4 Turbo. Il portait successivement sur la sollicitation des idées, la reprise des contributions et les demandes de justification. Les analyses, définies à l’avance, comparaient les groupes selon le traitement attribué, même lorsque le retour n’avait pas été consulté. Des entretiens avec 17 tuteurs et 13 apprenants complétaient les données quantitatives. Par rapport au groupe témoin, les tuteurs ayant reçu un retour sollicitaient les idées des apprenants 1,41 fois de plus par heure, soit une hausse d’environ 8 %. Ils reprenaient leurs contributions 0,52 fois de plus par heure, soit environ 9 % de plus. Le raisonnement exprimé par les apprenants augmentait de 0,24 occurrence par heure, soit 15 %. Ces trois effets, d’environ 0,12 écart-type, étaient statistiquement significatifs après correction pour comparaisons multiples. Les estimations allaient dans le même sens dans les deux stages, mais aucun effet propre à un stage ne résistait à cette correction. En revanche, le retour n’a pas modifié la part du temps de parole occupée par les tuteurs : elle atteignait 91,5 % dans le groupe témoin, et l’effet estimé était pratiquement nul. La proportion d’apprenants qui prenaient la parole et le nombre de questions qu’ils posaient ont légèrement augmenté, mais ces résultats restent suggestifs plutôt que concluants. Les analyses principales ne montrent pas non plus d’amélioration significative de l’assiduité, des résultats aux tests pratiques, des évaluations des séances ou de la satisfaction. L’ajout d’un message destiné aux apprenants n’a pas produit d’amélioration détectable des pratiques de discussion, qu’il soit axé sur les objectifs personnels ou sur le soutien aux pairs. Quelques évaluations de satisfaction étaient plus favorables, mais ces différences ne résistaient pas à la correction statistique. Lors des entretiens, les tuteurs indiquaient qu’ils sollicitaient davantage les idées des apprenants et préféraient les questions ouvertes à des formulations comme « Avez-vous des questions ? ». Ils décrivaient toutefois le silence des apprenants comme un obstacle majeur.

Un retour automatisé aide les tuteurs à mieux faire réfléchir les apprenants

Dans les séances de tutorat, poser une question ouverte ou demander à un apprenant d’expliquer son raisonnement peut transformer une simple explication en véritable échange. Mais ces pratiques ne sont pas toujours faciles à adopter, surtout lorsque les tuteurs bénévoles disposent de peu de coaching individuel. Une étude intitulée « Automated Feedback to Peer Tutors Increases Their Talk Moves and Learner Reasoning but Not the Balance of Talk » examine si un retour automatisé peut les aider à animer de meilleures discussions — et si un message adressé aux apprenants peut les encourager à participer davantage.

Les résultats, nuancés, montrent que le retour destiné aux tuteurs a bien modifié certaines de leurs pratiques. Les apprenants ont aussi davantage exprimé leur raisonnement. En revanche, l’intervention n’a pas rééquilibré le temps de parole : les tuteurs continuaient à occuper la grande majorité de la séance.

Une expérience menée lors de stages de mathématiques

Au printemps 2024, l’équipe de recherche a conduit un essai randomisé pendant deux stages intensifs de préparation au SAT en mathématiques, organisés sur Schoolhouse.world. L’étude a impliqué 1 030 tuteurs bénévoles et 7 443 apprenants. Les chercheurs ont analysé 6 508 séances enregistrées, puis constitué un échantillon principal de 5 653 séances après plusieurs exclusions et le retrait des cas incomplets.

Les tuteurs ont été répartis entre quatre groupes : un groupe sans retour, un groupe recevant un retour automatisé, et deux groupes recevant ce même retour accompagné d’un message pour les apprenants. Ces messages mettaient l’accent soit sur les objectifs personnels, soit sur les bénéfices du soutien entre pairs.

À partir des transcriptions, le système produisait des statistiques, des extraits de séance et des suggestions générées avec GPT-4 Turbo. Les conseils portaient sur trois façons de favoriser la réflexion : solliciter les idées des apprenants, reprendre leurs contributions et leur demander de justifier leur raisonnement. Les chercheurs ont comparé les groupes selon le traitement attribué, même lorsque certains tuteurs n’avaient pas consulté leur retour.

Des questions qui font davantage place au raisonnement

Comparés aux tuteurs du groupe témoin, ceux qui avaient reçu un retour sollicitaient les idées des apprenants 1,41 fois de plus par heure, soit une hausse d’environ 8 %. Ils reprenaient également leurs contributions 0,52 fois de plus par heure, soit environ 9 % de plus. Enfin, le nombre d’occurrences où les apprenants exprimaient leur raisonnement augmentait de 0,24 par heure, soit 15 %.

Ces trois effets étaient statistiquement significatifs après correction pour les comparaisons multiples. Leur ampleur restait modeste — environ 0,12 écart-type — mais les résultats suggèrent qu’un retour automatisé peut encourager des gestes pédagogiques précis, sans nécessiter un coaching individuel intensif. Les estimations allaient dans le même sens lors des deux stages, même si aucun effet propre à un stage ne résistait à la correction statistique.

Le temps de parole reste largement déséquilibré

Le principal résultat négatif concerne la répartition de la parole. Dans le groupe témoin, les tuteurs occupaient 91,5 % du temps de parole. Le retour automatisé n’a pratiquement pas modifié cette proportion. Autrement dit, les tuteurs posaient plus souvent certaines questions favorisant la réflexion, mais cela ne suffisait pas à faire des apprenants les principaux acteurs de la conversation.

La part des apprenants qui prenaient la parole et le nombre de questions qu’ils posaient ont légèrement augmenté. Toutefois, ces observations restent suggestives plutôt que concluantes. L’étude n’a pas non plus établi d’amélioration significative de l’assiduité, des résultats aux tests pratiques, des évaluations des séances ou de la satisfaction.

Un message aux apprenants ne suffit pas à changer la discussion

L’ajout d’un message pour les apprenants n’a pas produit d’amélioration détectable des pratiques de discussion, qu’il encourage le développement d’objectifs personnels ou insiste sur le soutien aux autres. Certaines évaluations de satisfaction étaient plus favorables dans les groupes ayant reçu ces messages, mais les différences ne restaient pas statistiquement significatives après correction.

Ce résultat rappelle qu’un encouragement général ne garantit pas une participation accrue. Dans une discussion de groupe, les apprenants peuvent avoir besoin d’occasions concrètes de s’exprimer, ainsi que d’un environnement où le silence ne met pas fin à l’échange.

Le défi du silence

Des entretiens avec 17 tuteurs et 13 apprenants complétaient les analyses quantitatives. Les tuteurs interrogés disaient qu’ils sollicitaient davantage les idées des apprenants après avoir reçu un retour. Ils préféraient aussi les questions ouvertes à des formules génériques comme « Avez-vous des questions ? », qui peuvent être difficiles à saisir pour les participants.

Ils décrivaient néanmoins le silence des apprenants comme un obstacle majeur. Même lorsqu’un tuteur pose une bonne question, la participation ne suit pas automatiquement. Il faut parfois reformuler, laisser du temps ou inviter chacun à contribuer sans pression excessive.

Un outil utile, mais pas une solution complète

Cette étude de Dorottya Demszky, Yann Hicke, Joy Yun, Mariah Olson, Max Karpawich, Anees Iqbal et leurs collègues montre qu’un retour automatisé peut aider les tuteurs bénévoles à adopter des pratiques favorisant le raisonnement. Son intérêt est particulièrement évident dans les programmes où les possibilités de coaching sont limitées.

Mais améliorer les gestes du tuteur ne suffit pas nécessairement à équilibrer une conversation ou à accroître les résultats des apprenants. Pour soutenir une participation plus active, les retours automatisés pourraient devoir être associés à d’autres approches : des stratégies pour gérer les silences, des routines donnant à chacun un tour de parole et des occasions répétées de répondre. Le retour semble donc être un levier prometteur, plutôt qu’une solution à lui seul.

Créé le 09 Nov. 2026

Cette synthèse vous a-t-elle été utile ?

Note : 0

Posez des questions sur cet article à notre assistant IA

Comment discuter avec cet article ? Guide illustré

Comparer avec le PDF

Vous pouvez aussi discutez avec plusieurs papiers à la fois ici.

Instructions pour utiliser l'assistant IA ?

Outils pour cet article

Expliquer autrement 1 réécriture gratuite restante aujourd'hui

Enregistrer dans une collection Regroupez des articles en collections pour les comparer, les interroger et les exporter. Continuer avec Google Créer un compte gratuit Se connecter

Exporter BibTeX · RIS (Zotero, Mendeley, EndNote) · Obsidian (Markdown) · Notion (Markdown)

Outils avancés Premium

Pour suivre un domaine de près : alertes de citations, diapositives de journal club, comparaison des versions et envoi vers Zotero. Découvrir Premium

Zotero

Alertes de citation Guide des alertes de citations

Qui travaille dessus ? Les personnes et institutions qui publient sur son sujet

Lettre hebdomadaire Présenté dans « Intelligence artificielle cette semaine » du 9 novembre 2026. Intelligence artificielle cette semaine : ce que les bons scores ne disent pas

Journal club Premium+ Des slides pour le présenter Proposer pour le journal club

Versions Ce qui a changé entre les versions

En parler en public Premium+ Kit presse : communiqué, questions, détecteur de hype Guide du kit presse

Avertissement : Notre outil de synthèse basé sur l'IA et l'assistant virtuel fournis sur ce site Web peuvent ne pas toujours fournir des résumés complets ou des réponses exactes. Nous vous encourageons à examiner attentivement et à évaluer le contenu généré pour vous assurer de sa qualité et de sa pertinence par rapport à vos besoins.

Automated Feedback to Peer Tutors Increases Their Talk Moves and Learner Reasoning but Not the Balance of Talk

L’essentiel

Question

Méthode

Résultats

Limites

Portée

Pour aller plus loin

Definitions

Un retour automatisé aide les tuteurs à mieux faire réfléchir les apprenants

Une expérience menée lors de stages de mathématiques

Des questions qui font davantage place au raisonnement

Le temps de parole reste largement déséquilibré

Un message aux apprenants ne suffit pas à changer la discussion

Le défi du silence

Un outil utile, mais pas une solution complète

Posez des questions sur cet article à notre assistant IA

Outils pour cet article

Outils avancés Premium

Les articles autour de celui-ci

Les articles les plus proches

Les travaux antérieurs sur lesquels il s’appuie

Aller plus loin

Citer cet article (BibTeX)