Bienvenue sur notre outil d'évaluation qualitative des messages auto-réflexifs générés par l'IA et adaptés aux profils des apprenants.
🎯 Objectif de l'outil
Cet outil permet d'évaluer la qualité des messages auto-réflexifs générés par ReflAgent,
un tuteur pédagogique personnalisé basé sur l'IA, conçu pour favoriser l'apprentissage auto-régulé (SRL)
en renforçant la conscience métacognitive par un accompagnement réflexif.
Les messages réflexifs ciblent des dimensions clés, notamment la sensibilisation aux risques d'inactivité et d'échec, le degré d'activité et d'implication, ainsi que la stimulation de l'engagement et de la motivation.
🤖 Qu'est-ce que ReflAgent ?
ReflAgent est un compagnon tutoriel IA sensible aux profils, conçu pour favoriser
l'apprentissage auto-régulé (SRL) en améliorant la conscience métacognitive grâce à un soutien réflexif.
Les messages auto-réflexifs sont personnalisés en fonction des profils des apprenants, tels que les étudiants en difficulté, inactifs, en progression ou à risque.
Nous vous invitons à évaluer les messages réflexifs selon cinq métriques, en utilisant une échelle de Likert allant de 1 (très faible) à 5 (très élevée).
📋 Présentation des volets de l'outil
👤
Évaluateur (RGPD)
Authentification et consentement RGPD
Définissez votre profil d'évaluateur, votre niveau d'expertise et donnez votre consentement
pour le traitement de vos données personnelles selon le règlement européen.
📊
Dashboard Étudiant
Visualisation complète du profil d'apprentissage
Explorez le manifeste de l'étudiant, ses compétences et son engagement à l'aide d'un radar, ainsi que sa persistance et la gestion de l'effort via une heatmap temporelle intégrant des indicateurs de persévérance.
🤖
Message Réflexif & Évaluation
Évaluation des messages générés par ReflAgent
Analysez les messages auto-réflexifs et évaluez leur qualité selon 5 métriques:
Authenticité Réflexive, Alignement Empathique, Encouragement Sensible au Risque,
Support aux Défis Mentaux et Support Métacognitif.
📋
Exemple d'Analyse
Cas d'étude avec évaluation détaillée
Découvrez un exemple concret d'analyse d'un étudiant en difficulté, avec le message réflexif
généré, son évaluation métrique et des observations pédagogiques détaillées.
🚀 Comment commencer ?
Configurez votre profil d'évaluateur
Accédez à l'onglet "Évaluateur (RGPD)" pour définir vos informations et consentements.
Explorez les profils d'apprenants
Naviguez entre les 14 scénarios d'apprenants différents via les boutons de navigation.
Analysez les messages réflexifs
Évaluez la qualité des messages générés par ReflAgent dans l'onglet "Message Réflexif & Évaluation".
Explorer l'exemple d'analyse
Consultez l'onglet "Exemple d'Analyse" pour comprendre la méthodologie d'évaluation.
Conseil : Commencez par explorer l'exemple d'analyse pour comprendre
comment évaluer les messages avant de procéder à vos propres évaluations.
Laboratoire d'informatique de l'Université du Mans
Travaux de recherche sur l'apprentissage auto-régulé et l'intelligence artificielle éducative
dans le cadre du projet écri+ :
https://ecriplus.fr/
👤 Informations de l'évaluateur (RGPD)
Veuillez accepter le consentement RGPD pour pouvoir remplir les champs d'identification
Veuillez saisir votre nom et prénom si vous souhaitez être identifié
Pour être contacté concernant les résultats de l'étude
Sélectionnez votre rôle principal dans le domaine éducatif
Indiquez votre niveau d'expertise dans l'enseignement et la recherche liés à l'apprentissage auto-régulé
Indiquez votre niveau de maîtrise des concepts et outils de réflexivité
🕵️ Évaluation anonyme : Vos évaluations seront enregistrées sans information personnelle.
Seules vos réponses aux métriques de confiance seront conservées.
📝 Manifeste étudiant
Chargement des données...
Progression par compétence
Chargement des compétences...
Faible (0-50%)
Moyen (50-70%)
Élevé (70-100%)
Analyse de l'engagement: Indicateurs de comportement d'apprentissage
Analyse du radar des métriques d'engagement
Analyse en cours...
🎙️Radar
00:00
Prêt
🔥 Heatmap d'activité - Analyse de la persistance et du management de l'effort (persévérance)
📈 Niveaux d'activité
Aucune
Faible
Moyenne
Élevée
Intense
🕖 Indicateurs de la gestion du temps et régularité
Régularité du travail :
-
La constance de l'activité de l'apprenant dans le temps.
Gestion des échéances : -
La capacité de l'apprenant à respecter les délais.
Schéma d'effort :-
La dynamique temporelle de l'effort.
Persistance et gestion des efforts :Analyse en cours...
🎙️Heatmap
00:00
Prêt
🤖 ReflAgent – Analyse & accompagnement
Le message d'analyse apparaîtra ici après chargement...
🧑⚖️ Volet Expert – Métriques de Confiance
Évaluez votre confiance dans l'analyse de ReflAgent pour ce scénario :
Authenticité Réflexive (AR)
Le message auto-réflexif reflète-t-il fidèlement la situation réelle de l'étudiant (profil d'apprenant) ?
Alignement Empathique (AE)
Le message auto-réflexif inclut-il des marques linguistiques empathiques ?
Encouragement Sensible au Risque (ESR)
Le message auto-réflexif montre un équilibre harmonieux entre les encouragements et l'indication du niveau de risque de l'apprenant ?
Support aux Défis Mentaux (SDM)
Le message auto-réflexif stimule l'étudiant et le rend compétitif ?
Support Métacognitif (SM)
Le message auto-réflexif aide-t-il l'étudiant à réfléchir sur ses stratégies d'apprentissage et sa méthode de travail sur la plateforme ?
💬 Commentaire expert
🔒 Indice global de confiance
0%
Faible confianceConfidence moyenneForte confiance
Scénario actuel
-
Confiance moyenne
0%
Niveau de risque
-
Activité moyenne
-
📋 Exemple d'Analyse – Étudiant en difficulté / évitement de l'échec : peur de l'échec supérieure à la motivation de réussite.
Éléments clés de l'analyse du profil de l'apprenant
Profil global :
Étudiant à risque, faible engagement et compétences fragiles.
Points forts :
Volonté minimale de progresser (essayer malgré l'échec), possibilité de reconstruire la motivation par petites actions.
Points à améliorer :
Niveau d'activité et d'implication, Organisation et stratégies d'apprentissage.
Objectif pédagogique :
Réintroduire l'étudiant dans un rythme régulier avec des objectifs accessibles, renforcer la confiance et la motivation, fournir un soutien plus concret.
Message auto-réflexif
Ton niveau d'engagement est actuellement très faible : seulement 35 % des activités ont été démarrées et 30 % achevées. 😔 Tes compétences restent fragiles (40 %), ce qui indique un risque élevé de décrochage.
Tu sembles parfois éviter les situations qui pourraient mener à l'échec, mais il est important de te rappeler que l'échec fait partie de l'apprentissage et peut devenir une véritable source de progression. 🛡️
Commence par fixer des objectifs minuscules et accessibles, et entreprends de petites actions régulières dès le début de la semaine. Cela te permettra de reconstruire progressivement un rythme stable et de retrouver confiance et motivation.
Tu dois travailler les compétences mises en avant : la compétence Favoriser la progression du domaine Paragraphe et la compétence Valoriser les petites victoires du domaine Texte.
Évaluation métrique avec observations
Métrique
Niveau ★
Observations (avec passage du message)
Authenticité Réflexive (AR)
★★★★☆
L'analyse reflète fidèlement la situation : « Ton niveau d'engagement est actuellement très faible … Tes compétences restent fragiles » ✅
Alignement Empathique (AE)
★★★☆☆
L'agent montre une compréhension partielle des émotions (peur de l'échec supérieure à la motivation de réussite) : « Tu sembles parfois éviter les situations qui pourraient mener à l'échec » ⚠️ Peut être renforcé avec plus de soutien émotionnel direct
Encouragement Sensible au Risque (ESR)
★☆☆☆☆
L'agent indique le risque mais le soutien reste limité : « …ce qui indique un risque élevé de décrochage » ❌ Faible guidance concrète pour sécuriser la progression
Support aux Défis Mentaux (SDM)
★☆☆☆☆
Usage très limité de défis mentaux comme stimulus et de compétition : « Commence par fixer des objectifs minuscules et accessibles » ❌ Absence de stratégies autour des défis mentaux.
Support Métacognitif (SM)
★★☆☆☆
Encouragement minimal à réfléchir sur sa méthode, Suggestions très limitées pour développer la réflexion ou les compétences : « entreprends de petites actions régulières » ⚠️ Peu d'indication sur planification ou révision de stratégie
Laboratoire d'informatique de l'Université du Mans