l'évaluation par les pairs - florence labord - web-conférence du 9 juin 2015
TRANSCRIPT
MOOC Développement Durable Centrale Paris MOOC Développement Durable Centrale Paris
Présentation Florence Labord0621.447.851
Présentation Florence Labord0621.447.851
Retour d’expérience sur l’évaluation par les pairs
De N à N
Retour d’expérience sur l’évaluation par les pairs
De N à N
L’Ecole Centrale Paris déployait, au second semestre 2014, un MOOC sur la thématique du développement durable, pour la seconde année consécutive.
Ce cours en ligne ouvert à tous est hébergé par la plate-forme francophone France Université Numérique.
Les 2 première sessions du MOOC ont réuni 15 000 étudiants du monde entier.
INTRODUCTIONINTRODUCTION
1. Quand le nombre d’étudiants est élevé.2. Quand il faut automatiser pour supprimer des tâches
ingrates et chronophages.3. (Seulement) quand cela a un sens pédagogique.
INTRODUCTIONINTRODUCTION
Pourquoi une évaluation par les pairs ?
Le MOOC Développement durable : LMS FUN
L’évaluation par les pairs :
avec fonctionnalité unique « équipe » (team)
développée pour cet usage
Powered by
INTRODUCTIONINTRODUCTION
Pour la deuxième session, l’innovation pédagogique consistait :
A mettre en œuvre la constitution libre d’équipes en binômes,
Permettre à chaque binôme de déposer son article scientifique,
Evaluer le travail de groupes de pairs,
Noter les évaluations,
Enregistrer et de restituer tous les résultats des notations.
INTRODUCTIONINTRODUCTION
Développement de l’activité équipeDéveloppements informatiques et interfaces
Test opérationnelsJeux d’essais et tests
Diagramme fonctionnel : constitution des équipesBalayage des cas d’usages
22
33
44
Ingénierie pédagogique du parcoursMise en œuvre des pages du parcours
11
MISE EN OEUVREMISE EN OEUVRE
Ingénierie pédagogique du parcours
Accueil page accessible en mode public, Les autres sur connexion
11
Vidéos de présentation pour les participants qui n’étaient pas à la présentation présentiel
Forum général sur la thématique de l’évaluation par les pairs
Page d’accès à l’outil de constitution des équipes en binôme
Page d’accès au dépôt des devoirs en équipes et d’évaluation des travaux des autres équipes
Gestion du cours réservée à l’encadrement
MISE EN OEUVREMISE EN OEUVRE
Ingénierie pédagogique du parcours
Exemple de consignes apprenants en phase Evaluation
11
Importance de la grille de critères et du barème de notation
MISE EN OEUVREMISE EN OEUVRE
Diagramme fonctionnel : constitution des équipes
22
33
Creation d’une equipe
Invitation
Développement de l’activité équipe
MISE EN OEUVREMISE EN OEUVRE
33
Coté invité
Développement de l’activité équipe
MISE EN OEUVREMISE EN OEUVRE
44
Coté gestion : Supression, ajout, affectation de membres, supression d’équipe, renommage
Tests fonctionnels
MISE EN OEUVREMISE EN OEUVRE
IntroductionDont préparation du formulaire d’évaluation
aa
Plusieurs phasesDans l’évaluation par les pairs
11
Remise des travaux par les apprenantsVia une activité de dépôt de devoir
bb
EvaluationFormulaire complété par les étudiants
cc
Notation des évaluationsMeta Evaluation par le dispositif
dd
EXPLOITATIONEXPLOITATION
11 Plusieurs phases
Transition manuelleOu programmée
aa bb ccdd
EXPLOITATIONEXPLOITATION
11 Plusieurs phasesFormulaire d’évaluation complété par un apprenant
Zone de saisie de commentaire et liste déroulante de notation par critère + zone de saisie de feedback global
cc
EXPLOITATIONEXPLOITATION
11 Plusieurs phases
Phase de notation des évaluationsdd
EXPLOITATIONEXPLOITATION
OrganisationnelsMatériel, classement, restitution, archivage, évolution
EconomiquesBesoin « client » /freins et leviers , cas d’usages, modèle économique
33
22
OpérationnelsAccès, usages, accompagnement des acteurs,
11
DESORDRES ET OPPORTUNITESDESORDRES ET OPPORTUNITES
Il ressort que la régulation " manuelle " sur les échanges personnalisés avec les étudiants, la reprise des notations de devoirs et d'évaluation serait alors quantifiée à 20% des volumes étudiants engagés.
Dépôt des devoirsGénération d'un board soumission/non soumission des devoirs ou vue possible sur tri possible sur "workshop add assessment".EvaluationsAffichage de la liste des étudiants ayant évalué ou /non évalué des articles soumis.Rapport d'évaluation de l'atelier ou historique : Tri possible sur les entêtes de champs, dénombrement . Système de détection anti-plagiat
DESORDRES ET OPPORTUNITESDESORDRES ET OPPORTUNITES
Eval’ens du MOOC DD
• Le contenu des cours est-il intéressant ?93% de « Oui » et « Oui tout à fait » (1% « sans opinion »)
• Les supports du cours sont-ils de bonnes qualités ?94% (5%)
• Consignes claires sur la plateforme ?93 % (1%)
• L'évaluation par les pairs permet-elle de mieux comprendre le travail de rédaction d'un article de vulgarisation scientifique ?83% (4%)
• L'ergonomie de la plateforme pour le rendu du travail et l'évaluation était-elle la bonne?70% (6%)
DESORDRES ET OPPORTUNITESDESORDRES ET OPPORTUNITES
Des questions pédagogiques à débattre
• Faire apparaître, dans la feuille de note d’un élève, l’évaluation par les pairs, avec :
– la mention « Evaluateur confirmé : X travaux évalués par les pairs avec sérieux et compétence » ? (qualitatif)
– ou une note : sa moyenne des évaluations réalisées ? (quantitatif)
• L’enseignant ne doit-il recorriger que les 20% de copies aux écart-types trop élevés ? Ou doit-il tout recorriger ? Quel gain dans ce cas ?
DESORDRES ET OPPORTUNITESDESORDRES ET OPPORTUNITES
WEBOGRAPHIEWEBOGRAPHIE
• MOOC « développement durable », Ecole Centrale Paris, Responsable : Pascal da Costa, plate-forme France Université Numérique :https://www.france-universite-numerique-mooc.fr/cours/?state=&university=CentraleParis
• Commission de la culture, de l'éducation et de la communication du Sénat : http://videos.senat.fr/video/videos/2014/video23008.html, 21/05/2014.
Remerciements : Pascal Da Costa - Maitre de conférence Centrale Paris
A VOS QUESTIONSA VOS QUESTIONS
Merci de votre attention,Florence [email protected]