L valuation des apprentissages: les pratiques universitaires encouragent-elles ou non le plagiat

1. L’évaluation des apprentissages: les pratiques universitaires encouragent-elles ou non le plagiat? Louise Arsenault Consultante en évaluation Faculté de médecine CREPUQ Université du Québec à Trois-Rivières Le 29 novembre 2009

3. … Ou pourquoi pas? En 2009 25$ pour une thèse en littérature dans le site AcaDémon où l’on garantit l’intégrité des documents grâce à leur programme de détection du plagiat !?! Le Devoir.com. Travaux clés en main pour étudiants pressés, paresseux ou cancres! Clairandrée Cauchy. Édition du samedi 11 et du dimanche 12 avril 2009 2.700 euros pour un faux diplôme… En 2008, un étudiant aurait à lui seul vendu près de 300 diplômes … Le journal des chercheurs. Étudiants chinois et tricherie universitaire. René Barbier, professeur émérite des universités en Sciences de l’éducation, Université Paris 8. 15 avril 2009 Et vous, à combien estimez-vous le pourcentage d’étudiants qui «trichent» dans ces enquêtes…?

4. Mon rapport d’étonnement! 47% des étudiants pensent que leurs professeurs ne pénaliseront pas les étudiants qui trichent Donald McCabe, professor of management, Rutgers University, N.-B., New Jersey. Many Teachers Ignore Cheating, Survey Finds. Mark Stricherz. Mai 9, 2001 www.plagiarism.org Maintenant les étudiants trichent différemment Ils ne sont plus embarrassés par la tricherie PRISME 30 SEPTEMBER 2004 The Cheating culture, Jeffrey Selingo Les tricheurs sont souvent des premiers de classe Affaires universitaires (WWW.AFFAIRESINIVERSITIRES.CA). Avril 2007. Qui trompent-ils réellement? Alex Gillis, professeur de journalisme, Université de Ryerson

5. Mon rapport d’étonnement! Association des tricheurs anonymes Avec un code de déontologie!!! Techniques pour tricher Devoirs déjà faits Générateur d’excuses pour retard

6. La prévention… des petits pas! Plus un professeur porte attention à la tricherie, moins il y en a.*L’examen Augmenter la surveillance Numéroter les questionnaires Faire deux versions d’un examen pourrait diminuer les chances de tricherie de 25%* Construire de nouveaux examens Simplement avertir ses étudiants des effets néfastes de la tricherie avant un examen pourrait diminuer le fléau de 12%* *Joe Kertvliet, associate professor of economics at Oregon State University PRISME 30 SEPTEMBER 2004 The Cheating culture, Jeffrey Selingo Attention à la position de la bonne réponse (QCM)!

7. Les examens à choix multiple Quelle est la définition du concept de congruence? Qualité qui fait référence à la stabilité des résultats Qualité d’un instrument qui mesure bien ce qu’il prétend mesurer Lien étroit qui doit exister entre un objectif ou une compétence à mesurer et une question d’examen ou une situation d’évaluation Ensemble des opérations pour modérer les résultats d’un instrument … Un énoncé V-F qui contient les mots toujours ou jamais est presque toujours Faux

8. Après la correction Soyer attentif à l’étape de la correction Analyses statistiques qui permettent: D’identifier des patrons de réponses aberrantes D’identifier les paires possibles (donneur - receveur) En développement Pratique courante aux États-Unis

9. La prévention Les documents pédagogiques Rappeler dans son plan de cours les politiques relatives au plagiat Research in Economic Education, Can we control cheting in the classroom? Joe Kerkvliet and Charles L. Sigmund. 1999. Et si les examens antérieurs faisaient partie des notes de cours!

10. La prévention Les travaux Varier les formes d’évaluation (attention à la congruence) Sujets des travaux plus dirigés… Évaluer certaines étapes en cours de réalisation Partir d’un travail de l’an dernier et demander d’aller plus loin Construire de nouveaux contextes … Et si c’était l’étudiant qui devait passer son travail dans un logiciel de détection avant de le remettre au professeur… Demander une version électronique des travaux (banque)

11. Menu Fichier Propriétés

12. L’essentiel… le pas de géant! Assurez-vous que la valeur ajoutée de suivre VOTRE cours à l’intérieur d’UN programme d’étude est clairement explicitée dans votre plan de cours Quels apprentissages feront les étudiants dans votre cours? Vous avez plus de faciliter à formuler des objectifs du niveau connaissance et compréhension mais est-ce bien ce que vous souhaitez? Délimitez clairement la grandeur de la patinoire! Rendez ces informations publiques… Mesurer un échantillon de ces mêmes apprentissages! Établir une pondération conséquente avec l’importance des apprentissages mesurés

13. L’évaluation avant et … La qualité des examens Comment peut-on piéger les étudiants? On cache le contenu de l’examen… les étudiants doivent le deviner… Construire des questions qui discriminent les forts des faibles… La courbe normale comme indice de qualité…

14. … maintenant La recherche a apporté des réponses… La qualité des examens On connaît sur quoi repose la qualité des examens… Le contenu (objectifs mesurés / compétences) de l’examen est connu… Connaissance, compréhension, application, analyse, synthèse, etc… Construire des questions (situations) qui mesurent bien les objectifs, compétences…

15. Qualités essentielles de la mesure

16. Comment m'assurer d’une bonne validité? Déterminer les objectifs spécifiques (compétences) que l'on veut mesurer Vérifier la congruence entre l'objectif spécifique (compétence) et la question d'examen (situation d’évaluation) Rédiger des questions (situations) bien construites

17. On se résume … Objectifs / Compétences / Apprentissages Méthodes d’enseignement et d’apprentissage La mesure et l’évaluation des apprentissages

18. Vos étudiants … Ils doivent travailler aussi fort que vous en classe !!!

19. Ce que les étudiants en pensent … Une expérience: Cours MMS 1 Devenir médecin A-2009 Choisir un comportement non professionnel dans votre situation d’étudiant et expliquer pourquoi ce comportement existe (28/200 plagiat ) Comportements: plagiat électronique, l’utilisation de banque de questions ou d’examens, tricherie dans les examens, … Pourquoi: Performance académique grandement valorisée, facilité d’accès entrainant une forme de banalisation, charge de travail importante, solution facile, objectifs du plan de cours pas souvent représentatifs, pas beaucoup d’occasions de pratique avant les examens… Suggérer des interventions susceptibles de modifier ces comportements Donner des questions types pour aider à l’étude, modifier les types de questions et ajouter des ressources pour la correction, sensibiliser les étudiants par leurs pairs, réflexions, conférences ou cours traitant des problèmes éthiques soulevés par le plagiat… Norma Bélanger, professeure (médecin) , Faculté de médecine, Université Laval. Synthèse des travaux d’équipe sur le professionnalisme. Automne 2009.

20. Non-intervention des tribunaux… en matière d’évaluation «…» les tribunaux de révision judiciaire ne s’immiscent pas dans les activités académiques et le fonctionnement interne des institutions d’enseignement, plus particulièrement lorsqu’il s’agit de matières relatives aux examens et à l’application des normes d’évaluation, à moins que des circonstances tout à fait exceptionnelles, comme, par exemple, lorsque l’institution d’enseignement a fait preuve de mauvaise foi ou a agit de façon déraisonnable, arbitraire ou discriminatoire. (Cour d’appel, 1993 : 8) Tiré de Mesure et évaluation en éducation, vol. 17, no. 1, 1994, Perspectives juridique et judiciaire de l’évaluation pédagogique. Jean-Pierre Proulx, Université de Montréal. Merci!