Nom du participant & date

1. Introduction à l’enquête de qualité par rapport au PEC Nom du participant & date Resource based on Liesbeth Baartman

2. Table des matières • PEC: définition et ce qui se cache derrière la théorie • Qualité: explication et discussion • Mécanisme de l’auto-évaluation et expériences • Questionnaire de mesure de qualité du PEC: brève démonstration, instructions pour remplir le formulaire d’enquête

3. Définition du Programme d’Evaluation des Compétences Question ouverte Evaluation fondée sur la pratique Programme PEC Questions à choix multiple Examen oral Questions à réponse courte Dissertation Seminaire

4. PEC: une combinaison de méthodes • La compétence: une matière trop complexe pour être évaluée par une seule méthode; • Complémentaire: une combinaison de différentes méthodes d’évaluation; cette démarche mixte est appropriée pour mesurer les compétences; • Une combinaison de méthodes « traditionnelles » et « nouvelles » selon le contexte; •  Formative et / ou sommative? Il n’est cependant pas toujours aisé de décrire le PEC, ni de le démontrer dans un cours.

5. La pyramide des compétences de Miller (1990)

6. Fait Does Démontre Shows How Sait comment Knows How Sait Knows

7. Validité & fiabilité • Validité: • Qu’est-ce que c’est exactement? • N’est plus intégrée; • Une approche fondée sur des arguments. • Mesurer la qualité du PEC: • Contenu & niveau: toutes les compétences?, connaissances, compétences, attitude + performance? • Méthode d’évaluation/format: approprié à la mesure des compétences?

8. Validité & fiabilité • Fiabilité: • Compétence / la performance varie selon la tâche; • La normalisation ne conduit pas nécessairement à une plus grande fiabilité; • S’appuie sur le jugement humain; • Souvent des informations qualitatives; • Résultat clé indépendant de l'évaluateur ou des circonstances spécifiques: • Instruction / évaluateurs de la formation; • Plusieurs évaluateurs et différents tests.

9. Nouveau critères de qualité additionnels • Fonction formative: • Cela constitue-t-ilun bon feedback? •   Les étudiants apprendront-ils quelque chose de ce test? •   Le test a-t-il un impact positif sur l'apprentissage? •   Auto-évaluation / Evaluation par les pairs. PEC – une mesure de qualité: • Le sens / Auto/ implications au niveau de l’éducation.

11. Pertinence: Toutes les compétences sont évaluées par une méthode/un format approprié

12. Mise en oeuvre Une combinaison de différents évaluateurs, tâches et situations est utilisée

13. Clarté: Les critères et les normes utilisés par le PEC sont clairs et compréhensibles pour tous les acteurs concernés.

14. L’ACCEPTATION: Les parties prenantes s'accordent-ils sur la conception et la mise en œuvre de l'évaluation?

15. Comparabilité Un PEC est effectué de façon cohérente et responsable

16. L’équité Tout le monde devrait pouvoir démontrer sa compétence. Everybody is a genius. But if you judge a fish by its ability to climb a tree, it will live its whole life believing that it is stupid. - Albert Einstein

17. Aptitude pour l’auto-évaluation/réflêxion Le PEC stimule l’auto-réflexion et la formulation de ses propres objectifs d’apprentissage

18. Signification Le feedback de l’évaluation devrait faciliter l’apprentissage

19. COMPLEXITE COGNITIVE Les méthodes d'évaluation devraient permettre aux étudiants de démontrer les différents niveaux de compétences cognitives et les mécanismes de pensée

20. AUTHENTICITE: L’évaluation devrait refléter les tâches professionnelles

21. Conséquences éducatives Le PEC a une influence positive sur l’enseignement et l’apprentissage

22. Délai et coûts: Faisabilité de l'élaboration et de la mise en œuvre

23. L’auto-évaluation

24. L’auto-évaluation: les étapes • Etape 1: explication des critères et éclaircissement de l’évaluation (PEC) • Etape 2: évaluation individuelle à travers la mesure de la qualité du PEC • Etape 3: entretien de groupe/discussion

25. Etape 1: Session d’information Objectif: • Donner une description claire du PEC; • Expliquer les critères de qualité et les indicateurs; • Démontrer la pertinence de l’auto-évaluation (questionnaire); • Qualité des preuves fournies pour appuyer votre jugement.

26. Description de votre PEC

27. Les participants doivent marquer leur accord ou leur désaccord avec les énoncés . Expliquer ce que veut dire “adapté à l’objectif”. Fournir une preuve pour chaque énoncé pour appuyer ce que vous avez indiqué dans la section sur l’échelle de Likert

28. Quel type de preuve est attendu? • Pertinent / représentatif? • Complet? • A la fois positif et négatif? • Types de preuve: “C’est évident" “J’ai observé cela chez mes étudiants” “Nous avons démandé aux étudiants " • => Un consensus partagé est une preuve!

29. Un exemple de preuve: “Avant que l’évaluation ne commence, nous en discuterons avec les étudiants” “Je pense que tout est clair parce que je n’ai jamais eu de questions”

30. “Nous ne savons pas” “Je ne reçois que des commentaires positifs de mes promoteurs de thèse” “mais ils n’aiment pas la méthode d’évaluation”

31. La suite… • Discussion de l’interprétation de la mesure de qualité du PEC; • Préparation des entretiens de groupe; • Réaliser l’entretien de groupe.