A.E.U. D’EXPERTISE ET DE PEDAGOGIE APPLIQUEES A LA F.M.C. Pierre CHALANDRÉ

1. A.E.U. D’EXPERTISE ET DE PEDAGOGIE APPLIQUEES A LA F.M.C. Pierre CHALANDRÉ UNAFORMEC RHONE ALPES - 26 janvier 2007

2. LES GRILLES D’ÉVALUATION D’UN DOSSIER D’ACTION DE FMC

3. PREAMBULE «La première justification d’un organisme de formation continue est d’être le garant de la qualité de la formation proposée : Adaptation du sujet à la pratique professionnelle Garantie de la qualité scientifique des formation Choix des moyens les plus efficaces » LES GRILLES DE VALIDATION DES DOSSIERS

4. HISTORIQUE Les premières grilles de validation de dossiers sont apparues très rapidement avec la création des conseils régionaux de FMC. Elles sont le fruit du travail des membres des commission pédagogiques de ces conseils qui s’en servaient pour classer les dossiers.  Les critères de validations d’une action de FMC ont été repris par Le comité Nation de la Formation Médicale continue en date du 21/06/1989 Ces critères ont été publiés et largement diffusés.

5. Avec l’apparition des premières formations conventionnelles pour les généralistes et les spécialistes, d’autres grilles de validation ont été publiées dans les appels d’offre ce qui nous permet de suivre leur évolution. Elles ont été régulièrement modifiées. A titre d’exemple celle de 1994 La formation professionnelle conventionnelle pour les généralistes avec l’apparition du Conseil Scientifique National de la FPC et de ses experts permanents et de ses experts correspondants a abouti à la publication de grilles de critères scientifiques et pédagogiques avec chaque appel d’offre. Ils ont eux aussi évolué au fil des années

6. EVOLUTION DES GRILLES Il y avait un classement des critères. Actuellement, il y a encore des critères plus importants que les autres

7. CRITERES DE VALIDATION D’UNE ACTION FMC(Exemple 1 – Critères adoptés par le Comité National de la FMC en 1989 – Extrait de la Revue PRESCRIRE juin 1990)) 1 Adaptation à l’exercice du patricien concerné  concordance avec la réalité des besoins des praticiens et de la santé ;  recherche de l’efficacité dans la décision médicale ;  prise en compte de l’ensemble de l’environnement, notamment psychologique, social et économique, au plan individuel et collectif

8. Suite FMC 1989 • Qualité scientifique de la formation Elle est appréciée sur la qualité des sources, des experts et le développement de l’esprit critique :  prise en compte de l’ensemble des connaissances anciennes et nouvelles argumentées et référencées ;  confrontation des données diversifiées et recherche de statégies et de conduites à tenir ;  formation à la pratique du raisonnement critique, notamment dans la décision médicale.

9. Suite FMC 1989 3 Qualité pédagogique de la formation La qualité pédagogique d’une action de FMC s’apprécie sur :  l’identification diversifiée des besoins ;  le choix des objectifs de formation adaptés à la pratique professionnelle ;  une méthodologie adaptée aux thèmes traités et aux participants ;  l’existence d’une procédure d’évaluation de l’action de formation et, si possible, des résultats.

10. Suite FMC 1989 • Indépendance de l’action de formation La FMC a pour objectif la qualité des soins et ne doit donc pas être détournée vers d’autres objectifs, ou vers des intérêts contraires à la santé publique. Dans cet esprit, l’indépendance de la FMC doit s’exercer notamment vis-à-vis de toutes les sources de financement et vis-à-vis des intérêts particuliers de tout organisateur.

11. Suite FMC 1989 L’indépendance d’une action de FMC doit s’apprécier à tous les niveaux de son organisation : • Choix des thèmes • Choix des experts • Contenu et modalités de déroulement de la formation (en particulier tout aspect promotionnel publicitaire doit être strictement identifié et distingué de la formation) ; • Transparence des modalités de financement ; Ces données doivent faire l’objet d’un contrat ou d’un document écrit obligatoirement soumis à l’instance chargée de la validation.

12. GRILLE GENERALE DE VALIDATION(Exemple 2 – Élaboré par le Conseil National de la FMC janvier 1998) Cette grille doit permettre de vérifier la qualité des formations dans le respect des contenus, des pratiques et des valeurs professionnelles.Elle doit répondre aux 4 grands critères de base qui sont : • l’indépendance • la pertinence • la qualité scientifique • la qualité pédagogique

13. Suite FMC 1998 I – JUSTIFICATION A apprécier par rapport : • Aux besoins de santé publique + - • A la qualité du service rendu au patient + - • Aux besoins du médecin concerné + - • Aux références fournies+ -

14. Suite FMC 1998 II – OBJECTIFS : • En adéquation avec la justification + - • En adéquation avec les besoins + - • Réalisables dans le temps imparti + - • Evaluables + -

15. Suite FMC 1998 III – DEMARCHES D’ÉVALUATION • De niveau 1 = SATISFACTION + - • De niveau 2 = tests d’acquisition des savoirs + - • De niveau 3 = transferts de compétences dansla pratique + -

16. Suite FMC 1998 IV – QUALITE PEDAGOGIQUE • Analyse de besoins + - • Adéquation entre justification, objectifs, méthodes et évaluation + - • Méthodes et moyens adaptés aux objectifs + - • Programme détaillé + -

17. Suite FMC 1998 V – QUALITE SCIENTIFIQUE • Qualification et expérience des intervenants + - • Qualité des supports et documents utilisés + - • Origine et actualité des informations transmises + -

18. Suite FMC 1998 VI – QUALITE GLOBALE DU PROJET • Cohérence + - • Qualité + - • Attractivité + -N.B. - Les résultats sont exprimés en : R = dossier rejeté V = dossier validé – D = dossier à discuter

19. GRILLE DE VALIDATION SCIENTIFIQUE ET PEDAGOGIQUE UTILISEE PAR LES CONSEILLERS SCIENTIFIQUES(Exemple 3 – Élaboré par l’OGC– Cahier des charges 2008) La liste de critères est un outil d’aide à la décision pour les conseils scientifiques chargés de valider sur le plan scientifique et pédagogique les projets d’action de FPC déposés. Bien entendu, elle ne constitue pas le seul élément d’appréciation d’un projet.

20. Suite FMC 2008

21. Comment utiliser une grille • Il faut connaître l’histoire • Ne pas se tromper sur les mots • Tous les items doivent être vérifiés les uns après les autres • Ne pas hésiter à poser des questions • Vérifier les nouveaux critères qui apparaissent, pourquoi, dans quels contextes

22. LES AVANTAGES Pour celui qui finance, la tranquillité Pour celui qui organise, pas de surprise Pour celui qui participe, assurance qualité LES INCONVENIENTS Uniformisation des dossiers Innovation pédagogique brimé Espace de liberté qui diminue

23. L’AVENIR DES GRILLES Elles sont en perpétuelle évolution ; Elles évoluent lentement ; Elles sont le reflet de l’activité médicale.

24. POUR LA PRATIQUE Nous allons reprendre un à un les 15 critères de l’appel d’offre 2008

25. CRITERE 1 Adéquation avec le thème choisi (éliminatoire) Exemple de ce qui ne faut pas faire : Thème : le patient diabétique de type II n’aborder dans le séminaire que les traitements par insuline

26. CRITERE 2 Respect de l’anonymat (éliminatoire) Exemple : le nom d’un expert ou d’un organisateur apparaît dans votre dossier

27. CRITERE 3 Pertinence pour l’exercice professionnel des participants La concordance avec la réalité des besoins des praticiens, de leurs patients et de la santé L’action doit être organisée en référence avec la discipline exercée par les médecins à laquelle elle est destinée et à la réalité des taches qui leur sont confiées Implique la participation active à tous les niveaux de l’élaboration et de la réalisation Exemple : la maladie des éleveurs d’oiseaux pour les médecins de montagne

28. CRITERE 4 Argumentation scientifique du projet : Elle s’apprécie a partir de trois principes la présentation des données proposées avec leur argumentation, leur niveau de preuve et leur référencement - la prise en compte de l’ensemble des connaissances et données disponible incluant les controverses et les incertitudes -l’intégration de ces données dans une approche stratégique et décisionnelle en fonction de la pratique des praticiens concernés

29. CRITERE 5 Validité des références bibliographiques Les références doivent êtres cohérentes avec le contenue de l’action, utilisées dans le déroulement de celui-ci au nombre de 15 max et actualisées Intérêt des webographies Exemple 10 articles en anglais

30. CRITERE 6 Formulation des objectifs (nombre, clarté et pertinence) Clairement identifiés Aisément compréhensibles En adéquation avec la justification et le déroulement de la formation Pertinents au regard de la pratique professionnelle En nombre limités pour être réalisables Exprimés de manière a permettre l’évaluation des compétences acquises savoir, savoir faire, savoir être Mémoriser, approprier , maîtriser

31. CRITERE 7 Validité scientifique des messages de la formation Exemple l’objectif est l’importance de la prise de tension correcte Ce message de formation est validé scientifiquement par des publications Les moyens pour y arriver sont validés scientifiquement ( validité scientifique de l’atelier ou le stagiaire et le formateur participe tour à tour)

32. CRITERE 8 Adéquation des méthodes pédagogiques Que font les participants au cours de la formation pour atteindre les objectifs annoncés Il faut préciser l’organisation pédagogique d’ensemble et le programme par demi journées et par séquences en précisant les objectifs correspondants et les méthodes et les moyens utilisés , les taches des participants et des experts L’efficacité passe par la participation active des praticiens concernés à toutes les étapes de la démarche pédagogique Les méthodes de formation doivent être adaptés aux thèmes traités, aux participants et assurer la participation et l’interactivité.

33. CRITERE 9 Faisabilité dans le temps imparti La formation doit être réalisable dans le temps pour que les objectifs soient atteint Exemple La cardiologie en deux jour

34. CRITERE 10 Structuration de la formation entre plénières et ateliers Il doit y avoir un lien entre chaque séquence, ce ne doit pas être une juxtaposition, il y a un lien dans l’enchaînement des objectifs Exemple de la construction d’une maison Exemple du déplacement d’un point a un autre Exemple : Travail en atelier réduit à regarder une cassette Travail en atelier sur un mannequin avant les explications théoriques

35. CRITERE 11 ADEQUATION DE L’EXPERTISE Dans toute action de formation pour des généralistes la participation d’un expert généraliste préparé à tenir ce rôle est légitime. Exemple : Séminaire sur HTA Liste des experts un cardiologue , un néphrologue, un pharmacologue Action de spécialiste : attention aux conflits d’intérêts

36. CRITERE 12 PRISE EN COMPTE DE LA COOPERATION ENTRE ACTEURS DES SOINS

37. CRITERE 13 Appréciation globale du projet 4 critères Cohérence Pertinence Attractivité Qualité du contenu

38. CRITERE 14 Projet innovant : OUI NON

39. GRILLE DE VALIDATION SCIENTIFIQUE ET PEDAGOGIQUE UTILISEE PAR LES CONSEILLERS SCIENTIFIQUESProjets portant sur l’informatique médicale appliquée à la pratique et aux condition d’exercice médical conventionnel(– Élaboré par l’OGC– Cahier des charges 2008)

40. Adéquation avec le thème choisi (éliminatoire) 2. Respect de l’anonymat (éliminatoire) 3. Absence de déclaration conflit d’intérêt et / ou éthique ou déontologique (éliminatoire) 4. Indépendance commerciale de l’information (éliminatoire) 5. Pertinence pour l’exercice professionnel des participants 6. Faisabilité dans la pratique 7. Cible des intéressés 8. Argumentation scientifique du projet 9. Validité des références bibliographiques 10. Formulation des objectifs (nombre, clarté et pertinence)

41. 11. Formulation des messages essentiels (nombre, clarté, pertinence 12. Validité scientifique des messages de la formation 13.Adéquation des méthodes pédagogiques 14.Faisabilité dans le temps imparti15. Structuration de la formation entre plénière et ateliers 16. Adéquation de l’expertise 17. Formation accessible quelque soit le matériel informatique 18.Formation logiciel indépendante 19.Appréciation globale du projet 20. Projet innovant : OUI NON

42. Mise en forme par : Madame NORMAND Yvette