Validité et reproductibilité de deux grilles d’observation des compétences cliniques des internes en DES de médecine interne - 22/11/17
, F. Cohen Aubart b, O. Steichen c, M. Desprets a, M. Pha b, A. Espitia a, S. Georgin-Lavialle c, A. Morel d, J.B. Hardouin dCet article a été publié dans un numéro de la revue, cliquez ici pour y accéder
Résumé |
Contexte |
La réforme du troisième cycle des études médicales se veut centrée sur l’acquisition de compétences. En médecine interne, une évaluation des connaissances théoriques par e-learning et des connaissances pratiques par un e-carnet de stage sont en cours de création. Parallèlement, une réflexion se met en place sur des grilles d’évaluation des compétences cliniques. Dans ce cadre, nous avons voulu évaluer la reproductibilité et la validité de deux grilles d’évaluation par observation directe.
Méthode |
Une étude multicentrique et prospective a été menée de novembre 2015 à octobre 2016 pour évaluer les traductions françaises du MINI-Clinical Examination Exercice (MINI-CEX) et du Standardized Patient Satisfaction Questionnaire (SPSQ). La passation était réalisée 2 fois au cours du semestre, par le même binôme d’observateur pour chaque interne.
Résultats |
Dix-neuf internes ont été inclus. La reproductibilité inter-juge était satisfaisante pour le MINI-CEX : coefficients de corrélation intraclasse (CCI) entre 0,4 et 0,8 et moyenne pour le SPSQ : CCI entre 0,2 et 0,7 avec une bonne cohérence interne pour les deux grilles (Cronbach entre 0,92 et 0,94). Des différences significatives entre les distributions des scores donnés par les deux observateurs ont été constatées ainsi qu’une variabilité importante des scores selon le centre.
Conclusion |
La valeur absolue des scores, trop variable, ne doit pas être prise en compte dans l’évaluation mais peut avoir un intérêt pour le suivi de la progression des compétences. Ces grilles pourraient servir de support pour le débriefing en s’appuyant sur les tendances générales données par les scores.
Le texte complet de cet article est disponible en PDF.Abstract |
Introduction |
The revision of the French medical studies’ third cycle ought to be competency-based. In internal medicine, theoretical and practical knowledge will be assessed online with e-learning and e-portfolio. In parallel, a reflection about clinical skills assessment forms is currently ongoing. In this context, our aim was to assess the reproducibility and validity of two assessment forms based on direct clinical observation.
Method |
A prospective and multicentric study has been conducted from November 2015 to October 2016 aiming at evaluating the French translations of the MINI-Clinical Examination Exercice (MINI-CEX) and the Standardized Patient Satisfaction Questionnaire (SPSQ). Included residents have been assessed 2 times over a period of 6 months by the same binoma of judges.
Results |
Nineteen residents have been included. The inter-judge reproducibility was satisfactory for the MINI-CEX: intraclass coefficients (ICC) between 0.4 and 0.8 and moderate for the SPSQ: ICC between 0.2 and 0.7 with a good internal coherence for both questionnaires (Cronbach between 0.92 and 0.94). Significant differences between the distributions of the scores given by the judges and a significant inter-center variability have been found.
Conclusion |
If the absolute value of the scores should not be taken into account in the evaluation process given its high variability, it could be of interest for the follow-up of the progression in the competencies. These forms could support the residents’ debriefing based on the general trends given by the scores.
Le texte complet de cet article est disponible en PDF.Mots clés : Compétence, Évaluation, Médecine interne, Étude psychométrique
Keywords : Skills, Assessment, Internal medicine, Psychometric study
Plan
Bienvenue sur EM-consulte, la référence des professionnels de santé.
L’accès au texte intégral de cet article nécessite un abonnement.
Déjà abonné à cette revue ?