Au sein de notre établissement, un programme de simulation pour les internes du secteur médicament a été mis en place pour la formation à la validation pharmaceutique. D’après le guide de bonnes pratiques de la Haute Autorité de santé (HAS), l’évaluation constitue une étape clé de sa conception et le modèle de Kirkpatrick en définit plusieurs niveaux.

Il s’agit ici d’élaborer un système d’évaluation des séances de simulation, sous forme de pré-test et post-test.

Une cartographie des objectifs pédagogiques techniques (OPT) et non-techniques (OPNT) a été réalisée, à partir des thématiques des séances de simulation du semestre : insuffisance rénale, diabète et anticoagulants. Une revue de littérature a permis de choisir le support d’évaluation le plus adapté pour concevoir les tests.

Suite à l’analyse des quatre séances, 38 OPT principaux, 18 secondaires et 7 OPNT transversaux sont identifiés. Les OPT sont répartis en sept catégories dont les principales sont : « adaptation posologique liée à clinique » (12 OPT), « posologies usuelles » (7), « effets indésirables » (5) et « erreur de prescription » (5). Sur les 11 publications relevées, dont 3 destinées aux étudiants en pharmacie, 7 utilisent une grille à points et 2 des QROC. La notation qualitative concerne 3 d’entre elles. Pour l’évaluation de notre programme, une simulation haute-fidélité semble être le choix le plus adapté pour répondre aux OPT et OPNT. Les 15 OPT principaux sélectionnés sont partagés au sein des sept catégories, avec majoritairement 3 OPT pour « adaptation posologique liée à clinique », 3 pour « posologies usuelles », 3 pour « erreur de prescription » et 2 pour « effets indésirables ». Ils sont répartis en 4 cas cliniques dématérialisés, agrémentés de supports (dossier clinique, biologie, prescription) servant à l’analyse pharmaceutique. Les compétences techniques sont évaluées selon une grille quantitative liée aux items attendus, et les non-techniques selon une échelle semi-quantitative.

Le manque de littérature sur le sujet a conduit à réaliser un pré-test et un post-test au format similaire à celui des séances. La fiabilité de la grille sera validée par les formateurs. Afin de confirmer l’absence de biais inter-individuel dans la notation, une étude de répétabilité sera exécutée. À terme, la comparaison des pré-test et post-test permettra de répondre au niveau 2 de Kirkpatrick. Pour atteindre le niveau 3, un audit d’évaluation des pratiques courantes sera envisagé.