Un peuple qui oublie son passé se condamne à le revivre, disaient Winston Churchill… et JBX dans le 14ème épisode de Reflets d’Acide, une série audio absolument géniale que je vous recommande, surtout si vous aimez les alexandrins et la fantasy – d’ailleurs ça sera mieux que ce billet de blog, ne perdez pas votre temps ici si vous ne connaissez pas.
La semaine dernière, la ministre de la Santé (Pr Agnès Buzyn) et la ministre de l’enseignement supérieur (Mme Frédérique Vidal) ont annoncé conjointement la fin des Epreuves Classantes Nationales (ECN).
Mme @VidalFrederique : « quelle pertinence y a t-il à sélectionner des étudiants sur leur capacité d’apprentissage par cœur et à cocher des qcm » La #PACES comme les #ECN sont responsables d’une perte de sens dans les études de médecine. #JEA2018#BE2018pic.twitter.com/lpS7qjYf1X
L’information a été reprise avec d’autres informations sur Allodocteurs, Egora ou 20 minutes.
« Contrairement aux #ECN actuels, où les #candidats ne peuvent échouer même s’ils ont 0, la nouvelle évaluation exigera une moyenne de 10 sur 20 pour accéder à l’#internat » #Médecine#études#Universitéhttps://t.co/j2t5mndyRA
— Galien Rennes (@GalienRennes) 8 juillet 2018
En réalité, cette « sortie » des ECN est déjà planifiée depuis septembre 2017 par le Pr Jean-Luc Dubois-Randé, président de la conférence des Doyens. On peut noter qu’il est Doyen de la faculté où exerce le président du Collège National des Généralistes Enseignants (CNGE) ; c’est également lui qui avait annoncé la création de la CNU de la médecine générale (53.03) au congrès du CNGE (j’en avais parlé brièvement dans un précédent billet). Il est donc « proche » des généralistes enseignants (attention à ne pas s’y méprendre, je ne parle pas de conflit d’intérêt ou d’influence, juste de proximité).
Au congrès de l’Ordre des médecins, le Pr Jean-Luc Dubois-Randé annonce la fin des ECN et son remplacement par un contrôle continu pic.twitter.com/wDqq2BGCHg
On trouve ici les notions de :
- ECN trop discriminantes (Pr Buzyn)
- ECN destructrices
- ECN non équitables
- ECN inadaptées : « quelle pertinence à sélectionner sur des QCM » ; « on peut être interne sans avoir la moyenne »
- Fiasco des ECNi 2017
Justifiant le projet de réforme qui comporte :
- Validation des acquis fondamentaux : connaissances en fin de 5ème année (il était question d’un contrôle continu sur les 3 ans qui semble avoir disparu).
- Année de pré-professionnalisation en 6ème année
- Evaluation plus centrée sur la pratique / compétences cliniques et relationnelles en fin de 6ème année
- Evaluation centrée sur les parcours des étudiants (« les modalités d’évaluation restent à définir » selon l’ANEMF, mais on trouve dans Egora que « le tutorat, la réalisation d’un double cursus de recherche, la mobilité internationale (…) un master de santé publique pour candidater dans une université active en recherche en médecine générale » ; dans l’interview du Pr Dubois-Randé : « valoriser les stages et les doubles-diplômes ; une formation supplémentaire en sciences humaines et sociales pour devenir psychiatre par exemple »)
- Système de matching : la même interview note qu' »un jury souverain, sur le modèle des jurys passerelles, pourrait auditionner et départager les bons étudiants qui postuleraient à un même poste, et qui auraient obtenu le score de référence nationale ».
Que penser de tout ça ?
J’avoue que je suis partagé.
D’une part, j’ai passé les ECN 2011, pour laquelle il y a eu un premier fiasco (annulation de l’épreuve de LCA pour 2 virgules mal positionnées, annulation du rattrapage pour manque de brouillons… la routine). Et j’ai perdu 30 points par rapport à ma copine sur un dossier de psoriasis… en grande partie parce que je suis passé dans le service de dermatologie et que j’avais l’impression que les questions attendaient les éléments plus pointus que j’y avais appris. Je voue assez naturellement une rancoeur inépuisable à l’encontre des ECN.
D’autre part, je me suis investi pas mal en tant qu’interne puis chef de clinique dans la préparation aux ECNi (conférence de préparation, bouquins de préparation…) N’y voyez pas de conflit d’intérêt : je n’ai rien à gagner financièrement à la poursuite ou l’arrêt des ECN…
Néanmoins, je ne vais pas vous cacher qu’il y a dans ces articles des choses que j’adore tellement lire que je pourrais avaler une assiette d’orties rien que pour atténuer mon incommensurable joie.
Reprenons avec un peu d’histoire…
- 10 février 1802 : création du concours de l’internat sous Napoléon Bonaparte, dans un souci républicain d’écarter tout favoritisme. Il concerne les externes des hospices voulant devenir internes des hospices (1). Le concours est hospitalier et peut être préparé par des conférences ; les facultés proposaient elles des examens annuels.
- (Pour parler un peu des « barrières » en médecine : 1802, c’est aussi la création d’un concours de l’externat qui disparaitra vers 1968. A noter qu’en 1972, le numerus clausus limitera l’accès aux études de médecine).
- 1982 : le concours devient universitaire (et non plus hospitalier). C’est le seul moyen d’accéder aux spécialités médicales (y compris celles non soignantes comme la santé publique). Les étudiants ne voulant ou ne pouvant passer le concours se tournaient vers la médecine générale et prenaient le nom de résidents pour éviter toute confusion avec les internes.
- 2004 : les Epreuves Classantes Nationales (ECN) remplacent le concours de l’internat (2). Ce n’est plus un concours : il y a autant de places que de candidat (notamment parce que la médecine générale devient une spécialité). Elles se déroulent exclusivement sous la forme de dossiers cliniques (absence de questions à choix multiples (QCMs)), afin d’être plus proches de la pratique clinique. Suivant son classement, l’étudiant choisit son académie d’affectation, sa filière, puis les services où il effectuera des stages. Cette répartition se fait de façon fictive sur la plateforme CELINE puis en amphithéâtre de garnison jusqu’en 2011 (remplacé par un amphithéâtre virtuel).
- 2005 : les ECN sont critiquées : pas assez discriminantes, trop d’étudiants en trop peu de points (3)… ce qui s’aggrave au fil des ans avec l’augmentation du numerus clausus qui a lieu à la même période. En 2012, 350 points séparent le premier du dernier (7658ème), sur 1000 points… (4). En outre, la correction des ECN est lourde, coûteuse, mobilisant un nombre important d’universitaires pour la correction manuelle pendant plusieurs jours…
- 2016 : les ECN deviennent les Épreuves Classantes Nationales informatisées (ECNi), après une réforme envisagée depuis 5 ans. Ses objectifs : meilleure discrimination, correction plus rapide, moins onéreuse et chronophage. Elle ne comporte plus que des QCMs et se répartit en une épreuve d’analyse (6 dossiers cliniques de 15 ± 2 QCM, sur 70 % de la note), une épreuve de 120 questions isolées (20 % de la note) et une épreuve de lecture critique (2 articles scientifiques de 15 ± 2 QCMs, sur 10 % de la note) (5).
- Les deux premières sessions de tests (décembre 2015 et mars 2016) sont des échecs à cause de la technique. Un dossier d’ECNi 2016 a été annulé car avait été donné à des étudiants la même année… En 2017, c’est carrément 2 épreuves qui ont été annulées pour la même raison, entraînant une rupture d’égalité des chances (normalement les cas cliniques de la base nationale doivent être différents de ceux donnés par les mêmes enseignants dans leurs facultés) (6).
Revenons à ce qui est dit pour justifier la réforme des ECN à venir.
- ECN trop discriminantes (Pr Buzyn)
On peut supposer (voire espérer) qu’il s’agit d’une erreur de tweet. Le problème des ECN est justement qu’elles ne sont pas assez discriminantes. Trop discriminant, c’est le top, c’est le Graal du concours. Classer 8000 étudiants sur 300 points, c’est plutôt le gobelet en plastique du concours, voyez.
Oui alors évidemment, je suis carrément favorable à l’idée d’études, examens et concours « non destructeurs ». Reste à montrer que le nouveau système le sera moins (spoiler : c’est pas gagné).
C’est faux. Les ECN sont équitables, et ça me tue bien de dire ça… parce que c’est aussi un système où la chance a une part bien trop importante. Mais les ECN c’est 3 ans de préparation et des épreuves qui ont lieu sur 3 jours en France, dans les mêmes conditions ou presque, pour 8000 étudiants, avec une évaluation anonyme. C’est équitable. Il y a une énorme part de chance dans ces ECN évidemment, et c’est plutôt ce problème qui doit être résolu : il l’a été en partie avec les ECNi (davantage de dossiers et questions donc moins de chance si on fait une impasse). On peut s’appeler Martin ou Abdel, on peut avoir un syndrome malformatif ou être Miss France, on peut être chétif ou être rugbyman, être obèse, être trans, blond, roux, petit, tatoué… l’évaluation sera la même pour tous, car les QCMs se fichent de tout ça.
- ECN inadaptées : « quelle pertinence à sélectionner sur des QCM » ; « on peut être interne sans avoir la moyenne »
J’espère que mon petit rappel historique permettra à Mme Frédérique Vidal de se souvenir que les QCM ont été réintroduits en 2016 (ECNi) après 12 ans d’ECN sans QCM.
Dire qu’on peut être interne sans la moyenne (20 minutes) c’est complètement ignorer l’histoire du concours puis des ECN depuis 1802… Les examens de la faculté ont toujours existé, et pour eux il faut la moyenne. Par exemple, en DFASM3 (DCEM4, 6ème année), il faut valider la moyenne à un contrôle continu à Lille (CSCT) pour pouvoir passer les ECNi. Donc en fait, on ne peut pas être interne sans avoir la moyenne, car on ne peut pas passer les ECNi sans avoir la moyenne…
Les ECN, comme leur nom l’indique, sont des « épreuves CLASSANTES » et non sanctionnantes. Par ailleurs, 5 % des étudiants à peine ont moins de la moyenne aux ECN (7) – et ce sont souvent des médecins non français faisant ici leur équivalence, donc n’ayant pas eu les 3 ans de préparation aux ECN (en fait, « être interne sans avoir la moyenne » c’est une conséquence du numerus clausus…)
Donc si je résume la pensée globale de cette réforme : des universitaires ont donné à leurs étudiants des dossiers mis par ailleurs dans la base nationale (volontairement ou non)… donc une mission a conclu que la meilleure solution c’est de supprimer les ECN et laisser aux universitaires le loisir de choisir directement leurs futurs internes de façon désanonymisée.
C’est fantastique.
Parlons maintenant de cette réforme, applaudie par les représentants des étudiants.
- Validation des acquis fondamentaux : connaissances en fin de 5ème année (il était question d’un contrôle continu sur les 3 ans qui semble avoir disparu).
Ah oui, en utilisant le fameux système d’évaluation des acquis de façon discriminante, équitable, adaptée et non destructrice. J’ai cru comprendre que ça serait national, mais je n’en ai pas la certitude (ça serait évidemment le pompon que ça soit local).
Bref, donc on passe les ECN un an avant. Ok, vu.
- Année de pré-professionnalisation en 6ème année
C’est une très bonne idée, avant de valider le choix. Par contre, ça laisse uniquement 2 ans de stages hospitaliers (dits « stages d’externat »), ce qui est un peu contraire à la philosophie de l’évaluation sur le « parcours des étudiants » citée plus bas. En 6ème année, je suis passé pour la première fois en neurologie, dermatologie, néphrologie et endocrinologie ; 4 « gros » stages que je n’aurais pas pu faire si j’avais dû faire une année « pré-professionnalisante ».
- Evaluation plus centrée sur la pratique / compétences cliniques et relationnelles en fin de 6ème année
Il n’y a aucun moyen validé d’évaluation pouvant être reproduit nationalement pour tous les étudiants.
L’évaluation d’un examen clinique c’est hyper compliqué. Avant 2014 (je crois), on avait à Lille un CSCT où on passait dans les services hospitaliers du CHR pour examiner un patient déterminé par le PU. Je suis tombé sur un instituteur greffé rénal, et sur les 30 minutes, j’ai passé 25 minutes à faire un interrogatoire relativement facile (et 5 minutes d’examen physique). Dans le même service, un ami a vu un patient ayant fait un AVC et aphasique : pas d’interrogatoire, uniquement un examen neurologique. Lorsque je l’ai passé, j’étais dans un service où il était notoire que « le CSCT c’est le deuxième Noël du PU ici… » C’était une véritable boucherie, les étudiants partaient la queue entre les jambes.
A part un passage simultané des 8000 étudiants face à 8000 robots ayant appris les même phrases en mode OK GOOGLE, une grille indiscutable de critères à évaluer, et un contrôle vidéo pour les litiges, tout le reste ne sera que des solutions dégradées…
Une situation différente ? Rupture d’égalité des chances.
Un acteur différent ? Rupture d’égalité des chances.
Etc.
On parle d’un classement et pas d’un examen… Si vous voulez classer 3 voitures sur leur vitesse, il faut le même terrain. Sinon celle qui aura été évaluée sur une pente avec un virage pourra légitimement dire qu’elle n’a pas eu la même chance que celle qui était sur un circuit de F1.
Enfin, quand je vois « compétences », je pense aussi à l’idée (ou la rumeur) qui circule sur un portfolio au 2ème cycle. Disons le franchement, le portfolio c’est quand même très surcoté. Après de nombreuses années d’utilisation en MG ça semble clairement inévaluable de façon subjective (sur 40 évaluateurs en unicentrique, donc sur 500 en France, ça va vendre du maïs caramélisé).
- Evaluation centrée sur les parcours des étudiants
Ce qui est cool avec ce trépied (acquis – pratique – parcours), c’est qu’on prend de la vitesse sur l’autoroute de l’abstrait.
Globalement, ce que je comprends à cette étape de l’annonce de la réforme c’est : faites des double cursus, faites des master 1 et 2, faites autre chose ! Et je vois 3 problèmes majeurs.
Le premier, c’est que ça me rappelle les clinicats « bouchés ». Dans certaines spécialités, pour être chef de clinique, il faut un master 2, voire être inscrit en thèse de science… voire avoir obtenu cette thèse. Parce que les postes sont bien moins nombreux que les candidatures et que faire une thèse de science, ça fait patienter en faisant quelque chose d’utile ; et puis après quand il y a 2 candidats dont un avec une thèse de science, c’est ce dernier qui a le poste forcément… On peut complètement imaginer que certaines spécialités décident de sur-pondérer certains critères : publier un article, participer à de l’enseignement… Je vois plein de possibilités de détourner tout ça pour faire « la-spécialité-prisée-dans-la-super-ville-prisée ».
Deuxième problème : faire « autre chose », c’est différent si on est à Paris ou à Limoges. Rupture d’égalité des chances ? Mais ooooh, on arrête avec ça. On a dit qu’on faisait quelque chose d’équitable maintenant, en faisant table rase du passé.
Troisième problème : c’est une idée qui va allonger le temps de l’externat (et donc des études) en incitant à « voir ailleurs » / « faire autre chose ». Mais bon, on a le temps, on n’a pas besoin de former des médecins, tout va bien en ce moment, il n’y aucun poste non pourvu et aucun désert 🙂
- Système de matching (« un jury souverain pourra auditionner et départager les bons étudiants postulant à un même poste »)
Et ainsi s’éteint l’idée républicaine de supprimer tout favoritisme, sous une pluie d’applaudissements… :/ (pour palier la mère de Luke).
Bien sûr qu’il y aura plein d’étudiants ayant obtenu « le score de référence nationale » (vous avez vu les notes aux ECN, et le classement dans un mouchoir de poches ?)
Bien sûr qu’ils seront nombreux à postuler pour le même poste.
Bien sûr qu’il y aura recours à ce système de « matching ». Et bien sûr qu’il y aura des critères opaques de décision locale, des étudiants qui seront dans l’attente d’un poste… On a vu cette année ce que ça donne avec ParcoursSup et 2 ministères viennent de valider la même idée pour des étudiants en 6ème année de médecine. Whaow, chapeau !
J’y vois une belle application du biais cognitif des coûts irrécupérables : trop de travail sur cette suppression des ECN pour faire marche arrière, alors allons-y… Au pire, il nous restera les larmes des étudiants pour saler nos frites.
En conclusion (tl;dr)…
Je poste mon premier billet depuis plusieurs mois le week-end du 14 juillet, entre les départs en vacances et 2 heures avant la finale de la Coupe du monde France-Croatie 😑 Bien que j’aie une piètre stratégie de communication, je vais quand même essayer de faire une métaphore (pas le truc qui transporte de l’eau, celui qui ressemble à une image).
Imaginons que le ministère du sport soit encore lié au ministère de la santé. Les Pr Agnès Buzyn et Mme Frédérique Vidal se penchent alors sur la Coupe du Monde du football (masculin). Elles trouvent ça scandaleux : une préparation de 4 ans pour un système aussi injuste, ça n’est pas normal. Le pays organisateur peut s’arranger pour que son équipe ne tombe face à la meilleure équipe du monde qu’à la finale, si tout se passe bien (c’est Michel Platini qui l’a dit). Et puis, l’Angleterre est 4ème en ayant gagné uniquement 3 matchs sur 7, hors tirs au but (face au Panama, à la Tunisie et à la Suède)… Quelle pertinence y a-t-il à classer les équipes sur un tournoi de ce type ?
A la place, elles proposent de déterminer quelle équipe mérite de soulever le trophée grâce à une nouvelle évaluation triple :
- un tournoi de football (mais un an avant). On verra pour les modalités, mais ça sera beaucoup plus juste, ça vous pouvez nous faire confiance !
- une évaluation de la pratique et du relationnel : comment se comportent les joueurs sur le terrain, nombre de fautes, nombre de cartons jaunes et rouges, taux de footballeurs qui ont un baccalauréat, nombre de duels gagnés… Enfin, bon, les critères précis, on verra ça plus tard. Mais on va évaluer la pratique.
- une évaluation basée sur le parcours : participation à des associations, promotion du football, nombre de produits dérivés vendus, publicités réalisées (tant pis pour les joueurs qui n’ont pas l’opportunité d’en faire parce qu’ils sont moins populaires). On ne sait pas encore exactement comment on l’évaluera non plus, mais on va l’évaluer.
- et puis à la fin, on va faire un score global. Il est encore un peu secret, mais on a 4 ans pour le mettre au point. Et puis s’il y a des égalités, c’est un petit comité de la FIFA qui déterminera quelle équipe pourra soulever la Coupe, et quelles équipes se contenteront des places suivantes.
Franchement, je ne vois pas ce qui pourrait mal tourner.
- Finot A. Le premier concours et la première promotion de l’internat des hôpitaux de Paris (1802)
- Legifrance. Décret n°2004-67 du 16 janvier 2004 relatif à l’organisation du troisième cycle des études médicales. Disponible sur : https://www.legifrance.gouv.fr/affichTexte.do?cidTexte=JORFTEXT000000781658
- Jouquan J, Honnorat C | Que reste-t-il comme vertus aux épreuves classantes nationales ? Pédagogie médicale. 2006; 7 (4): 197-200 [Internet]. [cité 19 févr 2017]. Disponible sur: http://www.pedagogie- medicale.org/articles/pmed/pdf/2006/04/pmed20067p197.pdf
- Système Informatique Distribué d’Evaluation en Santé (SIDES) | Aide pour les enseignants iECN. 2016 [Internet]. [cité 3 avr 2017]. Disponible sur: http://medecine.edu.umontpellier.fr/files/2016/12/SIDES_et_iECN2016_Aide_po ur_les_enseignants_26032014.pdf
- Legifrance | Arrêté du 20 juillet 2015 relatif à l’organisation des épreuves classantes nationales anonymes donnant accès au troisième cycle des études médicales [Internet]. [cité 19 févr 2017]. Disponible sur: https://www.legifrance.gouv.fr/eli/arrete/2015/7/20/AFSH1517575A/jo/texte
-
L’Etudiant. Médecine : deux épreuves des ECN 2017 annulées et une enquête lancée. https://www.letudiant.fr/educpros/actualite/medecine-deux-epreuves-ecn-annulees-enquete-lancee.html
- Collège santé de l’université de Bordeaux. Distribution des notes aux ECNi 2016. https://sante.u-bordeaux.fr/Actualites/Distribution-des-notes-aux-iECN-2016
