USMLE for DOs: hvordan man stopper fleecing osteopatiske medicinstuderende

i 2018 tog 21.611 eksaminander fra MD-tildelte medicinske skoler i USA og Canada USMLE Trin 1. De havde ikke noget valg. Se, USMLE er en licenseksamen – så hvis du vil øve dig som en allopatisk læge i USA, skal du tage den.

men der var også 4.136 osteopatiske medicinstuderende, der tog USMLE. Præcis nul af disse studerende var forpligtet til at tage eksamen. Faktisk er de forpligtet til at tage en anden test – den omfattende osteopatiske medicinske licensundersøgelse eller COMLEKS – for at opgradere fra medicinsk skole og få en medicinsk licens.

disse studerende tog USMLE for at forbedre deres ansøgning om ophold. Fordi på trods af konsolideringen af osteopatiske og allopatiske opholdsprogrammer under et enkelt akkrediteringssystem, der drives af ACGME, er mange residency program directors (PDs) ikke komfortable med at bruge COMLEKS-scoringer til at evaluere ansøgere. Dette gælder især for mere konkurrencedygtige programmer og specialiteter, og ved de studerende det: i en undersøgelse anbefalede 70% af osteopatiske medicinstuderende, at fremtidige studerende tager USMLE for at maksimere deres udsigter til at finde et ophold.

følgelig har osteopatiske medicinstuderende taget USMLE i stigende antal, som vist nedenfor.

antallet af DO-studerende, der tager USMLE Trin 1, er steget 13 gange siden 1997. Denne stigning forklares kun delvist af det øgede antal do-studerende.

at tage to sæt licensundersøgelser er ikke billigt. De fleste tager studerende, der tager USMLE, både Trin 1 og trin 2 CK – hvilket betyder, at de betaler $1260 for privilegiet at tage en licenseksamen, der ikke engang hjælper dem med at få licens.

sidste år vedtog American Medical Association en beslutning om, at DO-og MD-licenseksamen skal ses ens. Dette er et beundringsværdigt træk, der sandsynligvis ikke ændrer noget. Så hvad skal der gøres? Hvordan kan vi forhindre osteopatiske studerende i at blive flået på deres licenseksamen?

lad os se på fem muligheder.

lav #USMLEPassFail

fjern USMLE-scoringer, og antallet af DO-studerende, der vælger at tage USMLE, falder øjeblikkeligt til nul. Problemet er, at jeg ikke kan se det ske.

ideen om et pass/fail USMLE blev overvejet på InCUS-mødet i marts 2019, og selvom den endelige bestemmelse om scorerapportering ikke vil blive offentliggjort i endnu et par uger, er min læsning af tebladene, at Trin 1-scoringer ikke går nogen steder.

der er flere grunde til dette – herunder den jeg påpegede her. Men det er også vigtigt at huske, at National Board of Medical eksaminatorer har betydelige økonomiske incitamenter til at opretholde score rapportering. Og dette er en af dem.

sidste år tog NBME $4,399,320 fra osteopatiske studerende, der tog Trin 1 og trin 2 CK. Tror du, de er ivrige efter at klare sig uden den indtægt?

mig hverken.

med andre ord, hvis vi vil forhindre, at eleverne bliver flået, er vi nødt til at gøre noget andet. Vi er nødt til at gøre COMLEKS-scoringer mere fortolkelige for PD ‘ er, der ikke er vant til at se dem.

der er et par måder, dette kunne gøres på.

“Konverter” til USMLE scores.

flere forfattere har analyseret forholdet mellem COMLEKS og USMLE scores. Sandsynligvis den mest autoritative analyse er denne, som omfattede 1016 studerende ved College of Osteopathic Medicine of the Pacific, der tog både COMLEKS og USMLE.

overraskende var der et lineært forhold mellem scoringer på COMLEKS og USMLE.

der er et stærkt lineært forhold mellem COMLEKS og USMLE score (R2 = 0,696). Figur fra Lee AS et al., J Grad Med Educ 2014. PubMed

forfatterne afledte følgende formel for at “konvertere” COMLEKS til USMLE scores:

USMLE Trin 1 = (0.2392) * (COMLEKS Niveau 1) + 82.563

ved hjælp af denne ligning forudsiger en 600 på COMLEKS Niveau 1 en USMLE Trin 1 score på 226.

der er stadig åbenlyse begrænsninger med denne tilgang.

for det første, selvom sammenhængen mellem COMLEKS og USMLE er stærk, er den ikke perfekt.

se nøje på spredningen af data scatterplot ovenfor. For en studerende, der scorer 600 på COMLEKS, går rækken af observerede USMLE Trin 1 scoringer fra omkring 200 til over 250. (Dette er ikke overraskende – selv en studerende, der tager USMLE Trin 1 to gange på hinanden følgende dage, kan have scoringer, der adskiller sig med 24 point. Men for alle PD ‘ er derude, der fejlagtigt tror, at USMLE giver en perfekt præcis forudsigelse af en ansøgers evne til ophold, er en sådan bred vifte problematisk.)

for det andet blev dataene i Lee-papiret indsamlet fra 2006 til 2012. Selvom de giver et nyttigt øjebliksbillede, producerer de sandsynligvis ikke gyldige forudsigelser for nutidige testtagere. Hvorfor? Ikke kun ændrer populationen af testtagere, men den gennemsnitlige score for USMLE Trin 1 stiger også med omkring 0,9 point/år.

USMLE”score krybe”. Bemærk det højre skift af scorefordelingerne fra 2015-2017 til 2016-2018.

Score creep betyder, at jo ældre formlen er, jo mere sandsynligt er det at under-forudsige USMLE scores.

tag for eksempel dette papir fra 2006, som også fandt et lineært forhold mellem COMLEKS og USMLE score. Men ved hjælp af deres formel forudsiger en 600 på COMLEKS Niveau 1 en USMLE Trin 1 score på kun 211.

i stedet for at sikre, at PDs evaluerer aktuelle data, kunne vi prøve noget andet. Vi kunne …

tilskynde PDs til at beregne COMLEKS-percentiler.

COMLEKS-scoren rapporterer, at eleverne modtager, inkluderer ikke en percentil. National Board of Osteopathic Medical investigators (NBOME) stiller imidlertid et online-værktøj til rådighed, som PDs kunne bruge til at beregne percentilen for en given COMLEKS-score. (Et link til dette værktøj vises nu i ERAS-Programdirektørernes arbejdsstation for osteopatiske ansøgere.)

ved hjælp af NBOMe – værktøjet kan vi se, at en ansøger med en COMLEKS-niveau 1-score på 600 klarede sig ret godt ved den 80.percentil af alle testtagere.

nuværende fordeling af COMLEKS niveau 1 scores, baseret på NBOME percentil Regnemaskine.

men der er mindst to store problemer med denne tilgang, også.

den første er praktisk. Tror vi virkelig, at PDs vil tage sig tid til at slå en COMLEKS-percentil op? Husk, at selve grunden til, at de fleste PD ‘ er bruger licensundersøgelsesresultater, er til screening – for at gøre en hurtig, ja/nej beslutning om, hvorvidt en kandidat skal afhøres eller ej. Tanken om, at disse PDs vil tage sig tid til at gå til en separat hjemmeside – især en klodset en, der kræver flere input til at spytte ud de data, du ønsker – virker håbløst naiv.

det andet problem er mening. Nogle PD ‘ er som USMLE scorer, fordi de giver en universel målepind. At vide, at en ansøger har en 80.percentil COMLEKS, er rart – men det fortæller dig stadig ikke, hvordan ansøgeren sammenligner med dem, der tog USMLE.

men måske kunne vi delvist omgå disse bekymringer, hvis vi…

konverterer COMLEKS-percentiler til USMLE-percentiler.

før vi kommer ind i møtrikker og bolte af dette, lad os være klare: COMLEKS og USMLE er forskellige tests.

de har forskellige indholdsspecifikationer og formater og tages af grupper af testtagere, hvis demografi og tidligere standardiserede testresultater adskiller sig systematisk.

men alt det til side – hvad hvis PDs kunne se et overblik, hvad en COMLEKS score ville være, hvis det var en USMLE score på samme percentil? Hvad hvis vi lægger konverteringen på et enkelt bord, så PDs ikke behøver at gå ind på NBOME hjemmeside og slå op en percentil hver gang de kommer over en Do ansøger?

det ville være nemt at lave denne slags ting. Så let, faktisk, at jeg gik videre og gjorde det.

sammenligning af USMLE percentil score. (Data fra her og her).)

er dette uvidenskabeligt? Sikker.

men så bruger USMLE scores til at vælge beboere. Så hvis vi skal være uvidenskabelige, lad os bare få eleverne til at betale en gang for deres licenseksamen, mens vi er ved det.

der er stadig en nemmere løsning – en, der ikke stoler på NBME for at handle mod sine økonomiske interesser, og en, der ikke involverer PDs ved hjælp af en klumpet hjemmeside eller udskrivning af tabellen ovenfor på et lamineret kort.

Skift rapporteringsskalaen for COMLEKS-score.

skalaen for COMLEKS går fra 0 til 1000. Skalaen for USMLE går fra 0 til 300.

hvorfor?

PDs har en intuitiv fornemmelse af, hvad der er en ‘god’ USMLE score for deres speciale. Hvorfor ikke udnytte denne intuition ved at rapportere COMLEKS-resultater ved hjælp af de tal, som de fleste PD ‘ er er mere fortrolige med? Gør mig til præsident for NBOME, og det første jeg vil gøre er at begynde at rapportere COMLEKS-scoringer på samme skala, som USMLE bruger.

gør mig til Kongen af medicinsk uddannelse, og det første, jeg vil gøre, er at kræve, at vi holder op med at stole så meget på et engangs, punkt-estimat af grundlæggende videnskabsmindring, der måler så lidt af, hvad PDs og patienter virkelig bryr sig om. Men indtil da…

ADDENDUM: flere læsere har spurgt, hvorfor jeg ikke diskuterede ideen om at slippe af med COMLEKS og få alle osteopatiske medicinstuderende til at tage USMLE i stedet. Det er en god ide-men en der synes usandsynligt at forekomme. For det første er COMLEKS i nogle stater beskyttet ved lov, så at slippe af med det ville kræve ændring af loven om medicinsk praksis. Mange stater tillader, at DOs får licens ved at tage USMLE – men dette ser ud til at være en mulighed, som få DOs forfølger. I 2018 tog kun 21 DOs USMLE Trin 3 på trods af de tusinder, der tog Trin 1 og 2 CK. Lad os heller ikke glemme, at NBOME har en interesse i at opretholde COMLEKS – med en omsætning på over $30 millioner og en administrerende direktør, der indtog $635,943 i rapporterbar kompensation i 2017. Det er svært at forestille sig, at de villigt tillader sig at blive lovgivet ud af eksistensen. At slippe af med COMLEKS og levere en enkelt licenseksamen til DOs og MDs er et prisværdigt mål – men det bliver ikke let.

du kan måske også lide:

en ikke-MBA ‘ s Guide til NBME – indtægter i 9 enkle diagrammer

USMLE Trin 1: udjævning af spillereglerne-eller vedvarende ulempe?