El USMLE para DOs: Cómo detener la esquila de estudiantes de medicina osteopática

En 2018, 21,611 examinandos de escuelas de medicina que otorgaron MD en los EE.UU. y Canadá tomaron el paso 1 de USMLE. No tenían otra opción. Verás, el USMLE es un examen de licencia, así que si quieres practicar como médico alopático en los Estados Unidos, tienes que tomarlo.

Pero también hubo 4.136 estudiantes de medicina osteopática que tomaron el USMLE. Exactamente a cero de esos estudiantes se les requirió tomar el examen. De hecho, se les exige que tomen una prueba diferente, el Examen Integral de Licencia Médica Osteopática, o COMLEX, para graduarse de la escuela de medicina y obtener una licencia médica.

Estos estudiantes estaban tomando el USMLE para mejorar su solicitud de residencia. Porque, a pesar de la consolidación de los programas de residencia osteopática y alopática bajo un único sistema de acreditación administrado por la ACGME, muchos directores de programas de residencia (PDs) no se sienten cómodos usando las puntuaciones de COMLEX para evaluar a los solicitantes. Esto es especialmente cierto para programas y especialidades más competitivos, y los estudiantes lo saben: en una encuesta, el 70% de los estudiantes de medicina osteopática recomendaron que los futuros estudiantes tomen el USMLE para maximizar sus perspectivas de encontrar una residencia.

En consecuencia, los estudiantes de medicina osteopática han estado tomando el USMLE en número creciente, como se muestra a continuación.

El número de estudiantes de DO que toman el paso 1 de USMLE se ha multiplicado por 13 desde 1997. Este aumento se explica solo en parte por el aumento del número de estudiantes de DO.

Tomar dos series de exámenes de licencia no es barato. La mayoría de los estudiantes que toman el USMLE toman el Paso 1 y el Paso 2 CK, lo que significa que pagan $1260 por el privilegio de tomar un examen de licencia que ni siquiera los ayudará a obtener la licencia.

El año pasado, la Asociación Médica Americana aprobó una resolución que dice que los exámenes de licencia de DO y MD deben verse por igual. Este es un movimiento admirable que parece probable que no cambie nada. Entonces, ¿qué se debe hacer? ¿Cómo podemos evitar que los estudiantes de osteopatía sean esquilmados en sus exámenes de licencia?

Echemos un vistazo a cinco opciones.

Haga #USMLEPassFail

Elimine los puntajes de USMLE, y el número de estudiantes DO que elijan tomar el USMLE se reducirá instantáneamente a cero. El problema es que no veo que suceda.

La idea de aprobar/reprobar USMLE se consideró en la reunión de InCUS de marzo de 2019, y aunque la determinación final sobre el informe de calificaciones no se hará pública hasta dentro de unas semanas, mi lectura de las hojas de té es que las calificaciones del Paso 1 no van a ninguna parte.

Hay múltiples razones para esto, incluida la que señalé aquí. Pero también es importante recordar que la Junta Nacional de Examinadores Médicos tiene importantes incentivos financieros para mantener los informes de calificaciones. Y este es uno de ellos.

El año pasado, la NBME recibió 4 4,399,320 de estudiantes de osteopatía que tomaron el Paso 1 y el Paso 2 CK. ¿Crees que están ansiosos por sobrevivir sin esos ingresos?

Yo tampoco.

En otras palabras, si queremos mantener a los estudiantes de obtener esquilmado, tenemos que hacer algo diferente. Tenemos que hacer que las puntuaciones de COMLEX sean más interpretables para los PDs que no están acostumbrados a verlas.

Hay algunas maneras de hacerlo.

” Convertir ” COMLEX a partituras USMLE.

Varios autores han analizado la relación entre las puntuaciones de COMLEX y USMLE. Probablemente el análisis más autorizado es este, que incluyó a 1016 estudiantes de la Facultad de Medicina Osteopática del Pacífico que tomaron el COMLEX y el USMLE.

Como era de esperar, hubo una relación lineal entre los puntajes en COMLEX y el USMLE.

Existe una fuerte relación lineal entre las puntuaciones de COMLEX y USMLE (R2 = 0,696). Figura de Lee AS et al., J Grad Med Educ 2014. PubMed

Los autores derivaron la siguiente fórmula para “convertir” las partituras de COMLEX a USMLE:

Paso USMLE 1 = (0,2392)*(Nivel COMLEX 1) + 82.563

Usando esta ecuación, un 600 en el Nivel 1 de COMLEX predice una puntuación del paso 1 de USMLE de 226.

Sin embargo, hay limitaciones obvias con este enfoque.

En primer lugar, aunque la correlación entre COMLEX y USMLE es fuerte, no es perfecta.

Observe de cerca la dispersión de datos en la gráfica de dispersión anterior. Para un estudiante que obtiene un puntaje de 600 en COMLEX, el rango de puntajes observados en el paso 1 de USMLE va de alrededor de 200 a más de 250. (Esto no es sorprendente, incluso un estudiante que toma el paso 1 dos veces en días consecutivos puede tener calificaciones que difieren en 24 puntos. Pero para todos los PDs que creen erróneamente que el USMLE proporciona una predicción perfectamente precisa de la aptitud de un solicitante para la residencia, un rango tan amplio es problemático.)

En segundo lugar, los datos del artículo de Lee fueron recolectados de 2006 a 2012. Aunque proporcionan una instantánea útil, es probable que no produzcan predicciones válidas para los examinadores contemporáneos. ¿Por qué? No solo está cambiando la población de candidatos a exámenes COMLEX/USMLE, sino que la puntuación media para el paso 1 de USMLE también está aumentando en alrededor de 0,9 puntos/año.

USMLE “score creep”. Observe el cambio hacia la derecha de las distribuciones de puntuación de 2015-2017 a 2016-2018.

El arrastre de puntuación significa que, cuanto más antigua sea la fórmula, más probable será que prediga las puntuaciones USMLE.

Tomemos, por ejemplo, este artículo de 2006, que también encontró una relación lineal entre las puntuaciones COMLEX y USMLE. Pero usando su fórmula, un 600 en el Nivel 1 de COMLEX predice una puntuación de Paso 1 de USMLE de solo 211.

En su lugar, para asegurarnos de que los PDs están evaluando los datos actuales, podríamos probar algo diferente. Podríamos Encourage

Animar a PDs a calcular percentiles COMLEX.

Los informes de puntuación de COMLEX que reciben los estudiantes no incluyen un percentil. Sin embargo, la Junta Nacional de Examinadores Médicos Osteopáticos (NBOME) pone a disposición una herramienta en línea que PDs podría usar para calcular el percentil para una puntuación COMLEX dada. (Ahora aparece un enlace a esta herramienta en la Estación de Trabajo de Directores del Programa ERAS para solicitantes de osteopatía.)

Utilizando la herramienta NBOME, podemos ver que un solicitante con una puntuación COMLEX de Nivel 1 de 600 obtuvo una puntuación bastante buena en el percentil 80 de todos los candidatos a la prueba.

Distribución actual de las puntuaciones de Nivel 1 de COMLEX, basada en la calculadora de percentiles NBOME.

Pero también hay al menos dos problemas importantes con este enfoque.

El primero es la practicidad. ¿Realmente creemos que los PDs se van a tomar el tiempo para buscar un percentil COMLEX? Recuerde, la razón por la que la mayoría de los PDs usan los puntajes de los exámenes de licencia es para la detección, para hacer una determinación rápida de sí/no sobre si entrevistar a un candidato o no. La idea de que estos PDs tardarán en ir a un sitio web separado, especialmente uno torpe que requiere varias entradas para escupir los datos que desea, parece irremediablemente ingenuo.

El segundo problema es el significado. Algunos PDs como los puntajes USMLE porque proporcionan una varilla de medición universal. Saber que un solicitante tiene un COMLEX percentil 80 es bueno, pero aún no le dice cómo se compara ese solicitante con aquellos que tomaron el USMLE.

Pero tal vez podríamos evitar parcialmente estas preocupaciones si Convert

Convertimos percentiles COMLEX a percentiles USMLE.

Antes de entrar en las tuercas y tornillos de esto, seamos claros: COMLEX y USMLE son pruebas diferentes.

Tienen diferentes especificaciones de contenido y formatos, y son tomadas por grupos de candidatos cuyas características demográficas y calificaciones de exámenes estandarizados anteriores difieren sistemáticamente.

Pero todo eso aparte, ¿qué pasaría si PDs pudiera ver, de un vistazo, lo que sería una puntuación COMLEX si fuera una puntuación USMLE en el mismo percentil? ¿Qué pasa si ponemos la conversión en una sola tabla para que los PDs no tengan que ir al sitio web de NBOME y buscar un percentil cada vez que se encuentran con un solicitante de DO?

sería fácil hacer este tipo de cosas. Tan fácil, de hecho, que seguí adelante y lo hice.

Comparación de las puntuaciones de percentiles COMLEX y USMLE. (Datos extraídos de aquí y aquí.)

¿Esto no es científico? Asegúrese.

Pero también lo es usar las puntuaciones USMLE para seleccionar residentes. Así que si vamos a ser poco científicos, hagamos que los estudiantes paguen una vez por sus exámenes de licencia mientras estamos en ello.

Aún así, hay una solución más fácil: una que no dependa de la NBME para actuar en contra de sus mejores intereses financieros, y una que no involucre PDs utilizando un sitio web torpe o imprimiendo la tabla de arriba en una tarjeta laminada.

Cambie la escala de informes de puntuación de COMLEX.

La escala para COMLEX va de 0 a 1000. La escala para el USMLE va de 0 a 300.

¿Por qué?

Los PDs tienen un sentido intuitivo de lo que es una puntuación USMLE “buena” para su especialidad. ¿Por qué no capitalizar esa intuición reportando los resultados de COMLEX usando los números con los que la mayoría de los PDs están más familiarizados? Conviérteme en presidente del NBOME, y lo primero que haré será empezar a reportar las puntuaciones de COMLEX en la misma escala que usa el USMLE.

Sin embargo, hazme el Rey de la Educación Médica, y lo primero que haré es exigir que dejemos de depender tanto de cualquier estimación puntual y puntual de la memorización de la ciencia básica que mida tan poco de lo que realmente les importa a los pacientes y a las personas con discapacidad física. Pero hasta entonces

ANEXO: Varios lectores me han preguntado por qué no discutí la idea de deshacerme de COMLEX y hacer que todos los estudiantes de medicina osteopática tomen el USMLE en su lugar. Es una buena idea, pero parece poco probable que ocurra. Por un lado, en algunos estados, COMLEX está protegido por la ley, por lo que deshacerse de él requeriría enmendar la ley de práctica médica. Muchos estados permiten que los DOS se licencien tomando el USMLE, pero esta parece ser una opción que pocos DOS persiguen. En 2018, solo 21 DOS tomaron el Paso 3 de USMLE, a pesar de los miles que tomaron los Pasos 1 y 2 CK. Tampoco olvidemos que NBOME tiene un interés personal en mantener COMLEX, con ingresos de más de $30 millones y un CEO que recibió compensation 635,943 en compensación reportable en 2017. Es difícil imaginarlos dejándose legalizar voluntariamente para que desaparezcan de la existencia. Deshacerse de COMLEX y proporcionar un solo examen de licencia para DOs y MDs es un objetivo loable, pero no será fácil.

TAMBIÉN TE GUSTARÍA:

Una Guía de ingresos de NBME que no sea de MBA en 9 gráficos simples

USMLE Paso 1: Nivelar el campo de juego o perpetuar la desventaja?