GPT4 y la educación universitaria en Ciencias de la Salud

Introducci N

Los sistemas de procesamiento de lenguaje natural (NLP) han emergido con fuerza en el dominio público en los últimos meses y todo sugiere que van a provocar una transformación de todos los sectores en los que se puede aplicar. En el sector sanitario, estas herramientas pueden tener impacto en la asistencia, docencia, investigación y gestión (1).

Un área de particular interés tiene relación con la educación y entrenamiento de los profesionales sanitarios. Las tecnologías de NLP pueden intervenir en el ciclo completo de gestión del conocimiento, desde la evaluación de su calidad, generación de contenidos para favorecer la adquisición por parte de los estudiantes y la evaluación de los mismos. De hecho, ya hay ejemplos publicados sobre la capacidad de los chatbots basados en GPT para aprobar exámenes de médicos en inglés (2) y en español. En este último caso, el modelo basado en GPT3.5 de OpenAI demostró su capacidad para superar el ejercicio para el acceso a una plaza de cirugía torácica en el Sistema Andaluz de Salud (3).

A continuación, se presenta el resultado de un diálogo entre el autor (que formula las preguntas de entrada o “prompts”) y el sistema GPT4, disponible en la aplicación Bing de Microsoft a través del navegador Edge. El objetivo era realizar un análisis práctico de la respuesta de la inteligencia artificial a preguntas relacionadas con el potencial uso de la misma herramienta en la educación universitaria.

Prompt: Soy un profesor de la Facultad de Medicina de la Universidad Complutense y cirujano del Hospital Clínico San Carlos. ¿Me puedes decir qué es GPT4?

GPT4 es el sistema de lenguaje por inteligencia artificial más avanzado que existe actualmente. Fue desarrollado por la empresa OpenAI y lanzado el 14 de marzo del 2023. Es capaz de entender y generar textos en cualquier idioma, así como de procesar imágenes y otros tipos de datos. También realiza otras diversas tareas, desde mantener una conversación natural hasta escribir una redacción o un poema sobre un tema, pasando por resolver problemas complejos o creativos. Funciona mediante una arquitectura llamada Transformer, que consiste en una red neuronal profunda que aprende a partir de una gran cantidad de datos recopilados de Internet. GPT4 utiliza un mecanismo de atención, que le permite enfocarse en las partes más relevantes de la información que recibe o genera. GPT4 también emplea un sistema de retroalimentación humana, que le ayuda a mejorar su comportamiento y a evitar contenidos no deseados.

Se trata de un modelo autorregresivo, lo que significa que genera textos palabra por palabra, basándose en el contexto anterior. GPT4 tiene una capacidad de memoria muy amplia, lo que le permite recordar y utilizar información de textos o imágenes anteriores. Tambien es capaz de adaptarse al estilo y al tono del usuario con el que interactúa, así como de generar respuestas personalizadas y originales.

Prompt: ¿Me puedes escribir una secuencia práctica para utilizar GPT4?

Una posible secuencia práctica para utilizar GPT4 es la siguiente:

1. Acceder a la plataforma de GPT4 y seleccionar el idioma y el modo de interacción deseado.

2. Escribir una consulta, una instrucción o un texto inicial en el cuadro de entrada y pulsar el botón de generar.

3. Revisar el texto generado por GPT4 y evaluar si cumple con los objetivos y las expectativas.

4. Si el texto generado es satisfactorio, se puede copiar, guardar o compartir según se necesite.

5. Si el texto generado no es satisfactorio, se puede modificar el texto inicial, ajustar los paráme- tros de generación o solicitar una nueva generación hasta obtener un resultado óptimo.

Prompt: ¿Cómo puede un profesor utilizar GPT4 para favorecer la adquisición de conocimiento de sus estudiantes?

La capacidad de GPT4 para generar textos coherentes y creativos a partir de unas palabras clave o de un texto inicial puede ser aprovechada por los profesores para diseñar actividades educativas que estimulen el aprendizaje de sus estudiantes.

Una forma de utilizar GPT4 en el aula es como una herramienta de apoyo a la escritura. Los profesores pueden pedir a los estudiantes que escriban un texto sobre un tema determinado, y luego usar GPT4 para generar sugerencias de mejora, ampliación o corrección del texto. De esta manera, los estudiantes pueden recibir una retroalimentación inmediata y personalizada que les ayude a mejorar su expresión escrita y su comprensión del tema.

Otra forma de utilizar GPT4 en el aula es como una fuente de inspiración y creatividad. Los profesores pueden usar GPT4 para generar textos originales y variados sobre un mismo tema, y luego presentarlos a los estudiantes como ejemplos o como puntos de partida para sus propias creaciones. Así, los estudiantes pueden ampliar sus horizontes, explorar diferentes perspectivas y desarrollar su pensamiento crítico y su imaginación.

Prompt: En un trabajo de fin de grado o de máster ¿es posible determinar con exactitud si fue elaborado por GPT4?

Determinar con exactitud si un trabajo de fin de grado o de máster fue elaborado por GPT4 es un reto complejo que requiere de técnicas avanzadas de análisis lingüístico y de detección de plagio. GPT4 es un modelo de generación de texto basado en inteligencia artificial que puede producir textos coherentes y fluidos a partir de unas palabras clave o de un contexto dado. Sin embargo, GPT4 no es infalible y puede cometer errores gramaticales, semánticos o de coherencia que delaten su origen artificial. Además, GPT4 puede copiar o parafrasear fragmentos de textos existentes en la web, lo que puede ser detectado por herramientas de verificación de originalidad. Por tanto, es posible determinar con cierto grado de confianza si un trabajo fue elaborado por GPT4, pero no con una certeza absoluta.

Prompt: ¿Cómo puede un profesor de ciencias de la salud utilizar GPT4 para evaluar la adquisición de conocimiento y las habilidades cognitivas y sociales de sus estudiantes?

En este contexto, GPT4 puede utilizarse para evaluar la adquisición de conocimiento y las habilidades cognitivas y sociales de sus estudiantes de alguna de las siguientes formas:

• Pedir a los estudiantes que escriban un resumen, una opinión o una crítica sobre un tema relacionado con la ciencia de la salud, y usar GPT4 para generar una retroalimentación automática sobre la calidad, la coherencia y la originalidad del texto.

• Diseñar preguntas de opción múltiple, de verdadero o falso, o de respuesta corta sobre conceptos o hechos científicos, y usar GPT4 para generar las opciones o las respuestas correctas e incorrectas, así como las explicaciones correspondientes.

• Crear escenarios o casos clínicos simulados, y usar GPT4 para generar diálogos realistas entre los pacientes y los profesionales sanitarios, así como preguntas o tareas que evalúen las habilidades de comunicación, empatía y toma de decisiones de los estudiantes.

• Utilizar GPT4 para generar ejemplos o ejercicios prácticos sobre procedimientos o técnicas médicas, y usar GPT4 para generar soluciones o sugerencias de mejora basadas en las respuestas o acciones de los estudiantes.

Estas son solo algunas ideas de cómo un profesor de ciencias de la salud puede utilizar GPT4 para evaluar la adquisición de conocimiento y las habilidades cognitivas y sociales de sus estudiantes. GPT4 es una herramienta muy versátil y potente que puede adaptarse a diferentes objetivos, contenidos y niveles educativos.

Prompt: ¿Puedes escribirme un ejemplo de preguntas de examen para un estudiante de patología quirúrgica digestiva de la Universidad Complutense de Madrid?

A continuación, te propongo algunos ejemplos de preguntas que podrían aparecer en el examen de patología quirúrgica digestiva:

1. ¿Qué tipo de hernia se produce cuando una parte del estómago se desplaza hacia el tórax a través del hiato esofágico? a) Hernia inguinal b) Hernia umbilical c) Hernia de hiato d) Hernia diafragmática

Respuesta correcta: c a) Colectomía b) Colostomía c) Colonoscopia d) Colangiopancreatografía

2. ¿Qué técnica quirúrgica consiste en la extirpación total o parcial del colon?

Respuesta correcta: a a) Peritonitis b) Absceso c) Fístula d) Hematoma

3. ¿Qué complicación postoperatoria se caracteriza por la inflamación del peritoneo debido a la presencia de microorganismos?

Respuesta correcta: a a) Enfermedad de Crohn b) Colitis ulcerosa c) Diverticulitis d) Síndrome del intestino irritable

4. ¿Qué enfermedad inflamatoria intestinal se caracteriza por la afectación discontinua y transmural del intestino, con formación de granulomas y fistulas?

Respuesta correcta: a

Prompt: ¿Cuáles son los riesgos del uso docente de GPT4 en ciencias de la salud?

Uno de los riesgos es la fiabilidad de la información que genera GPT4. Aunque el modelo ha sido entrenado con una gran cantidad de datos de Internet, no siempre es capaz de verificar la veracidad o la actualidad de lo que escribe. Por ejemplo, puede confundir hechos o fechas, citar fuentes poco fiables o desactualizadas, o inventar datos o estadísticas. Esto puede inducir a error a los estudiantes o a los docentes que utilicen GPT4 como fuente de información.

La ética del uso de GPT4 es un problema central. Al ser un sistema que puede imitar el estilo de escritura de cualquier persona o entidad, se puede prestar a usos fraudulentos o malintencionados. Por ejemplo, se podría utilizar para plagiar trabajos académicos, suplantar la identidad de autores o instituciones, o difundir información falsa o sesgada. Esto puede afectar a la integridad académica y profesional de los usuarios de GPT4.

Un tercer riesgo es la dependencia del uso de GPT4. Al ser un sistema tan potente y versátil, se puede caer en la tentación de utilizarlo para todo tipo de tareas o actividades, sin desarrollar las habilidades o competencias propias de cada disciplina. Por ejemplo, se podría utilizar para generar diagnósticos médicos, recetas farmacéuticas, o protocolos clínicos, sin tener en cuenta las limitaciones o los riesgos del modelo. Esto puede comprometer la calidad y la seguridad de la atención sanitaria.

En conclusión, el uso docente de GPT4 en ciencias de la salud puede ser una herramienta útil y novedosa, pero también implica una serie de riesgos que hay que conocer y prevenir. Es importante que los usuarios de GPT4 sean conscientes de las capacidades y las limitaciones del modelo, que lo utilicen con criterio y responsabilidad, y que lo complementen con otras fuentes de información y conocimiento.

Bibliograf A

1. Lee P, Bubeck S, Petro J. Benefits, limits, and risks of GPT4 as an AI chatbot for medicine.N Engl J Med 2023; 388:1233-1239; https://doi.org/10.1056/NEJMsr2214184

2. Gilson A, Safranek CW, Huang T, Socrates V, Chi L, Taylor RA, Chartash D. How Does chatGPT perform on the United States Medical Licensing Examination? The Implications of large language models for medical education and knowledge assessment. JMIR Med Educ. 2023 Feb 8;9:e45312. https://doi.org/10.2196/45312.

3. Fuentes-Martín A, Cilleruelo-Ramos A, Segura-Méndez B, Mayol J. Can an artificial intelligence model pass an examination for medical specialists? Arch Bronconeumol. 2023; https://doi.org/10.1016/j.arbres.2023.03.017.

Agradecimientos

Las contestaciones a las preguntas formuladas se obtuvieron mediante BingGPT, una aplicación disponible a través del navegado Edge de Microsoft que utiliza GPT4.