Evaluación de ChatGPT para la corrección de referencias bibliográficas en estilo Vancouver
Objetivos: Evaluar la utilidad y precisión de ChatGPT-4 Turbo para corregir referencias de artículos de revista según el estilo de citación Vancouver, identificando su comportamiento y limitaciones.
Metodología: Estudio descriptivo con 140 referencias de artículos de revista extraídas de 20 Trabajos de Fin de Grado de Enfermería de la Universidad Complutense de Madrid (2019-2020). Se elaboró una lista de referencias patrón mediante revisión por pares. Se solicitó a ChatGPT-4 Turbo la corrección y formateo de las referencias originales usando un prompt básico. Su respuesta se comparó con el patrón mediante un sistema categorizado por seis códigos y el recuento de acciones por elemento bibliográfico (n = 521).
Resultados: El 49,3 % de las referencias recibieron ≥1 intervención, mientras que el 50,7 % permanecieron sin cambios; entre estas últimas, 12 ya eran correctas y 59 seguían conteniendo errores. De las 521 acciones, 130 (25,0 %) fueron adecuadas y 391 (75,0 %) inadecuadas (sin intervención 79,3 %, corrección errónea 13,0 %, error de formato 7,2 % y alucinación 0,5 %).
Conclusiones: Con un prompt elemental, ChatGPT-4 Turbo genera mejoras limitadas y predomina la ausencia de intervención. Su uso podría ser útil dentro de un protocolo (prompts específicos, verificación de metadatos mediante DOI/PMID y supervisión humana), especialmente en fases iniciales o como apoyo previo a la revisión experta.