somosnlp/Sam_Diagnostic

Explorando las Fronteras de la Inteligencia Artificial en el Ámbito Médico con Gemma-2B-IT

Un nuevo modelo de inteligencia artificial, Gemma-2B-IT, se destaca por su capacidad excepcional. Este modelo, perteneciente a la avanzada familia de IA, ha sido meticulosamente entrenado con un conjunto de datos enriquecido y depurado.

El proceso de desarrollo de Gemma-2B-IT comenzó con una rigurosa selección de transcripciones médicas en inglés extraidas de Kaggle. Antes de su entrenamiento, me enfrente al desafío de los datos faltantes, una barrera común en la inteligencia artificial. A través de una limpieza de datos meticulosa, se preparó el terreno para un modelo más robusto de su tipo y "confiable".

La barrera del idioma se superó utilizando tecnologías de IA como chatgpt para traducir el conjunto de datos al español, asegurando así su aplicabilidad en una variedad más amplia de contextos médicos. Este paso crucial no solo aumentó la versatilidad del modelo sino que también demostró la potencialidad de la IA para superar obstáculos lingüísticos en el campo médico.

Posteriormente, transforme las transcripciones en un formato ChatML, adaptando el dataset para entrenar eficientemente a Gemma-2B-IT. Esto permitió al modelo entender y procesar información médica.

La evaluación de Gemma-2B-IT: logró un 80% de precisión al interactuar con datos nuevos y un 95% de precisión al trabajar con las transcripciones utilizadas durante su entrenamiento (se modificaron parametros como temperature). Estos resultados no solo demuestran la capacidad de Gemma-2B-IT para aprender y adaptarse, ofreciendo respuestas precisas y relevantes en casi tiempo real.

como respuesta del modelo seria:

• Descripción: Un resumen detallado del caso del paciente, proporcionado en un lenguaje claro y conciso. Esto permite a los médicos obtener una comprensión rápida y completa de la situación sin necesidad de revisar extensos historiales médicos.

• Especialidad Médica: Basándose en el análisis de los síntomas y la historia clínica, Gemma-2B-IT identifica la especialidad médica más relevante para el caso. Esto asegura que los pacientes sean derivados al especialista adecuado sin demoras innecesarias.

• Diagnóstico Principal: Con un enfoque en la precisión diagnóstica, el modelo proporciona el diagnóstico principal, permitiendo a los médicos centrarse en las intervenciones y tratamientos más pertinentes.

La promesa de Gemma-2B-IT en el campo de la inteligencia artificial médica es enorme, abriendo puertas a diagnósticos más rápidos, una mayor personalización y una asistencia médica más accesible. A medida que avanzamos hacia un futuro donde la tecnología y la medicina se entrelazan cada vez más, modelos como Gemma-2B-IT marcarán la diferencia.

Colab.

https://colab.research.google.com/drive/1gzTk-mdKefjZwzeiaHfkQ5Qnq3G10WCA?usp=sharing

progreso del entrenamiento.

Space.

https://huggingface.co/spaces/somosnlp/Sam_Diagnostic

conjunto de datos formato gemma.

https://huggingface.co/datasets/somosnlp/medical_en_es_formato_chatML_Gemma

Limpieza de datos

https://huggingface.co/datasets/somosnlp/medical_bilingual_en_es

Modelo inicial fine-tune.

1. https://huggingface.co/google/gemma-2b-it
2. NickyNicky/gemma-2b-it_oasst2_all_chatML_Unsloth_V1

Nota.

La AI no te quitara el trabajo...
El trabajo te lo quitara otra persona que tenga conocimiento fundamental y avanzado de la AI.

Hecho.

https://huggingface.co/NickyNicky