Conjunto de datos clínico real centrado en Neumonía Nosocomial (adquirida en el hospital). Perfil microbiológico específico con bacterias resistentes (Pseudomonas aeruginosa, Klebsiella) y tratamientos dirigidos.
Comparación detallada de las métricas de clasificación para los modelos entrenados con el conjunto de datos original y el conjunto sintético generado.
| Clase | Precisión | Recall | F1-Score | Soporte |
|---|---|---|---|---|
| Clase 0 | 0.70 | 1.00 | 0.82 | 77 |
| Clase 1 | 0.00 | 0.00 | 0.00 | 33 |
| Accuracy | 0.70 | |||
| Macro Avg | 0.35 | 0.50 | 0.41 | 110 |
| Weighted Avg | 0.49 | 0.70 | 0.58 | 110 |
| Clase | Precisión | Recall | F1-Score | Soporte |
|---|---|---|---|---|
| Clase 0 | 0.82 | 0.65 | 0.72 | 77 |
| Clase 1 | 0.45 ⬆ +0.45 | 0.67 ⬆ +0.67 | 0.54 ⬆ +0.54 | 33 |
| Accuracy | 0.65 ⬇ -0.05 | |||
| Macro Avg | 0.63 ⬆ +0.28 | 0.66 ⬆ +0.16 | 0.63 ⬆ +0.22 | 110 |
| Weighted Avg | 0.71 ⬆ +0.22 | 0.65 ⬇ -0.05 | 0.67 ⬆ +0.09 | 110 |
Conjunto de datos clínico real centrado en la Neumonía Nosocomial (adquirida en el hospital). Se diferencia por su perfil microbiológico específico (presencia de bacterias resistentes como Pseudomonas aeruginosa y Klebsiella) y tratamientos dirigidos (Trifamox, Fosfomicina).
Recolección retrospectiva de registros electrónicos. Anonimización mediante cifrado.
Estudio aprobado por el comité de ética institucional bajo exención de consentimiento informado. Restricción de confidencialidad: En estricto cumplimiento de los protocolos de privacidad hospitalaria, el comité no autoriza la divulgación pública de los microdatos a nivel de paciente, ni en su versión original ni en sus variantes sintéticas generadas. La publicación se restringe exclusivamente a las métricas de evaluación, resultados agregados y metodología del modelo.
Datos clínicos anonimizados de pacientes con neumonía grave. Servicio de Terapia Intensiva. Hospital Universitario "Arnaldo Milián Castro". Villa Clara. Cuba.
| Variable | Descripción Clínica | Tipo | Rango / Categorías | Unidad | ¿Objetivo? |
|---|---|---|---|---|---|
Edad |
Edad del paciente al momento del ingreso | Numérico | 0 - 98 | años | No |
Estadia |
Días de estancia hospitalaria del paciente | Numérico | 0 - 124 | días | No |
Tiempo_exacto_de_ventilacion |
Tiempo total de ventilación mecánica durante la estancia | Numérico | 0 - 576 | horas | No |
Puntaje_Apache |
Puntaje de severidad APACHE II al ingreso | Numérico | 0 - 34 | puntos | No |
Sexo |
Género del paciente | Categórico | 1: Masculino, 2: Femenino | N/A | No |
Raza |
Raza/etnia del paciente | Categórico | 1: Blanca, 2: Mestiza, 4: Negra | N/A | No |
Equipo_de_ventilacion_utilizado |
Tipo de equipo de ventilación utilizado durante la estancia | Categórico | 1, 3, 4, 5, 6, 7, 8, 9, 11, 12, 13, 14 | N/A | No |
Diagnostico_Neumonia_nosocomial |
Diagnóstico de neumonía nosocomial (adquirida en el hospital) | Binario | 0: No, 1: Sí | N/A | No |
Infeccion_Respiratoria |
Presencia de infección respiratoria | Binario | 0: No, 1: Sí | N/A | No |
Germen_Staphilocco_Aureus_Meicllin_Resitente |
Presencia de Staphylococcus aureus resistente a meticilina (MRSA) | Binario | 0: No, 1: Sí | N/A | No |
Germen_Pseudomona_Areuginosa |
Presencia de infección por Pseudomonas aeruginosa | Binario | 0: No, 1: Sí | N/A | No |
Germen_Klebsiella |
Presencia de infección por Klebsiella | Binario | 0: No, 1: Sí | N/A | No |
Hidratacion_Recibida |
Paciente recibió hidratación intravenosa | Binario | 0: No, 1: Sí | N/A | No |
Anticoagulacion_profilactica_Recibida |
Paciente recibió anticoagulación profiláctica | Binario | 0: No, 1: Sí | N/A | No |
Antibioprofilaxis_Recibida |
Paciente recibió antibioprofilaxis | Binario | 0: No, 1: Sí | N/A | No |
Trifamox_Recibida |
Paciente recibió Trifamox (amoxicilina + clavulánico) | Binario | 0: No, 1: Sí | N/A | No |
Aerosol_de_salbutamol_Recibida |
Paciente recibió aerosol de salbutamol (broncodilatador) | Binario | 0: No, 1: Sí | N/A | No |
Aminofilina_Recibida |
Paciente recibió aminofilina (broncodilatador) | Binario | 0: No, 1: Sí | N/A | No |
Fosfomicina_Recibida |
Paciente recibió fosfomicina (antibiótico) | Binario | 0: No, 1: Sí | N/A | No |
Murio |
Indicador de fallecimiento del paciente (variable objetivo) | Binario | 0: Superviviente, 1: Fallecido | N/A | Sí |
Esta sección detalla los códigos y significados de las variables categóricas y binarias presentes en el conjunto de datos. Comprender estas codificaciones es fundamental para la correcta interpretación de los resultados clínicos.
Sexo
Categórica
| Código | Significado |
|---|---|
| 1 | Masculino |
| 2 | Femenino |
Raza
Categórica
| Código | Significado |
|---|---|
| 1 | Blanca / Caucásica |
| 2 | Mestiza |
| 4 | Negra / Afrodescendiente |
Equipo_de_ventilacion_utilizado
Categórica
| Código | Significado |
|---|---|
| 1 | Evita-4 |
| 3 | Servo S |
| 4 | Servo-i |
| 5 | Savina-300 |
| 6 | Savina |
| 7 | Hamilton-Raphael |
| 8 | No ventilado |
| 9 | Bella Vista |
| 11 | R 50 SIRIUSMED |
| 12 | Jenny |
| 13 | ABETHA |
| 14 | Otros / No especificado |
Formato común: 0 = No, 1 = Sí
Diagnostico_Neumonia_nosocomial
Diagnóstico de neumonía nosocomial (adquirida en el hospital)
Infeccion_Respiratoria
Presencia de infección respiratoria
Germen_Staphilocco_Aureus_Meicllin_Resitente
Infección por Staphylococcus aureus resistente a meticilina (MRSA)
Germen_Pseudomona_Areuginosa
Infección por Pseudomonas aeruginosa
Germen_Klebsiella
Infección por Klebsiella
Hidratacion_Recibida
Administración de hidratación intravenosa
Anticoagulacion_profilactica_Recibida
Administración de anticoagulación profiláctica
Antibioprofilaxis_Recibida
Administración de antibioprofilaxis
Trifamox_Recibida
Administración de Trifamox (amoxicilina + clavulánico)
Aerosol_de_salbutamol_Recibida
Administración de aerosol de salbutamol (broncodilatador)
Aminofilina_Recibida
Administración de aminofilina (broncodilatador)
Fosfomicina_Recibida
Administración de fosfomicina (antibiótico)
Murio
🎯 Variable Objetivo: Fallecimiento del paciente (0: Superviviente, 1: Fallecido)
Nota: Todas las variables binarias están codificadas como 0 = No (ausencia) y 1 = Sí (presencia).
MRSA y el uso de FosfomicinaDiagnostico_Neumonia_nosocomial y los gérmenes identificados8 en ventilación indica "No ventilado"Diagnostico_Neumonia_nosocomial == 1 → Infeccion_Respiratoria = 1MRSA == 1 → Infeccion_Respiratoria = 1Pseudomona_Areuginosa == 1 → Infeccion_Respiratoria = 1Klebsiella == 1 → Infeccion_Respiratoria = 1Tiempo_exacto_de_ventilacion == 0 → Equipo_de_ventilacion_utilizado = 8 (No Aplica)Tiempo_exacto_de_ventilacion > 0 → Equipo_de_ventilacion_utilizado ≠ 8Todo paciente debe recibir hidratación (Hidratacion_Recibida = 1)| Valor escala | 0.03 |
|---|---|
| Probabilidad Base | 0.1 |
| epochs | 500 |
|---|---|
| batch_size | 50 |
| generator_lr | 0.0002 |
| discriminator_lr | 0.0002 |
| pac | 10 |
| generator_dim | (128, 128) |
| discriminator_dim | (128, 128) |
| embedding_dim | 128 |
| l2scale | 1e-05 |
| epochs | 400 |
|---|---|
| batch_size | 50 |
| embedding_dim | 64 |
| compress_dims | (64, 64) |
| decompress_dims | (64, 64) |
| l2scale | 1e-5 |
| loss_factor | 2 |
| Random Seed | 42 |
|---|---|
| Python | 3.12.12 |
Para reproducir exactamente este conjunto de datos, ejecute el script de generación con la semilla aleatoria 42.
Los resultados pueden variar ligeramente según la versión de las librerías.
El conjunto original ha sido sometido a un proceso de balanceo de clases y generación sintética para mejorar la representación de clases minoritarias. Nota: se ha empleado un conjunto de validación para evaluar el índice de fidelidad. Se han generado tres familias de conjuntos:
El mejor conjunto de cada etapa fue seleccionado mediante el índice TabDSFidelity.
| Algoritmo | Ratio | N° Ejemplos | AUC-ROC | F1 | Accuracy | TabDSFidelity | Jensen-Shannon | Kolmogorov-Smirnov | Kullback-Leibler | Correlación | Tiempo Total (s) | Dist. Promedio | Copias Exactas | Ataque MIA | Mejor |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Random Oversampling | 1 | 462 | 0.809 | 0.766 | 0.764 | 4.478 | 0.085 | 0.787 | 0.007 | 0.977 | 103.023 | 0 | 462 | 0.559 | |
| SMOTE | 1 | 462 | 0.817 | 0.810 | 0.809 | 7.654 | 0.117 | 0.756 | 0.015 | 0.978 | 105.952 | 0.014 | 332 | 0.572 | |
| Borderline SMOTE | 1 | 462 | 0.837 | 0.804 | 0.800 | 8.344 | 0.101 | 0.920 | 0.014 | 0.978 | 68.135 | 0.013 | 332 | 0.574 | 🏆 |
| ADASYN | 1.009 | 464 | 0.803 | 0.820 | 0.818 | 7.831 | 0.113 | 0.828 | 0.014 | 0.978 | 73.606 | 0.013 | 328 | 0.541 | |
| SMOTE RSB* Adaptado | 1.191 | 425 | 0.794 | 0.780 | 0.782 | 5.200 | 0.085 | 0.994 | 0.005 | 0.983 | 63.888 | 0.013 | 330 | 0.528 | |
| SMOTE RSB* Adaptado + Reglas | 1.191 | 425 | 0.808 | 0.782 | 0.782 | 5.838 | 0.100 | 0.990 | 0.005 | 0.984 | 89.359 | 0.014 | 328 | 0.512 | |
| OOF PSO para Balanceo | 1 | 462 | 0.798 | 0.764 | 0.773 | 0.602 | 0.247 | 0.011 | 0.085 | 0.766 | 110.434 | 0.082 | 328 | 0.537 | |
| OOF PSO para Balanceo + Reglas | 1 | 462 | 0.811 | 0.772 | 0.782 | 2.522 | 0.264 | 0.005 | 0.064 | 0.798 | 97.196 | 0.085 | 256 | 0.552 |
| Algoritmo | Ratio | N° Ejemplos | AUC-ROC | F1 | Accuracy | TabDSFidelity | Jensen-Shannon | Kolmogorov-Smirnov | Kullback-Leibler | Correlación | Tiempo Total (s) | Dist. Promedio | Copias Exactas | Ataque MIA | Mejor |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| SMOTE RSB* + Ruido Gaussiano | 1.123 | 7527 | 0.786 | 0.706 | 0.700 | 8.071 | 0.173 | 0.482 | 0.028 | 0.956 | 124.405 | 0.056 | 87 | 0.484 | |
| SMOTE RSB* + Ruido Gaussiano + Reglas | 1.123 | 7527 | 0.812 | 0.782 | 0.782 | 9.457 | 0.173 | 0.482 | 0.032 | 0.952 | 337.761 | 0.062 | 58 | 0.465 | |
| CTGAN | 2.532 | 9970 | 0.547 | 0.606 | 0.700 | 4.535 | 0.334 | 0.000 | 0.023 | 0.924 | 338.293 | 0.087 | 0 | 0.550 | |
| CTGAN + Reglas del Dominio | 2.532 | 9970 | 0.506 | 0.572 | 0.664 | 3.644 | 0.334 | 0.000 | 0.043 | 0.927 | 535.140 | 0.088 | 0 | 0.543 | |
| TVAE | 1.123 | 9993 | 0.661 | 0.647 | 0.645 | 5.193 | 0.333 | 0.014 | 0.035 | 0.946 | 192.745 | 0.040 | 0 | 0.440 | |
| TVAE + Reglas del Dominio | 1.123 | 9993 | 0.612 | 0.614 | 0.609 | 4.314 | 0.333 | 0.014 | 0.037 | 0.944 | 367.666 | 0.040 | 0 | 0.473 | |
| OOF PSO para Aumento | 1 | 10000 | 0.616 | 0.564 | 0.545 | 0.834 | 0.699 | 0.000 | 0.331 | 0.577 | 136.187 | 0.199 | 0 | 0.410 | |
| OOF PSO para Aumento + Reglas | 1 | 10000 | 0.613 | 0.553 | 0.536 | 0.865 | 0.699 | 0.000 | 0.450 | 0.643 | 332.302 | 0.195 | 0 | 0.416 | |
| SMOTE RSB* Refinado | 1.005 | 8820 | 0.828 | 0.767 | 0.764 | 9.039 | 0.176 | 0.345 | 0.025 | 0.951 | 101.020 | 0.060 | 63 | 0.506 | |
| SMOTE RSB* Refinado + Reglas | 1.005 | 8820 | 0.832 | 0.800 | 0.800 | 9.591 | 0.176 | 0.345 | 0.029 | 0.948 | 306.053 | 0.063 | 38 | 0.514 | 🏆 |
| Algoritmo | Ratio | N° Ejemplos | AUC-ROC | F1 | Accuracy | TabDSFidelity | Jensen-Shannon | Kolmogorov-Smirnov | Kullback-Leibler | Correlación | Tiempo Total (s) | Dist. Promedio | Copias Exactas | Ataque MIA | Mejor |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| SMOTE RSB* + Ruido Gaussiano | 1.116 | 7989 | 0.818 | 0.741 | 0.736 | 8.643 | 0.169 | 0.488 | 0.026 | 0.956 | 236.837 | 0.055 | 167 | 0.495 | |
| SMOTE RSB* + Ruido Gaussiano + Reglas | 1.116 | 7989 | 0.803 | 0.751 | 0.745 | 8.705 | 0.169 | 0.488 | 0.030 | 0.953 | 426.275 | 0.059 | 147 | 0.471 | |
| CTGAN | 2.416 | 10432 | 0.634 | 0.655 | 0.709 | 4.524 | 0.322 | 0.000 | 0.021 | 0.926 | 437.734 | 0.083 | 67 | 0.506 | |
| CTGAN + Reglas del Dominio | 2.416 | 10432 | 0.595 | 0.617 | 0.682 | 3.384 | 0.322 | 0.000 | 0.039 | 0.929 | 636.575 | 0.082 | 67 | 0.506 | |
| TVAE | 1.118 | 10455 | 0.648 | 0.629 | 0.627 | 3.523 | 0.319 | 0.017 | 0.032 | 0.949 | 282.953 | 0.039 | 67 | 0.515 | |
| TVAE + Reglas del Dominio | 1.118 | 10455 | 0.618 | 0.611 | 0.609 | 2.825 | 0.319 | 0.017 | 0.033 | 0.947 | 454.961 | 0.040 | 67 | 0.533 | |
| OOF PSO para Aumento | 1 | 10462 | 0.730 | 0.731 | 0.727 | 3.798 | 0.657 | 0.000 | 0.295 | 0.592 | 232.687 | 0.194 | 66 | 0.542 | |
| OOF PSO para Aumento + Reglas | 1 | 10462 | 0.733 | 0.710 | 0.700 | 3.476 | 0.657 | 0.000 | 0.376 | 0.653 | 437.303 | 0.189 | 66 | 0.545 | |
| SMOTE RSB* Refinado | 1.004 | 9282 | 0.815 | 0.751 | 0.745 | 8.556 | 0.173 | 0.353 | 0.024 | 0.952 | 203.479 | 0.055 | 129 | 0.536 | |
| SMOTE RSB* Refinado + Reglas | 1.004 | 9282 | 0.825 | 0.793 | 0.791 | 9.588 | 0.173 | 0.353 | 0.027 | 0.948 | 405.183 | 0.059 | 115 | 0.552 | 🏆 |
Para interpretar correctamente los resultados de los conjuntos de datos generados, es fundamental comprender qué mide cada métrica y cómo se relacionan entre sí. A continuación, se detalla cada una de las métricas utilizadas en la evaluación:
¿Qué mide? Capacidad del modelo para distinguir entre clases (Ej: mortalidad vs supervivencia).
Interpretación:
Ejemplo: AUC-ROC = 0.82 significa que hay un 82% de probabilidad de que el modelo clasifique correctamente un paciente fallecido frente a uno superviviente.
¿Qué mide? Media armónica entre precisión y sensibilidad (recall).
Interpretación:
Ejemplo: F1 = 0.76 indica que el modelo mantiene un buen balance entre identificar correctamente a los pacientes que fallecen (sensibilidad) y no etiquetar erróneamente a los que sobreviven (precisión).
¿Qué mide? Proporción de predicciones correctas sobre el total.
Interpretación:
Ejemplo: Accuracy = 0.75 significa que el 75% de las predicciones del modelo son correctas.
⚠️ Nota: En conjuntos desbalanceados, esta métrica puede ser engañosa. Es mejor usar F1-Score o AUC-ROC.
¿Qué mide? Calidad global del conjunto sintético comparado con el original.
Interpretación:
Ejemplo: TabDSFidelity = 8.08 indica que el conjunto sintético mantiene una alta similitud con el original, preservando las relaciones y distribuciones de los datos reales, además de maximizar su eficacia predictiva.
💡 Importante: Este es el índice para seleccionar el mejor conjunto de datos sintéticos. Para este caso, el peso empleado para las métricas "AUC-ROC", "F1-Score" y "Accuracy" fue (2) y para el resto de las métricas fue (1).
¿Qué mide? Similitud entre las distribuciones de variables numéricas del conjunto sintético y el original.
Interpretación:
Ejemplo: JS = 0.118 indica que las distribuciones de las variables numéricas (edad, presión arterial, etc.) son bastante similares a las del conjunto original.
📌 Nota: Es el promedio de la divergencia de Jensen-Shannon calculada para todas las variables numéricas.
¿Qué mide? Probabilidad estadística de que las muestras numéricas del conjunto sintético provengan de la misma distribución continua que el original.
Interpretación:
Ejemplo: KS p-valor = 0.753 indica que hay evidencia fuerte a favor de que las distribuciones acumulativas de la variable sintética y la original son equivalentes.
📌 Nota: Se reporta el promedio de los p-valores obtenidos mediante la prueba de Kolmogorov-Smirnov de dos muestras para las variables numéricas.
¿Qué mide? Divergencia entre las distribuciones de variables categóricas del conjunto sintético y el original.
Interpretación:
Ejemplo: KL = 0.014 indica que la distribución de las variables categóricas (género, mortalidad) es muy similar a la del conjunto original.
📌 Nota: Es el promedio de la divergencia de Kullback-Leibler para todas las variables categóricas. A diferencia de JS y KS, esta métrica se aplica solo a variables categóricas.
¿Qué mide? Preservación de las relaciones entre variables del conjunto original.
Interpretación:
Ejemplo: Correlación = 0.976 significa que las relaciones entre variables (ej. edad y mortalidad) se mantienen en un 97.6% respecto al conjunto original.
¿Qué mide? Tiempo total de ejecución del proceso de generación del conjunto.
Interpretación:
Ejemplo: Tiempo total = 69.45s significa que el proceso completo de generación del conjunto balanceado tomó aproximadamente 1.16 minutos.
⏱️ Nota: Incluye el tiempo de generación sintética + cálculo de métricas.
Estas métricas evalúan el riesgo de exposición de información sensible y la capacidad de un atacante para inferir datos de los pacientes a partir del conjunto de datos sintéticos.
¿Qué mide? La distancia promedio entre cada registro sintético y su registro más cercano en el conjunto de datos original.
Interpretación:
Ejemplo: Distancia promedio = 0.015 en SMOTE indica que los registros sintéticos están relativamente cerca de los originales, lo que podría implicar un riesgo de privacidad moderado.
Metodología: Calculada utilizando la Distancia de Gower, la cual maneja internamente tipos de datos mixtos, normalizando las variables numéricas y penalizando diferencias categóricas para devolver un índice estandarizado entre 0 y 1.
Recomendación: Valores < 0.01 deben ser evaluados con precaución. Idealmente, buscar valores > 0.02 para garantizar la privacidad.
¿Qué mide? Número de registros sintéticos que son copias idénticas de registros en el conjunto de datos original.
Interpretación:
Ejemplo: SMOTE RSB* Refinado genera 76 copias exactas de 8817 registros (0.86%), lo que representa un riesgo de privacidad que debe ser evaluado.
Importante: La presencia de copias exactas es uno de los indicadores más críticos de fuga de datos. Idealmente, este valor debe ser 0.
¿Qué mide? Tasa de éxito (medida en AUC-ROC) de un atacante para determinar si un registro específico pertenece al conjunto de datos original.
Interpretación:
Ejemplo: MIA = 0.553 significa que el atacante tiene un éxito ligeramente superior al 50% aleatorio, lo que indica un riesgo de privacidad bajo/moderado.
Objetivo: Buscar valores lo más cercanos a 0.5. Valores > 0.6 indican que el conjunto sintético no protege adecuadamente la privacidad.