¿Qué es la IA explicable?
Muchos modelos de IA son cajas negras: metes datos, escupen un resultado y nadie puede decir qué pasó en medio. La IA explicable (XAI) consiste en abrir esa caja para que el juicio del modelo pueda ponerse en palabras: por qué se rechazó este préstamo, por qué este diagnóstico, por qué esta recomendación.¿Por qué los modelos se vuelven cajas negras?
Son demasiado complejosLas redes neuronales profundas tienen miles de millones de parámetros; ningún humano puede seguir su camino de razonamiento.
Hay demasiadas características
Las entradas pueden tener miles de características, y desenredar cómo afecta cada una al resultado es difícil.
¿Qué métodos de explicación existen?
Importancia de característicasTe dice qué entrada pesó más; por ejemplo, «el tipo de interés» fue clave en esta denegación.
Visualización de atención
Resalta la parte que el modelo «miró», como un mapa de calor de su foco.
Aproximación local
Usa un modelo simple y comprensible para imitar el comportamiento del complejo en una entrada concreta, y ver qué estaba pensando de verdad.
¿Por qué importa?
Cuando la IA entra en campos de alto riesgo como la medicina, las finanzas o el derecho, un resultado no basta: hay que explicar, asignar responsabilidad y ganar confianza. La explicabilidad es también la base para detectar sesgos, cumplir normas y generar confianza. Nadie entrega una decisión de vida o muerte a una máquina que no sabe decir por qué.En resumen: la IA explicable convierte un modelo de «aquí tienes la respuesta» en «aquí tienes la respuesta y la razón».
Comentarios