Regresión logística como clasificador
De una recta a una probabilidad
Si intentáramos clasificar con una regresión lineal pura, obtendríamos valores que se salen del intervalo entre cero y uno: probabilidades de menos dos o de tres. La regresión logística soluciona esto comprimiendo cualquier recta dentro del rango válido mediante una función en forma de S.
La función logística
La sigmoide aplasta la salida de la combinación lineal entre cero y uno: valores muy negativos tienden a cero, muy positivos a uno, y el cero se traduce en medio. Ese aplastamiento suave es derivable por todas partes, lo que permite entrenarla con descenso de gradiente.
La frontera de decisión es lineal
Donde la probabilidad cruza el umbral —normalmente medio— se dibuja la frontera. Como detrás hay una combinación lineal de características, esa frontera es un hiperplano: una recta en dos dimensiones, un plano en tres. El modelo solo puede separar clases con cortes rectos.
Los coeficientes como log-odds
Cada coeficiente mide cuánto cambia el logaritmo de la razón de probabilidades al aumentar esa variable una unidad, manteniendo las demás fijas. Un coeficiente positivo empuja hacia la clase uno; uno negativo, hacia la cero. Su tamaño relativo indica la importancia de cada predictor.
Más allá de dos clases
Para varios destinos se usa la extensión multinomial —softmax—, que reparte la probabilidad entre todas las clases de forma que sumen uno. La alternativa clásica es un uno contra el resto: un clasificador binario por clase, y gana la que asigne mayor probabilidad.
Regularización por defecto
A diferencia de una regresión lineal desnuda, la logística suele incorporar penalización que frena coeficientes enormes. Esto estabiliza las probabilidades cuando las clases están casi separadas y evita que un predictor frágil domine el modelo.
Calibración: su gran virtud
Muchos clasificadores dan una puntuación ordenada pero mal calibrada; la logística, bajo sus supuestos, entrega números que se leen directamente como probabilidad de pertenencia. Poder decir «un setenta y tres por ciento» con sentido es un lujo que no todos los métodos ofrecen.
Errores frecuentes
- Tratar las probabilidades salidas como certezas sin revisar si el modelo está calibrado.
- Olvidar que la frontera es lineal y esperar que separe clases entrelazadas.
- No escalar las características, lo que sesga la convergencia del entrenamiento.
Ejemplo resuelto: probabilidad de impago
Un banco quiere puntuar cada solicitud con la probabilidad de impago. El montaje:
- Traducir: la etiqueta es impago sí o no, y la salida deseada es una probabilidad, no una clase seca.
- Combinar: el modelo aprende pesos sobre ingresos, antigüedad e historial.
- Aplastar: la sigmoide convierte esa suma en un número entre cero y uno legible como riesgo.
- Decidir: cada segmento elige su umbral según el coste de rechazar un buen pagador o aceptar un mal riesgo.
- Revisar: calibrar comparando probabilidades anunciadas con frecuencias reales de impago.
¿Para qué sirve en la realidad?
Es el caballo de batalla del scoring crediticio, del riesgo médico y de la respuesta a campañas: simple, auditable y regulable, cumple la exigencia de explicar por qué a un cliente se le negó el crédito donde un modelo opaco no podría.
¿Qué forma tiene la frontera de decisión de una regresión logística estándar sobre las características originales?
La regresión logística puede devolver probabilidades que se interpretan como grado de confianza en la clase positiva.
Cuándo elegiría logística
Cuando importan las probabilidades, la interpretabilidad y una línea base honesta. Si una recta bien regularizada ya rifa lo suficiente, un modelo más oscuro rara vez aporta lo que cuesta en explicación y mantenimiento.
Logística
Toca una tarjeta para ver la respuesta.
Ordena el mecanismo interno de la regresión logística:
Arrastra cada ficha a su categoría (o tócala y luego toca la categoría). También puedes usar el teclado.
Google ML: regresión logísticaIntroducción interactiva a la logística y su frontera de decisión.
Une cada pieza de la logística con su papel.
Clasificar con probabilidad
- Regresión logística
- Salida
- probabilidad
- probabilidad
- sigmoide
- Salida
- lineal
- coeficientes en log-odds
- scoring
¿Qué es la regresión logística?Explicación de referencia en español sobre el método y sus usos.
Tu modelo logístico separa mal dos clases que en el gráfico se entrelazan en forma de media luna. ¿Es un fallo de ajuste o una limitación estructural del modelo?
Tu texto se guarda sólo en este dispositivo.
Comentarios
Inicia sesión para comentar.
Todavía no hay comentarios. Sé la primera persona en opinar.