Ya hemos visto como calcular la regresión lineal en Arduino y como a partir de esta calcular diversos tipos de regresiones. Lo que vamos a ver aquí es usar un truco para convertir la regresión lineal en regresión logística basandonos en la función sigmoide.
La regresión lineal se usa como clasificador binario entre dos conjuntos. En el caso ideal de regresion logística para cualqueir valor de x devuelve un valor de y que es 0 o 1 dependiendo de a que clase pertenezca. Pero en la vida real rara vez suele ser un «caso ideal» y hay valores para los que devolverá un valor comprendido entre 0 y 1. Este resultado puede interpretarse como la probabilidad de que sea del grupo representado por el valor 1 o cuadno esto carezca de sentido simplemente tomar cualqueir valor mayor de 0,5 como del grupo del 1 y cualquie valor por debajo como del grupo del 0.
La función sigmoide se define como:
El valor de y lo podemos sacar de la regresión lineal:
Juntandolo todo:
Veamos las diferencias entre ambas fórmulas:
Regresión Lineal:
- Su fórmula define una linea
- No está acotada, no tiene un valor máximo ni mínimo
- Se usa para estimar valores.
- Devuelve un valor numérico
Regresión logística:
- Su fórmula define una "S"
- Esta acotada entre 1 y 0
- Se usa para clasificar un valor en uno de dos grupos. Clasificador binario.
- El resultado que devuelve se puede interpretar de dos maneras: como probabilidad de pertenecer a un grupo si se toma el valor directamente o como pertenencia absoluta a un grupo u otro si se considera que cuando el valor obtenido este por encima de 0,5 se pertenece a uno y por debajo al otro.
Forma de implementarlo
La forma de implementar esto en un Arduino es aprovechar la librería que ya tenemos de regresión lineal y que nos soluciona los problemas de memoria y tiempo de cálculo que tienen los cálculos estadísticos en Arduino. Simplemente una vez que nuestro sistema aprenda el modelo lineal basta con transformar el resultado que devuelve este modelo para convertir su respuesta a la de una regresión logística.
double exp = linealRegression.calculate(x)*-1;
return 1/1+pow(e, exp);
La implementación del código se puede encontrar en la librería Regressino
Utilidad
¿Tiene sentido transformar una regresión lineal en un modelo de regresión logística?. Aunque esta conversión se puede realizar para cualquier regresión lineal no tiene sentido hacerlo. Solo tiene sentido usarlos cuando se quiera entrenar un clasificador binario y haya dos grupos de elementos claramente diferenciables. Entonces se puede calcular la recta de regresión y convertirla en una regresión logística que funcione como clasificador.
Tampoco va servir para calsificar cualquier grupo de elementos, han de ser linealmente separables. dicho de forma más intuitiva, tienen que poder separarse trazando una linea recta entre ellos.
En definitiva, sin ser una opción ideal, es suficiente buena y útil como para plantearse su uso.
Construyendo a Chispas 
Pingback: Regresión lineal con pesos en Arduino | Construyendo a Chispas