minw,b∑i=1nlog(1+exp(−yifw,b(xi)))+λ∥w∥2
xiyiiwbfw,b(xi)
Suponiendo que todas sus están normalizadas, por ejemplo, al dedicar por la magnitud de , es bastante fácil ver qué variables son más importantes: aquellas que son más grandes que las demás o (en el lado negativo ) menor cf los otros. Influyen en la pérdida más.xx
Si está interesado en encontrar las variables que realmente son importantes y en el proceso no le importa echar algunas, puede regularizar su función de pérdida:
ℓ1
minw,b∑i=1nlog(1+exp(−yifw,b(xi)))+λ|w|
Los derivados o el regularizador son bastante sencillos, por lo que no los mencionaré aquí. El uso de esta forma de regularización y una apropiada que los elementos menos importantes en conviertan en cero y los demás no.λw
Espero que esto ayude. Pregunte si tiene más preguntas.