En 129 Traveris Sandalias Bu Marrón Mujer Venta 0wnONmv8
Do you want Search?
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw
  • Home
  • artículos
  • Matriz de confusiónMujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Matriz de confusión

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

22 abril, 2018 By
Plataforma Pu Sandalias Cuero Peep Cuñas Toe Tacones Mujeres N80wPknOX

Una herramienta fundamental a la hora de evaluar cómo de bien actúa un algoritmo de clasificación es la matriz de confusión.

Voy a intentar explicar qué es y cómo interpretarla, sin hacer honor a su nombre.

Resulta que te montas un clasificador, un modelo de aprendizaje supervisado, para predecir el valor de una variable categórica. Le has dado bien de comer con un conjunto de datos de entrenamiento y ahora te clasifica genial los datos de prueba (o eso es lo que tú te crees). Para comprobar la precisión de tu modelo te calculas, de forma intuitiva, el siguiente ratio: divides el número de observaciones clasificadas correctamente entre el número total de observaciones, algo que utilicé en el ejemplo del perceptrón.

¿Con esto nos vale para presumir de clasificador y fumarnos un purito?. Pues no. La precisión calculada de esta manera puede resultar engañosa en algunos casos. Por ejemplo: un dataset con 100k casos de malversación de fondos públicos y dos posibles etiquetas. A la etiqueta ‘culpable’ le corresponden 90k observaciones y a la ‘Inocente’ las 10k restantes. Sin darnos cuenta, nuestro clasificador está metiendo en la sombra a todas las observaciones, otorgando siempre la etiqueta ‘Culpable’. Así la precisión que obtengo es del 90%. Nos quedamos tan contentos hasta que alguien se pregunte dentro de unos años que cómo es posible que todos los gestores públicos roben (mmm es posible, pero eso es harina de otro costal), y nos demos cuenta del sesgo que está cometiendo el modelo.

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

La matriz de confusión nos dará una mejor idea de cómo está clasificando nuestro modelo, dándonos un conteo de los aciertos y errores de cada una de las clases por las que estemos clasificando.  Así podremos comprobar si nuestro modelo está confundiéndose entre clases, y en qué medida.

Una matriz de confusión de dos clases, en este caso + y -, tiene esta pinta:

Plana Piel FoscoTiempoEl Sandalia Mamá Mejor Para Regalo 4AqRL3j5

Cada columna de la matriz representará el número de predicciones para cada clase realizadas por el modelo, y cada fila los valores reales por cada clase. Con lo cual los conteos quedan divididos en 4 clases, TP, FN, FP y TN, que significan lo siguiente:

  • TP – True Positives: Son el número verdaderos positivos, es decir, de predicciones correctas para la clase +.
  • FN – False Negatives: Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw Son el número de falsos negativos, es decir, la predicción es negativa cuando realmente el valor tendría que ser positivo. A estos casos también se les denomina errores de tipo II.
  • FP – False Positives: Son el número de falsos positivos, es decir, la predicción es positiva cuando realmente el valor tendría que ser negativo. A estos casos también se les denomina errores de tipo I.
  • TN – True Negatives: Son el número de verdaderos negativos, es decir, de predicciones correctas para la clase -.
  • Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Gracias a estas cuatro categorías podemos calcular métricas más elaboradas, como, por ejemplo:

  • Especifidad: también llamado ratio de verdaderos negativos. Nos da la probabilidad de que, dada una observación realmente negativa, el modelo la clasifique así.
  • Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

  • Precisión: Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw también llamado valor de predicción positiva. Nos da la probabilidad de que, dada una predicción positiva, la realidad sea positiva también.

  • Valor de predicción Negativa: Nos da la probabilidad de que, dada una predicción negativa, la realidad sea también negativa.
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Sandalia Bebe Modelo Sin Rosa Suela Crochet hCQtxsrd

  • Error de clasificación: Porcentaje de errores del modelo.

Mujer De Plataforma Sandalias Franco SartoEbay NwP80kXnO

  • Accuracy: Porcentaje total de los aciertos de nuestro modelo.

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Por ejemplo, con la sensibilidad y la especifidad nos hacemos una idea de cómo de bien clasifica nuestro modelo.

Aquí tenéis un par de sitios con más información sobre la matriz de confusión y los ratios que se pueden calcular:

Sandalias Plataforma Con Cierre Sandalias Con Cierre Plataforma xtsrdCBhQo

Vamos a hacer un ejemplo con datos para verlo mejor, y poder calcular alguna métrica.

Imaginemos que tenemos una epidemia de un virus más viejo que el color negro, pero que últimamente está desatado. Se trata del virus Trinque , que convierte a servidores públicos honrados en máquinas de trincar.

Alguien ha creado un modelo para diferenciar a los políticos infectados (culpables +) de los que están limpios (inocentes -), y se lo han pasado a 80000 individuos, resultando la siguiente matriz de confusión:

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Estos serían los cálculos de algunos ratios:

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Parece que el modelo resulta bastante bueno.

Clasifica los casos positivos con una probabilidad del 99,75% y los casos negativos con una probabilidad del 94,29%.

Sandalia Mujer Izupxotk Eva Rojo Onlinemoda Bio Valentina Y7fgb6y

Además, si el clasificador dice que eres un trinqueitor, es que lo eres con un 98,5% de probabilidad. Y si dice que no lo eres, entonces es que no trincas con una probabilidad del 99%.

Así que ya sabes, si quieres comprobar si tu clasificador te la está pegando, puedes hacerlo fácilmente con la matriz de confusión.

En Python puedes calcular matrices de confusión con la función confusion_matrix de la librería scikit-learn.

Ana Carlo Calzados Ana Carlo Rumbo 4381 Ana Calzados 4381 Rumbo RAL435j
Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

También puede gustarte

Sin Pandas y a lo loco!

10 febrero, 2018

Descubriendo la regresión logística

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw 26 julio, 2018

I’m your maximum likelihood estimate

23 septiembre, 2018

Deja un comentario

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Mujer Rojo 106432Color es Sandalias Stonefly 99ef0e Essol 0OnPkw

Este sitio usa Akismet para reducir el spam. Aprende cómo se procesan los datos de tus comentarios.