Altos Verano Plataforma Sandalias Moda Impermeable Tacones Mujeres qzMpSGULV
Do you want Search?
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13
  • Home
  • artículos
  • Matriz de confusiónWomen's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Matriz de confusión

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

22 abril, 2018 By
Tacón Blancas De Alto Online Sandalias SMpGqzUV

Una herramienta fundamental a la hora de evaluar cómo de bien actúa un algoritmo de clasificación es la matriz de confusión.

Voy a intentar explicar qué es y cómo interpretarla, sin hacer honor a su nombre.

Resulta que te montas un clasificador, un modelo de aprendizaje supervisado, para predecir el valor de una variable categórica. Le has dado bien de comer con un conjunto de datos de entrenamiento y ahora te clasifica genial los datos de prueba (o eso es lo que tú te crees). Para comprobar la precisión de tu modelo te calculas, de forma intuitiva, el siguiente ratio: divides el número de observaciones clasificadas correctamente entre el número total de observaciones, algo que utilicé en el ejemplo del perceptrón.

¿Con esto nos vale para presumir de clasificador y fumarnos un purito?. Pues no. La precisión calculada de esta manera puede resultar engañosa en algunos casos. Por ejemplo: un dataset con 100k casos de malversación de fondos públicos y dos posibles etiquetas. A la etiqueta ‘culpable’ le corresponden 90k observaciones y a la ‘Inocente’ las 10k restantes. Sin darnos cuenta, nuestro clasificador está metiendo en la sombra a todas las observaciones, otorgando siempre la etiqueta ‘Culpable’. Así la precisión que obtengo es del 90%. Nos quedamos tan contentos hasta que alguien se pregunte dentro de unos años que cómo es posible que todos los gestores públicos roben (mmm es posible, pero eso es harina de otro costal), y nos demos cuenta del sesgo que está cometiendo el modelo.

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

La matriz de confusión nos dará una mejor idea de cómo está clasificando nuestro modelo, dándonos un conteo de los aciertos y errores de cada una de las clases por las que estemos clasificando.  Así podremos comprobar si nuestro modelo está confundiéndose entre clases, y en qué medida.

Una matriz de confusión de dos clases, en este caso + y -, tiene esta pinta:

Mgfggf Gioseppo Gioseppo Sandalias Volnay Negro Volnay Mgfggf Sandalias Gioseppo Sandalias Negro Negro E29DIHYW

Cada columna de la matriz representará el número de predicciones para cada clase realizadas por el modelo, y cada fila los valores reales por cada clase. Con lo cual los conteos quedan divididos en 4 clases, TP, FN, FP y TN, que significan lo siguiente:

  • TP – True Positives: Son el número verdaderos positivos, es decir, de predicciones correctas para la clase +.
  • FN – False Negatives: Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13 Son el número de falsos negativos, es decir, la predicción es negativa cuando realmente el valor tendría que ser positivo. A estos casos también se les denomina errores de tipo II.
  • FP – False Positives: Son el número de falsos positivos, es decir, la predicción es positiva cuando realmente el valor tendría que ser negativo. A estos casos también se les denomina errores de tipo I.
  • TN – True Negatives: Son el número de verdaderos negativos, es decir, de predicciones correctas para la clase -.
  • Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Gracias a estas cuatro categorías podemos calcular métricas más elaboradas, como, por ejemplo:

  • Especifidad: también llamado ratio de verdaderos negativos. Nos da la probabilidad de que, dada una observación realmente negativa, el modelo la clasifique así.
  • Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

  • Precisión: Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13 también llamado valor de predicción positiva. Nos da la probabilidad de que, dada una predicción positiva, la realidad sea positiva también.

  • Valor de predicción Negativa: Nos da la probabilidad de que, dada una predicción negativa, la realidad sea también negativa.
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Mujer Outlet Sandalias K26 7gyb6fy Fitflop Azul LpUzGMVqS

  • Error de clasificación: Porcentaje de errores del modelo.

De Tiras Talla Tobillo Sandalias Zapatos Original Con Diamante Título Tacón Cuña Bajo Verano Detalles Ver Mujer Para Señoras Nm8Owv0yn

  • Accuracy: Porcentaje total de los aciertos de nuestro modelo.

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Por ejemplo, con la sensibilidad y la especifidad nos hacemos una idea de cómo de bien clasifica nuestro modelo.

Aquí tenéis un par de sitios con más información sobre la matriz de confusión y los ratios que se pueden calcular:

Y MujerRopaZapatos Accesorios CalzadoPantalones MujerRopaZapatos Accesorios Faldas CalzadoPantalones CalzadoPantalones Faldas Y FJlK1c

Vamos a hacer un ejemplo con datos para verlo mejor, y poder calcular alguna métrica.

Imaginemos que tenemos una epidemia de un virus más viejo que el color negro, pero que últimamente está desatado. Se trata del virus Trinque , que convierte a servidores públicos honrados en máquinas de trincar.

Alguien ha creado un modelo para diferenciar a los políticos infectados (culpables +) de los que están limpios (inocentes -), y se lo han pasado a 80000 individuos, resultando la siguiente matriz de confusión:

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Estos serían los cálculos de algunos ratios:

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Parece que el modelo resulta bastante bueno.

Clasifica los casos positivos con una probabilidad del 99,75% y los casos negativos con una probabilidad del 94,29%.

Mujer Tacón De Venta Zapatosixsl65kk Sandalias Marca Augusto Corto HEDW2I9

Además, si el clasificador dice que eres un trinqueitor, es que lo eres con un 98,5% de probabilidad. Y si dice que no lo eres, entonces es que no trincas con una probabilidad del 99%.

Así que ya sabes, si quieres comprobar si tu clasificador te la está pegando, puedes hacerlo fácilmente con la matriz de confusión.

En Python puedes calcular matrices de confusión con la función confusion_matrix de la librería scikit-learn.

Tacón Con Punta Para Cerrada De TuriaZapatos Mujer nOPk0w
Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

También puede gustarte

Sin Pandas y a lo loco!

10 febrero, 2018

Descubriendo la regresión logística

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13 26 julio, 2018

I’m your maximum likelihood estimate

23 septiembre, 2018

Deja un comentario

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Women's Narrow AaN Narrow ShoesEbay AaN Women's lJKcTF13

Este sitio usa Akismet para reducir el spam. Aprende cómo se procesan los datos de tus comentarios.