分类器的常用性能指标的通俗释义

简介: 1. TP(True Postive)、TN(True Negative)、FP(False Negative)、 FN(False Negative)

1. TP(True Postive)、TN(True Negative)、FP(False Negative)、 FN(False Negative)


举个医生看病的例子:


假设患病为阳性(Positive),健康为阴性(Negative)


当医生正确地将患病病人确诊为有病,那么就是TP;当医生正确地将康复病人确诊为没病,那么就是TN;


当医生错误地将健康病人确诊为有病,那么就是FP;当医生错误地将患病病人确诊为没病,那么就是FN;



2. 准确率(Precision)的公式


Precision =TP/(TP+FP)


可以理解为医生预测对的阳性(患病)数占医生预测阳性(患病)总量的比率。


但是该指标有局限性,因为没有用到真正的阳性总数,所以就有了召回率。



3. 召回率(Recall)的公式


Recall = TP/(TP+FN)


可以理解为医生预测对的阳性(患病)数占真正的阳性(患病)数的比率。


但是该指标同样也存在局限性,尤其当阴阳样本失衡——阳性样本数接近于总样本数时,所以就有了 F 值。



4. F 值的公式


F=2rp/(p+r)


p 即 Precision, r 即 Recall,所以 F 值又被称为准确率和召回率的调和值。


单一的准确率高和召回率高并不能说明问题,所以才有了F值的衡量指标。



5. ROC 空间的含义


ROC空间将伪阳性率(FPR)定义为 X 轴,真阳性率(TPR)定义为 Y 轴。这两个值由上面四个值计算得到,公式如下:


TPR:在所有实际为阳性的样本中,被正确地判断为阳性之比率。


TPR=TP/(TP+FN) 【与召回率公式相同】


FPR:在所有实际为阴性的样本中,被错误地判断为阳性之比率。


FPR=FP/(FP+TN)


放在医生看病的例子上来理解上述两个指标:


那么尽量把有病的揪出来是主要任务,也就是第一个指标TPR,要越高越好;


而把没病的样本误诊为有病的,也就是第二个指标FPR,要越低越好;


反映在图上就是在相同的 FPR 的条件下,TPR越高越好,ROC 曲线下方覆盖的面积越大越好。


image.png

image.png

image.png


目录
相关文章
|
6月前
|
机器学习/深度学习 安全
一文读懂分类模型评估指标
模型评估是深度学习和机器学习中非常重要的一部分,用于衡量模型的性能和效果。本文将逐步分解混淆矩阵,准确性,精度,召回率和F1分数。
531 1
|
6月前
|
机器学习/深度学习 数据采集 监控
机器学习-特征选择:如何使用递归特征消除算法自动筛选出最优特征?
机器学习-特征选择:如何使用递归特征消除算法自动筛选出最优特征?
921 0
|
1月前
|
机器学习/深度学习 自然语言处理 算法
汉字的探索性分词方式:基于字图的部首分解与图神经网络的多因素表示
本文提出一种结合传统字符嵌入与部首结构的图表示法,用于捕捉汉字的语义和组成结构,提升大模型对汉字的理解能力。方法包括将字符分解为部首,构建部首图,并利用图卷积网络生成嵌入。此方法增强了模型的泛化能力和灵活性,并提供了代码实现。未来可优化的方向包括改进图构建算法、扩展部首系统、探索更先进的图神经网络架构及多模态融合。
|
3月前
|
SQL 自然语言处理 算法
评估数据集CGoDial问题之计算伪OOD样本的软标签的问题如何解决
评估数据集CGoDial问题之计算伪OOD样本的软标签的问题如何解决
|
3月前
|
UED
评估数据集CGoDial问题之主流生成伪OOD样本的问题如何解决
评估数据集CGoDial问题之主流生成伪OOD样本的问题如何解决
|
11月前
|
机器学习/深度学习 数据挖掘 Python
统计回归模型中的一些概念解释
统计回归模型中的一些概念解释
137 0
|
机器学习/深度学习 算法
在对数据进行预处理时,怎样处理类别型特征?
在对数据进行预处理时,怎样处理类别型特征?
|
机器学习/深度学习 人工智能
【机器学习】信息量、香农熵、信息增益(增加例子,方便理解)
【机器学习】信息量、香农熵、信息增益(增加例子,方便理解)
247 0
|
机器学习/深度学习 算法 Python
机器学习 - [源码实现决策树小专题]决策树中混杂度数值度量的Python编程实现(信息熵和基尼系数的计算)
顾名思义,所谓混杂度就是指无序程度,一般使用“信息熵”(香浓熵)或者“及逆序数进行度量”。本文介绍及其学习决策树算法中混杂度数值度量的Python编程实现
174 0
|
数据挖掘 索引 Python
Python实现固定效应回归模型实现因果关系推断(二)
Python实现固定效应回归模型实现因果关系推断(二)
925 1
Python实现固定效应回归模型实现因果关系推断(二)
下一篇
无影云桌面