【技术分享】机器学习分类性能指标:准确率Accuracy/精确率Precision/召回率Recall/F1值

简介: 【技术分享】机器学习分类性能指标:准确率Accuracy/精确率Precision/召回率Recall/F1值

1. 准确率Accuracy

准确率的定义:对于给定的测试数据集,分类器正确分类的样本数与总样本数之比。

举例:有100封邮件,有85封邮件预测正确,那么准确率即为:85/100=85%。

注:85封邮件预测正确,这个“预测正确”有2种情况:

①是垃圾邮件,预测结果也是垃圾邮件——预测正确。

②是正常邮件(不是垃圾邮件),预测结果也是正常邮件——预测正确。


2. 精确率Precision/召回率Recall/F1值

预测问题会有下列4种情况:

TP——将正类预测为正类的数量

FN——将正类预测为负类的数量

FP——将负类预测为正类的数量

TN——将负类预测为负类的数量。


通常,以关注的类作为“正类”,其他类为负类。在垃圾邮件检测中,“垃圾邮件”是正类,则“正常邮件”是负类。则TP/FN/FP/TN的理解如下:


TP——是垃圾邮件(正类),预测结果是垃圾邮件(预测为正类)

FN——是垃圾邮件(正类),预测结果是正常邮件(预测为负类)

FP——是正常邮件(负类),预测结果是垃圾邮件(预测为正类)

TN——是正常邮件(负类),预测结果是正常邮件(预测为负类)


2.1. 精确率(Precision)

精确率(Precision)的定义如下:


image.pngimage.png

image.png



理解:

①TP——是垃圾邮件(正类),预测结果是垃圾邮件(预测为正类)

②FP——是正常邮件(负类),预测结果是垃圾邮件(预测为正类)

③TP+FP——可能是垃圾邮件/也可能是正常邮件,但预测结果都是垃圾邮件。

则精确率(P)的含义就是:你预测结果是垃圾邮件的这些邮件中(TP+FP),有多少个是真正的垃圾邮件(TP)?


2.2. 召回率(Recall)

召回率(Recall)的定义如下:


image.png

image.png


理解:

①TP——是垃圾邮件(正类),预测结果是垃圾邮件(预测为正类)

②FN——是垃圾邮件(正类),预测结果是正常邮件(预测为负类)

③TP+FN——是垃圾邮件,但预测结果可能是垃圾邮件也可能是正常邮件。


则召回率(R)的含义就是:有这么多的垃圾邮件(TP+FN),有多少是你预测对的(TP)?


2.3. F1值(F1 score)

F1值(F1 score)的定义如下:

image.png

F1score的作用是对精确率和召回率进行调和。


目录
相关文章
|
16天前
|
机器学习/深度学习 算法
机器学习方法分类
【6月更文挑战第14天】机器学习方法分类。
24 2
|
2天前
|
机器学习/深度学习 Java
机器学习中的召回率与准确率详解
机器学习中的召回率与准确率详解
|
3天前
|
机器学习/深度学习 分布式计算 算法
在机器学习项目中,选择算法涉及问题类型识别(如回归、分类、聚类、强化学习)
【6月更文挑战第28天】在机器学习项目中,选择算法涉及问题类型识别(如回归、分类、聚类、强化学习)、数据规模与特性(大数据可能适合分布式算法或深度学习)、性能需求(准确性、速度、可解释性)、资源限制(计算与内存)、领域知识应用以及实验验证(交叉验证、模型比较)。迭代过程包括数据探索、模型构建、评估和优化,结合业务需求进行决策。
7 0
|
11天前
|
机器学习/深度学习 数据采集 自然语言处理
【机器学习】逻辑回归:智能垃圾邮件分类实例
【机器学习】逻辑回归:智能垃圾邮件分类实例
37 0
|
11天前
|
机器学习/深度学习 算法 数据挖掘
【机器学习】Voting集成学习算法:分类任务中的新利器
【机器学习】Voting集成学习算法:分类任务中的新利器
17 0
|
11天前
|
机器学习/深度学习 人工智能 算法
【机器学习】概率模型在机器学习中的应用:以朴素贝叶斯分类去为例
【机器学习】概率模型在机器学习中的应用:以朴素贝叶斯分类去为例
15 0
|
11天前
|
机器学习/深度学习 算法 数据可视化
【机器学习】分类与预测算法的评价与优化
【机器学习】分类与预测算法的评价与优化
23 0
|
2月前
|
机器学习/深度学习 数据采集 人工智能
使用Python和Scikit-learn实现机器学习分类任务
使用Python和Scikit-learn实现机器学习分类任务
42 1
|
2月前
|
机器学习/深度学习 数据采集 数据可视化
机器学习 —— 分类预测与集成学习(上)
机器学习 —— 分类预测与集成学习
42 2
|
2月前
|
机器学习/深度学习
机器学习 —— 分类预测与集成学习(下)
机器学习 —— 分类预测与集成学习(下)
37 0