20、分类器评估指标详解

分类器评估指标详解

在机器学习领域,准确评估分类器的性能至关重要。本文将详细介绍几种常用的分类器评估指标,包括精确率 - 召回率曲线、累积响应曲线和提升曲线,并通过实例展示如何运用这些指标来评估不同分类器的性能。

1. 精确率 - 召回率曲线(Precision - Recall Curves)

精确率和召回率是评估分类器性能的两个重要指标。精确率指的是正预测的价值,即预测为正例的样本中实际为正例的比例;召回率则衡量了对实际正例的识别能力,即实际为正例的样本中被正确预测为正例的比例。可以用“精确率对应正预测,召回率对应正现实”来记忆。

1.1 精确率 - 召回率权衡

精确率 - 召回率曲线与灵敏度 - 特异度曲线有一个重要区别。在灵敏度 - 特异度曲线中,两个值代表行总和的部分,权衡的是对现实世界中正例和负例的性能。而在精确率 - 召回率曲线中,我们处理的是混淆矩阵中的列部分和行部分,它们可以更独立地变化。更重要的是,精确率的增加并不意味着召回率的增加。

以下是一个具体的例子:
初始状态下,精确率为 5/10,召回率为 5/10:
| | PredP | PredN |
| — | — | — |
| RealP | 5 | 5 |
| RealN | 5 | 5 |

当提高将样本分类为正例的阈值时,假设每个预测为正例的样本中有两个(两个实际为正例和两个预测为正例但实际为负例)移动到预测为负例:
| | PredP | PredN |
| — | — | — |
| RealP | 3 | 7 |
| RealN | 3 | 7

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值