当前位置:首页 > AI科普

准确率、精确率、召回率:模型到底好不好,看哪个数

xinhack3周前 (10-21)AI科普42

准确率、精确率、召回率:模型到底好不好,看哪个数 AI科普

一个"准"字,藏着三笔账

评测一个分类模型,最容易脱口而出的是"它准不准"。可"准"是个含糊词。比方医院筛查一种少见病:一千人里只有两个真患者,模型只要永远猜"没病",就能拿 99.8% 的准确率——看起来神准,却一个病人都没找出来。这说明,单看一个"准"字会骗人,得拆成几个不同的角度一起看。

准确率:整体蒙对的比例

准确率是最直观的那个:所有预测里,判对的占多少。它的盲区在于"类别不平衡"。当正负样本极不对称(比如欺诈交易、罕见病),一个偷懒全猜多数的模型,准确率也能很高,却毫无用处。所以准确率适合"两类差不多多"的场景,一旦失衡,就得请出下面两位。

精确率:你说"有"的时候,真的有吗

精确率关心的是"阳性预测准不准":在所有被模型判为"有病"的人里,真正有病的有多少。它像催收电话的命中率——你打一百个催债电话,真欠钱的有几个?精确率低,意味着模型爱"乱报警",把没病的人吓进医院。对"误报代价高"的场景(如司法、金融),精确率往往比准确率更关键。

召回率:该抓的,你抓到了吗

召回率关心的是"别漏网":在所有真正有病的人里,模型找出了多少。它像考试查漏——该会的题,你答上来几道?召回率低,意味着真患者被放过了,这在癌症筛查里可能要命。精确率看"报警的可信度",召回率看"覆盖的完整性",二者常常此消彼长:把门槛调松,召回高了、精确却降了。

F1:在两边之间取平衡

因为精确率和召回常打架,单独报一个都不公平,于是有了 F1 分数——它取两者的调和平均,逼着你两头都顾。一个模型若精确率满分、召回率为零,F1 依然很低,骗不了人。读评测报告时,先看任务更怕"误报"还是"漏报",再决定更看重哪个指标,最后用 F1 做个综合兜底。

小结

模型好不好,不能只抛一句"准"。准确率是整体蒙对率,遇类别失衡会失灵;精确率盯"报警可信度",召回率盯"漏网风险",F1 替二者把关。下次看一份 AI 评测,先问自己:这个场景最怕误报还是漏报?再决定该信哪个数字。说到底,指标是标尺不是裁判:先想清场景最怕哪种错,再决定盯哪个数,最后用 F1 兜个底。别被单一高分忽悠,多问一句"最怕误报还是漏报",指标就有了方向,一份评测报告才算真正读懂。选对指标,往往比单纯堆高那个"准确率"数字更有用。

相关文章

监督学习、无监督学习、强化学习,三种学习方式一文分清

监督学习、无监督学习、强化学习,三种学习方式一文分清

一提到“训练 AI”,很多人以为都是同一种学法。其实机器学习主要有三种路子:有人手把手指正的(监督学习)、没人教全靠自己找规律的(无监督学习)、在试错和奖励中摸索的(强化学习)。它们适用场景完全不同。…

反向传播是什么?神经网络的错误怎么一层层传回去

反向传播是什么?神经网络的错误怎么一层层传回去

模型做错题,错的不只是最后一层。反向传播就是把「总错误」沿着网络一层层往回分,算出每个权重该为这次失误负多少责。本文用传话出错追责和工厂返工的比喻,讲清这个让深度学习得以训练的核心算法,以及它为什么能…

预训练是什么?大模型上岗前先读的「万卷书」

预训练是什么?大模型上岗前先读的「万卷书」

我们常说大模型「见多识广」,它的见识来自一个叫预训练的阶段:在正式干活前,先用海量文本自己琢磨语言规律。本文用通识教育和入职培训的比喻,讲清预训练到底是什么,以及它和微调、推理各司何职。读完你会明白大…

循环神经网络是什么?让 AI 把「前文」记在心上

循环神经网络是什么?让 AI 把「前文」记在心上

普通神经网络看一句话,是一个字一个字孤立地看,看完上句就忘了下句。循环神经网络(RNN)给模型加了「记忆」,让信息能顺着顺序流动。本文用带笔记本的阅卷人和接力传话的比喻,讲清 RNN 怎么处理时间序列…

生成对抗网络是什么?造假者与鉴别者的猫鼠游戏

生成对抗网络是什么?造假者与鉴别者的猫鼠游戏

大多数模型在「判断」,生成对抗网络(GAN)却另辟蹊径地「创造」——它能凭空画出人脸、生成逼真照片。诀窍是让两个模型互相较劲:一个拼命造假,一个拼命打假。本文用假币与验钞的比喻,讲清这场猫鼠游戏怎么把…

决策树与随机森林:AI 是怎么一层层「分而治之」做判断的

决策树与随机森林:AI 是怎么一层层「分而治之」做判断的

不是所有 AI 都靠神经网络。决策树用一连串「是或否」的问题就把复杂判断拆解清楚,随机森林再把很多棵树凑一起投票。本文用银行放贷和聚会分桌的比喻,讲清这套直观又稳健的经典算法,以及它为什么至今仍被广泛…

联邦学习是什么?手机怎么在不交出数据的情况下一起训练 AI

联邦学习是什么?手机怎么在不交出数据的情况下一起训练 AI

把数据集中到一处训练 AI,最怕隐私和合规这关——没人愿意把聊天记录、病历乖乖上交。联邦学习换了思路:模型下发到各台设备,数据不出本地,只把「学到的改动」传回来汇总。本文用集体写书和老师批作业的隐喻,…

对抗样本是什么?加肉眼看不见的噪点,AI 就认错

对抗样本是什么?加肉眼看不见的噪点,AI 就认错

研究发现,给一张熊猫图加一层人眼根本看不出的噪点,AI 能一口咬定那是长臂猿。这种「精心算计的扰动」叫对抗样本,戳中了深度学习的一个软肋。本文用伪装贴纸和视力错觉的比喻,讲清它怎么坑 AI,又为啥值得…