当前位置:首页 > AI科普

图像分割是什么?让 AI 不只认出物体,还描出它的轮廓

xinhack1周前 (11-01)AI科普19

图像分割是什么?让 AI 不只认出物体,还描出它的轮廓 AI科普

目标检测画框,分割描边:差在这一「笔」

前面聊过目标检测,它能在一张图里认出「这儿有只猫、那儿有辆车」,然后给它们套个方框。框是套上了,可框里混着背景、框外也漏了点边,它只告诉你「有啥、在哪儿」,不关心长啥样。图像分割不一样,它要的是「像素级」的活儿——图里每一个小点都归个类,属于猫的就是猫、属于天空的就是天空,最后拼出一张把每个物体边缘描得清清楚楚的图。打个比方,目标检测像在人群里圈出谁是谁,分割像给每个人单独画张剪影,连发丝的边界都给你勾出来。

语义分割:先把「类别」分清楚

最基础的一种叫语义分割。它不管图里有几只猫,只管「凡是猫的像素都标成一种颜色」。你给它一张街景,它吐回一张图:路面灰、车红、树绿、天空蓝,同类合并、不问数量。这对地图、遥感特别好使——咱要的是「哪片是路、哪片是水、哪片是楼」,不关心路上有几辆车、水里有几条鱼。它把「认物体」升级成了「认每一寸地」,是很多下游任务的地基。

实例分割:连「第几只」都数得清

语义分割分不清「这两只猫是不是同一只」。实例分割就补上这环:它不仅认类别,还给每个独立物体编上号。图里三只猫,它就标成猫一、猫二、猫三,各描各的轮廓,绝不串色。自动驾驶最吃这套——它得同时知道「前面有辆车、旁边有个行人、地上还有个锥桶」,而且一个都不能混、不能漏。少认一个锥桶,方向盘可能就多打一把,后果不是闹着玩的。所以这一笔,关键时刻能保命。

全景分割:把前两者一锅端

后来有人把语义和实例合起来,叫全景分割:既给每样东西单独编号,又不漏掉天空、路面这种「没有独立个体」的背景。说白了,一张图从头到尾每个像素都有归宿,既没有空白、也不重复。这是现在往「让机器真正看懂一整幅画面」靠得最近的一步,也是很多机器人、AR 眼镜想落地必须跨过的坎。它让机器第一次有了「整图全局观」。

为啥医疗和自动驾驶都离不了它

你品品就明白。医生看 CT,要的不是「图里有个瘤」,是「瘤的具体边界在哪儿、挨着哪根血管、占了多大面积」——这得靠分割描边才能量出来。自动驾驶也一样,光知道「前面有车」不够,得知道车占了多少路面、离我多近、会不会侵入我的车道,才敢决定踩不踩刹车。框给不了的细节,分割能给。所以它看着小众,其实是很多关键场景的命门,离了它寸步难行。

别神话它:标数据累、边角仍会翻车

分割虽强,也有软肋。它最吃标注——想让模型描得准,得有人一像素一像素地手工标出答案,这活儿又贵又慢,标一张医学图可能要专家耗上半小时。而且遇到模糊、遮挡、没见过的东西,边缘照样会描歪、会把俩挨着的物体糊成一团。咱用的时候心里有数就行:它是把「认物体」推进到「描轮廓」的好工具,但不是万能的眼睛,该人复核的地方还得人上。

相关文章

参数是什么?藏在 AI 大脑里的几千亿个数字

参数是什么?藏在 AI 大脑里的几千亿个数字

常听人说某个大模型有几千亿参数,参数到底是什么?这篇文章用最直白的方式解释大模型里的参数,它们是怎么来的、是不是越多越聪明,以及普通用户到底需不需要关心这个数字。…

模型量化是什么?一文看懂手机为什么能跑大模型

模型量化是什么?一文看懂手机为什么能跑大模型

同样一个模型,在云端跑得动,塞进手机却卡死,问题常常出在“精度”。量化(Quantization)就是把模型里成千上万的小数“四舍五入”成更小的数,体积和算力需求大幅降下来,效果却几乎不掉。这篇文章用…

梯度下降是什么?模型靠不断试错找到最优解

梯度下降是什么?模型靠不断试错找到最优解

训练一个 AI 模型,本质是解一道没有标准答案的难题:怎么调那几十亿个参数,让模型的预测最接近真实?梯度下降就是工程师手里最常用的“导航仪”——它不要求一步到位,而是每次朝“让错误变小”的方向挪一小步…

生成对抗网络是什么?造假者与鉴别者的猫鼠游戏

生成对抗网络是什么?造假者与鉴别者的猫鼠游戏

大多数模型在「判断」,生成对抗网络(GAN)却另辟蹊径地「创造」——它能凭空画出人脸、生成逼真照片。诀窍是让两个模型互相较劲:一个拼命造假,一个拼命打假。本文用假币与验钞的比喻,讲清这场猫鼠游戏怎么把…

决策树与随机森林:AI 是怎么一层层「分而治之」做判断的

决策树与随机森林:AI 是怎么一层层「分而治之」做判断的

不是所有 AI 都靠神经网络。决策树用一连串「是或否」的问题就把复杂判断拆解清楚,随机森林再把很多棵树凑一起投票。本文用银行放贷和聚会分桌的比喻,讲清这套直观又稳健的经典算法,以及它为什么至今仍被广泛…

零样本学习是什么?没教过的题,AI 也能猜个八九不离十

零样本学习是什么?没教过的题,AI 也能猜个八九不离十

传统模型只会做练过的题,换个没见过的类别就傻眼。零样本学习偏要让模型答没复习过的题——靠的是把类别、文字描述这些语义信息带进来,让没见过和见过在意义层面接上头。本文用查字典和跨语种猜词的比喻,讲清它和…

扩散模型是什么?AI 画画为何先加噪再一步步去噪

扩散模型是什么?AI 画画为何先加噪再一步步去噪

你用 AI 生图时多半纳闷:它咋凭一句话就吐出一张画?不少模型走的是「扩散」路线——先往图上狂加噪点变成雪花,再一点点把噪擦掉、顺手把画显影出来。本文用洗照片和除雾的比喻,讲清这套反直觉的生图魔法到底…

自编码器是什么?AI 怎么把复杂信息压缩再还原

自编码器是什么?AI 怎么把复杂信息压缩再还原

你手机传照片会先压缩,AI 也有一套类似的「打包术」叫自编码器:它先把数据压成一小团精华,再试着还原回去,逼自己只留住最要紧的特征。本文用搬家断舍离和缩略图的比喻,讲清它怎么顺手干成了降噪、找异常这些…