当前位置:首页 > 行业观察

插件藏后门、深伪App泛滥:AI安全攻防成了真生意

插件藏后门、深伪App泛滥:AI安全攻防成了真生意 行业观察

结论先撂这儿:攻击面跟着模型一起膨胀

搁前几年,AI安全还主要是“别让模型说错话”的合规活儿;现在不一样了。模型能写代码、能装插件、能连外部系统,攻击面直接跟着能力一起涨。米岸AI的判断很直白:AI安全攻防已经从“锦上添花”变成“保命刚需”,而且正在长成一个真金白银的独立生意。

后门已经混进插件市场

The Inference Report 11月3日的盘点里有个细节挺吓人:一个恶意版本的Claude Code混进了Cursor的插件市场,试图留SSH后门。这事儿点出一个老问题——开放分发AI扩展,安全关上的速度永远慢半拍。开发者图方便装个插件,公司内网可能就开了个口子。我当年带团队做集成也踩过类似的坑,第三方组件不审,上线即埋雷。

四百个“正常”应用藏着深伪

同一份报告提到,有400个看着挺日常的AI应用,背地里藏着深伪功能,能生成暴力内容。加上纽约时报起诉Brave抓取版权内容喂给Anthropic和Perplexity,暴露出不少训练管线依赖未授权素材。换句话说,危险不只在明面上的黑客,也在那些“顺手”越界的正常产品里。

国家队的警告来了

英国GCHQ已经放话:到2028年,中俄的AI网络攻击会成家常便饭。可现实是,那些拼命上Agent、上自治系统的公司,脚步一点没慢。一边是攻击常态化预警,一边是部署加速度,这中间的落差,就是安全厂商的机会窗口。红队测试、模型行为审计、插件市场审核,这些活儿以前是成本中心,现在能单独卖钱了。

给用AI的团队提个醒

要我说,上任何AI编程助手、Agent框架,先把“谁能在我的环境里跑什么”这条线画清楚。插件别随便装,模型调用外部系统的权限别给满,日志留全。安全不是等出事再补,是上线前就得把篱笆扎好。本文只做行业观察,不构成安全或法律意见。

常见问题

问:普通开发者怎么防AI插件后门?

答:只从官方或可信市场装扩展,装前看权限申请,别给SSH、文件系统这类高危权限,装完留意异常网络请求。

问:AI安全攻防为啥突然成生意了?

答:模型能力越强、接的系统越多,可被利用的入口就越多,红队测试、审计、合规这些需求自然从边缘走到中心。

问:企业最该先补哪块安全?

答:先把Agent和插件的权限边界管住,再补行为审计和日志留痕,比买一堆花哨工具更管用。

问:深伪内容普通平台能拦住吗?

答:大平台已有标识和检测机制,但道高一尺魔高一丈,关键还是平台持续巡查加用户举报双管齐下。

相关文章

工业 AI 的评价标准变了:从演示效果到产线节拍

工业 AI 的评价标准变了:从演示效果到产线节拍

同一个模型,在发布会上答得漂亮,进车间却不敢用。这篇从 10 月中旬山东两场产业会议和工博会的公开信息出发,说明工业 AI 的评价标准为什么从“演示效果”转向“产线节拍”,以及这个转变对企业选型意味着…

Agent 进工作群:大厂为什么把 AI 塞进通讯录

Agent 进工作群:大厂为什么把 AI 塞进通讯录

企业微信里多了一个可对话的机器人,Google 给 AI 分配了独立企业账号。这轮变化的重点不是又多了个 App,而是 Agent 拿到了工作上下文。这篇讲清“上下文”为什么比模型本身更值钱,以及对企…

购物智能体改写零售:沃尔玛 Agent Gateway

购物智能体改写零售:沃尔玛 Agent Gateway

沃尔玛 10 月 21 日推出面向 AI 智能体的 Agent Gateway,允许获准接入的代理代用户下单;同一周亚马逊却在拦截同类代购。这篇从两家相反的动作出发,讲清智能体电商正在如何改写零售的流…

算力管制的区域分化:出口限制如何重塑全球 AI 版图

算力管制的区域分化:出口限制如何重塑全球 AI 版图

先进 AI 芯片不再只是商品,而是被写进出口管制清单的地缘政治工具。这篇用 2026 年多个区域的公开动态,讲清出口管制如何把全球 AI 拆成几大技术栈,以及这对各国算力战略意味着什么,不涉及任何股价…

DeepSeek 千亿融资信号:国产大模型进了重工业阶段

DeepSeek 千亿融资信号:国产大模型进了重工业阶段

DeepSeek 据报完成约千亿人民币新一轮融资,股东名单读起来像一份供应链名册。本文从产业资本结构、资金去向和行业格局三个角度,判断国产大模型正在进入重工业式竞争阶段,并划清已确认事实与未官宣揣测的…

从卖模型到卖闭环:企业智能体的收费逻辑变了

从卖模型到卖闭环:企业智能体的收费逻辑变了

本周多条行业稿指向同一趋势:AI 从比拼对话转向能闭环执行任务的智能体。本文拆解 Agent 商业化的真正门槛——闭环能力,以及 C 端看留存、B 端看合规 ROI 两本不同的账,并提示这一形态远未成…

半导体测试悄悄卡住AI算力:矽格涨价只是开始

半导体测试悄悄卡住AI算力:矽格涨价只是开始

大家盯着GPU缺不缺,却忽略了一个更靠前的卡点——测试。Blackwell的测试时长约为上一代的4倍,Rubin可能到7倍,测试厂的话语权正悄悄变重。这条被低估的算力链路,值得放进观察清单,前置关卡比…

AI 内容泛滥之后,为什么“被人挑中”比“被做出来”更值钱

AI 内容泛滥之后,为什么“被人挑中”比“被做出来”更值钱

当人人都能用 AI 批量产内容,“做出来”这件事本身不值钱了,真正稀缺的是“被挑中”。平台开始给内容发身份证,主动标注 AI 辅助反而积累信任资产。这篇从最近的平台规则和消费数据出发,聊聊内容价值怎么…