格子灰
08-16·后端开发·10年+
被AI投毒后,假售后4分钟骗走250元
大家讨论AI投毒骗局,焦点都在“AI输出了假电话号码”。我更关注另一面,黑产已经在系统性污染大模型的训练和检索素材了。以前对抗的是搜索引擎的爬虫和排名算法,手段是SEO黑帽、竞价投放。现在目标换成大模型,批量在网络铺虚假内容,等着被爬取、被整合、被输出给用户,再精准投放假售后电话。这个模式的可怕之处是低门槛。深度伪造需要技术能力,信息投毒不需要。一个人,一批假电话,一批批量发布的水文,就能让成千上万用户问AI时得到一个错误答案。反诈宣传已经开始新增“警惕AI检索出来的假售后电话”这条了,说明警情在涨。AI安全治理现在还在盯换脸诈骗、有害内容过滤。信息投毒这条路,门槛更低,监测更难,已经在规模跑了。大模型厂商如果没有专门针对联系方式类信息的核验机制,这类问题只会越来越多。
发布于 湖南
分享
评论
赞
未登录
友善发言
评论
加载中
下载脉脉APP,成就职业梦想
违法不良信息&未成年人有害信息举报电话/客服电话:400 065 0808
违法不良信息&未成年人有害信息举报邮箱/客服邮箱:maimai@taou.com
清朗系列专项行动相关违规信息举报电话:400 065 0808,举报邮箱:maimai@taou.com
个人/企业等被诽谤侮辱、人身权或知识产权等被侵犯、网络谣言的举报地址:maimai.cn/tousu | 涉企虚假不实信息举报投诉专区
京ICP备12005786号-1copyright©maimai.cn