AI总结也会被“下毒”?微软警告新攻击术_***_公司_导致用户_仪器仪表|保定仪器仪表|保定伊乐斯普仪器仪表有限公司
IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
同类文章排行
- 45亿砸下:BAT的红包雨,我却抢了个寂寞_微信_用户_阿里
- “血裁”下亚马逊员工自述:赔偿N+6,有60天冷静期,以后很难找到这么好的公司了_都有_工作_科技
- 当AI撞上国补_中国_同比增长_补贴
- APP崩了!千问发文:求放过!网友:两天了还没能下单_奶茶店_用户_大厂
- 英伟达大涨近8%!黄仁勋最新发声:加倍、再加倍⋯⋯_人工智能_支出_公司
- 马斯克宣布战略调整:优先十年内建月球城市,五至七年启动火星***_SpaceX_建设_时间
- 45亿元红包,冲你来了_用户_向元宝_App
- “血裁”下亚马逊员工自述:赔偿N+6,有60天冷静期,以后很难找到这么好的公司了_都有_工作_科技
- 上新、发红包、上春晚……这个春节,AI太忙_元宝_用户_字节
- 抄华为2年前作业,苹果iPhone 18 Pro或能卫星通信发图了_功能_Mac_Cult
最新资讯文章
- 对话深蓝航天霍亮:中国申20万颗卫星、美国申百万颗,太空***卡位战,谁先到先得_商业_火箭_发射场
- 千问宣布投入30亿元发起春节请客***!硬刚元宝10亿_红包_用户_入口
- 美团50亿元“收编”叮咚买菜,值吗?_零售_收购_业务
- 比尔·盖茨,突然取消行程_爱泼斯坦_演讲_相关
- 深夜偷看“成人网站”,还以为没人知道?你可能被安排得明明白白_内容_用户_访问
- 千问日活逼近,豆包为什么还敢把红包留到春晚?_模型_字节_阿里
- 9小时破1000万!千问被挤到卡顿,暴露国内AI算力真实短板_产能_活动_应用
- Moltbook一夜之间跌下神坛,炒作背后,我却看到了人类的焦虑_OpenAI_Agent_Moltbot
- 华为何刚“剧透”春晚Mate 80系列手机拥有独家机位_柳刚_直播_尼格买提
- 卷入爱泼斯坦案,马斯克回应_特朗普_凯文·沃什_美国
- 阿里隐藏7年的芯片王牌,终于浮出水面_国产_服务器_华为
- 一个意外,脑机接口试验让盲人恢复了视力_视觉_电极_大脑
- 2天了,外国人还在讨论春晚上的机器人。尤其是美国和日本的网民,看起来已经破了大防_技术_反思_产业
- 马斯克又改口:先造月球城市 再登陆火星_SpaceX_美国_建设
- 为什么马斯克要放弃火星、选择月球_登月_地球_人类
- 丁磊回归一线,网易稳住了“江山”_游戏_丁迎峰_包括
- 突然卖爆!14年前的旧iPhone,仅55元一台,近30天订单量破十万,网友:可以玩游戏,拍“复古照”_时代_崔丽丽_怀旧
- 华为宣布:最高降4000元!此前苹果开启大降价_优惠_Air_官方
- 世界首富的烦恼:马斯克感叹“金钱买不到幸福”,两天浏览量破亿_爱泼斯坦_阿克曼_文件
- 中产的智能马桶,我不敢坐_冲水_感应_产品




