IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
{dede:pagebreak/}
南京古生物所公布一项重要发现_动物_***_化石
从入门到顶级旗舰!vivo宣布旗下多款机型率先支持2亿像素照片微博直发_传感器_影像_功能
“全球大模型第一股”道歉!称“挨打要立正”_智谱_Coding_Plan
曾全网爆火卖断货,被炒到 3 万高价!更强的 “ 豆包手机 ” 2 代来了_用户_操作系统_Obric
手机套餐要涨价了?中国移动们税率上调,eSIM或缓解成本压力_资费_调整_电信服务
世界首富的烦恼:马斯克感叹“金钱买不到幸福”,两天浏览量破亿_爱泼斯坦_阿克曼_文件
世界首富的烦恼:马斯克感叹“金钱买不到幸福”,两天浏览量破亿_爱泼斯坦_阿克曼_文件
追觅俞浩再怼马斯克:喜欢PUA,去火星太扯淡_地球_人类_收购
Moltbook一夜之间跌下神坛,炒作背后,我却看到了人类的焦虑_OpenAI_Agent_Moltbot
腾讯元宝紧急调整,微信公关总监:我发起疯来自己都打_诱导_用户_红包
为什么车企都想要变成 AI 公司?_特斯拉_自动_人工智能
贾樟柯跨界联手Seedance 2.0 发布AI贺岁短片《贾科长Dance》_技术_创作_电影
山寨餐饮连锁,涌入县城_品牌_奶茶店_招商
短剧爆款频出,赚钱却更难了|TMT年度盘点_行业_德拉_刘子凡
顶级域名“AI***”以7000万美元转手 刷新历史交易纪录_代理_加密_货币
黄仁勋:还没收到任何中国客户的H200芯片订单,我们正在耐心等待_市场_特朗普_中方
荒谬至极!印度大学展出泡沫塑料无人机被赶出峰会,印记者狠批:像四年级小学生作业【附无人机行业市场分析】_加尔戈蒂亚斯_产业
马斯克最新访谈,信息量爆炸!_芯片_中国_电力
春晚机器人卖爆了,我们离“人手一台”还有多远?_宇树_蔡明_动作
谁想库克退休?_苹果_乔布斯_对手
腾讯字节,“火拼”漫剧_内容_上线_火龙
元宝狂撒10亿!马化腾打响春节红包大战第一枪,但AI全民化很难?_文心_活动_科技
不扭秧歌了!宇树机器人春晚表演武术;今年总台春晚至少有三个机器人“参演”的节目_科技_松延_吴祈
中国第一大忽悠,又“杀”回来了_贾跃亭_机器人_生态化
马云钦定的“平头哥”赶上市潮,真武芯片打前锋_阿里_通云_模型
“AI提高了我的生产力,但我更累了”_输出_工作_OpenFGA
利润腰斩,669亿“非洲之王”怎么“蔫了”?_传音_新兴市场_手机
突然卖爆!14年前的旧iPhone,仅55元一台,近30天订单量破十万,网友:可以玩游戏,拍“复古照”_时代_崔丽丽_怀旧
解密 iPhone 小折叠,这只是苹果折叠产品的开始_Flip_Fold_专利
最不容易被AI替代的年龄!最新研究:55至60岁是人类生产力巅峰 认知远高于年轻人_Coleman_员工_职场
春晚节目单来了!宇树机器人今年不扭秧歌,改练武术!_表演_科技_松延
史上最大IPO来临:马斯克开始准备殖民火星了_SpaceX_发射_火箭