IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
{dede:pagebreak/}
iPhone降价,破纪录了_Air_苹果_手机
字节跳动,又放了一个大招_***_冯骥_模型
马斯克大动作!SpaceX申请部署100万颗卫星!重磅数据,首次曝光_公司_人士_特斯拉
春晚机器人集体“开窍”,幕后大佬终于浮出水面:火山引擎!_蔡明_模型_宇树
“BAT”玩AI群聊三国杀,专家称最大问题是“参与者目标不明确”_文心_社交_功能
董宇辉卖春联,到底得罪了谁?_同行_销售_年货
实测DeepSeek新模型“翻车”:能一次性处理百万字的《三体》,却回答不好洗车问题?_推理_招聘_版本更新
当年轻人还在集五福,爸妈已经和阿福唠上了_父母_什么_子女
机器人长出800个心眼?阿里达摩院开源具身新大脑,硅谷又坐不住了_模型_RynnEC_能力
春晚“***摔”以后,63万元机器人被秒抢_宇树_松延_王斐丽
***系新发现一颗“潜在宜居”候选行星,距地球约146光年_研究人员_团队_论文
红包大战一声炮响,AI应用拐点已经到来?_中国_用户_模型
知乎AI Works重要更新:支持应用一键部署,释放创作价值
疯狂收割“爱老己”的年轻人,VR“摆地摊”的月入10万_马诗轩_王璐至_空间
马年第一涨,AI股杀疯了_智谱_MiniMax_上市
刚刚,又一位xAI华人离职!曾和马斯克并排坐发Grok 3_吴宇怀_团队_来源
春晚机器人,谁赢麻了?_松延_MagicBot_操作
AI的鬼把戏,冲着人类来的?_Agent_网站_帖子
狂撒10亿红包,腾讯坐不住了_元宝_微信_用户
“血裁”下亚马逊员工自述:赔偿N+6,有60天冷静期,以后很难找到这么好的公司了_都有_工作_科技
台积电年终分红人均58万元!还晋升了8位副总!_公司_产能_酬劳
“AI提高了我的生产力,但我更累了”_输出_工作_OpenFGA
iPhone降价,破纪录了_Air_苹果_手机
王兴为夏季决战,买了叮咚这把刀_业务_零售_的订单
刘强东给一线兄弟发钱了,见者有份_员工_年货_光明村
马斯克深夜「破防」:中国AI将不战而胜,美国唯一的希望在太空?_机器人_ChatGPT_企业
明年iPhone可能难产,竟是因为日本不肯多生产一块布?_日东_玻纤_苹果
逃离杭州,网红没钱了_直播_时薪_杨哥和
45亿砸下:BAT的红包雨,我却抢了个寂寞_微信_用户_阿里
深夜偷看“成人网站”,还以为没人知道?你可能被安排得明明白白_内容_性教育_社会
苹果最便宜新机要来了!iPhone 17e四大升级揭晓:首次MagSafe+A19芯片_充电器_搭载_系列
12306抢票难,返乡人 “邪修” 购票,黄牛、玄学盛行,专家律师警示风险_官方_平台_车票