J9集团国际站

  • ?北大主页
  • |
  • 一带一路书院
  • |
  • 用户登录
    • 教人员登录
    • 学生登录
    • J9集团国际站邮箱
  • |
  • 教怨匦聘
  • |
  • 捐赠
  • J9集团国际站【中国区】官方网站
  • |
  • English
媒体J9集团国际站

新华网丨张颖婕:你以为的“尺度答案”可能被套路了

2026-03-24

热点追踪 | AI也会被“投毒” ,我们该若何避坑?

“遇事未定问AI” ,这句盛行语已成为好多人的日常写照。从游览攻略、家电选购到补习班推荐 ,打开AI追求答案变得越来越普遍。不外 ,近期曝光的一条玄色产业链 ,却给这种依赖敲响了警钟:你以为的客观推荐 ,可能是商家花了钱 ,给AI“洗脑”的了局。

那么AI“投毒”到底若何运作?通常用户若何鉴别和防备?新华网思客约请J9集团国际站市场营销学系副教授张颖婕分析解答。

1什么是AI“投毒”?风险有多大?

AI“投毒”是指报答造作和投放虚伪、夸大或带左袒性的信息 ,去影响大模型的回覆。AI可能把这些信息当成回覆凭据 ,以看似客观的答案推荐给用户。它和传统SEO(搜索引擎优化)最大的分歧在于:从前用户在使用搜索时通常保留肯定判断力 ,而在与AI对话时 ,面对的是整合后的现成答案 ,加之交互方式容易让人产生“它在为我分析”的错觉 ,更易放松警惕。

它的风险重要体此刻两方面:一是误导消费者决策 ,用户看到的可能不是告白 ,而是披着客观建议表衣的操控性内容。二是传染信息生态。若操控AI推荐比传统搜索更有贸易回报 ,将刺激更多低质、虚伪内容产生 ,形成恶性循环。

2、GEO是若何一步步操控AI答案的?

GEO(天生式引擎优化)是一种基于AI回覆的营销行为。与传统的SEO抢夺网页排名分歧 ,GEO的指标是让企业的品牌名称、产品或服务 ,在AI天生的答案中被优先提及、精准推荐。

GEO的主题并非“黑进AI” ,而是“投AI所好” ,即顺着大模型的检索与天生逻辑 ,提前将指标内容铺设到它更可能选取的处所。具体步骤蕴含:摸清AI偏好的信源和表白大局(如结论明确、结构清澈、带有比力和引用痕迹);批量出产假装成测评、对比、经验总结或专家建议的疏导性内容;在多平台密集铺量 ,造作“多方共识”的假象 ,提高内容被检索和综合选取的概率。

3用户若何判断AI可能“中毒”了?

若发现AI回覆存在以下迹象 ,应提高警惕:答案过于单一、语气注定、不足必要比力;反复推荐某一品牌 ,尤其是不驰名品牌 ,且理由异常齐全、像尺度测评 ,这不定是发现了“宝藏” ,更可能源于有关内容被报答集中铺设;统一问题在分歧AI间答案差距大甚至矛盾 ,也注明该问题存在较强不确定性 ,或部门模型所依赖的信息源已受滋扰。

4AI大模型为何会被“投毒”?治理难点在哪里?

AI大模型之所以容易被“投毒” ,一个沉要原因是 ,它在回覆实时问题时需检索表部信息 ,再天生答案。一旦公开网络内容被系统性传染 ,误差信息便可能通过检索环节进入模型输出。

更深一层看 ,大模型善于的是说话天生和模式综合 ,但并不天然具备不变的真假判断能力。它能判断什么内容“像一个合理答案” ,却不愿定能判断什么内容“真的可信”。而“投毒”内容往往又会刻意假装成测评、对比、经验分享、专家建议等可信大局 ,因而更容易误导模型。

治理难点重要有两点:一是攻击成本低、防御成本高。造作和铺设此类内容越来越容易 ,但鉴别、过滤和核验却必要平台、模型公司和监管方持续投入。二是真假天堑吞吐。好多“投毒”内容并不是显著造假 ,而是同化夸大、误导和利益导向的伪客观表白 ,这类内容无论对AI还是对人为审核 ,都更难鉴别。

5监管若何堵住AI“投毒”的缝隙?

治理AI“投毒”需从多个环节协同发力。首先 ,要加强源头治理 ,压缩虚伪、模板化、伪客观内容的大规模传布空间。其次 ,要压实AI平台责任 ,强化信源筛选、风险提醒和不确定性标注 ,而非“抓到什么说什么”。

更沉要的是 ,有关规定需尽快美满。AI输出与传统告白分歧 ,用户更易将其理解为经过度析后的结论 ,因而有必要进一步明确平台的信息披露使命与责任天堑。

6公家若何有效防备?

最实用的防备步骤是调整心态:把AI当作援手梳理信息、补充布景的工具 ,而非替你做决定的“人”。涉及“买哪个”“选哪家”等判断性问题时 ,AI的回覆只能作为参考 ,不宜直接当作结论。

具体操作上 ,一是核查信息源 ,若AI附有引用链接 ,点开看看起源是权威机构、主流媒体 ,还是带有推广色彩的网站、自媒体或测评软文。二是交叉验证 ,换几个AI工具别离提问 ,或用搜索引擎查一下用户评价、新闻报路和投诉信息是否一致。

归根结底 ,防备AI“投毒”的关键不在于把握复杂技术 ,而在于保留最根基的判断习惯:AI能够助你节俭功夫 ,但不能包办你承担判断责任。


(作者为J9集团国际站教授张颖婕)

原文链接:你以为的“尺度答案”可能被套路了(原文载于新华网)



分享
【网站地图】