乐于分享
好东西不私藏

网络治理丨治理“AI污染”要防管结合

网络治理丨治理“AI污染”要防管结合

    点击上方"网络素养派"

关注我们吧!

随着AI(人工智能)深度融入千家万户,“遇事不决问AI”成了许多人的选择,但AI回答未必都是“干净”的。不久前,有媒体曝光“AI投毒”隐蔽产业链现象,引发社会广泛关注。

所谓“AI投毒”,是向人工智能大模型的训练数据中,掺入伪装成正常样本的恶意数据或虚假信息,进而影响模型判断、操纵输出结果。“投毒者”可以批量制造虚假网页、新闻,让AI在抓取数据时一并“吞下”,在不知不觉中“学歪”,最终固化为针对特定问题的“标准答案”;也可以在模型中植入隐蔽的后门指令,一旦触发特定关键词就输出预设信息。

信任是链接人与人工智能的重要前提。对个人而言,这种“看不见的污染”轻则影响体验,重则误导决策。比如AI推荐购物,它可能引导你购买被包装出来的“爆款”;向AI咨询医疗建议,它可能引用虚假病例,给出危险的治疗方案……在医疗、金融等关键领域,这种风险尤其值得警惕。对产业而言,如果“数据不可信”成为普遍担忧,企业之间的合作意愿就会下降,行业的创新效率也会受到影响。

更深层的影响在于社会认知,随着人工智能深度融入公众日常生活,一旦模型给出的回答总是隐含歪曲事实的信息,便会潜移默化误导公众认知,放大偏见、制造混乱,甚至危及国家安全。

为什么“AI投毒”在今天变得如此容易?

首先,数据本身越来越复杂,大模型依赖对海量数据的学习训练,各种数据混杂在一起,很难做到完全可控可信,一旦缺乏严格的核查机制,就会给“投毒”留下空间;其次,“AI投毒”门槛较低,不法分子借助GEO(生成式引擎优化)工具,短时间内便能批量生成高权重虚假内容,成本极低、隐蔽性强;第三,数据作为一种新型生产要素,相应的标准体系、责任机制、监管手段等还在逐步完善,客观上增加了治理难度。

近年来,我国出台《生成式人工智能服务管理暂行办法》《人工智能安全治理框架》等规范,持续加强人工智能治理。不久前,中央网信办部署“清朗·整治AI应用乱象”专项行动,将“AI数据投毒”列为重点打击对象。

面对“AI投毒”,治理还要往深处走。AI运营者要建立更加严格的数据筛选、标注与审查机制,提升数据的可追溯性和可验证性;通过异常检测、对抗训练等手段,提高模型对异常数据的识别能力,让“掺杂”的数据更难混入。主管部门应加快规则体系建设,在制度层面上进行约束。比如,明确数据使用责任、建立违法行为惩戒机制、推动行业标准制定等。公众同样不是旁观者,面对AI的回答,多一分质疑、多一次核实,不主动传播未经查证的诱导性内容,发现异常及时反馈,主动呵护良好的人工智能生态。

还要看到,治理不仅是“防”,更是“促”。通过建设更加开放透明的数据生态,让优质数据更易获取,减少对不明来源数据的依赖,从源头压缩“投毒”空间,才是长久之计。

“AI投毒”现象提醒我们,在人工智能时代,数据是一种需要精心呵护的公共资源。治理“看不见的污染”,不仅是在填补技术漏洞,更是为人工智能发展夯实根基。数据更可信、规则更清晰、责任更明确,人工智能才能真正成为值得信赖的重要工具,为经济社会高质量发展创造更大价值。

来源:人民日报、中国信息安全

编排:小网     核校:

重磅︱《网络素养研究》(第3辑)新刊发布

重磅︱《中国青少年网络素养的日常经验与时代图景》新书发布

情景短剧(一) | 刷单返利套路深:你图他的利他图你的本

情景短剧(二) | 投资app陷阱:从富翁到“负翁”

情景短剧(三)| 快速放款诱饵:免征信无抵押钓走你的钱

情景短剧(四)| 电商物流骗局:假客服真诈骗

情景短剧(五)| 冒充公检法:骗子盯上海外留学生

情景短剧(六)| 共享屏幕诈骗:“调查征信”玩套路

情景短剧(七)| 虚假购物大坑:提前买到考试原题

情景短剧(八)| 职场诈骗迷局:真假“Boss”大挑战

情景短剧(九)| 网游交易迷雾:虚拟世界的真实陷阱

情景短剧(十)| 网络交友诈骗:虚幻情缘莫当真

论文观点 | AIGC 时代“人机协同”媒介素养构建的必要性及原则

论文观点 | 数字铭写、日常经验与文化习得——基于青少年游戏素养研究的理论旅行及学理观察

论文观点 | 智能手机环境下农村居民的“数字化生存”

论文观点 | 智媒时代青年网络素养的现实困境与提升路径

论文观点 | 反哺视域下首都老年群体短视频使用的数字代际差异与支持

公共服务中的未成年人网络安全保护机制研究

杭孝平 朵拉 李侁瑞 | 中国部分地区儿童安全上网现状与需求——以4个县级地区的调研为例

杭孝平、秦仪铭 | 青年领航:共塑数字未来的蓬勃力量

杭孝平、刘欣然 | 聚力网络育人:以网络素养护航未成年人成长

杭孝平、文陈玉玺 | 从国际原则到中国实践:儿童数字安全的落地之路

杭孝平、刘欣然 | 聚力网络育人:以网络素养护航未成年人成长

杭孝平、梁月 | 从国际标准到中国实践:科技企业将“设计保障儿童安全”贯穿产品全生命周期

丁秀云、刘凯莉 | 筑牢数字屏障:科技企业这样答好“护苗”答卷

“@芽”在行动:北京联合大学八城接力,为未成年人网络安全护航

“你的SBTI是什么?SBTI 凭什么刷屏全网?”

AI短剧狂飙240亿市场:狂欢背后,监管已收紧

刷屏的AI老照片,竟是ChatGPT偷偷更 的“ 王炸”功能?  真相来了!

摆拍闹剧透支社会善意:从“抱抱盲兔”事件探析网络传播乱象与治理之道

爆款解压玩具“娜塔莎”:暴力把玩,真的是解压吗?

从“昙花一现”到“六冠封神”:张雪机车的品牌叙事反转

未成年人网络保护丨 法国推进15岁以下未成年人社交媒体禁令

未成年人网络保护丨 人民日报:儿童类微短剧,别走偏

中国互联网络信息中心(CNNIC)发布第57次《中国互联网络发展状况统计报告》

网事要闻 | 2026年“@芽”未成年人网络保护公益行动计划正式启动   多方协同筑牢未成年人网络安全防线

最新网事 | 中央网信办组织召开未成年人网络保护协调机制工作会议

最新网事 | 中央网信办等四部门印发《2026年提升全民数字素养与技能工作要点》

最新网事| 国家互联网信息办公室发布《中国个人信息保护报告(2025年)》

最新网事 | 国家网信办等五部门联合公布《互联网信息内容多渠道分发服务管理规定》

最新网事| 国家互联网信息办公室发布《中国个人信息保护报告(2025年)》

最新网事 | 《中国个人信息保护报告(2025年)》答记者问

电子邮箱:wangluosuyang@163.com
工作地址:北京市海淀区北土城西路197号

转载是一种动力 分享是一种美德