一、一次全国性的AI监管框架升级
2026年4月30日,中央网信办印发通知,在全国范围内部署开展为期4个月的“清朗·整治AI应用乱象”专项行动。
图源 | 中央网信办
这与以往常规的“打击网上不良信息”不同——过往十余年的“清朗”系列行动,整治对象大多是既有的网络乱象(虚假信息、低俗内容、水军等),而这一次,监管的对象是AI技术本身,以及AI技术催生出的全新内容生产形态。
从整治框架来看,这次行动分为两个阶段,共14类问题,覆盖从模型训练、语料安全、数据投毒、内容标识,到AI生成内容、AI水军、AI产品违规的全链条。
这是中国AI监管史上首次出现如此系统化的全链条整治清单。
上海网信办5月中旬的执行方案之所以值得关注,并不是因为上海“率先”做了什么,而是因为上海是中国AI产业最集中的城市之一——商汤、MiniMax、阶跃星辰等头部AI公司的总部均在上海,小红书的AI内容生态、B站的AI视频创作、携程的AI客服、拼多多的AI电商应用,也都是上海属地平台。上海怎么执行,很大程度上会影响全国AI企业的合规基准线。
二、“数字泔水”:一个被官方定义的AI内容新概念
“数字泔水”这个词出现在中央网信办的原始通告中,用来定义第二阶段的整治对象之一:“批量生成发布逻辑混乱、价值空洞,或带有错误价值观、扭曲文化认知等不良倾向”的AI内容。
这个词的重点在于,它不是在定义“违法”,而是在定义“无价值”。
传统的网络治理框架里,“不良信息”有明确的法律边界:虚假信息、淫秽色情、暴力恐怖、煽动仇恨等,这些在《网络安全法》《网络信息内容生态治理规定》里都有对应条款。
但“数字泔水”指向的是一种未必违法、但质量很低甚至无价值的内容——它可能是语法通顺、不触发任何敏感词,甚至看起来“正常”的AI生成内容。但它没有人类的心智参与,没有信息增量,没有文化价值,纯粹是为了占据用户的注意力而存在的网络垃圾。

海外社交媒体上流行的AI”Shirmp Jesus”
图源 | Facebook
中央网信办选择用一个如此具象、甚至带有一点情绪色彩的词汇来给这类内容定性,传递了一个明确的监管信号:AI内容治理的边界正从法律层面扩展到价值层面。不是只有“违法”的AI内容才需要管,“低质”的AI内容同样在被治理的范围内。
这是一个重大的监管理念转变。如果这一思路被写入后续的常态化监管框架,意味着未来AI内容平台不仅要过滤违法违规信息,还要建立对AI生成内容质量的评估和治理能力——这比单纯的内容审核要复杂得多。

社交媒体流行的AI橘猫
图源 | 知乎
三、为什么是14类问题?拆解监管框架的应对逻辑
第一阶段:在“源头”筑坝
第一阶段名为“AI应用服务典型违规问题”专项治理。仔细看治理清单,它实际上是在AI产业链的上游设置监管闸门:
- 大模型备案→ 管的是“谁在做AI”
- 安全审核能力→ 管的是“做出来的AI安不安全”
- 训练语料安全→ 管的是“AI学什么”
- 数据投毒→ 管的是“有没有人故意让AI学坏”
- 内容标识→ 管的是“AI生成的内容能不能被识别”
- 技术滥用→ 管的是“AI被用来干什么坏事”
- 开源模型管理→ 管的是“开源社区的责任边界”
这7类问题的共同点是:它们都是在内容产生之前设置的关卡。监管的逻辑非常清晰——如果上游的问题不解决,下游的内容乱象则永远清不完。
其中有两个值得注意的条目:
AI数据投毒。官方定义是“通过篡改训练语料、伪造权威数据、使用GEO技术恶意营销等方式实施AI数据投毒”。
GEO是指通过优化内容来操控AI搜索引擎的输出结果,其逻辑类似于传统SEO操控搜索引擎排名,但作用对象是AI而非人类。【大模型投毒】这个概念在学术界和产业界都还是前沿话题,能被写入中央层面的监管文件,可见当下收获的重视。
揭秘GEO灰产:有人正批量给你的AI小助手塞小广告、数据投毒……

央视“3·15”晚会曝光AI投毒
图源 | 央视
开源模型安全管理。魔搭社区(阿里巴巴旗下的开源模型平台)被纳入17家重点平台,其专项治理公告明确提到“对社区内托管的模型、数据集等核心资源展开全面安全审查”。
这是一个标志性事件——中国的开源AI生态正在从“自由共享”进入“合规共享”阶段。这次专项行动将“开源模型安全管理”列为7类源头问题之一,意味着未来开源社区可能需要建立类似应用商店的审核机制:身份认证、内容审查、风险评估、应急处置。这将对未来的AI开源生态产生深远影响。

第二阶段:在”下游”清理
如果说第一阶段是在管“工厂”,第二阶段就是在管“产品”——也就是普通用户能直接看到的内容乱象。
其中最具前瞻性的条目是“利用AI‘托管’从事网络水军活动”。官方定义是:“通过AI‘托管’技术运营账号,模拟真人批量注册、运营社交账号,批量生成发布低质同质文案。非法交易买卖账号。使用AI群控软件、社交机器人刷量控评,生成虚假流量数据,制造虚假舆论热点。”
“AI托管”这个表述意味着,监管部门已经将AI驱动的自动化账号运营纳入打击范围——这不仅仅是内容问题,更是平台账号生态和流量真实性的问题。
对社交媒体平台(微博、小红书、抖音、B站)来说,这意味着未来需要升级反bot能力,识别和打击由AI驱动的批量注册、内容发布、互动刷量行为。
博主发布游戏星露谷物语相关视频,遭AI水军号评论
图源 | 抖音
四、合规声明——17家平台交出的不同“作业”
AI模型公司:MiniMax、商汤、千问
内容平台:B站、小红书、虎扑、Soul
电商平台与生活服务:携程、美团、拼多多、得物
从左至右依次为小红书、MiniMax、拼多多
图源 | 网信上海 公众号
开源社区:魔搭社区
魔搭社区的公告是17家平台中最“特殊”的——它完全不提用户内容,只提模型和数据集的合规审查。这说明开源社区的合规逻辑与内容平台完全不同:相较“删帖”和“封禁账号”,它直接采用“下架模型”“撤销上传权限”的整改措施。开源模型的合规审查一旦常态化,将深刻改变开发者的技术获取方式。
从左至右依次为2345、魔搭社区
图源 | 网信上海 公众号
五、结语:4个月专项行动之后,会留下什么?
从时间线来看,这次专项行动4月底启动,8月底结束。但4个月的集中整治之后,更值得关注的是它会留下什么样的常态化监管框架。回顾过往“清朗”系列专项行动的经验,很多整治内容在专项行动结束后被纳入了常态化监管:比如自媒体实名制、算法推荐管理、未成年人网络保护等,都是从”专项行动”起步,最终变成日常监管规则。这次AI专项行动有很高的概率走同样的路径——14类问题清单中的多项内容(大模型备案、AI内容标识、开源模型审查、AI水军治理)很可能在专项行动结束后,被写入或强化为常态化的监管制度。对于AI行业来说,这意味着合规成本将从“一次性整改”变成“持续性投入”。对于普通用户来说,这意味着未来的网络内容环境可能会更透明(AI内容有标识)、更干净(低质AI内容被清理)、更安全(AI水军和虚假信息被打击)。但一个悬而未决的问题是:“数字泔水”这种带有价值判断的监管概念,如何与平台的内容审核机制对接?识别“虚假信息”有技术路径(事实核查、信源验证),但识别”价值空洞”的内容,本质上需要平台对AI生成内容做质量评估——这是一个比内容审核更复杂、也更主观的任务。如果这一思路被常态化,平台也将面临前所未有的治理挑战。
