央视新闻讯 为规范AI服务和应用，促进行业健康有序发展，保障公民合法权益，近日，中央网信办印发通知，在全国范围内部署开展为期4个月的“清朗·整治AI应用乱象”专项行动。

中央网信办有关负责人表示，本次专项行动分两个阶段开展。

第一阶段为“清朗·AI应用服务典型违规问题”专项治理行动，重点整治未按规定履行大模型备案登记义务、安全审核能力不足、大模型训练语料安全、AI数据投毒、生成合成内容标识落实不到位等问题，强化AI技术源头治理。

第二阶段为“清朗·整治AI信息内容乱象”专项行动，聚焦利用AI技术生成“数字泔水”、制作发布虚假信息、散播暴力低俗等不良信息、假冒仿冒他人、侵害未成年人权益、从事网络水军活动等问题，坚决清理违法不良信息，依法处置处罚违规账号、MCN机构和网站平台。

第一阶段重点整治7类突出问题：

一是未按规定履行大模型备案登记义务。未按照《生成式人工智能服务管理暂行办法》规定，向网信部门履行备案登记程序，存在“应备未备”情形。

二是AI平台安全和审核过滤能力不足。模型底层安全能力缺失，在设计训练及部署应用阶段，价值导向存在偏差、纠偏能力不足。缺乏安全围栏机制、审核过滤能力不足，生成违法不良信息，或在生成内容中包含违法不良信息的云盘及网站链接。

三是大模型训练语料安全问题。训练语料审核把关不严，模型训练数据存在违法不良信息。训练数据来源合规性存在问题，模型训练过程中使用未经授权的文字、图片、音视频等数据。训练数据覆盖面不足、高质量语料缺乏。

四是AI数据投毒问题。通过篡改训练语料、伪造权威数据、使用GEO（生成式搜索引擎优化）技术恶意营销等方式实施AI数据投毒。炒作、教授AI数据投毒方法，或在电商平台兜售教程及工具。在模型生成回答过程中，对引用信源缺乏交叉验证和风险提示机制，未标注引用信息链接。

五是生成合成内容标识落实不到位。未落实《人工智能生成合成内容标识办法》及配套强制性标准要求。未对生成合成内容添加标识或标识大小、位置、透明度等不规范。未落实跨平台隐式标识互识互认义务、未按要求在生成合成内容周边添加显著提示标识或对生成合成内容识别能力不足。存在教授去除AI标识的教程信息、提供违规“去标识”工具服务。

六是滥用AI技术开展违法违规活动。借助AI技术实施渗透入侵、恶意样本注入、破坏计算机系统等网络攻击行为。未经他人授权，利用AI技术提供“换脸拟声”服务。盗用他人形象，通过数字虚拟人技术进行直播、影像创作，或提供金融咨询、医疗问答等专业服务。利用智能体技术窃取用户数据或账户密钥，侵犯他人隐私或合法权益。

七是开源模型安全管理不到位。开源社区缺乏身份认证和安全管理机制，对社区上传的数据集、模型代码等内容未建立有效审核和应急处置机制，未及时清理存在严重风险隐患的数据集或开源模型。

• 1
• 2
• 下一页
• 全文阅读