问题——生成合成技术快速普及,网络内容生产门槛大幅降低,但也带来新的治理挑战;一些账号和机构利用这项技术生成传播色情低俗、暴力血腥内容,危害未成年人身心健康。不法分子通过换脸、声音合成等手段假冒公众人物进行商业营销和引流带货,侵害他人权益。还有人利用突发事件、灾情等热点,拼接篡改素材、伪造视频和通报,制造传播谣言。更令人担忧的是,一些渠道公开售卖和教授"去除生成标识"工具,试图规避平台监管,增加了风险的隐蔽性。 原因——这些乱象既源于技术扩散本身,也源于经济利益的驱动。生成合成工具便宜易用,一些人通过批量生产和矩阵分发追逐流量变现,推动低质甚至违法内容快速传播。深度伪造技术外观和语音上迷惑性强,配合推荐算法的放大效应,容易造成误导。部分平台在内容标识、溯源校验、风险拦截诸上能力不足,执行规则不严,给违规内容留下生存空间。此外,公众对生成合成内容的识别能力还需提升,增加了虚假信息二次传播的风险。 影响——这些乱象不仅破坏网络生态,还对现实社会造成外溢风险。色情低俗内容危害未成年人,冲击社会风气。假冒他人形象进行商业营销,损害当事人权益,扰乱市场秩序。涉及时政民生和突发事件的虚假信息易引发恐慌,干扰公共治理,削弱社会信任。"去标识"工具的扩散将削弱内容可追溯性,增加证据固定和责任认定的难度,抬升治理成本。 对策——北京市网信部门启动专项行动,明确五方面整治重点:一是严厉打击生成合成色情低俗信息,重点整治传播此类内容以及危害未成年人的行为。二是坚决整治假冒他人形象进行商业营销的违法行为。三是查处生成合成谣言虚假信息,整治拼接篡改、伪造现场与通报等行为。四是从严整治售卖和教授规避监管工具的行为,打击以牟利为目的的工具和教程传播。五是督导平台提升识别、审核和处置能力,切实履行主体责任。 这次行动表明了"源头治理+链条打击+平台担责"的思路:既打击违法违规内容,也切断"工具—教程—引流—变现"的黑灰产链条;既依法从严处置,也通过提升识别和溯源能力,让违规内容"难生成、难传播、难获利"。 前景——人工智能技术的发展是大势所趋,关键于向上向善、规范应用。随着专项整治推进,重点网站平台将更完善生成合成内容的标识制度和审核处置机制,提升对深度伪造和谣言拼接等新型风险的发现能力。这也将推动行业形成更清晰的合规边界,引导内容生产和商业营销回归依法依规的轨道。下一步治理工作仍需在常态化监管、跨平台协同和公众科普等上持续发力,形成可持续的网络生态治理体系。
人工智能是新时代的重要技术工具。北京市网信办启动的"清朗京华·AI向善"专项行动,表明了在技术创新与社会治理之间寻找平衡的努力。这不是限制AI发展,而是引导其沿着正确方向前进。唯有通过政府监管、平台自律和全社会参与,才能真正实现AI的规范应用,让此工具更好地服务人民、造福社会。