本文转自:解放日报
部分爆款文章、热点视频并非出自真人之手,记者调查发现——
AI造假产业链是这样运作的
任翀

目前,不少社交平台对明显有AI生成痕迹的内容进行强制标注。网络截图
“用大模型7分钟写了9篇短篇小说,都签约了”“下班后借助大模型搞虚拟资料,半个月自动接了750单”……打开社交平台,诸如此类的宣传语随处可见。你有没有想过,网络上的爆款文章、热点视频,有相当一部分并非出自真人之手。更重要的是,由AI批量生产的“工业制品”中,有相当一部分违背事实,通过造谣的方式博取关注度,获得收益。
记者历时半个多月调查发现,一条涵盖AI内容生成、教程售卖、流量裂变、商业变现的完整造假产业链已悄然形成,不仅会误导网民,更是对正常的网络传播秩序和商业环境造成冲击。
一键“二创”,AI裂变
从各地网信部门和公安部门披露的案例看,使用AI大模型生成文字、视频造谣,已经不再稀奇。
具体来看,整条产业链涉及不同的盈利方式,最常见的一种是造假者利用自媒体矩阵,发布大量AI造假内容,为自己增加关注度,既能通过平台的流量分成机制或植入广告获利,又能利用关注度推销自己的服务。同时,大量企业或个人在推销“AI教程”。他们深谙平台流量和广告分配机制,继而开发出对应的“AI生成课程”以及相关服务,通过销售课程和生成服务,也能牟利。
这些盈利方式各有特点又互相交织,核心都是“AI造假”。在实际生活中,一条谣言的诞生和传播,往往穿插着不同的利益链条。
通过“眼球效应”能赚多少钱?记者通过社交平台购买了一套声称“10天受益3000元”的“视频号AI生成励志语录保姆级教程”。下单后,记者收到对方发送的网盘链接,其中介绍了如何将他人发布的心灵鸡汤去除水印、用AI生成图片或视频进行二创的方法,对方表示只要用对工具,每天可以生成数百条。至于“10天受益3000元”,靠的是平台的植入广告分成机制、直播带货和微店销售,主要来源是广告分成。
知情人士更是为记者算了一笔细账:以某社交平台的植入广告分配制度为例,一个拥有1000粉丝、单篇访问量1000的视频账号,如果支持植入广告,根据账号定位、内容是否为原创、植入广告数量及位置等,单篇广告收入从十几元到上千元不等。“不要小看十几元,因为对那些靠吸引眼球牟利的企业来说,旗下有数百上千个账号。所以同一主题,用AI写出不同角度、不同细节的文章,都能被平台认定为‘原创’,继而获得相对较高的广告收入。综合起来看,一条谣言可能获得数千元收入。”该人士提醒。
爆款有“教程”,造假有“选题”
在多个社交平台和知识付费平台上,“AI爆款写作秘籍”“零基础玩转AI文案”等教程随处可见,价格从十几元到数千元不等。
使用AI生成的文字到底什么样?记者联系到一名推销AI副业的“导师”,他毫不讳言地表示:“靠AI赚钱,选题是关键。”为证明自己“经验丰富”,他向记者介绍了几个核心“选题方向”。
“卖惨”是他给的一个建议。他表示,用AI生成卖惨类话题很简单,常见的“骑手卖惨”是典型话题,“用AI生成骑手遭遇恶劣天气送餐、被客户误解、家庭困难仍坚守岗位等内容,搭配煽情文案,极易引发同情和转发”。
“根据热点事件生成‘心灵鸡汤’类型的分析稿件也有市场。”该“导师”说,在这类稿件中,可以用真实事件作为主体,然后用AI生成“治愈”“励志”“煽情”“批判”等不同风格的“心灵鸡汤”,“就是对真实事件进行解读、分析、延伸。”
该“导师”称,如果记者购买付费服务,他还能传授如何修改AI生成内容的痕迹、如何判断敏感词规避平台审核等。可见,在AI造假牟利上,已经形成了“教程售卖—工具推荐—内容生成—商业接单”的完整灰色链条。
“用魔法打败魔法”
AI生成的虚假内容在网络空间肆意传播,真的处于无人监管的真空地带?答案显然是否定的。
去年9月1日,《人工智能生成合成内容标识办法》正式施行。办法明确规定,所有AI生成合成的文本、图片、视频等内容,必须添加显式标识,确保用户能够清晰辨别内容来源。
记者实测验证发现,主流大模型在生成内容时已初步落实该规定:生成文稿时,结尾会自动标注“本内容包含AI生成部分”;生成图片或视频时,内容角落也会添加半透明的“AI生成”水印。同时,将这类已标注AI生成的内容上传至多个社交平台时,发布界面会跳出弹窗提示:“经检测,该内容含AI生成元素,将按规定展示标识后发布”,强制完成合规标注。
不过,造假者也在总结“去标识”技巧:文本类内容直接删减末尾的AI标注语句;图片类通过裁剪、拉伸或轻微调色抹去水印,视频类利用剪辑工具剪掉带标识的片段;更进一步,通过调整格式或二次转码的方式,清除文件属性中的AI标记……经过以上处理,部分AI生成内容就能堂而皇之地以“原创”身份发布在社交平台,普通用户难以辨别。
面对这种规避监管的行为,治理之路该如何推进?AI行业从业者尤骑给出的答案是进一步发挥“用魔法打败魔法”的力量,即以AI技术对抗AI造假。越来越多的大模型开发者开发出了鉴别工具,能精准捕捉AI生成内容的隐性特征。国内不少科技企业和科研机构也研发出专门的AI生成内容检测工具。这些工具通过深度分析文本的语义模式、句式规整度、逻辑连贯性,以及图片的光影合理性、人物肢体细节,构建多维度鉴别模型。虽然识别准确率不能达到100%,但有很强的参考价值。
平台能否接入“鉴假”大模型?
在提升技术鉴别能力的同时,也需要平台作为“把关人”,承接鉴别能力的落地。
这个话题,恐怕是“老生常谈”。只不过这一次可以用上技术力量——由平台接入成熟的AI生成内容检测大模型,建立“发布前检测—疑似内容预警—违规内容拦截”的常态化审核流程。
具体而言,对用户上传的文本、图片、视频等内容进行实时检测,直接拦截存在AI造假且未标注的内容,不允许其上线;对多次发布违规造假内容的账号,采取限流、禁言直至永久封号的梯度处罚措施。尤其对于“AI副业”培训中高频出现的热点议题,更要强化定向审核,及时清理虚假内容,遏制不良导向传播。
治理AI造假不能仅靠监管和技术,公众的辨别能力同样重要。在信息爆炸时代,面对动辄10万+的网络爆款、看似治愈的心灵鸡汤,公众也要保持理性判断,不盲目相信、不随意转发。如果仅凭情绪共鸣就轻信传播内容,很可能被AI生成的虚假内容迷惑,陷入更深的信息茧房。 本报记者 任翀











