4月27日,小红书发布首个完整的AI内容治理规则,将真实性与原创价值确立为AI内容治理的根本标尺,明确鼓励AI作为创意放大器,并坚决反对AI作为造假工具与低质内容生产机器。

这一极具标志性意义的声明,可以说是对今年3月以来全民养龙虾(OpenClaw等AI智能体)试图全自动化运营社交账号狂热的一次冷水浇头。

UGC明确边界

要深刻理解小红书此次出台治理主张的急迫性与底层逻辑,必须将目光投向今年3月掀起的全民养龙虾运动。

无数投机者与黑灰产从业者迅速嗅到商机,企图利用Agent在小红书等社交平台上日均生成成千上万篇以假乱真的图文与视频。

这刺痛了UGC平台最核心的商业命脉——信任资本。

对于小红书而言,其社区生态的本质是一个建立在真人真实经验基础上的种草与决策模型。

用户之所以愿意在平台上被他人的内容影响并最终产生消费转化,根本原因在于他们坚信屏幕背后是一个活生生的人,有着真实的试错经历以及真实的消费痛点。

一旦平台防线失守,被大模型批量生成的虚假打卡、伪造评测所占据,劣币驱逐良币的效应将瞬间摧毁用户与平台之间的信任,小红书相比于传统搜索引擎与电商平台的独特护城河也将荡然无存。

正是基于这种关乎生死存亡的生态考量,小红书在昨日的公告中首次完整、清晰地输出了其对AI的治理态度,且措辞极为严厉。

此次AI治理主张共分为“平台鼓励的AI内容及行为”和“平台反对的AI内容及行为”两大板块。

在鼓励方面,小红书欢迎创作者用AI做这几件事:

一是利用AI提升作品的信息价值,例如将复杂知识变得更具可视化的科普内容,让难懂的信息变得直观易懂;

二是利用AI创作有辨识度的虚拟角色,或对已有IP进行有亮点的二次创作;

三是借助AI进行视觉创作,产出有审美、有叙事的好作品,包括艺术插画、绘画,以及具备剧情逻辑的电影感短片。

而在反对方面,小红书反对利用AI全自动托管账号、AI教唆做号等扰乱社区秩序的行为;反对AI造假行为,包括利用AI仿冒名人、虚构人设、伪造个人经历、编造虚假信息,或是恶搞经典作品、借热点进行低质营销;反对利用AI侵犯肖像权、著作权的行为;也反对利用AI批量生产同质化内容、生成猎奇博眼球的极端画面,或是传播不良价值观等低质创作行为。

在具体的治理机制上,平台采取了主动声明与系统强制打标相结合的双保险制度。

创作者被要求必须对AI参与的内容进行如实标识,而对于试图隐瞒的疑似内容,平台的检测算法将在识别后强制添加不可篡改的AI贴条,并视违规程度施以限制分发甚至封号的顶格处罚。

今年以来,小红书累计处置各类AI不良行为超百万例,其中AI托管账号超80万个、AI造假笔记近15万篇。

同样是UGC平台,微信公众号在3月27日新增条款明确将脱离真人表达的AI生成、脚本托管批量发布、传播自动化创作教程列为违规,深度打击的是“账号工厂”式的内容套利。

直接导火索是“夫妻靠AI写公众号年入200万”刷屏事件,经核实大部分收入来自299元课程费而非平台流量,涉事账号随后被永久封禁。

还有深层挑战

随着底层大模型能力的持续跃升,无论是明确边界的UGC,还是试图用AI来降本增效的PGC(专业内容)平台,都远未到高枕无忧的时刻。在狂欢之下,全行业正面临着AI带来的大考。

首先是治理层面的“魔高一尺与道高一丈”,平台在治理的同时,AI技术也在进步。

对于小红书等平台而言,规则的制定只是第一步,真正的考验在于落地执行的成本与准确率。

当前的开源智能体与模型在拟人化表达上已极其逼真。平台的“AI检测算法”与黑灰产的“AI伪装技术”将陷入长期的军备竞赛。误判导致真人博主被限流,或漏判导致虚假种草泛滥,都会引发巨大的舆情危机与社区信任透支。

当模型在光影处理、微表情模拟甚至是逻辑瑕疵的刻意制造上越来越接近人类的自然表达时,平台的AI检测算法与黑灰产的伪装技术将陷入无休止的猫鼠游戏。

在商业层面,内容通缩与审美疲劳也是AI被引入后的新问题。

虽然AI解决了量与本的问题,却带来了质的隐患。

大模型基于概率统计生成内容的本质,决定了其产出天然带有套路化倾向,进而让平台充满了同质的内容。

一位AI科普博主介绍,这可能陷入所谓的“模型塌陷”,即当模型反复使用低质量、低多样性、相互污染的数据进行训练时,生成能力会逐步退化,最终陷入单一、重复、失真的状态。

另外,不论是PGC还是UGC平台,AI使用也带来了伦理层面的“数字剥削”与版权灰区。这或许是全行业最难啃的骨头。

比如AI短剧繁荣的背后,可能带来传统初级编剧、画师、配音员等岗位的结构性失业。同时,大模型的训练不可避免地吸纳了无数UGC平台上的原创心血。当一个由AI生成的短剧爆红,其收益该如何向被投喂数据的原创者分配?在当前的法律与平台规则框架下,这依然是一片布满地雷的灰度地带。

技术从来都是中立的放大器,它最终放大的是平台的基因。UGC向左,还在追求真实感与人际信任;PGC向右,追逐极致的效率与多巴胺。在这场深远的产业重塑中,没有绝对正确的路径,只有对自身商业本质的最深切叩问。

更大的考验还在持续到来,当AI生成内容在技术上越来越难以与人类创作区分,平台如何在“鼓励创新”与“防范风险”之间持续拿捏分寸?这个问题,还需要进一步探索。