半年处置虚假笔记320万篇!小红书公布半年打击“虚假”成绩单

article/2025/6/13 15:10:05

海外留学生Karen最近遭遇了一场数字幻灭——她在社交平台上反复咨询的“学长”,实际是盗取他人内容拼接的虚拟账号,“感觉自己被骗了,体验很不好。”

类似Karen遇到的情况,对于社交平台用户来说并不陌生,实际上,随着科技的发展,各种虚假内容在各个网络平台甚嚣尘上,其对于内容平台、内容社区根基的侵蚀性正在逐渐显现。针对这一问题,小红书主动出击,对虚假内容进行严厉打击。今年6月12日,小红书“打击虚假”治理开放日在北京举行,其公布的社区虚假内容治理成绩斐然,充分显示了一个以真实为基因的内容社区所具有的社会责任意识。

高效精准可持续,小红书为“打假”三管齐下

“钢铁保姆”机器人引发市民抢购?霸总创业三年成功买下8000平办公楼?知名艺人在视频中推荐“三无”化妆品?这些耸动而带有引导性的内容,其实都是虚假内容。在“打击虚假”治理开放日现场,小红书向公众公布了2025年上半年社区虚假内容治理成果。数据显示,通过建设虚假内容全链路治理体系,共处置虚假笔记320万篇,处置虚假人设账号1万个,处置虚假低质AIGC笔记60万篇;通过持续建设“同质化识别”能力,全面提升处置手段,升级机器对抗,共封禁批量造假黑灰产账号超1000万个。这一成果不仅证明了小红书在打击“虚假”方面的严厉程度,同时也从侧面反映出了,虚假内容在以小红书为代表的社交平台上的泛滥,打击“虚假”刻不容缓。

据小红书虚假内容治理负责人蒂法介绍,虚假不实内容、虚假人设和AIGC造假是小红书当前打击“虚假”的三大重点。在她看来,虚假内容的出现对于小红书的健康生态影响巨大,“打击‘虚假’将作为小红书的长期治理重点,持续投入人力和技术力量,不断提升治理效果。”

小红书黑灰产账号治理负责人必行在活动现场介绍了黑灰产账号从建号到养号再到牟利的整个流程,“黑灰产账号进行全链路批量造假,对社区生态和秩序的危害十分巨大。”基于此,小红书社区自2024年11月中启动了小红书黑灰产账号治理专项,专项开展1个月,封禁126万黑灰产账号;开展3个月,封禁320万黑灰产账号;开展7个月,封禁超1000万黑灰产账号。“(小红书)对黑灰产坚决打击,绝不让步半分”,必行表示。

无论是虚假内容,还是黑灰产账号,都具有数量巨大、隐蔽性强、变体快和对抗强等特征,鉴于此,小红书治理团队从多个角度入手,以进一步提升打击效果。

在虚假不实内容治理方面,小红书建构了“前置拦截、事中追踪、分析回扫”的“前中后”全链路治理体系;上线了内容信息量模型,笔记摘要提取模型,AIGC谣言诊断模型等15个识别大模型,并建立了真实信源库和谣言库,实现了对虚假内容的实时拦截和批量回扫,半年共处置虚假笔记320万篇。

在虚假人设治理方面,小红书设置了内容前置审核制度,采用了账号关系挖掘分析策略,并上线多个图像及视频识别模型,通过综合笔记内容和账号信息进行分析判断,对虚假人设进行精准打击,半年共处置虚假人设账号1万个。

此外,小红书还不断加大对AIGC识别模型的研发投入,进一步提高识别精准度,减少虚假低质AI内容的曝光。同时,平台对AIGC生成内容做主动标识工作,提升信息透明度。半年共处置治理虚假低质AI笔记60万篇。

而针对黑灰产账号,小红书治理团队则从识别能力和处置能力两方面重点入手。截至目前,小红书已经上线50多个模型,建立了以“同质化识别”为核心的风控体系,将对黑灰产的识别召回率提升了72%。而在处置能力方面,小红书则不断优化处置策略,极大提升黑灰产作恶成本;全面升级机器对抗,用机器判罚大规模代替人工判罚,大幅提高对黑灰产账号的处置量级及时效性。

值得一提的是,在线上治理的同时,小红书案件调查团队还向多地警方和市场监督部门积极提供线索,对黑灰产团伙进行线下打击。目前有7起案件在侦办中,后续警方和市场监督部门将根据调查结果采取各种处罚措施,涉及犯罪行为的还将进一步追究刑事责任。

需要认识到的是,由于人类社会信息传播的本源性困境,虚假内容存在着无法被彻底消灭的事实,尤其是伴随着传播技术的迭代、信息环境的复杂化,这一情况愈发常见,“应对当前互联网虚假内容快速增长与传播,需要各平台积极打击,更多全社会共同参与。”中国人民大学传播学副教授董晨宇在开放日现场说道。

建立具有可持续性的举报机制,鼓励用户参与共治,是帮助减少虚假内容在网络泛滥的有效举措之一。在开放日上,小红书审核培训师给现场观众上了一节“打假”志愿者培训课,展示了近10个不同类型的造假案例,引发了观众的鉴假热潮。在场多位观众表示,会将学到的鉴假方法应用到对虚假内容的鉴别和举报中。

在6月11日的中国网络文明大会上,小红书副总裁许磊介绍:目前,小红书已经建立了较为完善的虚假信息举报制度。其不仅开通了监管网站、APP客户端举报、举报热线和举报邮箱四种途径,还在常态化转发重要辟谣稿件的基础上,搭建起辟谣专区,为用户提供一站式辟谣信息服务;官方账号“薯管家”更是每周定期发布辟谣笔记,以帮助用户判断虚假内容。

许磊还表示,小红书是“普通人创作内容”的社区,“分享真实的内容”和“真诚分享”不仅是平台用户自发形成的内容创作准则,也是小红书的社区价值观。因此,打击虚假,提倡真实是小红书的必然选择。

治理开放日现场,小红书黑灰产账号治理负责人必行介绍,为了进一步鼓励用户分享自己的“真实体验”,小红书在严打虚假内容之外,还特别设立了“真诚分”账号体系,从分享动机、内容质量多方面判断账号是否真诚,从而对真诚的创作者给予流量倾斜,对虚假低质的杂音噪声进行压制,也用坚决的态度,对虚假内容说“不”。

治理网络虚假内容刻不容缓

从“反诈开放日”,到“打击‘虚假’治理开放日”,小红书作为广受用户欢迎的内容社区,主动承担社会责任,在内容治理方面做出了积极的表率作用,多角度全方位的链路、机制等设计都是其严厉治理虚假内容的决心的体现,而这也从侧面反映出了虚假内容对于当前网络安全与健康方面的影响之巨大。

目前情况来看,随着现代信息技术的迭代,人工智能生成内容成为市场热点,人们甚至无需亲临现场、真实体验,就能构建出一篇活灵活现的“体验式分享”,并将之在社交平台进行发布,进而影响到巨量的受众。技术的发展不仅加快了虚假内容的生产流通速度,同时也大规模降低了虚假内容的制作门槛,导致其对网络生态内容的健康发展产生的负面影响越来越大。

不如仅此,网络世界消弭了时空的界限,虚假内容可以在任何时间任何地点被发布到社交平台之上,而时差的存在则从客观程度上延长了虚假内容的存活时间,使其影响范围变得越发之广。

更为重要的是,当信息过载,受众的注意力被迅速分散,以至于其很难在短时间内对其进行真假判断,尤其是面对包装精致的虚假内容时,主动判断其真假的难度更是明显上升,这一情况的发生不仅会造成信任机制的动摇,也会造成经济秩序的破坏,无论是对于受众个体、平台,还是对于企业、整个社会而言,都弊大于利,治理虚假内容,已然成为了构建健康和谐的网络生态的重要环节,刻不容缓。

2025年,国家互联网信息办公室、工业和信息化部、公安部、国家广播电视总局制定并发布《人工智能生成合成内容标识办法》,规定“服务提供者提供的生成合成服务,包括文本、音频、图片、视频、虚拟场景等,均应在适当位置添加显著的提示标识;服务提供者提供生成合成内容下载、复制、导出等方式时,应当确保文件中含有满足要求的显式标识”。这一将于今年9月1日实施的办法不仅标志着我国在生成式人工智能领域迈出了构建安全可信生态的关键一步,同时也在提升受众警惕性和优化平台审核效率方面迈出了积极的一步,为打击网络虚假内容泛滥,构建“清朗”网络空间提供了助力。

互联网的出现,带来了信息的高速交流,它突破了地域与时空的限制,构建起了一个虚拟但真实的世界,对于“真实分享”的渴求与“真诚分享”的举动成了推动互联网世界持续发展的源动力。320万篇被处置的虚假笔记,即是小红书对社区进行治理的答卷,也是其向“虚假”说“不”的旗帜,未来,以“真实”与“真诚”为基因的小红书也将积极通过技术手段、用户共治、机构协作等方式方法,持续打击虚假内容,在为用户构建真实分享平台的同时,助力构建安全清朗的网络空间,让真诚成为数字时代的通行证。

    责任编辑:毛玮静
    校对:刘威

    http://news.xdnf.cn/AuyiCwNJPk

    相关文章

    印度航空AI171的至暗5分钟

    6月12日,在印度古吉拉特邦艾哈迈达巴德,人们在客机失事现场运送一遇难者遗体。新华社 图当地时间6月12日下午1点39分,印度航空AI171航班从印度古吉拉特邦艾哈迈达巴德国际机场起飞,起飞仅5分钟后坠毁。AI171航班载有242人,乘客包括169名印度公民、53名英国公民、1名加拿大…

    刘建红已任民航局空管局党委书记、副局长

    刘建红 资料图澎湃新闻记者从中国民用航空局空中交通管理局(简称“民航局空管局”)官网获悉,刘建红已任民航局空管局党委书记、副局长。刘建红,女,长期在民航系统工作,曾任首都机场集团党委副书记、纪委书记,民航局党组驻派空管局纪检组组长、空管局党委副书记、纪委书…

    申琳跨省份出任新疆乌鲁木齐市副市长,此前在河南工作

    申琳 资料图6月12日,乌鲁木齐市第十七届人民代表大会常务委员会第二十六次会议通过,决定任命申琳为乌鲁木齐市人民政府副市长。公开资料显示,申琳,1976年4月生,省委党校研究生,中共党员。申琳此前在河南省工作,曾任焦作市武陟县委副书记、县长,修武县委书记,焦作市发…

    共和国“红色掌柜”陈云的算盘情结

    今天(6月13日)是陈云同志诞辰120周年的日子。陈云是上海青浦走出去的一代伟人,是党和国家久经考验的卓越领导人,是我们党第一代、第二代中央领导集体的重要成员。1959年5月15日,陈云在中南海勤政殿。陈云在财经方面有着卓越的才能,是中国社会主义经济建设的开创者和奠基人…

    马上评|拽断西湖松鼠尾巴,不只是不文明

    断掉的小松鼠尾巴。受访者供图居然有人在西湖边拔松鼠尾巴?日前,有网友爆料,在西湖边看到一名男子在伤害小松鼠。6月13日,西湖水域管理处发布情况说明:陈某(男,46岁)于6月10日中午12时许,在湖滨公园游玩时,抓逗野生松鼠,并粗暴拖拽其尾巴,导致松鼠尾部断裂,负伤逃…

    促进民营经济高质量发展,上海闵行出台32条举措

    民营经济是高质量发展的坚实基础。6月13日,澎湃新闻记者从上海市闵行区发改委获悉,近日,闵行区围绕打造公平竞争的民营经济发展环境、促进民营企业高质量开放创新发展、加大民间投融资支持力度等六个方面,发布了闵行区关于贯彻落实《新时代新征程促进民营经济高质量发展的若…

    上海这雨何时是个头?明天降水较弱,下周有2-3天间歇期

    今天(6月13日),上班族又遭遇雨水“精准打击”。雨雨雨雨,啥时候是个头?据“上海天气发布”微信公众号6月13日消息,因为热带系统远程助攻,匀出了部分水汽沿着副热带高压边缘向北输送,今天凌晨开始浙江和上海出现了较明显的降雨。13日03时至10时雨量统计显示:全市普降小…

    明天是文化和自然遗产日,全国将举行七千多项文博活动

    6月14日是中国的文化和自然遗产日,今年的主题为“让文物焕发新活力 绽放新光彩”,由国家文物局、湖南省政府主办的主场城市活动将在湖南省长沙市举办,并呈现“不尽长江滚滚来——长江与中华文明展”主题展览。澎湃新闻《澎湃观展》届时将进行现场直播。澎湃新闻获悉,全国各…

    嗨动“上海之夏”,新闻晨报联合上海国际电影节推出系列活动

    当第27届上海国际电影节的光影点亮申城,新闻晨报秉持“每一帧都是生活,每一个人都是主角”的核心理念,与上海国际电影节组委会联合策划并推出一系列深度联动活动 。本次合作旨在将电影艺术与城市脉搏紧密相连,贯通观影、消费与文旅体验,为全球影迷及广大市民倾力打造一场光…

    假布布!上海浦东国际机场海关扣留5961个侵权泡泡玛特玩偶

    近日,上海浦东国际机场海关关员在对一批快件开展监管时,发现多票申报为“恐龙玩具样品”“毛绒玩具”“挂件”的货物实际为印有“POP MART”(泡泡玛特)品牌标识的玩偶,总计5961个,查验关员初步判断存在较大侵权嫌疑。经权利人确认,上述玩偶未经授权使用“POP MART”标识…

    “酱园弄”回来了,持电影票根玩转乍浦路

    作为第27届上海国际电影节的开幕影片,由陈可辛执导的电影《酱园弄悬案》将在6月14日晚的金爵盛典后进行世界首映,并在上海百余家影院开展特别放映。而在影片拍摄取景地之一的虹口区乍浦路,告别许久的“酱园弄”又回来了……期盼已久的“酱园弄”回归去年年初,乍浦路上的“酱…

    深圳挂牌前海合作区一宗住宅用地,起始价11.58亿元

    6月13日,深圳市前海深港现代服务业合作区发布国有建设用地使用权出让公告,拟以挂牌方式公开出让前海合作区一宗住宅用地,地块起始价为11.58亿元。此次出让的宗地号为T201-0232,地块位于前海合作区南山街道枢纽一街北侧,土地用途为二类居住用地,土地面积8287.15平方米,建…

    以媒:以色列一架政府专机从本-古里安机场起飞,目的地不明

    据《以色列时报》当地时间13日援引航班跟踪网站信息报道,以色列政府专机“锡安之翼”此前从本-古里安机场起飞。目前尚无关于该专机目的地的更多信息。“锡安之翼” 资料图 图源:外媒报道配图不过,报道提到,在2024年4月13日伊朗对以色列发动导弹和无人机袭击之前,“锡安之…

    讲座预告|职业教育与高等教育的衔接性

    国际化路径与对外开放政策主讲人:刘悦(中央财经大学国际经济与贸易学院教授,中央财经大学“龙马学者”青年学者,国际经济与贸易学院职业发展中心主任)时间:6月13日(周五)12:45主办:中央财经大学国际经济与贸易学院参与方式:中央财经大学沙河主教305智慧城市标准化与…

    中东睿评|以色列与美国配合,“清零”伊朗核能力?

    当地时间2025年6月13日,伊朗德黑兰,一栋建筑在以色列空袭后起火。视觉中国 图当地时间6月13日,以色列空军对伊朗发动代号为“狮子的力量”的军事行动。以色列国防部长卡茨称,以色列对伊朗发动先发制人打击,预计不久后以色列将遭受导弹和无人机袭击,以色列全国进入紧急状态…

    第1现场|以色列袭击伊朗核设施,伊斯兰革命卫队总司令身亡

    综合央视新闻、新华社消息,当地时间6月13日凌晨,以色列对伊朗核计划发动空袭,行动命名为“狮子的力量”。以色列多地响起防空警报,以交通部门宣布关闭领空,军方说国家进入“新局势”。伊朗伊斯兰革命卫队总司令萨拉米等多名革命卫队指挥官、核科学家在袭击中身亡。当地时间…

    市场监管总局答澎湃:过去一年全国特种设备安全防线不断加固,安全形势总体平稳

    发布会现场6月13日上午,国家市场监督管理总局召开2025年二季度例行新闻发布会。2024年全国特种设备安全总体状况如何?市场监管总局新闻发言人、新闻宣传司司长王秋苹在回答澎湃新闻记者提问时表示,过去一年,全国特种设备安全防线不断加固,全年发生事故132起,但没有发生一…

    网店闭店后马桶质保期内无售后,TOTO客服:非授权店购买,无法确认品质和供货渠道

    近日,上海的消费者张先生向澎湃公众互助平台“服务湃”(https://tousu.thepaper.cn)反映称,他在淘宝平台购买的“TOTO品牌智能马桶”在质保期内出现疑似漏电的情况,联系售后时发现购买店铺已闭店,无法联系。随后购买的第二台智能马桶疑似假货,购买后再次出现店铺闭店、无…

    台风“蝴蝶”或紧擦海南岛西部北上,14日将登陆粤桂沿海

    中央气象台6月13日10时继续发布台风黄色预警:今年第1号台风“蝴蝶”(强热带风暴级)的中心今天(13日)上午8点钟位于海南省乐东县南部近海海面上,就是北纬18.4度、东经108.7度,中心附近最大风力有10级(28米/秒),中心最低气压为982百帕,七级风圈半径100-260公里。预计,…

    以色列袭击伊朗核设施,专家:以战争边缘政策可能导致冲突升级

    以色列对伊朗的军事打击目标从防空力量、导弹生产设施升级到重点针对核设施以及军队高层,行动明显升级。据央视新闻报道,当地时间6月13日,以空军正在对伊朗境内数十个与核计划和其他军事设施相关的目标发动空袭,并且将此次行动命名为“狮子的力量”。袭击发生后,伊朗最高领…