隐秘而激烈的反黑产战斗:一个人每天发送100万条垃圾评论安全中心抖音灰产风控

黑产有一个特点,什么火黑产就跟什么,哪个平台平台流量大就盯上哪个平台,像候鸟一个样迁移。

作者|石灿

编辑|Tim

2020年3月,抖音安全中心在后台审核内容时发现一条可疑的视频,视频涉及儿童,多次被拦截,一直没有被审核通过。

正常情况下,涉及儿童的一条正常视频不会被拦截,如果内容足够好,还会被机制推荐,获得更多流量曝光。

遂宁市公安局高度重视这一报案线索,立即抽调精干警力组成专案组开展案件侦办工作。经过一番精密侦查,嫌疑人被锁定在遂宁市蓬溪县。3月29日,蓬溪县公安局网安大队将嫌疑人抓捕归案。

据嫌疑人交代,嫌疑人多次以“提供WIFI”等方式,诱惑同村男童到嫌疑人的住所进行猥亵,并拍摄淫秽视频,同步发送到多个视频社交平台。这次,嫌疑人马失前蹄,被抖音安全团队和当地公安部门联合惩治。

抖音安全中心背后是一套隐秘而强大的安全防御系统,时刻都在与抖音平台上的黑灰产业、色情恶势力做斗争。抖音安全中心负责人帅帅介绍说,抖音很早便成立了安全中心团队,设立产品、技术、运营、审核岗位,共计数千人与公司其他安全团队一同维系抖音的平台安全。

类似于假明星、儿童色情等内容均属违规,一旦触及安全防御系统的红线,它便会启动复杂且精密的预防惩戒机制,咬住猎物,攻防牵扯,甚至一击致命。在四个月里,抖音安全团队已经联合公安机关打击黑灰产团伙25个,刑事拘留87人。

黑产是整个行业和社会要面对的长久性难题。阿里巴巴、腾讯等超级平台公司均设立专门的部门机构在做这项工作。这个部门与商业化部门不同,它们通常内部自用,不直接产生经济效益;它们更像整个内容生态中的警卫员,起基础保障和安防保卫作用。

抖音安全中心亦如此。在一系列攻防操作背后,它要每天为6亿人兜底,抖音平台的内容安全、用户维护、商业保护和社会责任都聚焦在这套安全防御系统中。

抓住发布“看片加微,好看不贵”的人

一个抖音账号不断上传一些带有擦边色情的小姐姐视频到抖音内容审核系统,负责审核内容的同事发现这些视频后会心一笑——这个账号试图利用擦边色情视频从抖音导流至线下。

“我们比较有经验,很快把它们拦截。”帅帅说,对方上传的视频以女性内衣做背景,他们很快上线了内衣识别模型,审核并拦截该类型视频。

案件涉及到的图片

抖音安全团队马上针对这种新的性暗示元素训练识别模型,上线模型,打击该类型内容。黑产团伙换方案,用“花瓜+手指”。团队按图索骥,调查发现了“茄子”等外观类似的水果,主动上线香蕉类模型。

抖音安全团队联合公安机关,锁定了湖南长沙一个色情犯罪团伙的窝点位置。但还不能实施抓捕,需要更多证据。

经过一番讨论,他们决定派人做实地勘察,寻找蛛丝马迹。

一位抖音反黑人员配合公安机关,在窝点位置进行了连续三天的摸排,以多种方式进入公司。潜伏人员在现场发现,他们就是通过抖音发布“黄瓜+文字”诱导性视频的团队,正是抖音安全团队要找的那个团队。

在获取他们违法违规的犯罪事实后,公安机关实施了抓捕,现场抓获嫌疑人11名,手机设备2000多个。这些人都被认定为“帮助信息网络犯罪活动罪”扣押。

抖音安全中心总监周冉说,通过公安机关对嫌疑人的审讯了解到,该团伙在营业期间,每天都通过接码平台注册新的抖音帐号,但并不是每个帐号都能使用,大部分账号都被抖音拦截封禁了,他们帐号使用率大概的为20%,也就是100个帐号能使用1~2个。这证明线上风控拦截已经发挥了很大的效力。

周冉还透露,根据犯罪嫌疑人交代,这只是他们这一个窝点,过去两个月,他们被抖音封禁的帐号就高达5000多个。

这类黑产团队通常配备先进的技术设备提升业务效率。

“我个人看来,线下打击是提高作恶成本的最优实践,这些犯罪团伙有他们自己的沟通圈子,通过对这些作恶人的惩戒,我们可以对整个色情导流的黑灰产行业起到震慑作用。”周冉说。

自2020年1月份以来,抖音安全中心共封禁色情导流和色情招嫖帐号超过100万,仅9月份期间就封禁305248个帐号。

据刺猬公社(ID:ciweigongshe)调查发现,这并非只是抖音才会遇到的问题,而是整个内容行业都时刻面对黑产产业链带来的困扰。

中国通信院发布的《移动数字金融与电子商务反欺诈白皮书》显示,黑产从业人数超过500万,每年涉及金额达到千亿级别。数字金融和电子商务是欺诈行为高发“重灾区”,是形形色色的黑产主要攻击的对象。

平台经济是一种新型的复杂经济现象。《互联网平台治理研究报告(2019年)》指出,特别是那些规模很“大”的超级大型平台企业,甚至已经成为具备准公共产品属性的基础设施。

抖音本身是一个超级短视频平台,核心功能是匹配双边或多边市场。正是其特殊的多边或多边市场结构,决定了平台具备市场参与者和组织者的多重身份,扮演了信息壁垒打破者与重构者的双重角色。

“我们的安全风控能力目前已经接入了上百个业务线中。”抖音安全风控中心的专家张曦盛介绍说,利用风控模型、风控策略,在平台上日均拦截违规行为超过10亿次。

直播大火,盯住假明星做专项打击

帅帅介绍,实际上,抖音从4月份就已经开始针对仿冒名人做专项打击了。不过那时候,抖音团队看到的仿冒名人主要集中在热点名人身上,比如韩红、钟南山等。此时主要的问题是犯明星名誉形象,为此,抖音研发、上线明星人脸识别模型。模型上线之后,回扫查杀的违规假冒账号数量也比较少,最后封禁了不到800个账号。

7月开始,抖音安全中心从后台打击模型的数据上发现,在经过前期的打击之后,仿冒名人账号的数据不降反增。他们分析发现,主要是因为明星直播热潮的出现,以快速涨粉和直播带货变现为目的的电商黑产进来了。

这是黑产的一个特点,什么火黑产就跟什么,哪个平台平台流量大就盯上哪个平台,像候鸟一个样迁移。抖音安全团队2019年打击黑产时,他们主要做刷粉刷量,2020年已经盯上直播。

这种对抗一直在持续,黑灰产不遗余力地对抖音平台进行攻击。

10月份,“假靳东事件”爆发。

在“假靳东”的背后,是黑灰产团队不断绕过平台策略进行攻击,也因此,当“靳东”、“王祖蓝”这样的昵称被专项打击行动拦截之后,开始出现“勒东”、“王阻蓝”一类账号。

9-10月,只是仿冒名人专项中,抖音封禁了超过56000个违规账号。

抖音安全中心专门设立安全风险巡查团队,对色情、低俗、虚假信息、不良导向及其他违法违规内容以及有作弊、欺诈行为的用户进行每日站内巡查和清理。

故事并没有结束,仿冒名人专项打击也没有结束,因为迎来了双十一购物节。在双十一背景下,明星直播带货场次增多,黑产团伙也借此冒充明星客服,进行诈骗。

明星陈赫是抖音里知名的带货主播。一次,陈赫在直播间卖货过程中,抖音安全团队监测到有黑产团伙试图冒充明星陈赫客服账号在直播间进行诈骗。

发现这种情况后,抖音安全中心实时更新模型策略进行对抗,在平台上与黑产团队对抗跟线下常见的扫黄打黑形式不一样。线下打击行动侧重“一次性打击”,把人抓了就完了,即便下次再次进行打击,黄赌毒、黑恶势力的行为特点变化不会太多。

但平台方与黑灰产团伙之间的对抗是长期持续的,黑产团队在网络另一端,很难寻踪踪迹,安全团队要实时制定拦截策略,甚至每时每刻都在研究对方下一步棋要怎么走,相互攻防。

这迫使安全团队要实时在线对抗黑产。

正因为抖音安全团队对仿冒明星客服类黑灰产账号进行实时打击,尤其是在知名明星直播的过程中。这才有了对明星陈赫账号的误伤。事后,抖音安全团队对陈赫直播团队做了解释,也对系统做了优化。

安全团队的功能和作用在用常规使用抖音时难以被察觉到,在涉及平台的公序良俗、实时热点、内容品质格调等方面,他们是前线最敏锐的部队,也是最后一道防线。

1分钟内给60个视频点赞,正常人显然做不到

一条视频想要在抖音上展示出来,第一道关卡是机器审核系统。这里面有机器策略与模型。当视频播放量超过一定阈值后,会进入新的审核环节。

首先是初审,主要判断内容是否有违规风险,视频再次进入机器审核,根据策略和模型判断,进入人工初审环节。

对于超过一定播放量的内容会直接进入人工复审环节。帅帅透露,以此确保内容安全,不给用户带来负面影响。如果视频播放量继续增加,还有三审、四审环节,整个流程准确高效。

抖音平台做内容审核时有一个特色机制叫“背对背审核”。面对同一个视频,安全团队会安排两个审核员同时审查,如果结果一致,该视频会正常出现在抖音平台;如果不一样,该视频进入下一个环节,三、四个审核员同时进行再次审查、判断。

“每一个审核员都是不一样的个体,大家对审核标准的理解或多或少有差异。”帅帅说,为了防止风险遗漏,根据内容的重要性,他们会启动“背对背审核”机制。

内容审核与安全风控像一对双胞胎一样共生共处。抖音安全风控的发展也经历了很多过程和转变。

对抗初期,风控团队试用名单频控策略与黑产对抗。这份名单来自风控团队每次对抗后,对黑产的名单记录,以备下次再遇到时做应对。

而频控指频率防控,“一个人如果1分钟内给60个视频点赞,正常人显然是做不到的,在这个阶段我们对作弊者做了初步的限制。”张曦盛说。

第一阶段相对初级,靠人力资源顶上去,在第二阶段,风控团队制定决策引擎和工具平台,通过平台化工具帮助安全风控人员提高对抗效率。这一阶段也就实现了实施打击压制的效果。

与黑产对抗时,风控团队获取的信息往往不对称,黑产会从各个维度发起攻击,尝试绕过安全防线。单一维度的防御很容易被突破。

在第三阶段,风控团队运营一些技术构建起了一个立体的防御体系,全面识别风险。风控团队处于被动防御和主动出击的过渡阶段。

第四阶段时,风控团队展开安全运营与风控研究工作,主动了解对手是如何攻击抖音安全系统的,内部组建了相应的攻防团队,模拟黑产对业务的攻击,并反复研究黑产作恶路径。

在于黑产对抗过程中,风控团队研发了很多智能风控系统用于反欺诈、色情打击、谣言打击,如今构建了一个比较全面的防御体系,对各个环节的风险进行判断。

用户注册抖音账号时,会有系统识别它是不是批量机器注册,登陆环节检查是否有账号盗用的风险,在电商场景分析账号是否为羊毛党,社区环境中判断账号的头像和昵称有没有内容风险。

这背后是一套模型和策略识别体系做支撑,在抖音安全中心内部叫鲨鱼反欺诈系统。每一个账号注册请求都会有数据输入到该系统,系统根据注册信息打一个风险分数出来。

如果分数风险值较高被判断为机器人注册,该账号会被直接封禁;如果某账号有盗用风险,系统会向手机号码主人发一个验证信息,提醒号码持有人的风险存在。

黑产团队逐步渗透到账号头像、简介等资料信息中,近期出现了一个新型的色情导流形式。黑产团队上传的视频画质正常,没有性感暴露的地方,但语音说了一些色情和淫秽内容。魔高一尺道高一丈,“我们又引入了一种新技术,通过语音转文字的技术进行识别打击。”

这是一项停不下来的工作。

在与黑产对抗过程中,张曦盛发现:“坏人总是相似的,而好人则各有各种各样的不同”,“这是因为灰黑产团伙在作恶的时候追求规模化效益,他们用许多设备自动化操作,很多时候避免不了相似性。”

“正常用户很难有如此高的相似度。”张曦盛说,普通用户肯定会追求各种多样性,而这也是一个生态所追求的多元生态。

THE END
1.上海抖音招聘审核员要求,上海抖音招聘审核员要求高吗大家好,今天小编关注到一个比较有意思的话题,就是关于上海抖音招聘审核员要求的问题,于是小编就整理了2个相关介绍上海抖音招聘审核员要求的解答,让我们一起看看吧。 抖音审核员是做什么的? 抖音审核员主要是审核抖音上的内容,确保其符合抖音的社区准则和法律法规。 http://www.ccaa.net.cn/zp/ec1e820ac34d054d.html
2.Contents/premium.mdatmaster·Newslab2020/Contents·GitHub社交媒体上发言的为什么更多是极端者? 我们能做些什么来改变现状? 608 问答专辑 2022/8/16 如何看待国内社交平台公开IP属地? 如何理解并说服长辈避免通过营销号获取信息? 如何看待《财新》所处的环境? 回复会员通讯604期《互联网必然抖音化?》 607 加拿大网络新闻法:平台向媒体付钱? https://github.com/Newslab2020/Contents/blob/master/premium.md
3.抖音视频审核员?是个坑老百姓的工作,有点骨气的不要去做这个工作,嗟来之食 https://www.zhihu.com/question/278066864/answer/2456763919
4.抖音审核员怎么赚钱?如何做抖音审核员兼职?抖音审核员是指在抖音平台上负责审核和监督内容的人员。他们的职责是确保抖音平台上的内容符合相关规定和标准,以维护平台的秩序和用户体验。以下是关于抖音审核员如何赚钱以及如何做抖音审核员兼职的一些建议: 一,抖音审核员的赚钱方式: 抖音审核员通常是由抖音平台的运营方或相关机构雇佣的全职或兼职员工。他们的https://www.kaitao.cn/article/20230525105841.htm
5.抖音审核员怎么加入?审核员是做什么的?5、系统会为你送上各种测试题,答对后即可进行应聘。 6、选择短视频审核专员的我要应聘。 7、上传简历后等待回复即可。 二、审核员是做什么的 审核员是负责审核抖音短视频内容是否违规;负责处理短视频用户举报;负责短视频内容抽检、复审;完成直属上级交办的其他工作。审核员应具有符合人类公德的良好的思想品质和是非https://www.maijia.com/article/517692
6.抖音审核员怎么申请?抖音审核员怎么做?工资一般多少?抖音审核员在很多招聘平台上都是可以找到的,大家感兴趣的话可以去招聘的平台上面搜索一下,目前的待遇的话,本科学历,双休,五险一金,房补餐补,到手5-6k,适合刚出校门一两年的大学生。 这个工作要求不高。按照规则处理。理论上所有内容都得人工审核。前置机审有效的过滤了大部分恶意内容。部分漏网之鱼的人工过滤。https://www.qqtn.com/article/article_317740_1.html
7.恳请抖音审核员给热爱抖音的我一次解封机会恳请抖音审核员给热爱抖音的我一次解封机会 投诉对象:抖音 投诉问题:服务问题 投诉诉求:申请解封 投诉进度:处理中 投诉详情 我是一名普通的老百姓,抖音使用至今一直遵守抖音社区规则,我跟我老婆还有父母都喜欢抖音这种正能量平台。因2022.10.12号发现被封,查询被封原因是涉嫌传播赌博,发现并不是自己操作。又查询https://tousu.china.com.cn/complain/10027172.html
8.抖音短视频运营笔记(四)第三,图文体,由各种跟你行业相关的图片组成,再加上吸引人的标题,和穿插的图片讲解配音组成。 第四,场景展示体,有一个 IP 人设出镜,内容就是展示自己的产品进程,并且要在里面加入获客动机 抖音企业账号需要养号吗? 怎么养? 在抖音,是没有养号的说法,抖音只认你的内容质量,不看你的注册 https://www.meipian.cn/50bluxaj
9.「抖音视频审核员招聘信息」BOSS直聘为您提供2024年抖音视频审核员信息,BOSS直聘在线开聊约面试,及时反馈,让抖音视频审核员更便捷,找工作就上BOSS直聘!https://www.zhipin.com/zhaopin/4e439dc3876183e21nN82Nm8Eg~~/
10.抖音运营——从工具到后期PR对于想要利用抖音变现的人来说,是很专业的一款工具。 它易学、高效,可以非常好的把视频剪辑拼接,甚至调色、美化音频、添加字幕,帮助您完成高质量的作品。 04 万兴喵影 万兴喵影拥有非常多的音乐、字幕特效包,可以直接把编辑好的视频分享到网站上,对于Pr不是很熟悉的人来https://mp.weixin.qq.com/s?__biz=MzIzMzIxOTc0Mw==&mid=2652691586&idx=1&sn=901fb6a0e88e0810fcc1378c1f22db4d&chksm=f2348807cdbc61bf93fa8d4b283cf72e19feb6413d7207bfd379846ed0126c260420d731ab23&scene=27
11.抖音审核员是做什么的?网友(匿名用户)职场问答官方认证职Q平台账号 https://zq.zhaopin.com/zpdOutputQuestionForXZH/7038068
12.抖音怎么成为审核员抖音审核员申请流程抖音审核员是可以由用户自己来进行申请的,成为审核员后,大家就可以审核抖音中的相关内容了。抖音怎么成为审核员?下面小编就来为大家介绍一下抖音审核员的申请流程。 抖音怎么成为审核员? 1、在抖音安全中心中找到审核员的视频,然后点击评论。 2、点击如图的连接进行申请。 https://app.3dmgame.com/mip/gl/331731.html
13.永川这15家企业招人,找工作的看过来!澎湃号·政务澎湃新闻3.熟悉抖音、快手等新媒体平台的运营,在抖音上有比较成功的作品优先; 4.较强的文字攥写功底,可以独立完成活动或栏目的策划方案; 5.可以熟练使用Adobe Audition Premiere等视频音频编辑软件。 福利待遇: (4K-6K) 周末双休/五险/年终奖/激励奖金/节日、生日福利/不定期团队聚餐/年度旅游等 https://www.thepaper.cn/newsDetail_forward_8515765
14.抖音审核员,什么是抖音审核员,抖音审核员是什么意思抖音审核员是抖音应用的用户内容审核员,他们是第三方的审核机构,负责对用户投稿的内容进行审核,抖音审核员是由多家机构招聘而成,他们基本上熟悉网站运营、互联网内容管理、社会关怀以及其他相关领域的技能与知识,他们的任务是确保用户发表的视频内容及文字符合公司设定https://www.leiue.com/tag/%E6%8A%96%E9%9F%B3%E5%AE%A1%E6%A0%B8%E5%91%98
15.伪装嫖客做卧底,我是抖音“守夜人”界面新闻·JMedia但面对一些比较极端的案例,抖音安全中心会直接评估是否需要立即报警。 “线上封几个号没用,得让这种渣滓现实中接受惩罚才行”,一凡的领导岳文峰当机立断地回复。 几乎是同一时间,审核组的同事,经过筛查帐号的历史视频,根据视频中的一些建筑、广告牌等场景信息,了解到了视频拍摄者的所在地——嫌疑人住在四川的某个https://www.jiemian.com/article/5410623.html
16.如何做抖音审核员挣钱?抖音里拍手势舞的挣钱吗?随着抖音这款短视频应用的普及,越来越多的人开始在抖音上发布自己的短视频作品,并获得了不少关注和粉丝。但是你知道吗?在抖音上还有一种赚钱方式,那就是做抖音审核员,而抖音里拍手势舞也可以成为你赚钱的一个途径。 一、做抖音审核员如何赚钱? https://www.pphouqi.com/archives/47250.html
17.工友们有知道抖音审核员是干嘛的吗,有坑吗换工作中,看到抖音审核员,说是正编,不加班,而且还要本科,工资看着还可以,大家有干过的吗,怎么样啊赞 回应 转发 赞 收藏 只看楼主 天涯踏破梦 2021-10-02 17:29:23 [内容不可见] 赞(21) 回应 从此和猫过吧 2021-10-02 17:46:16 内容审核是一件很消磨人的工作,平台里最低俗最暴力的内容都需要https://www.douban.com/group/topic/244825053/
18.抖音审核员怎么申请这些步骤少不了7.开始工作:完成培训后,你可以正式开始成为抖音审核员的兼职工作。你将收到审核任务,需要根据抖音的审核准则来审核和处理视频内容。 看到这里你是否对于抖音审核员有了大概的了解,以上就是我们申请抖音审核员的全部过程。值得我们注意的是,作为抖音审核员是一件非常严格的工作,必要对于作品要求遵守抖音平台规则,公平https://m.3835.com/douyin/10384.html
19.抖音审核员不通过原因分析2024技术攻略!(超好用)抖音作为一款fengmiquanqiu的短视频平台,每天都有大量的用户上传自己创作的短视频,然而并不是每个视频都能通过抖音审核员的审核。那么,究竟是什么原因导致了抖音审核员不通过呢?本文将从多个方面来解析这个问题,并为您提供2024年的技术攻略,让您的视频轻松通过审核。 https://m.007swz.com/xinxi/ckygrpc.html