在线经济的爆炸性增长带来了更加便利的生活,但数字转移的双刃剑效应也不断上演。随着数字化的普及,隐藏在暗处的网络黑产也逐渐扩大规模,打破了市场生态的良性循环,很多企业都在抱怨。
网络黑产以互联网为主要媒介,以互联网技术为主要手段,形式多样,危害互联网、企业乃至社会安全,《2019中国数字金融反诈全景报告》显示,我国黑产从业人员超过200万人,市场规模已达千亿级,如今已渗入线上业务各行各业。
近年来,网络黑产利益链条日益完整,危害性进一步扩大,国家监管部门也采取了严厉的治理手段,公安部网站数据显示,截至2020年底,全国网安部门侦办黑灰产案件共265起,抓获违法犯罪嫌疑人1637名,查获被恶意注册、非法使用的网络账号2.25亿个。即便如此,也只揭开了网络黑产利益链条的冰山一角。
网络黑产明显威胁企业利益,打击网络黑产不仅仅是国家监督部门,企业还要承担主体责任,多方合作对抗网络黑产。黑色产业的规模与数字普及程度有关,平台不断增加的流量是网络黑色产业的最佳养分,么手段解决现状,成为数字企业最重要的生命线之一。
一边增长,一边翻车
在新冠肺炎疫情影响下,传统行业加快拥抱数字化转型大潮,社交、游戏、电商、直播、在线教育等互联网C端业务随着用户需求激增而飞速发展,同时还带动了互联网行业的卖水人SaaS、PaaS等2B行业节节高升。
但在线上经济高歌猛进的同时,翻车事故却层出不穷,其中主要包括两类风险事故:业务风险、内容风险。
疫情期间,大批明星进驻电商直播行业,却因数据造假数度冲上热搜。脱口秀演员李雪琴与知名经纪人杨天真等嘉宾受邀参与的一场双十一3C数码产品直播开发者_运维百科,平台显示共有311万观众。但据相关媒体报道,真实观众实际不到11万。
去年6月,某线上教育软件由于存在低俗视频、教唆早恋内容等突出问题,被北京网信办会同属地教育主管部门约谈和整改,要求完善信息安全制度,加强内容审核,切实履行主体责任。
这些事故暴露出,企业风控体系已经难以满足日益增长的业务需求。随着监管整治力度加大,企业也积极搭建自己的安全防线,不断加强业务、营销、内容风控能力,寻求与专业的在线业务风控商合作,构建更加智能化的风控体系。
看起来很意外,其实
2015年夏天,当时在360名唐会军工作,意外地接到电器行业的朋友的咨询电话,对方说公司的业务受到黑灰产的困扰,希望唐会军能够帮助燃眉之急。当时的双方也没有预料到这个电话提到的风险萌发,不久的将来会成为在线经济不容忽视的问题。
详细调查后,唐会军发现市场上没有帮助顾客全面防御的控制产品,熟悉人工智能的他很快就拉上了其他几个伙伴,在清河附近的民居创立了数美科学技术,共同创业者和CTO梁孔是其中之一。两人认识百度,在搜索推荐、反欺诈、风险控制等大数据应用领域有造诣,数美的其他创业团队成员也在AI、大数据方向上积累了深刻的积累。
数美科学技术的主中心的天网、天网两种产品以SaaS形式为中心,前者是数美结合多年黑产对抗经验制作的业务控制产品,旨在为客户防止市场营销活动欺诈、渠道流量不正当、印刷清单等风险问题,后者是结合人工智能技术制作的内容风险识别产品,为客户提供高效、准确、全面垄断的内容审查过滤,帮助客户识别文本、照片、音频、视频、网页上出现的涉黄、涉政、低俗、色情、导流广告等问题。
如何满足不同行业的需求,梁说明数美为客户提供高标准化的综合解决方案,不同行业的行业形式不同,但实质上是通用的。例如,银行业复盖了在线商业街、在线支付等业务,其业务形式与电气商业各有偏重,但实质相同,其中风险最擅长数美科学技术。遇到这些客户需求,深入研究场景,调整模型和战略参数,可以为客户提供最合适的解决方案。即使在今年疫情的环境下,数美科学技术也能保持高速增长。这离不开他们强大的技术能力和过去的表现,也离不开独特的商业模式和产品形式。
新冠疫病流行期间,大量需求流入在线,互联网2C的应用越来越受欢迎,数美也随着老快速增长需求而增加。另一方面,数美还关注银行、房地产、零售、航空公司等传统行业,将很多在线业务转移到在线,他们也面临着同样的黑产威胁,传统客户群的数字转移也成为数美的发展机会。
只要客户流量不断增,我们就会迅速发展。梁的自信充满了。
如数美前不久与中国工商银行建立了合作关系。作为中国资产规模最大的传统银行机构之一,工行在近几年正加快推进和深化银行金融数字化业务进程,旗下三融平台总客户规模已经超过3亿。双方合作探索更高效、更智能的金融控制解决方案。
不久前,数美科学技术也正式宣布完成1.35亿美元的d回合融资,为技术开发、产品建设、海外开拓和服务优化注入了强大的活力,服务水平和产品能力将上升到新的阶段。
更狡猾的对手
网络的黑色产业链条,逐渐孵化成熟,并向组织化、集团化发展,黑客攻击事件频发,各类窃取信息的行为不断发生,国家层面和个人层面的信息安全面临着新的问题和挑战。中国网络金融协会秘书长陆书春说。
数美也提醒大家,与之交手的黑产不再是单打独斗的个人,而是专业的黑产组织。
梁孔介绍为四层。最下层是情报层,通过爬虫类和其他监视技术发现各种平台活动和脆弱性的资源层,向黑产提供代理IP、设备农场、手机号码、代码平台等资源的上层销售APP注册机、清单机等具体的自动化工具
随着黑产产业链的完整性,攻击技术逐渐提高,预防管理战略也必须逐渐进化。为此,数美科技专门成立了黑产研究院,主动挖掘黑产情报、复现黑产作恶并对黑产底层工具进行深入研究,有的放矢地制定完备的反欺诈策略。
电商营销活动一直是黑产、羊毛党的重点包围目标。例如,2018年星巴克开始了新用户的注册活动,仅仅一天半,就有40万人的虚假注册获得了大量优惠券,损失了近千万元。
数美科学技术也有很多电器商品的顾客在市场营销上吃过亏。数美以前的电气商务平台客户案例发生在iPhone6S刚上市的时候,当时的很多黑产只要在这个平台上投稿或者私人信件1800,新的iPhone6s就会带回家。很多消费者一眼就能看穿这个简单的诈骗,但是接触网络不久的人就会被道路欺骗,发现上当受骗后,误以为是电器商品平台的销售欺诈,损害了平台的声誉。
在意识到问题后,该电子商务平台也立即采取措施施设立了专业的人才审查组,但效果很小,直到他们开始使用数美的天网为止。数美识别了高风险的黑产账户,不仅发现了所有的欺诈广告,还实时切断了。
孔的另一个印象深刻的案例发生在2018年。彼时电商间的流量之战愈发激烈,社交裂变成为拉新、促活的有效方式。数美的某个客户采用的就是拉新补贴优惠券方式。
第一次见面交流时,该客户告诉他们,目前,他们已经识别出新用户的黑产比例在10%以上。因此,梁提出,首先连接数美的系统,实验2周看情况。
系统上线的第一天,梁堃盯着后台跳动的数据,当时就被吓坏了天网拒绝了92%的新用户。梁说,他当时的第一个想法是怀疑哪个战略和模型有问题。
他立即将情况与客户同步,客户呼叫紧张地访问被拒绝的用户,结果全部无法连接,这表明在这个社交分裂的市场营销活动中,巨额补助金只有不到8%落入了真正的用户手中。
由于利润丰富和监督不足,电商玫瑰羊毛行为非常泛滥。数美在帮助电器商品的顾客对抗黑产的过程中,发现电器商品营销活动的补助金大量被黑产剥夺,没有人工智能控制的营销活动,就像孩子有过繁华街一样。
目前大多数平台已经开始自主或者联合风控技术供应商加强风控。数美科学技术的天网产品,除了构筑全栈式风力控制系统,打击专业的黑产外,还具有积分墙识别功能,防止业馀羊毛党。
梁孔表示,积分墙是由黑产驱动的真正用户,接受黑产任务,完成后可以得到相应的费用。一般的风控策略只是简单地判黑判白,对黑产账户采取封号、限制提现和优惠等措施,白户则可以享受一切正常的优惠。
过去的风控策略下,积分墙属于白户,但实质上对平台几乎没有任何价值。数美可以正确标记积分墙帐户标签,为客户提供更细致的处理方案,在控制数据虚假、市场欺诈方面起着很大的作用。
300多个标签,帮助顾客精细化运营
除了业务风险,内容风险是在线经济不容忽视的另一个主要风险。内容风险监测作为新课题,技术挑战非常高,管理难点主要缺乏成熟方案和标准,特别是新兴的直播行业,播音员行为、直播内容无法控制,高并发处理、实时应对等。
早期现场直播的恶性违反集中在色情低俗和敏感人物肖像两个方面,但到今天为止,这仍然是各种现场直播的重大灾区。
以智能鉴黄为例,市面上的解决方案其实大同小异,可分为明确分类标准、收集样本、样本打标、模型训练等几个步骤。其中,明确分类标准是第一步,是最重要的一步。与同类产品相比,数美科学技术的净化特别之处在于拥有多维合计超过300个违规标签,是数美2020年精细化运营的重要成果。
精细化运营,不仅指不断丰富标签体系,比如在色情低俗大类下进一步细分出诸如露肩、粗口等细化标签,还指为不同用户在不同场景提供个性化的多尺度选择,比如秀场直播和教育直播对于露肩的接受度就截然不同。
值得注意的是,数美标签成为客户训练审查队的标准。
在此之前,在线内容生产行业缺乏统一的内容审查标准,在数美科学技术这个明确的标签出生之前,只有色情数美进行了60多个不同的分类,审查员的训练、学习有统一、确定的审查标准。
每次标签升级的背景是数美科技多团队合作的结果。梁介绍说,从一个客户的需求到抽象标签,至少经过四个重要步骤。
首先,产品团队判断现有标签是否能满足客户的需求,如果不能,就开始考虑新标签应用的普遍性。第二,生成新标签,准确定义标签,收集样品,准备算法等。第三,产品团队的思考和标签的使用手册,战略团队准备相应的配置战略,将用法和战略结合起来。第四,在线标签,在客户场景中使用。
梁孔记得,曾经服务过的客户新上线了面向高端用户群的直播业务,因为直播流量多,所以安排了4500人的外包团队进行审查。之后,天网系统提高了审查效率,没想到一天之内,天网有数百个节帧、十几个流程违反的嫌疑,有色情低俗等违反内容。
在用户量和直播流巨大的情况下,即使有四五百人审核团队,也只能照顾到一些头部主播和头部视频流,而真正的风险其实藏在腰部、尾部区域。梁孔表示。
最后,梁分享了一个小故事。2020年春节期间,一位顾客打算开展市场营销活动,但是直到活动前几个小时,他们才想起告诉数美,在微信群中询问能否开放qps(每秒查询率)的限制。因为一般进行活动,流量势必大幅增长,会将数据的吞吐量拉到极高的位置。
数美团队很快扩大了集团,仅仅2小时就开放了qps,完全支持了活动的正常召开。对于每个问题,我们都有严格的解决时间要求,2小时是解决问题的时间,响应时间在5分钟以内。 梁堃骄傲地说。
强大的技术和产品快速反复能力,顾客第一的服务精神,也许这是数美科学技术5年间累计服务数千家顾客,被顾客称赞为同一壕沟战友的理由,也是他们进入业界前列的秘诀。
以上文章来源于36Kr
精彩评论