顶象学院首页>文章详情

B站视频遭大规模侵权!原创网站该如何防范“爬虫”非法抓取信息?

2018-02-22|小象 10879

中国之声《新闻纵横》报道:近期,知名视频弹幕网站哔哩哔哩(bilibili)的不少用户反映,他们的视频、昵称、头像及用户评论等,被某新成立的K视频网站盗用。

undefined

拥有316万粉丝的B站游戏解说up主“敖厂长”的视频被K视频网站盗播;拥有285万粉丝的up主LexBurner,其头像、昵称、视频全部复制到K视频网站,并生成了高仿账号;拥有近80万粉丝的“共青团中央”也成为盗播受害者,其在微博上声明K视频网站上的账号非官方建立。

undefined

B站官方微博发布声明,表示将坚决帮助UP主维权,并附上律师函要求K视频立即停止侵权行为,向所有B站UP主及B站公开赔礼道歉。

律师函称,这是一起性质极为恶劣、规模巨大、情节极为严重的网络侵权事件。

undefined

对此,K视频回应称:发现部分账号确实存在未经原创作者授权,私自搬用其内容,甚至冒用其头像及ID。

B站的视频原来是被网络“爬虫”搬走?

B站视频、评论和up主的信息是如何被K视频网站拿走的呢?

媒体分析,应该是K视频网站利用网络“爬虫”抓取了B站上公开的视频、评论乃至up主的个人主页信息。

undefined

网络“爬虫”,又被称为网页蜘蛛,网络机器人,是按照一定的规则,自动地抓取网络信息的程序或者脚本。

“爬虫”不仅能够爬取视频信息,更可以爬取商品类目、图片、评论、价格、个人信息等关键数据。这些“爬虫”的非法操作不仅消耗了网站和平台的服务和带宽资源,更会导致重要的数据泄露。

“爬虫”抢网站的独有资源,用户和企业都受伤

“爬虫”的非法操作在电商、航空和互联网金融上表现尤为明显。以航空网站的“爬虫”为例。

首先,代理公司利用“爬虫”抓取航空公司官网机票的信息,一旦发现低价和紧俏机票放出,即利用虚假客源身份进行批量预定但不实际支付,以达到“占座”的目的,导致真正旅客几乎无法购买到这些机票。随后,机票代理公司会通过其自身销售渠道找到需要购票的客源,加价后转售给旅客。

undefined

由于航空售票系统允许在账期内反复订、退票,这就给了代理公司的“爬虫”提供了便利。代理公司会在订单失效前再追加虚假身份订单,继续“霸占”该低价票,如此反复,直至找到真正客源售出为止。

顶象技术的“反爬虫”服务

顶象技术的“数据防爬”服务能够有效对抗和防范“爬虫”的非法爬取行为。

顶象 “数据防爬”通过多维数据采集的大数据+模型,能够精准鉴别访问设备的真伪;其基于强大算法技术支撑,提供毫秒级响应,帮助网站和平台做好实时识别业务风险决策;再借助精准人机识别的无感验证,从而有效识别各类网络“爬虫”,防御对敏感信息爬取。

undefined

某航空公司在部署顶象技术的“数据防爬服务”后,有效拦截了大部分“爬虫”的非查询请求,使超过90%的用户正常免受验证码的打扰,超过95%的恶意请求被直接拦截。

顶象技术安全专家表示,防御“爬虫”非法操作不仅需要技术手段,更需要业界自律以及完善的法律法规来约束。

作为互联网业务安全的引领者,2017年5月获数千万的天使投资,今年2月获得数亿元的第二轮投资。

顶象技术拥有领先行业的全景式风控技术和智能终端安全技术,打造了基于实践需求的金融安全大脑及全场景、智能化、可信赖的业务安全体系。其首创的“共享安全”理念已成为新一代安全产品的设计标准。通过全景式业务安全风控系统、无感验证、虚机源码保护、安全SDK等方案和产品,赋予电商、金融、IoT等行业BAT级的业务安全能力,让平台和用户免受薅羊毛、虚假借贷、身份冒用、交易欺诈、账号盗用、恶意爬虫、代码破解等各类风险威胁。

加入社群

扫码进群领
【业务安全】资料礼包

在线咨询
400-878-6123