当前位置:首页 > 经验 >

爬虫数据抓取犯法吗(爬虫爬取vip视频违法吗)

来源:原点资讯(m.360kss.com)时间:2022-11-08 14:41:47作者:YD166手机阅读>>

近几年来,因为开发者使用爬虫技术锒铛入狱的案例越来越多。

2015年,某公司授意五名程序员,利用网络爬虫获取一公司服务器的公交车行驶信息、到站信息等数据。这五名程序员需承担连带责任。

2019年,某公司主管人员张某、宋某、侯某和郭某,利用爬虫技术,非法爬取北京字节跳动服务器存储中的视频数据,被告人依法被判处有期徒刑9-10个月,并处罚金。

爬虫数据抓取犯法吗,爬虫爬取vip视频违法吗(1)

越来越多的案件,让开发者越发不安,爬虫也违法?公司要让我爬取数据,爬是不爬?爬吧?违法,不爬吧,也不好。

不仅仅是开发者,公司使用爬虫技术,也存在很多风险。

2012年,360搜索爬取百度旗下等多个网站内容,最终被裁定赔偿百度70万元;

2017年,秀淘非法抓取今日头条内容,被告被判九个月至一年不等的有期徒刑,并处罚金。

公司使用爬虫技术,怎么规避风险?也成了一个大难题。

爬虫数据抓取犯法吗,爬虫爬取vip视频违法吗(2)

仔细研究爬虫相关案例,我们不难总结出,如何合法的使用爬虫技术,规避风险。

遵守Robots协议

Robots是网站和爬虫之间的君子协议,当网站拒绝爬虫访问,爬取数据时,可以在根目录下存放robots.txt文件,告诉爬虫不能爬取网站全部或部分指定内容。

爬虫数据抓取犯法吗,爬虫爬取vip视频违法吗(3)

只要Robots中的内容,爬虫都不允许访问。360搜索爬取百度内容一案中,就是因为360违反Robots协议,最终才判赔70万元。

但是,网站没有该协议,不意味着能随意爬取数据,也有可能违法。

爬虫行为

开发者使用爬虫技术,如果请求频率过高,接近DDoS攻击的频率,一旦造成目标服务器瘫痪,这个就不是爬虫行为,而是黑客行为,必定要承担相应的责任。

反爬措施

如果目标网站已使用BotGuard爬虫管理等云产品,来控制和管理爬虫,或者使用了一些措施反爬,或者正常用户不能到达的页面。如果开发者强行突破以上这些措施,同样会被界定为黑客行为。

爬取内容

爬取的内容是一条高压线,绝对不能触碰。包括但不限于:

1.爬取用户信息谋利

2018年,新三板挂牌公司北京瑞智华胜科技股份有限公司,使用爬虫非法窃取用户个人信息30亿条,该公司及其关联公司6名犯罪嫌疑人被控制。

用户个人信息属于敏感信息,近几年打击力度越来越大,严禁使用爬虫爬取这些信息。

2.爬取商业数据

2018年,武汉元光科技有限公司法定代表人授意四名员工,非法爬取竞争对手数据,被判赔50万元。

很多公司为了获得竞争优势,会使用爬虫技术,爬取竞争对手的内容,但这一手段会构成不正当竞争。

3.爬取知识产权数据

爬取大量带有知识产权的数据,并且用于商业目的,属于违法行为。

不难看出,爬虫技术本身并不违法,关键在于使用的方式和目的。最后总结一下,爬虫爬数据有几个雷区,一是只能爬取公开数据,二是不能对目标业务和网站造成影响,三是目标网站的全部或部分内容没有使用反爬措施。

栏目热文

爬虫工具可以干什么(个人能使用爬虫工具吗)

爬虫工具可以干什么(个人能使用爬虫工具吗)

随着大数据时代的来临,以及互联网技术的飞速发展,在企业的日常经营管理中,数据无处不在,各类数据的汇总、整合、分析、研究对...

2022-11-08 15:14:13查看全文 >>

爬虫技术是什么(爬虫技术违法吗)

爬虫技术是什么(爬虫技术违法吗)

“放下你手里的代码,小心被抓。”最近程序员圈子不乏这样的戏谑调侃。原因是最近发生的多起涉及爬虫技术的公司被司法部门调查。...

2022-11-08 14:30:37查看全文 >>

爬虫技术的基础是什么(爬虫技术到底指什么)

爬虫技术的基础是什么(爬虫技术到底指什么)

随着互联网信息的“爆炸”,网络爬虫渐渐为人们所熟知,并被应用到了社会生活的众多领域。作为一种自动采集网页数据的技术,很多...

2022-11-08 14:46:39查看全文 >>

网络爬虫的基本步骤(网络爬虫新手入门教程)

网络爬虫的基本步骤(网络爬虫新手入门教程)

你有网络抓取技能,或者你想知道拥有这种技能的前景吗?那么现在就进来,发现你可以通过网络抓取赚钱的最佳方法。在世界各地的许...

2022-11-08 14:34:39查看全文 >>

爬虫技术有什么规定(为什么爬虫技术可以学但是别乱用)

爬虫技术有什么规定(为什么爬虫技术可以学但是别乱用)

◆尽管技术无好坏,但运用技术的行为有善恶之分,需准确认定行为人的主观故意,这就要结合具体事实综合认定。◆网络服务器的承载...

2022-11-08 15:14:35查看全文 >>

鸡爪不能和什么一起吃(鸡爪不能和什么同食)

鸡爪不能和什么一起吃(鸡爪不能和什么同食)

来源:工人日报广东海警局10月6日通报,近日,该局连续查获4起涉嫌走私冻品案件,查扣涉案“三无”船舶4艘,冻品约94吨,...

2022-11-08 15:15:30查看全文 >>

生鸡爪怎么做好吃又简单(已经熟的鸡爪怎么做好吃)

生鸡爪怎么做好吃又简单(已经熟的鸡爪怎么做好吃)

一酱在手,美味尽收By 嘿嘿辣妈用料生鸡爪 若干生姜 适量盐 适量鸡精 适量酱油 适量八角花椒 适量料酒 2小勺做法步骤...

2022-11-08 15:18:13查看全文 >>

生鸡爪做法大全(鸡爪十种做法大全)

生鸡爪做法大全(鸡爪十种做法大全)

酸酸甜甜有点辣是孩子们最喜欢的味道。调好汤汁泡上一盆凤爪,开胃!解腻!By 爱宝家的厨房用料生鸡爪 1000克酸甜泡椒(...

2022-11-08 15:11:53查看全文 >>

已经熟的鸡爪怎么做好吃(生鸡爪怎么做好吃又简单)

已经熟的鸡爪怎么做好吃(生鸡爪怎么做好吃又简单)

By 『心如止水』用料鸡爪 葱 姜 蒜 洋葱 辣椒 柠檬 香菜 生抽 老抽 耗油 白醋 麻辣油 纯净水 食用盐 白芝麻 ...

2022-11-08 15:10:40查看全文 >>

吃鸡爪子有什么好处(鸡爪子的好处与坏处)

吃鸡爪子有什么好处(鸡爪子的好处与坏处)

鸡爪是经常出现在我们餐桌上的一种食物,他对我们的身体健康好处非常多,那么鸡爪有哪些营养价值及功效呢?下面就让小编为大家介...

2022-11-08 15:02:13查看全文 >>

文档排行