上次带大家了解了什么是爬虫，今天来讲讲爬虫中的反爬，有时候你的网站经常会被外面的爬虫程序骚扰，弹一些莫名其妙的广告，学会py买球股份有限公司thon反爬，教你轻轻松松解决这些问题。

　　反爬可以说它简单，也可以把它想的很复杂，针对不同的网站，它的网站结构就会有所不同，所以它的反爬措施也会不一样，常见的反爬有User-Agent、ip代理、cookie认证,js加密等等，所以需要保护的数据也会不一样，如果你在一个网上购物，那么你的个人信息就比较重要了，不然信息就会被窃取。

　　如果你仔细观察你会发现有一些网站的信息，在你浏览的时候是正常的，当你用 Python 爬取下来就会以乱码的形式显示，利用键盘上的F12使用开发者模式查看网页源代码也是乱码，这种一般是网站设置了字体反爬。

　　它是一种比较常见的反爬方式，因为很多网站的文字信息是比较重要的，像是前面提到的网上购物的个人信息等数据，非常重要，网站维护者当然会把这种数据进行反爬处理，只要好好分析，还是能够抓取到目标数据。

　　cookie验证，cookie是一个保存在浏览器里面特殊文件，它不会随着浏览器的关闭而消失掉，而是有一个时间限制会自动的删除。而这个反爬技术的原理就是在爬虫第一次访问网站的时候就去生成一个唯一的cookie值，当爬虫第三次访问，如果cookie值是不存在的话就表示是爬虫在工作。因为爬虫是模拟正常访问，但是ip地址不会跟着变。

　　以上简单的介绍了什么是Python反爬虫技术及两种常用的反爬虫技术方法，想要了解更多可继续关注哦。

　　【原创声明】凡注明“来源：优草派”的文章，系本站原创，任何单位或个人未经本站书面授权不得转载、链接、转贴或以其他方式复制发表。否则，本站将依法追究其法律责任。

　　Python发送http请求怎么做？Python发送http请求的方法是什么

　　Python怎么搭建scrapy框架项目？Python如何使用scrapy框架创建爬虫

　　Python如何利用Scrapy抓取网页？Python怎么用Scrapy框架爬取网页数据