现在用户都知道大部分网址都有反爬虫，这也是为了防止爬虫给网站带来负担，影响正常运行。所以，爬虫工作也增大了难度，在写程度的时候就要注意避免网站的反爬虫机制。那么，爬虫怎么提高效率呢？

　　避免反爬虫的发现，就代表要减慢速度，但爬虫都是有任务的，减慢了速度效率自然低。提高效率可以从方面入手：

　　1.高效的代理IP。代理IP相当于分身，一旦受到反爬虫机制被封IP后，就用代理IP换个IP继续抓取。但要注意的事，用了高效的代理IP后，也不能忽略反爬虫，要合理的安排爬虫程序，还可以节约代理IP资源的，否则需要更多成本购买代理，同时还影响效率。

　　2.分布式爬虫。爬虫程序可以分部在多个机器上，每台机器的爬虫都有不同的IP地址，这样可以达到提高抓取效率。

　　有了高效的代理IP和分布式爬虫，就可以提高工作效率了。这里推荐大家可以试试飞猪爬虫代理IP软件，提供了高质量IP，并且分布多个城市，使用更安全。