随着互联网发展，爬虫数据愈来愈关键，在爬取过程中，遇到最多的状况就是ip被封禁。正在爬取就ip浏览受限了不能够继续爬，又或者是不断的提示验证码输入，总之就是无法继续爬取了。那是因为当前网站的反爬虫机制（详见文章“爬虫抓取之反爬虫机制”）的作用，为什么要这么做呢？一是由于网站负载过大，无法承受采集信息的频率，二是不希望劳动成果随意被分享。

　　如果持续使用同一ip去抓取同一网站数据，无需多久就能察觉到无法抓取任何信息。使用过爬虫工作的人一定都碰到过不少类似的情况，不过有一个省时省力的办法，就是使用代理ip。代理ip的获得途径对于码农来说，直接写个爬虫网上免费代理ip的小程序都是小意思，但是一般不建议使用免费代理ip，一是免费代理可用率特别低，影响工作效率，并且使用人数太多，不可避免是否爬过同一网站的可能；二是免费代理速度非常慢且不稳定，也许还没爬完就失效了，十分影响工作效率。

　　免费的效果不理想，可以自己搭建代理池，弊端是运营成本比较大，需要投入大量的金钱和时间，作为爬虫工作者来说，应该是专注于爬虫工作，而不是花费大量的精力去维护服务器。

　　建议使用飞猪爬虫代理IP，提供高效稳定的代理ip服务，爬虫工作者只需要专心工作，无需担忧ip质量！