众所周知，爬虫使用代理IP可以大大提高爬行效率，那么如果爬虫不使用代理IP，不是不可能吗？当然不是。没有人强迫你使用代理IP来帮助爬虫完成任务。但是我们也知道代理IP对爬虫很重要，所以我们可以决定是否使用代理IP。

 

在手头工作量不太大的时候，比如收集一些文章和图片，这样的小任务不用代理IP也能解决，一天爬取的量足够用了。

 

但是当工作量很大的时候，面对庞大的数据库，爬虫是不可能一点点爬行的，根本不可能收集到所有的数据信息。如果加速抓取，目标服务器承受不了压力，就会封掉IP；因为服务器一般不欢迎桀骜不驯的特殊用户，会使用各种反爬手段来发现和禁止。在这种情况下，不可能使用代理IP。

 

代理IP对于爬虫来说不是必须的，但是使用代理IP绝对没有坏处，使用起来也很方便。在爬行过程中，我们需要应对反爬行战术，了解代理IP，我们可以更好的突破限制，继续高效的抓取爬虫。