很多做爬虫生意的人发现，他们用的是稳定的代理IP，还控制访问速度和次数。他们还发现爬行有时会遇到各种问题，而你的工作可以不顺利，那么怎么解决代理IP后遇到的问题呢？

1.分布式爬虫。我们在爬行的时候可以使用分布式的方法，这样有一定的几率起到反爬的作用，也可以提高爬行的量。

2.保存cookies。当模拟登录比较麻烦的时候，可以直接在线登录删除cookies保存，然后把cookies当做爬虫处理，但这不是长久之计，cookies可能会暂时失效。

3.多账号防爬。很多网站会通过一个账号出现的频率来判断自己是不是机器人 我们将在固定的时间来访。这种情况下可以测试单个账号的固定时间值，然后在时间临近的时候切换代理IP，这样就可以循环抓取了。

4.验证码问题。爬虫长期使用后经常会遇到验证码问题。这是验证你是不是机器人，不是鉴定你是爬行机器人。第一种解决方案：出现这种情况时，可以在本地下载验证码，手动输入验证码进行验证。这种方法很昂贵，而且它可以 不能完全自动捕捉，所以需要人工干预。第二种方案：可以通过图像识别自动填写验证码，但是目前的验证码大多比较复杂，所以你可以不熟悉图像识别，将无法识别正确的验证码。第三种方案：可以接入自动打码平台，最方便，但是需要购买。

不同的网站有不同的反爬虫方法，一个爬虫策略不会适用于所有的网站。所以需要根据具体情况进行分析，不断测试分析过程，找出网站的反爬虫策略，才能事半功倍。