我们在分析网站的时候，往往需要做一个爬虫这样的程序来抓取海外的数据，爬虫一开始运行的时候，往往可以正常的抓取对方网站的数据，但是一些网站为了不被抓取数据会建立反爬虫机制，导致爬虫抓取数据的时候会被禁止，导致数据采集失败；当然网站又是如何识别出来的呢，往往是通过相同ip这样的特点来阻止爬虫抓取网站的数据；出现这种情况的时候，我们可以使用代理IP来隐藏自身IP，通过不断变换ip地址，从而不被反爬系统检测到，从而能够大量抓取网站数据。
同时，动态ip能够让爬虫更加快速的抓取网站数据
关于ip代理商，这边建议选择动态ip做的比较好的ip代理商，关于收费，ip代理商一般都是按流量收费，这边介绍几个比较常见的海外ip代理商关于动态ip的一些对比，IPidea和Smartproxy
关于费用相关对比
IPidea
Smartproxy
关于流量池及连通率
IPidea：覆盖全球两百多个国家及地区，超过9000万个ip地址，成功率超过95%
Smartproxy: 覆盖全球190多个国家地区，超过5000万个ip流量池，成功率超过99%
授权方式都列入白名单