在做网络爬虫时，一般需要代理IP的需求比较大。由于在爬取网站信息的过程中，许多网站都做了反爬虫策略，可能每一个IP都做了频率控制。所以我们需要大量的代理IP来爬取网站。

通过以下途径可以获得代理IP：

来自免费网站，质量很差，可以使用的IP很少。

付费买代理服务，品质极高。

自建代理服务器，稳定，但是需要服务器的大量资源。

在代理IP池进行检查判断之前，通过爬虫预先从多个免费网站获取代理IP后，可以判断IP是否可用，然后将可用的IP存储在MongoDB中，最后将页面展示在前端。

如果大家想测试使用下，可以尝试品易HTTPhttp代理ip，免费测试包含各种类ip资源，无限调用IP量，希望对大家有所帮助！