尝试过网络爬虫的，可能会遇到过反爬虫，这会让我们的爬虫中断无法继续访问网站。这是因为我们的ip原因，如果你一直用同一个ip来访问，访问多了就会被加入到黑名单中。

　　那么，我们可以通过获得ip代理来使用，通过动态ip代理来突破限制。今天，我们来学习一个抓取ip代理的教程。

　　这个爬虫将通过解析免费代理的页面获取代理，之后存储到jdb2中。每个爬虫程序将使用协程的方式同步获取代理。

　　解析页面获取数据，通过观察页面可以发现页面上的数据都是以表格的形式进行排列的，我们使用调试功能查看一下源代码。

　　通过观察页面我们可以通过bs4库提供的功能进行页面数据提取，也可以通过xapth进行页面数据提取，以下代码将通过xapth进行页面数据与提取。

　　虽然免费ip不花钱是很爽，但是大家也要尽量少用免费代理ip地址大全，因为免费的ip安全确实不大过关，而且连接也不够稳定。

　　IP海仅提供中国内IP加速服务，无法跨境联网，用户应遵守《服务条款》内容，严禁用户使用IP海从事任何违法犯罪行为。