通用爬虫：通用爬虫是搜索引擎（Baidu、Google、Yahoo等）“抓取系统”的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。 简单来讲就是尽可能的；把互联网上的所有的网页下载下来，放到本地服务器里形成备分，在对这些网页做相关处理(提取关键字、去掉广告)，最后提供一个用户检索接口。

　　聚焦爬虫：聚焦爬虫是根据指定的需求抓取网络上指定的数据。例如：获取豆瓣上电影的名称和影评，而不是获取整张页面中所有的数据值。

　　增量式爬虫：增量式是用来检测网站数据更新的情况，且可以将网站更新的数据进行爬取（后期会有章节单独对其展开详细的讲解）。

　　大家平时连接互联网的时候，都会分配到一个IP地址，每个人的IP地址都是唯一的，但是也可以通过使用IP代理的方式改变自己的IP地址，那么IP代理是什么呢？

　　你可以将IP代理当成是一个中转站，你在访问互联网的时候，先让你的设备连接上IP代理，再通过IP代理这个中转站提供的IP地址上网，以此实现匿名的目的。

　　首先就是前面提到的匿名性，你通过IP代理上网，服务提供商就无法知道你真实的IP地址；使用IP代理还可以突破服务商的封锁，比如一家网站将你的IP地址拉入了黑名单，你就无法直接访问这家网站，但是通过IP代理商提供的IP地址，目标网站的IP黑名单就无法对你起作用了； IP代理的好处多多直连ip代理ip，对有这方面需求的网民带来了诸多生活上的便利。

　　因为你每次上网都必须通过IP代理商这个中转站，因此你的网速可能会变得更慢，尤其是网上的那些免费代理，速度慢得让人抓狂，而且时不时的失去连接，因为用的人实在是太多了，不过付费的IP代理相对来说网速要快上许多，而且更加的稳定，比如快代理，可以选择数万个IP地址，用起来更加方便与省心。

　　同时用户可以在个人中心实时监控IP使用情况（IP使用统计、并发、带宽、报错分析等等），以此保证业务稳定。