3、设置请求头信息和代理IP地址：在发送网络请求之前，需要设置好headers参数（包括User-Agent）以及proxies参数指定要使用的代理服务器地址。可参考以下示例代码：

　　c、不同的网站有不同的反爬策略，header_info可能还需要加很多东西，比如Referer，Cookies等ip代理永久免费。

　　5、使用高效的选择器库例如lxml来解析HTML文档，避免使用基于正则表达式进行匹配的方法。

　　总而言之，在开发爬虫程序时，应该尽可能地采用一些优化技巧和工具以来提高Python 爬虫的速度。