python3爬虫实践之之之搭建开发环境

urllib库，用该模块写一些爬虫文件，实现起来很是方便，但作大型项目的时候，会发现效率不是太好、而且程序的稳定性也不是太好，更适合写爬虫文件，scrapy爬虫框架更适合作爬虫项目 一些第三方库： lxml、Twisted、pywin3二、scrapy lxml是一种能够迅速、灵活地处理 XML。 Twisted是用Python实现的基于事件驱动的网络引擎框架。 pywin32提供win32api

>>阅读原文<<