教你学Python21-带你写第一个爬虫,爬取豆瓣连接

    通过上一个章节的讲解，我们已经了解到了开发一个爬虫需要做的工作以及一些常见的问题，下面我们给出一个爬虫开发相关技术的清单以及这些技术涉及到的标准库和第三方库，稍后我们会一一介绍这些内容。   下载数据 - urllib / requests / aiohttp。 解析数据 - re / lxml / beautifulsoup4 / pyquery。 缓存和持久化 - pymysql /

>>阅读原文<<