利用aiohttp制作异步爬虫

简介 asyncio可以实现单线程并发IO操作，是Python中常用的异步处理模块。关于asyncio模块的介绍，笔者会在后续的文章中加以介绍，本文将会讲述一个基于asyncio实现的HTTP框架——aiohttp，它可以帮助我们异步地实现HTTP请求，从而使得我们的程序效率大大提高。 本文将会介绍aiohttp在爬虫中的一个简单应用。 在原来的项目中，我们是利用Python的爬虫框架scrapy

>>阅读原文<<