requests+asyncio实现异步抓取网页

以前写一个抓取某图片网站的图片的Python脚本，以为下载了太慢，就考虑使用多线程实现，下面记录下实现思路。html 使用的是Python包：requests+asyncio+Beautifulsoop。没有使用scrapy，虽然它确实很强大，可是感受仍是有太多的局限，requests虽然不能像scrapy同样可以自动解析，可是和Beatifulsoop一块儿使用，功能仍是能够的。 这个任务是这样

>>阅读原文<<