5 爬虫 异步协程 梨视频

# 如何提高requests模块爬取数据的效率? - 多进程或多线程(不建议) 太耗费资源 - 线程池或进程池(适当使用) - 单线程 + 异步协程(推荐) # 线程池使用案例 # 梨视频 下载做业 import random from lxml import etree from multiprocessing.dummy import Pool # 线程 import requests

>>阅读原文<<