Python多线程爬取斗图表情包

1、使用技术: Lxml:解析网页 Requests库:获取网页信息 re:替换非法字符 os:处理文件名 Queue:实现安全的多线程 urllib :下载获取的图片 2、设计思路: 这里采用生产者消费者模式来设计多线程,消费者负责解析网页并获得一个网页上全部图片的url,而消费者则负责下载图片到本地即进行IO操做,在这里设计了5个消费者以及五个生产者html 3、Demo: import re
相关文章
相关标签/搜索