多线程爬虫

需求 设计多线程爬虫爬取糗事百科1、用三个线程爬取 10 页页面内容，放入队列2、用三个线程解析队列中的页面内容3、把提取的内容存入 json 文件 多线程示意图 代码实现    import requests from lxml import etree from queue import Queue import threading import json class thread_crawl

>>阅读原文<<