简单的Scrapy介绍

scrapy爬虫有3个数据类型: Request类型:向网站提交请求的内容,表示一个HTTP请求,由DownLoader执行 Response类型:表示从网络中爬取内容的封装类 ,由DownLoader生成,由Spider处理 Item类型:spider产生的信息的封装类,表示一个从HTML页面中提取的信息内容,由Spider生成,由Item pipiline处理
相关文章
相关标签/搜索