scrapy方法间的数据传递(多层传递)

有个爬虫须要读取数据库的url进行循环爬取,同时还要把url做为字段值来标记爬取到的数据归属于哪一个url,须要涉及到爬虫方法间的数据传递,传递方法meta百度一下全都是,可是应用到个人需求的时候出现了不可描述的错误:css def start_requests(self): user_in_sql_list = [] # 这是列表是从数据库读取来的url列表 for res in
相关文章
相关标签/搜索