爬虫中进行数据清洗

通常而言，存入数据库中的数据都要进行清洗，可是在解析页面中对数据清洗比较麻烦并且杂乱，对于这种状况scrapy中的scrapy.loader能够很好的解决。 如下是一段数据清洗的代码 首先是解析页面：css import scrapy from scrapy import Request from scrpy_item.items import CountryItem,CountryItemLoa

>>阅读原文<<