房天下房源爬取:scrapy-redis分布式爬虫(一)

从前几天就开始准备写一个简单地分布式爬虫的项目了,今天算是把问题和bug逐渐解决了,因此会陆续放上来。html 主机是windows即此电脑,项目也是在windows下写的,运行会放在linux下的ubuntu系统。python 项目是爬取房天下网站全国600多个城市的全部新房和二手房信息mysql 今天主要记录一下windows下项目的完成,和数据库存储。新房存储在MySQL数据库,二手房存储在
相关文章
相关标签/搜索