使用scrapy抓取sinanew网站

平时搞爬虫都是自己写函数,写了很长时间,突然听到朋友说,框架很好用,可以来尝试尝试,所以就来了解了解scrapy,但是接触之后,并没有感觉到框架好用,可能是自己使用框架经验还不足吧,也研究了好多天,下边把我的经验跟大家分享一下,有错误的话,欢迎指正! 1,这次抓取的网站是http://news.sina.com.cn/guide/,网上也有这个网站的抓取案例,因为忘了链接,就不附上了 首先创建项目
相关文章
相关标签/搜索