爬虫的步骤

爬虫的思路:数据库

一、首先要肯定好要爬取的数据是什么。(这点很重要)============>肯定需求网站

二、根据要爬取的数据找到合适的网站。========================>选好目标请求

三、发送请求到对应网站,返回页面或数据  =====================>获取数据数据

四、对返回的内容作处理,将须要的信息提取出来。===============>定位数据文件

五、将提取的数据存储到数据库或本地文件。====================>存储数据

相关文章
相关标签/搜索