python数据爬虫——如何爬取二级页面(三)

前面两篇文章讲了单页面如何爬取,那么我们来试试如何爬取二级页面。 在爬取页面的时候,需要有个良好的习惯,提前对爬取的页面和爬取思路进行一个分析。 目的:爬取携程无忧数据分析师的二级页面,获取每个岗位的要求。 页面的构成:二级页面是点击一级页面跳转的。 解决思路: 1、在一级页面中获取二级页面的链接 2、在二级二面中获取想要的数据。 这里我们会用到BeautifulSoup。 思路有了,那我们开始吧
相关文章
相关标签/搜索