给你们推荐几个适合新入门学习Python爬虫的网页,总有一款适合你!python
话很少说,直接干货了!json
打开今日头条主页,搜索小姐姐,或者其余你感兴趣的内容,而后点击图集python爬虫
动态加载的json数据就出来了,没有反爬,注意的是,若是不想去内容里面抓图片的话,能够只抓缩略图,就是这个页面显示的图片,它在json数据中的image_list中,注意,将url中的list换成origin,就是大图哦!代码以下学习
全部的图片地址都出来了!网站
直接搜索全书网,打开主页,随便找一篇小说,好比《盗墓笔记》,点击后跳转到网页,在点击开始阅读,出现了全部章节,在进入章节就出现了小说内容,网页内容和代码以下:url
80电子书网和上面的全书网比较相似,可是它自己提供有下载功能,能够直接用小说Id和名字直接构建下载文件,页面截图和代码:spa
相似的网站还有:妹子图网、美桌网、笔趣阁、久久等等甚至百度图片也能够用抓包获取数据的!3d
以上代码都是随手写的,没有排版,你们有兴趣能够本身排下版,或者好比小说网站,能够先抓取大类别,而后在每个类别中获取全部小说,最后在把全部小说的内容抓出来,这样就是全站爬虫了!!!blog
若是你们还有什么适合的网站,但愿能在评论区里共享下哦!你们一块儿交流下!图片