Python3爬虫视频学习教程

下面是转发博客内容，挺有用的

你们好哈，如今呢静觅博客已经两年多啦，可能你们过来更多看到的是爬虫方面的博文，首先很是感谢你们的支持，但愿个人博文对你们有帮助！

以前我写了一些Python爬虫方面的文章，Python爬虫学习系列教程，涉及到了基础和进阶的一些内容，当时更多用到的是Urllib还有正则，后来又陆续增长了一些文章，在学习过程当中慢慢积累慢慢成型了一套算不上教程的教程，后来有愈来愈多的小伙伴学习和支持我感到很是开心，再次感谢你们！

不过其实这些教程总的来讲有一些问题：

1. 当时用的Python2写的，刚写的时候Scrapy这个框架也没有支持Python3，一些Python3爬虫库也不怎么成熟，因此当时选择了Python2。但到如今，Python3发展迅速，爬虫库也愈来愈成熟，并且Python2在不久的未来就会中止维护了，因此慢慢地，个人语言重心也慢慢转向了Python3，我也相信Python3会成为主流。因此说以前的一套课程算是有点过期了，相信你们确定还在寻找Python3的一些教程。

2. 当时学习的时候主要用的urllib，正则，因此这些文章的较大篇幅也都是urllib和正则的一些东西，后来的一些高级库都是在后面慢慢加的，并且一些高级的框架用法也没有作深刻讲解，因此感受整个内容有点头重脚轻，安排不合理。并且如今分布式愈来愈火，那么分布式爬虫的应用相必也是愈来愈普遍，以前的课程也没有作系统讲解。

3. 在介绍一些操做的时候可能介绍不全面，环境的配置也没有兼顾各个平台，因此可能有些小伙伴摸不着头脑，可能卡在某一步不知道接下来是怎么作的了。

那么综合上面的问题呢，最近我花了前先后后将近一个月的时间录制了一套新的Pyhthon3爬虫视频教程，将我以前作爬虫的一些经验从新梳理和整合，利用Python3编写，从环境配置、基础库讲解到案例实战、框架使用，最后再到分布式爬虫进行了比较系统的讲解。

课程内容是这个样子的：

1、环境篇

• Python3+Pip环境配置
• MongoDB环境配置
• Redis环境配置
• MySQL环境配置
• Python多版本共存配置
• Python爬虫经常使用库的安装

2、基础篇

• 爬虫基本原理
• Urllib库基本使用
• Requests库基本使用
• 正则表达式基础
• BeautifulSoup详解
• PyQuery详解
• Selenium详解

3、实战篇

• 使用Requests+正则表达式爬取猫眼电影
• 分析Ajax请求并抓取今日头条街拍美图
• 使用Selenium模拟浏览器抓取淘宝商品美食信息
• 使用Redis+Flask维护动态代理池
• 使用代理处理反爬抓取微信文章
• 使用Redis+Flask维护动态Cookies池

4、框架篇 

• PySpider框架基本使用及抓取TripAdvisor实战
• PySpider架构概述及用法详解
• Scrapy框架的安装
• Scrapy框架基本使用
• Scrapy命令行详解
• Scrapy中选择器的用法
• Scrapy中Spiders的用法
• Scrapy中Item Pipeline的用法
• Scrapy中Download Middleware的用法
• Scrapy爬取知乎用户信息实战
• Scrapy+Cookies池抓取新浪微博
• Scrapy+Tushare爬取微博股票数据

5、分布式篇

• Scrapy分布式原理及Scrapy-Redis源码解析
• Scrapy分布式架构搭建抓取知乎
• Scrapy分布式的部署详解

整个课程是从小白起点的，从环境配置和基础开始讲起，环境安装部分三大平台都有介绍，实战的部分我是一边写一边讲解，还有一些分布式爬虫的搭建流程也作了介绍。

不过这个课程是收费的，其实里面也包含了我学习爬虫以来的经验和汗水，我在作讲解的时候也会把我学习爬虫的一些思路和想法讲解出来，避免你们走一些弯路，但愿你们能够支持一下！

不过在这里有免费的视频，是属于整个课程的一部分，你们能够直接观看

Python3爬虫三大案例实战分享

整套视频课程放在天善智能这边了，你们若是感兴趣的话能够直接在这里购买，499元。

课程连接以下：

本身动手，丰衣足食！Python3网络爬虫实战案例

http://www.gg4493.cn/