六月分享主题：爬虫

猪哥最先接触Python语言就是从爬虫开始的，由于当时公司须要开发一个这样的功能：解析用户收到的购票短信，而后分析短信提取有效信息，最后创建闹钟提醒用户。举个例子：小明买了两张晚上12点的电影票打算和女友一块儿去看电影。在收到购票短信后，咱们会使用nlp分词分类，而后再匹配以前爬取到的近期全部上映电影名称，最后提取出电影播放时间、电影名称、影院名称和地点等重要信息，自动设置一个提早的闹钟，这样就避免小明同窗由于睡过头而误了好事。

1、爬虫过期了吗

以前在群里看见有人说：如今不少网站都有了反爬虫技术，因此爬虫没什么好学的了，等这类唱衰爬虫的话。可是在猪哥看来，爬虫是Python最重要的一个应用之一，为何这么说？

1. 世界上没有一个网站，能作到完美地反爬虫
2. 大数据时代爬虫是获取数据的一个重要途径
3. 数据分析、机器学习等也许都会用到爬虫来获取数据样本

2、学习路线

因此说爬虫是做为Python程序员必备的一项技能，那本期猪哥就带你们来一块儿从零开始学习爬虫这项技能。猪哥但愿经过一两个月时间能为你们系统的讲解爬虫，让你们有个全面的认知和学习。

如下是我整理的学习路径，后面的文章会根据这个学习路径来写。

基本的思路就是：爬虫是什么？怎么爬？爬到怎么提取有效信息？如何保存有效信息？有没有封装好的框架？

3、反馈

你们对上面的学习曲线有任何建议或意见均可以直接在下方留言，但愿咱们共同制定一个比较正确完整的路线，毕竟一我的的思想确定是不够完善与正确。

鼓励你们去发现个人错误、提出本身想法，互相帮助，共同进步！

​