爬虫基础入门（一）

爬虫的作用 1.数据采集 抓取微博评论（机器学习舆情监控） 抓取招聘网站的招聘信息（数据分析，挖掘） 新浪滚动新闻 百度新闻网站 2.软件测试 爬虫之自动化测试 虫师 3.12306抢票 4.网站上的投票 5.网络安全 短信轰炸 web漏洞扫描 爬虫分类 根据被爬取的数量不同，分类： 通用爬虫：通常指搜索引擎的爬虫 聚焦爬虫：针对特定网站的爬虫 根据是否获取数据为目的，分类： 功能性爬虫，比如，投

>>阅读原文<<