关于学习python爬虫视频的总结

1.python爬虫的概念 在大数据时代要获取所需信息需要通过编写网站程序，网络爬虫是一种程序，可以抓取网络上的一切数据，比如网站上的图片和文字视频，只要我们能访问的数据都是可以获取到的，python是可以按照规则去进行抓取网站上的所有有价值的信息，并且保存到本地，其实很多爬虫都是使用python开发的。 2.python爬虫的构架 其主要由五个部分组成，分别是调度器、URL管理器、网页下载器、网

>>阅读原文<<