爬虫“学前班”，记住这些不踩坑！

摘要：爬虫就是模拟人的访问操作来获取网页/App数据的一种程序。 爬虫是什么？ 简单的说爬虫就是模拟人的访问操作来获取网页/App数据的一种程序。我们可以把互联网比作一张大网，而爬虫（即网络爬虫）便是再网上爬行的蜘蛛。把网的节点比作一个个网页，爬虫爬到这就相当于访问了该页面，获取了其信息。可以把节点间的连线比作网页与网页之间的链接关系，这样蜘蛛通过一个节点后，可以顺着节点连线继续爬行到达下一个节点

>>阅读原文<<