Python3 + BeautifulSoup 爬取Steam热销商品数据

这次用了BeautifulSoup库来爬取Steam的热销商品，BeautifulSoup更侧重的是从页面的结构解析， 根据标签元素等来爬取数据，这次遇到两个问题： 1.Steam热销商品列表经常有重复的，所以我建了一个列表，把爬到的数据存进去，每次爬的时候都校验跟列表里有没有重复，有的话就跳过，防止重复爬取。 2.我需要同时遍历两个表，找到了zip()函数解决方案，下面简单介绍一下。 zip()

>>阅读原文<<