ajax动态抓取今日头条街拍美图

1、分析网站源码。 网站是局部动态变化，offset变化加载内容，变化范围为0，20，40··· 首先要获取索引页代码数据，定义索引页，由于是ajax请求，offset根据索引变化0、20、40···，用requests获取网页代码，urlcode将字典转换为url请求参数，然后异常处理，根据url_code状态码判断请求是否成功，返回文本格式，最后定义main函数调用。可根据可变参数’offse

>>阅读原文<<