【爬虫入门】抓取糗事百科的段子3.0

在原有基础上,增加写入伪造浏览器的UserAgent fake_user_agent: pip install fake-useragent//这个第三方库,维护了各种主流浏览器的UA标识,并且会定时更新这个库,淘汰一些过期的UA。 首先,在pycharm中安装fake_useragent 然后修改爬虫类的代码 from fake_useragent import UserAgent class
相关文章
相关标签/搜索