爬虫实习小结

这两天找了个实习，名义是python工程师，其实就是写爬虫+整合到django。实习很奇葩，还有试用期的，如今试用期过了等后续安排，正好整理下这几天写爬虫的一些心得体会。html 首先，感受写爬虫真的是个经验活，通常的网站说白了就是不停往request里试参数。直接爬不行加headers=试试，看有提交的表单就加个data=试试。这里要区分下的是POST方法对应的是Form Data，能够经过re

>>阅读原文<<