Ubuntu 16.04后台运行scrapy爬虫程序

某些爬虫程序须要运行很长时间才能将数据爬完，爬取太快呢又会被网站给封禁。你又不想一直开着电脑连续开几天，太麻烦。。。python 其实有个好方法，你能够把爬虫放在阿里云服务器运行，这样你就不须要管了，可是你若是在Ubuntu或阿里云上直接:web scrapy crawl spider_name 或python run.py的话 当你关闭连接阿里云的xshell时，程序会直接停掉不会继续运行。sh

>>阅读原文<<