Python 中因urllib2/urlib遭遇的进程阻塞问题

2019独角兽企业重金招聘Python工程师标准>>>      最近的项目开发中，Gearman中的worker使用Python中的urllib/urllib2库大量抓取网页时，总会出现某个Worker阻塞，偶尔一旦发生worker都被阻塞，就会造成任务大量丢失，为检查原因所在，为什么任务出现中断，就写个脚本，利用strace命令，查看所有woker的快照，发现最终被阻塞在recv函数中，然后程

>>阅读原文<<