HttpWebRequest的GetResponse或GetRequestStream偶尔超时 + 总结各类超时死掉的可能和相应的解决办法

 

 

【问题】

用C#模拟网页登录，其中去请求几个页面，会发起对应的http的请求request，其中keepAlive设置为true，提交请求后，而后会有对应的response：

resp = (HttpWebResponse)req.GetResponse();

以前的屡次调试，一直都是能够正常得到对应的response，而后读取html页面的。

可是后来几回的调试，在没有改变代码的前提下，结果GetResponse却始终会超时死掉。

 

【解决过程】

1.默认request的timeout是1000000毫秒=100秒，都会超时，手动改成10秒，所以就更容易超时了，没法解决问题。

2.将http的request的keepAlive设置为false，问题依旧。

3.去谷歌找资料：https://www.google.com/search?q=HttpWebRequest%E8%B6%85%E6%97%B6&oq=HttpWebRequest%E8%B6%85%E6%97%B6&gs_l=serp.3..30i10.4020.6251.0.6485.18.11.3.0.0.0.328.1364.0j1j3j1.5.0....0...1c.1j4.64.serp..12.6.772...0j0i13.FSdXWvba01k

去把前面共4次的httprequest，每次都增长对应的：

resp = null; 
if (resp != null) 
{ 
    resp.Close(); 
} 
if (req != null) 
{ 
    req.Abort(); 
}

结果仍是没解决问题。

4. 一样参考：http://www.cnblogs.com/robot/archive/2009/06/10/1500085.html

去尝试关于DefaultConnectionLimit的设置，改成为10：

System.Net.ServicePointManager.DefaultConnectionLimit = 10;　

问题依旧。

5.又去测试了下，关于response.Close()

也是没解决问题。

6. 最后无心间，索性不抱但愿的，再次DefaultConnectionLimit设置为更大的值50：

System.Net.ServicePointManager.DefaultConnectionLimit = 50;

试了试，结果就解决超时的问题了。

而后才搞懂缘由。

以前默认设置为2，后来改成10，都没有解决问题的缘由在于，当前有不少个http的链接，没有被关闭掉，

而这些keepalive的链接，都是

因为代码中，对于前面多个request。其都是keepalive为true，以及多个response也没有close，

而以前调试了不少次了，因此，此时已经存在了不少个alive的http链接了，已经超过了10个了，因此前面设置了DefaultConnectionLimit 为10，也仍是没用的。

而改成50，才够用。

【总结】

此处GetResponse超过的缘由是，当前存在太多数目的alive的http链接（大于10个），因此再次提交一样的http的request，再去GetResponse，就会超时死掉。

解决办法就是，把DefaultConnectionLimit 设置为一个比较大一点的数值，此数值保证大于你当前已经存在的alive的http链接数便可。

【经验总结】

之后写http的request代码，若是不是必须的要keepalive的，那么就要设置KeepAlive为false：

req.KeepAlive = false;

以及作对应的收尾动做：

if (resp != null) 
{ 
    resp.Close(); 
} 
if (req != null) 
{ 
    req.Abort(); 
}

 

 【后记】

又偶尔遇到一次，DefaultConnectionLimit已是200了，足够大了，可是GetResponse和GetRequestStream，仍是会超时死掉的问题，具体是什么缘由致使的还不是很清楚，可是通过折腾，参考：

HttpWebResponse’s GetResponse() hangs and timeouts

在：

req = (HttpWebRequest)WebRequest.Create(constSkydriveUrl); 
setCommonHttpReqPara(ref req); 
resp = (HttpWebResponse)req.GetResponse();

以前，添加一句垃圾回收：

System.GC.Collect();

而后就解决了GetResponse的超时问题，而且后面的GetRequestStream也同时能够正常工做，不超时了。

因此，看起来像是当前系统因为调试屡次，而且HttpWebRequest和HttpWebResponse都是没有正常去Close的，可能会残留一些http的连接，而后就可能影响到了后续对于http的使用，垃圾回收后，估计就把残余的http相关资源释放了，而后http就能够正常工做了。

 

【总结】

对于GetResponse或GetRequestStream超时死掉的缘由，多是：

1.DefaultConnectionLimit是默认的2，而当前的Http的connection用完了，致使后续的GetResponse或GetRequestStream超时死掉

==>> 默认系统只支持同时存在2个http的connection

==>> 使用HttpWebRequest以后若是没有close，则会占用1个http的connection，因此若是超过2次使用HttpWebRequest而没有close，那么就用完系统的http的connection，以后再去使用HttpWebRequest，GetResponse就会死掉

解决办法：

办法1：

每次使用完HttpWebRequest，使用

req.Close();
req=null

去关闭对应的http connection

最好对应的HttpWebResponse也要close：

resp.Close();
resp = null;

方法2：

修改DefaultConnectionLimit的值，改成足够大，好比：

 

 

System.Net.ServicePointManager.DefaultConnectionLimit = 200;

　　

2.系统中Http相关的资源没有正确释放，致使后续GetResponse或GetRequestStream超时死掉

就像我此处遇到的，多是以前调用http相关函数，没有正确彻底释放资源，致使虽然DefaultConnectionLimit给了足够大，可是仍是会死掉，此时在http请求代码以前去作一次垃圾回收，则后续http的GetResponse或GetRequestStream就正常了，就不会超时死掉了。

参考代码以下：

System.GC.Collect();
 
req = (HttpWebRequest)WebRequest.Create(constSkydriveUrl);
setCommonHttpReqPara(ref req);
resp = (HttpWebResponse)req.GetResponse();

　　

3.Http的GET请求时，不要手动设置ContentLength的值

这个是参考这里：HttpWebRequest.GetResponse() hangs the second time it is called而记录于此的，也许有人是此缘由，因此可供参考一下。

即Http的GET请求，不要添加相似以下的代码：

if (m_contentLength > 0)
    httpWebRequest.ContentLength = m_contentLength;

不要去手动修改对应的ContentLength的值，C#的http相关库函数，会自动帮你计算的。

注：POST方法中，的确是要手动填充数据和算出数据大小，而后手动给ContentLength赋值的。

建议你们使用【wireshark】抓包，检查服务器的网络，我也是刚学会

 

 

 

4.其余可能的一些缘由

（1）关于KeepAlive的问题

若是Http的请求，是设置了KeepAlive=true的话，那么对应的http的connection会和服务器保持链接的。

因此若是上述办法都不能解决超时的问题，能够尝试将keepAlive设置为false试试，看看可否解决。

（2）关于Sleep

有些人好像是经过在http请求前，加了对应的Sleep，结果解决了此问题。须要的人，也能够试试。

（3）HttpWebRequest的Timeout

通常来讲，既然超时了，每每是因为错误使用函数或者网络有问题致使的，因此实际上此处对于有些人去把HttpWebRequest的Timeout的值改的更大，每每都是没用的。

只不过，万一是因为网络响应慢而致使超时，那么却是能够尝试，将HttpWebRequest的Timeout的值改成更大。

（其中HttpWebRequest的Timeout默认的值是100,000 milliseconds ==100 seconds）

参考代码：

req.Timeout = 5 * 60 * 1000; // 5 minutes