HTTP:35---Web机器人之(HTTP报文的处理)

引入: 机器人和所有其他 HTTP 客户端程序并没有什么区别。它们也要遵守 HTTP 规范中的规则。发出HTTP请求并将自己广播成 HTTP/1.1客户端的机器人也要使用正确的HTTP请求首部 很多机器人都试图只实现请求它们所查找内容所需的最小HTTP集。这会引发一 些问题;但短期内这种行为不会发生什么改变。结果就是,很多机器人发出的都是HTTP/1.0请求,因为这个协议的要求很少 一、Web机器
相关文章
相关标签/搜索