python爬虫HTTP数据头

一、HTTP头部类型可分为:

1、通用头，既适用于客户端的请求头；也适用于服务端的响应头(与HTTP消息体内最终传输的数据是无关的，只适用于要发送的消息)；

2、请求头:提供更为精确的描述信息,其对象为所请求的资源或请求本身；

3、响应头:为响应消息提供了更多信息,如关于资源位置的描述用Lccation字段,以及关于服务器本身的描述用Server字段等；

4、实体头:提供了关于消息体的描述。

二、常用请求方法

1、GET：请求获取指定的页面信息,并返回实体本体主体；

2、POST:向指定路径提交数据，请求服务器进行处理(如提交表单或上传文件)；

3、PVT:从客户端上传指定资源的最新内容,即更新服务器端的指定资源。

三、响应头

1、响应状态:有多种响应状态,如200代表成功,301跳转.404找不到页面；

2、响应头:如内容类型；

3、响应体:最主要的部分,包含了请求资源的内容,如网页HTML。

头部信息定义了一个超文本传输协议事务中的操作参数。

在爬虫中要用头部信息向服务器发送模拟信息,通过发送模拟的头部信息将自己伪装成一般的客户端。