HTTP协议的头信息详解.docx

HTTP协议的头信息详解.docx

《HTTP协议的头信息详解.docx》由会员分享，可在线阅读，更多相关《HTTP协议的头信息详解.docx（23页珍藏版）》请在冰豆网上搜索。

HTTP协议的头信息详解

HTTP协议的头信息详解

在数据挖崛方面有时候会经常分析网页内容，这时候就需要对HTTP协议有一定的了解，下边摘录了网上关于这方面的介绍

HTTP（HyperTextTransferProtocol）是超文本传输协议的缩写，它用于传送WWW方式的数据，关于HTTP协议的详细内容请参考RFC2616。

HTTP协议采用了请求/响应模型。

客户端向服务器发送一个请求，请求头包含请求的方法、URI、协议版本、以及包含请求修饰符、客户信息和内容的类似于MIME的消息结构。

服务器以一个状态行作为响应，相应的内容包括消息协议的版本，成功或者错误编码加上包含服务器信息、实体元信息以及可能的实体内容。

通常HTTP消息包括客户机向服务器的请求消息和服务器向客户机的响应消息。

这两种类型的消息由一个起始行，一个或者多个头域，一个只是头域结束的空行和可选的消息体组成。

HTTP的头域包括通用头，请求头，响应头和实体头四个部分。

每个头域由一个域名，冒号（:

）和域值三部分组成。

域名是大小写无关的，域值前可以添加任何数量的空格符，头域可以被扩展为多行，在每行开始处，使用至少一个空格或制表符。

　　通用头域

　　通用头域包含请求和响应消息都支持的头域，通用头域包含Cache-Control、Connection、Date、Pragma、Transfer-Encoding、Upgrade、Via。

对通用头域的扩展要求通讯双方都支持此扩展，如果存在不支持的通用头域，一般将会作为实体头域处理。

下面简单介绍几个在UPnP消息中使用的通用头域。

Cache-Control头域

　Cache-Control指定请求和响应遵循的缓存机制。

在请求消息或响应消息中设置Cache-Control并不会修改另一个消息处理过程中的缓存处理过程。

请求时的缓存指令包括no-cache、no-store、max-age、max-stale、min-fresh、only-if-cached，响应消息中的指令包括public、private、no-cache、no-store、no-transform、must-revalidate、proxy-revalidate、max-age。

各个消息中的指令含义如下：

　　Public指示响应可被任何缓存区缓存。

　　Private指示对于单个用户的整个或部分响应消息，不能被共享缓存处理。

这允许服务器仅仅描述当用户的部分响应消息，此响应消息对于其他用户的请求无效。

　　no-cache指示请求或响应消息不能缓存

　　no-store用于防止重要的信息被无意的发布。

在请求消息中发送将使得请求和响应消息都不使用缓存。

　　max-age指示客户机可以接收生存期不大于指定时间（以秒为单位）的响应。

　　min-fresh指示客户机可以接收响应时间小于当前时间加上指定时间的响应。

　　max-stale指示客户机可以接收超出超时期间的响应消息。

如果指定max-stale消息的值，那么客户机可以接收超出超时期指定值之内的响应消息。

　　Date头域

　　Date头域表示消息发送的时间，时间的描述格式由rfc822定义。

例如，Date:

Mon,31Dec200104:

25:

57GMT。

Date描述的时间表示世界标准时，换算成本地时间，需要知道用户所在的时区。

　　Pragma头域

　　Pragma头域用来包含实现特定的指令，最常用的是Pragma:

no-cache。

在HTTP/1.1协议中，它的含义和Cache-Control:

no-cache相同。

　　请求消息

　　请求消息的第一行为下面的格式：

　　MethodSPRequest-URISPHTTP-VersionCRLFMethod表示对于Request-URI完成的方法，这个字段是大小写敏感的，包括OPTIONS、GET、HEAD、POST、PUT、DELETE、TRACE。

方法GET和HEAD应该被所有的通用WEB服务器支持，其他所有方法的实现是可选的。

GET方法取回由Request-URI标识的信息。

HEAD方法也是取回由Request-URI标识的信息，只是可以在响应时，不返回消息体。

POST方法可以请求服务器接收包含在请求中的实体信息，可以用于提交表单，向新闻组、BBS、邮件群组和数据库发送消息。

　　SP表示空格。

Request-URI遵循URI格式，在此字段为星号（*）时，说明请求并不用于某个特定的资源地址，而是用于服务器本身。

HTTP-Version表示支持的HTTP版本，例如为HTTP/1.1。

CRLF表示换行回车符。

请求头域允许客户端向服务器传递关于请求或者关于客户机的附加信息。

请求头域可能包含下列字段Accept、Accept-Charset、Accept-Encoding、Accept-Language、Authorization、From、Host、If-Modified-Since、If-Match、If-None-Match、If-Range、If-Range、If-Unmodified-Since、Max-Forwards、Proxy-Authorization、Range、Referer、User-Agent。

对请求头域的扩展要求通讯双方都支持，如果存在不支持的请求头域，一般将会作为实体头域处理。

　　典型的请求消息：

　　GEThttp:

//download.microtool.de:

80/somedata.exe

　　Host:

download.microtool.de

　　Accept:

*/*

　　Pragma:

no-cache

　　Cache-Control:

no-cache

　　Referer:

http:

//download.microtool.de/

　　User-Agent:

Mozilla/4.04[en]（Win95;I;Nav）

　　Range:

bytes=554554-

　　上例第一行表示HTTP客户端（可能是浏览器、下载程序）通过GET方法获得指定URL下的文件。

棕色的部分表示请求头域的信息，绿色的部分表示通用头部分。

　　Host头域

　　Host头域指定请求资源的Intenet主机和端口号，必须表示请求url的原始服务器或网关的位置。

HTTP/1.1请求必须包含主机头域，否则系统会以400状态码返回。

　　Referer头域

　　Referer头域允许客户端指定请求uri的源资源地址，这可以允许服务器生成回退链表，可用来登陆、优化cache等。

他也允许废除的或错误的连接由于维护的目的被追踪。

如果请求的uri没有自己的uri地址，Referer不能被发送。

如果指定的是部分uri地址，则此地址应该是一个相对地址。

　　Range头域

　　Range头域可以请求实体的一个或者多个子范围。

例如，

　　表示头500个字节：

bytes=0-499

　　表示第二个500字节：

bytes=500-999

　　表示最后500个字节：

bytes=-500

　　表示500字节以后的范围：

bytes=500-

　　第一个和最后一个字节：

bytes=0-0,-1

　　同时指定几个范围：

bytes=500-600,601-999

　　但是服务器可以忽略此请求头，如果无条件GET包含Range请求头，响应会以状态码206（PartialContent）返回而不是以200（OK）。

　　User-Agent头域

　　User-Agent头域的内容包含发出请求的用户信息。

　　响应消息

　　响应消息的第一行为下面的格式：

　　HTTP-VersionSPStatus-CodeSPReason-PhraseCRLF

　　HTTP-Version表示支持的HTTP版本，例如为HTTP/1.1。

Status-Code是一个三个数字的结果代码。

Reason-Phrase给Status-Code提供一个简单的文本描述。

Status-Code主要用于机器自动识别，Reason-Phrase主要用于帮助用户理解。

Status-Code的第一个数字定义响应的类别，后两个数字没有分类的作用。

第一个数字可能取5个不同的值：

　　1xx:

信息响应类，表示接收到请求并且继续处理

　　2xx:

处理成功响应类，表示动作被成功接收、理解和接受

　　3xx:

重定向响应类，为了完成指定的动作，必须接受进一步处理

　　4xx:

客户端错误，客户请求包含语法错误或者是不能正确执行

　　5xx:

服务端错误，服务器不能正确执行一个正确的请求

　　响应头域允许服务器传递不能放在状态行的附加信息，这些域主要描述服务器的信息和Request-URI进一步的信息。

响应头域包含Age、Location、Proxy-Authenticate、Public、Retry-After、Server、Vary、Warning、WWW-Authenticate。

对响应头域的扩展要求通讯双方都支持，如果存在不支持的响应头域，一般将会作为实体头域处理。

　　典型的响应消息：

　　HTTP/1.0200OK

　　Date:

Mon,31Dec200104:

25:

57GMT

　　Server:

Apache/1.3.14（Unix）

　　Content-type:

text/html

　　Last-modified:

Tue,17Apr200106:

46:

28GMT

　　Etag:

"a030f020ac7c01:

1e9f"

　　Content-length:

39725426

　　Content-range:

bytes554554-40279979/40279980

　　上例第一行表示HTTP服务端响应一个GET方法。

棕色的部分表示响应头域的信息，绿色的部分表示通用头部分，红色的部分表示实体头域的信息。

　　Location响应头

　　Location响应头用于重定向接收者到一个新URI地址。

　　Server响应头

　　Server响应头包含处理请求的原始服务器的软件信息。

此域能包含多个产品标识和注释，产品标识一般按照重要性排序。

　　实体

　　请求消息和响应消息都可以包含实体信息，实体信息一般由实体头域和实体组成。

实体头域包含关于实体的原信息，实体头包括Allow、Content-Base、Content-Encoding、Content-Language、Content-Length、Content-Location、Content-MD5、Content-Range、Content-Type、Etag、Expires、Last-Modified、extension-header。

extension-header允许客户端定义新的实体头，但是这些域可能无法未接受方识别。

实体可以是一个经过编码的字节流，它的编码方式由Content-Encoding或Content-Type定义，它的长度由Content-Length或Content-Range定义。

　　Content-Type实体头

　　Content-Type实体头用于向接收方指示实体的介质类型，指定HEAD方法送到接收方的实体介质类型，或GET方法发送的请求介质类型Content-Range实体头

　　Content-Range实体头用于指定整个实体中的一部分的插入位置，他也指示了整个实体的长度。

在服务器向客户返回一个部分响应，它必须描述响应覆盖的范围和整个实体长度。

一般格式：

　　Content-Range:

bytes-unitSPfirst-byte-pos-last-byte-pos/entity-legth

　　例如，传送头500个字节次字段的形式：

Content-Range:

bytes0-499/1234如果一个http消息包含此节（例如，对范围请求的响应或对一系列范围的重叠请求），Content-Range表示传送的范围，Content-Length表示实际传送的字节数。

　　Last-modified实体头

应答头说明

Allow服务器支持哪些请求方法（如GET、POST等）。

Content-Encoding文档的编码（Encode）方法。

只有在解码之后才可以得到Content-Type头指定的内容类型。

利用gzip压缩文档能够显著地减少HTML文档的下载时间。

Java的GZIPOutputStream可以很方便地进行gzip压缩，但只有Unix上的Netscape和Windows上的IE4、IE5才支持它。

因此，Servlet应该通过查看Accept-Encoding头（即request.getHeader（"Accept-Encoding"））检查浏览器是否支持gzip，为支持gzip的浏览器返回经gzip压缩的HTML页面，为其他浏览器返回普通页面。

Content-Length表示内容长度。

只有当浏览器使用持久HTTP连接时才需要这个数据。

如果你想要利用持久连接的优势，可以把输出文档写入ByteArrayOutputStram，完成后查看其大小，然后把该值放入Content-Length头，最后通过byteArrayStream.writeTo（response.getOutputStream（）发送内容。

Content-Type表示后面的文档属于什么MIME类型。

Servlet默认为text/plain，但通常需要显式地指定为text/html。

由于经常要设置Content-Type，因此HttpServletResponse提供了一个专用的方法setContentTyep。

Date当前的GMT时间。

你可以用setDateHeader来设置这个头以避免转换时间格式的麻烦。

Expires应该在什么时候认为文档已经过期，从而不再缓存它？

Last-Modified文档的最后改动时间。

客户可以通过If-Modified-Since请求头提供一个日期，该请求将被视为一个条件GET，只有改动时间迟于指定时间的文档才会返回，否则返回一个304（NotModified）状态。

Last-Modified也可用setDateHeader方法来设置。

Location表示客户应当到哪里去提取文档。

Location通常不是直接设置的，而是通过HttpServletResponse的sendRedirect方法，该方法同时设置状态代码为302。

Refresh表示浏览器应该在多少时间之后刷新文档，以秒计。

除了刷新当前文档之外，你还可以通过setHeader（"Refresh","5;URL=http:

//host/path"）让浏览器读取指定的页面。

注意这种功能通常是通过设置HTML页面HEAD区的＜METAHTTP-EQUIV="Refresh"CONTENT="5;URL=http:

//host/path"＞实现，这是因为，自动刷新或重定向对于那些不能使用CGI或Servlet的HTML编写者十分重要。

但是，对于Servlet来说，直接设置Refresh头更加方便。

注意Refresh的意义是“N秒之后刷新本页面或访问指定页面”，而不是“每隔N秒刷新本页面或访问指定页面”。

因此，连续刷新要求每次都发送一个Refresh头，而发送204状态代码则可以阻止浏览器继续刷新，不管是使用Refresh头还是＜METAHTTP-EQUIV="Refresh"...＞。

注意Refresh头不属于HTTP1.1正式规范的一部分，而是一个扩展，但Netscape和IE都支持它。

Server服务器名字。

Servlet一般不设置这个值，而是由Web服务器自己设置。

Set-Cookie设置和页面关联的Cookie。

Servlet不应使用response.setHeader（"Set-Cookie",...），而是应使用HttpServletResponse提供的专用方法addCookie。

参见下文有关Cookie设置的讨论。

WWW-Authenticate客户应该在Authorization头中提供什么类型的授权信息？

在包含401（Unauthorized）状态行的应答中这个头是必需的。

例如，response.setHeader（"WWW-Authenticate","BASICrealm=＼"executives＼""）。

注意Servlet一般不进行这方面的处理，而是让Web服务器的专门机制来控制受密码保护页面的访问（例如.htaccess）。

（一）初识HTTP消息头

但凡搞WEB开发的人都离不开HTTP（超文本传输协议），而要了解HTTP，除了HTML本身以外，还有一部分不可忽视的就是HTTP消息头。

做过Socket编程的人都知道，当我们设计一个通信协议时，“消息头/消息体”的分割方式是很常用的，消息头告诉对方这个消息是干什么的，消息体告诉对方怎么干。

HTTP传输的消息也是这样规定的，每一个HTTP包都分为HTTP头和HTTP体两部分，后者是可选的，而前者是必须的。

每当我们打开一个网页，在上面点击右键，选择“查看源文件”，这时看到的HTML代码就是HTTP的消息体，那么消息头又在哪呢？

IE浏览器不让我们看到这部分，但我们可以通过截取数据包等方法看到它。

下面就来看一个简单的例子：

首先制作一个非常简单的网页，它的内容只有一行：

helloworld

把它放到WEB服务器上，比如IIS，然后用IE浏览器请求这个页面（http:

//localhost:

8080/simple.htm），当我们请求这个页面时，浏览器实际做了以下四项工作：

1解析我们输入的地址，从中分解出协议名、主机名、端口、对象路径等部分，对于我们的这个地址，解析得到的结果如下：

协议名：

http

主机名：

localhost

端口：

8080

对象路径：

/simple.htm

2把以上部分结合本机自己的信息，封装成一个HTTP请求数据包

3使用TCP协议连接到主机的指定端口（localhost,8080），并发送已封装好的数据包

4等待服务器返回数据，并解析返回数据，最后显示出来

由截取到的数据包我们不难发现浏览器生成的HTTP数据包的内容如下：

GET/simple.htmHTTP/1.1

Accept:

image/gif,image/x-xbitmap,image/jpeg,image/pjpeg,application/x-shockwave-flash,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/*

Accept-Language:

zh-cn

Accept-Encoding:

gzip,deflate

User-Agent:

Mozilla/4.0（compatible;MSIE6.0;WindowsNT5.1;SV1;.NETCLR1.1.4322;.NETCLR2.0.50727）

Host:

localhost:

8080

Connection:

Keep-Alive

为了显示清楚我把所有的回车的地方都加上了“”，注意最后还有一个空行加一个回车，这个空行正是HTTP规定的消息头和消息体的分界线，第一个空行以下的内容就是消息体，这个请求数据包是没有消息体的。

消息的第一行“GET”表示我们所使用的HTTP动作，其他可能的还有“POST”等，GET的消息没有消息体，而POST消息是有消息体的，消息体的内容就是要POST的数据。

后面/simple.htm就是我们要请求的对象，之后HTTP1.1表示使用的是HTTP1.1协议。

第二行表示我们所用的浏览器能接受的Content-type，三四两行则是语言和编码信息，第五行显示出本机的相关系信息，包括浏览器类型、操作系统信息等，很多网站可以显示出你所使用的浏览器和操作系统版本，就是因为可以从这里获取到这些信息。

第六行表示我们所请求的主机和端口，第七行表示使用Keep-Alive方式，即数据传递完并不立即关闭连接。

服务器接收到这样的数据包以后会根据其内容做相应的处理，例如查找有没有“/simple.htm”这个对象，如果有，根据服务器的设置来决定如何处理，如果是HTM，则不需要什么复杂的处理，直接返回其内容即可。

但在直接返回之前，还需要加上HTTP消息头。

服务器发回的完整HTTP消息如下：

HTTP/1.1200OK

Server:

Microsoft-IIS/5.1

X-Powered-By:

ASP.NET

Date:

Fri,03Mar200606:

34:

03GMT

Content-Type:

text/html

Accept-Ranges:

bytes

Last-Modified:

Fri,03Mar200606:

33:

18GMT

ETag:

"5ca4f75b8c3ec61:

9ee"

Content-Length:

37

helloworld

同样，我用“”来表示回车。

可以看到，这个消息也是用空行切分成消息头和消息体两部分，消息体的部分正是我们前面写好的HTML代码。

消息头第一行“HTTP/1.1”也是表示所使用的协议，后面的“200OK”是HTTP返回代码，200就表示操作成功，还有其他常见的如404表示对象未找到，500表示服务器错误，403表示不能浏览目录等等。

第二行表示这个服务器使用的WEB服务器软件，这里是IIS5.1。

第三行是ASP.Net的一个附加提示，没什么实际用处。

第四行是处理此请求的时间。

第五行就是所返回的消息的content-type，浏览器会根据它来决定如何处理消息体里面的内容，例如这里是text/html，那么浏览器就会启用HTML解析器来处理它，如果是image/jpeg，那么就会使用JPEG的解码器来处理。

消息头最后一行“Content-Length”表示消息体的长度，从空行以后的内容算起，以字节为单位，浏览器接收到它所指定的字节数的内容以后就会认为这个消息已经被完整接收了。

?

常见的HTTP返回码

在服务器返回的HTTP消息头里有一个“HTTP/1.1200OK”，这里的200是HTTP规定的返回代码，表示请求已经被正常处理完成。

浏览器通过这个返回代码就可以知道服务器对所发请求的处理情况是什么，每一种返回代码都有自己的含义。

这里列举几种常见的返回码。

1403AccessForbidden

如果我们试图请求服务器上一个文件夹，而在WEB服务器上这个文件夹并没有允许对这个文件夹列目录的话，就会返回这个代码。

一个完整的403回复可能是这样的：

（IIS5.1）

HTTP/1.1403AccessForbidden

Server:

Microsoft-IIS/5.1

Date:

Mon,06Mar200608:

57:

39GMT

Connection:

close

Content-Type:

text/html

Content-Length:

172

?