http協(xié)議詳解二
2021-5-8 13:44:09??????點(diǎn)擊：
四、HTTP協(xié)議詳解之消息報(bào)頭篇
HTTP消息由客戶端到服務(wù)器的請(qǐng)求和服務(wù)器到客戶端的響應(yīng)組成。請(qǐng)求消息和響應(yīng)消息都是由開(kāi)始行（對(duì)于請(qǐng)求消息，開(kāi)始行就是請(qǐng)求行，對(duì)于響應(yīng)消息，開(kāi)始行就是狀態(tài)行），消息報(bào)頭（可選），空行（只有CRLF的行），消息正文（可選）組成。
HTTP消息報(bào)頭包括普通報(bào)頭、請(qǐng)求報(bào)頭、響應(yīng)報(bào)頭、實(shí)體報(bào)頭。
每一個(gè)報(bào)頭域都是由名字+“：”+空格+值 組成，消息報(bào)頭域的名字是大小寫(xiě)無(wú)關(guān)的。
1、普通報(bào)頭
在普通報(bào)頭中，有少數(shù)報(bào)頭域用于所有的請(qǐng)求和響應(yīng)消息，但并不用于被傳輸?shù)膶?shí)體，只用于傳輸?shù)南ⅰ?/span>
eg：
Cache-Control 用于指定緩存指令，緩存指令是單向的（響應(yīng)中出現(xiàn)的緩存指令在請(qǐng)求中未必會(huì)出現(xiàn)），且是獨(dú)立的（一個(gè)消息的緩存指令不會(huì)影響另一個(gè)消息處理的緩存機(jī)制），HTTP1.0使用的類(lèi)似的報(bào)頭域?yàn)镻ragma。
請(qǐng)求時(shí)的緩存指令包括：no-cache（用于指示請(qǐng)求或響應(yīng)消息不能緩存）、no-store、max-age、max-stale、min-fresh、only-if-cached;
響應(yīng)時(shí)的緩存指令包括：public、private、no-cache、no-store、no-transform、must-revalidate、proxy-revalidate、max-age、s-maxage.
eg：為了指示IE瀏覽器（客戶端）不要緩存頁(yè)面，服務(wù)器端的JSP程序可以編寫(xiě)如下：response.sehHeader("Cache-Control","no-cache");
//response.setHeader("Pragma","no-cache");作用相當(dāng)于上述代碼，通常兩者//合用
這句代碼將在發(fā)送的響應(yīng)消息中設(shè)置普通報(bào)頭域：Cache-Control:no-cache
Date普通報(bào)頭域表示消息產(chǎn)生的日期和時(shí)間
Connection普通報(bào)頭域允許發(fā)送指定連接的選項(xiàng)。例如指定連接是連續(xù)，或者指定“close”選項(xiàng)，通知服務(wù)器，在響應(yīng)完成后，關(guān)閉連接
2、請(qǐng)求報(bào)頭
請(qǐng)求報(bào)頭允許客戶端向服務(wù)器端傳遞請(qǐng)求的附加信息以及客戶端自身的信息。
常用的請(qǐng)求報(bào)頭
Accept
Accept請(qǐng)求報(bào)頭域用于指定客戶端接受哪些類(lèi)型的信息。eg：Accept：image/gif，表明客戶端希望接受GIF圖象格式的資源；Accept：text/html，表明客戶端希望接受html文本。
Accept-Charset
Accept-Charset請(qǐng)求報(bào)頭域用于指定客戶端接受的字符集。eg：Accept-Charset:iso-8859-1,gb2312.如果在請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)域，缺省是任何字符集都可以接受。
Accept-Encoding
Accept-Encoding請(qǐng)求報(bào)頭域類(lèi)似于Accept，但是它是用于指定可接受的內(nèi)容編碼。eg：Accept-Encoding:gzip.deflate.如果請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)域服務(wù)器假定客戶端對(duì)各種內(nèi)容編碼都可以接受。
Accept-Language
Accept-Language請(qǐng)求報(bào)頭域類(lèi)似于Accept，但是它是用于指定一種自然語(yǔ)言。eg：Accept-Language:zh-cn.如果請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)報(bào)頭域，服務(wù)器假定客戶端對(duì)各種語(yǔ)言都可以接受。
Authorization
Authorization請(qǐng)求報(bào)頭域主要用于證明客戶端有權(quán)查看某個(gè)資源。當(dāng)瀏覽器訪問(wèn)一個(gè)頁(yè)面時(shí)，如果收到服務(wù)器的響應(yīng)代碼為401（未授權(quán)），可以發(fā)送一個(gè)包含Authorization請(qǐng)求報(bào)頭域的請(qǐng)求，要求服務(wù)器對(duì)其進(jìn)行驗(yàn)證。
Host（發(fā)送請(qǐng)求時(shí)，該報(bào)頭域是必需的）
Host請(qǐng)求報(bào)頭域主要用于指定被請(qǐng)求資源的Internet主機(jī)和端口號(hào)，它通常從HTTP URL中提取出來(lái)的，eg：
我們?cè)跒g覽器中輸入：http://www.guet.edu.cn/index.html
瀏覽器發(fā)送的請(qǐng)求消息中，就會(huì)包含Host請(qǐng)求報(bào)頭域，如下：
Host：www.guet.edu.cn
此處使用缺省端口號(hào)80，若指定了端口號(hào)，則變成：Host：www.guet.edu.cn:指定端口號(hào)
User-Agent
我們上網(wǎng)登陸論壇的時(shí)候，往往會(huì)看到一些歡迎信息，其中列出了你的操作系統(tǒng)的名稱和版本，你所使用的瀏覽器的名稱和版本，這往往讓很多人感到很神奇，實(shí)際上，服務(wù)器應(yīng)用程序就是從User-Agent這個(gè)請(qǐng)求報(bào)頭域中獲取到這些信息。User-Agent請(qǐng)求報(bào)頭域允許客戶端將它的操作系統(tǒng)、瀏覽器和其它屬性告訴服務(wù)器。不過(guò)，這個(gè)報(bào)頭域不是必需的，如果我們自己編寫(xiě)一個(gè)瀏覽器，不使用User-Agent請(qǐng)求報(bào)頭域，那么服務(wù)器端就無(wú)法得知我們的信息了。
請(qǐng)求報(bào)頭舉例：
GET /form.html HTTP/1.1 (CRLF)
Accept:image/gif,image/x-xbitmap,image/jpeg,application/x-shockwave-flash,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/* (CRLF)
Accept-Language:zh-cn (CRLF)
Accept-Encoding:gzip,deflate (CRLF)
If-Modified-Since:Wed,05 Jan 2007 11:21:25 GMT (CRLF)
If-None-Match:W/"80b1a4c018f3c41:8317" (CRLF)
User-Agent:Mozilla/4.0(compatible;MSIE6.0;Windows NT 5.0) (CRLF)
Host:www.guet.edu.cn (CRLF)
Connection:Keep-Alive (CRLF)
(CRLF)
3、響應(yīng)報(bào)頭
響應(yīng)報(bào)頭允許服務(wù)器傳遞不能放在狀態(tài)行中的附加響應(yīng)信息，以及關(guān)于服務(wù)器的信息和對(duì)Request-URI所標(biāo)識(shí)的資源進(jìn)行下一步訪問(wèn)的信息。
常用的響應(yīng)報(bào)頭
Location
Location響應(yīng)報(bào)頭域用于重定向接受者到一個(gè)新的位置。Location響應(yīng)報(bào)頭域常用在更換域名的時(shí)候。
Server
Server響應(yīng)報(bào)頭域包含了服務(wù)器用來(lái)處理請(qǐng)求的軟件信息。與User-Agent請(qǐng)求報(bào)頭域是相對(duì)應(yīng)的。下面是
Server響應(yīng)報(bào)頭域的一個(gè)例子：
Server：Apache-Coyote/1.1
WWW-Authenticate
WWW-Authenticate響應(yīng)報(bào)頭域必須被包含在401（未授權(quán)的）響應(yīng)消息中，客戶端收到401響應(yīng)消息時(shí)候，并發(fā)送Authorization報(bào)頭域請(qǐng)求服務(wù)器對(duì)其進(jìn)行驗(yàn)證時(shí)，服務(wù)端響應(yīng)報(bào)頭就包含該報(bào)頭域。
eg：WWW-Authenticate:Basic realm="Basic Auth Test!" //可以看出服務(wù)器對(duì)請(qǐng)求資源采用的是基本驗(yàn)證機(jī)制。
4、實(shí)體報(bào)頭
請(qǐng)求和響應(yīng)消息都可以傳送一個(gè)實(shí)體。一個(gè)實(shí)體由實(shí)體報(bào)頭域和實(shí)體正文組成，但并不是說(shuō)實(shí)體報(bào)頭域和實(shí)體正文要在一起發(fā)送，可以只發(fā)送實(shí)體報(bào)頭域。實(shí)體報(bào)頭定義了關(guān)于實(shí)體正文（eg：有無(wú)實(shí)體正文）和請(qǐng)求所標(biāo)識(shí)的資源的元信息。
常用的實(shí)體報(bào)頭
Content-Encoding
Content-Encoding實(shí)體報(bào)頭域被用作媒體類(lèi)型的修飾符，它的值指示了已經(jīng)被應(yīng)用到實(shí)體正文的附加內(nèi)容的編碼，因而要獲得Content-Type報(bào)頭域中所引用的媒體類(lèi)型，必須采用相應(yīng)的解碼機(jī)制。Content-Encoding這樣用于記錄文檔的壓縮方法，eg：Content-Encoding：gzip
Content-Language
Content-Language實(shí)體報(bào)頭域描述了資源所用的自然語(yǔ)言。沒(méi)有設(shè)置該域則認(rèn)為實(shí)體內(nèi)容將提供給所有的語(yǔ)言閱讀者。
Content-Length
Content-Length實(shí)體報(bào)頭域用于指明實(shí)體正文的長(zhǎng)度，以字節(jié)方式存儲(chǔ)的十進(jìn)制數(shù)字來(lái)表示。
Content-Type
Content-Type實(shí)體報(bào)頭域用語(yǔ)指明發(fā)送給接收者的實(shí)體正文的媒體類(lèi)型。
Last-Modified
Last-Modified實(shí)體報(bào)頭域用于指示資源的最后修改日期和時(shí)間。
Expires
五、利用telnet觀察http協(xié)議的通訊過(guò)程
實(shí)驗(yàn)?zāi)康募霸恚?/span>
利用MS的telnet工具，通過(guò)手動(dòng)輸入http請(qǐng)求信息的方式，向服務(wù)器發(fā)出請(qǐng)求，服務(wù)器接收、解釋和接受請(qǐng)求后，會(huì)返回一個(gè)響應(yīng)，該響應(yīng)會(huì)在telnet窗口上顯示出來(lái)，從而從感性上加深對(duì)http協(xié)議的通訊過(guò)程的認(rèn)識(shí)。
六、HTTP協(xié)議相關(guān)技術(shù)補(bǔ)充
1、基礎(chǔ)：
高層協(xié)議有：文件傳輸協(xié)議FTP、電子郵件傳輸協(xié)議SMTP、域名系統(tǒng)服務(wù)DNS、網(wǎng)絡(luò)新聞傳輸協(xié)議NNTP和HTTP協(xié)議等
中介由三種：代理(Proxy)、網(wǎng)關(guān)(Gateway)和通道(Tunnel)，一個(gè)代理根據(jù)URI的絕對(duì)格式來(lái)接受請(qǐng)求，重寫(xiě)全部或部分消息，通過(guò) URI的標(biāo)識(shí)把已格式化過(guò)的請(qǐng)求發(fā)送到服務(wù)器。網(wǎng)關(guān)是一個(gè)接收代理，作為一些其它服務(wù)器的上層，并且如果必須的話，可以把請(qǐng)求翻譯給下層的服務(wù)器協(xié)議。一 個(gè)通道作為不改變消息的兩個(gè)連接之間的中繼點(diǎn)。當(dāng)通訊需要通過(guò)一個(gè)中介(例如：防火墻等)或者是中介不能識(shí)別消息的內(nèi)容時(shí)，通道經(jīng)常被使用。
代理(Proxy)：一個(gè)中間程序，它可以充當(dāng)一個(gè)服務(wù)器，也可以充當(dāng)一個(gè)客戶機(jī)，為其它客戶機(jī)建立請(qǐng)求。請(qǐng)求是通過(guò)可能的翻譯在內(nèi)部或經(jīng)過(guò)傳遞到其它的 服務(wù)器中。一個(gè)代理在發(fā)送請(qǐng)求信息之前，必須解釋并且如果可能重寫(xiě)它。代理經(jīng)常作為通過(guò)防火墻的客戶機(jī)端的門(mén)戶，代理還可以作為一個(gè)幫助應(yīng)用來(lái)通過(guò)協(xié)議處 理沒(méi)有被用戶代理完成的請(qǐng)求。
網(wǎng)關(guān)(Gateway)：一個(gè)作為其它服務(wù)器中間媒介的服務(wù)器。與代理不同的是，網(wǎng)關(guān)接受請(qǐng)求就好象對(duì)被請(qǐng)求的資源來(lái)說(shuō)它就是源服務(wù)器；發(fā)出請(qǐng)求的客戶機(jī)并沒(méi)有意識(shí)到它在同網(wǎng)關(guān)打交道。
網(wǎng)關(guān)經(jīng)常作為通過(guò)防火墻的服務(wù)器端的門(mén)戶，網(wǎng)關(guān)還可以作為一個(gè)協(xié)議翻譯器以便存取那些存儲(chǔ)在非HTTP系統(tǒng)中的資源。
通道(Tunnel)：是作為兩個(gè)連接中繼的中介程序。一旦激活，通道便被認(rèn)為不屬于HTTP通訊，盡管通道可能是被一個(gè)HTTP請(qǐng)求初始化的。當(dāng)被中繼 的連接兩端關(guān)閉時(shí)，通道便消失。當(dāng)一個(gè)門(mén)戶(Portal)必須存在或中介(Intermediary)不能解釋中繼的通訊時(shí)通道被經(jīng)常使用。
2、協(xié)議分析的優(yōu)勢(shì)—HTTP分析器檢測(cè)網(wǎng)絡(luò)攻擊
以模塊化的方式對(duì)高層協(xié)議進(jìn)行分析處理，將是未來(lái)入侵檢測(cè)的方向。
HTTP及其代理的常用端口80、3128和8080在network部分用port標(biāo)簽進(jìn)行了規(guī)定
3、HTTP協(xié)議Content Lenth限制漏洞導(dǎo)致拒絕服務(wù)攻擊
使用POST方法時(shí)，可以設(shè)置ContentLenth來(lái)定義需要傳送的數(shù)據(jù)長(zhǎng)度，例如ContentLenth:999999999，在傳送完成前，內(nèi)存不會(huì)釋放，攻擊者可以利用這個(gè)缺陷，連續(xù)向WEB服務(wù)器發(fā)送垃圾數(shù)據(jù)直至WEB服務(wù)器內(nèi)存耗盡。這種攻擊方法基本不會(huì)留下痕跡。
http://www.cnpaf.net/Class/HTTP/0532918532667330.html
4、利用HTTP協(xié)議的特性進(jìn)行拒絕服務(wù)攻擊的一些構(gòu)思
服務(wù)器端忙于處理攻擊者偽造的TCP連接請(qǐng)求而無(wú)暇理睬客戶的正常請(qǐng)求（畢竟客戶端的正常請(qǐng)求比率非常之?。?，此時(shí)從正常客戶的角度看來(lái)，服務(wù)器失去響應(yīng)，這種情況我們稱作：服務(wù)器端受到了SYNFlood攻擊（SYN洪水攻擊）。而Smurf、TearDrop等是利用ICMP報(bào)文來(lái)Flood和IP碎片攻擊的。本文用“正常連接”的方法來(lái)產(chǎn)生拒絕服務(wù)攻擊。
19端口在早期已經(jīng)有人用來(lái)做Chargen攻擊了，即Chargen_Denial_of_Service，但是！他們用的方法是在兩臺(tái)Chargen 服務(wù)器之間產(chǎn)生UDP連接，讓服務(wù)器處理過(guò)多信息而DOWN掉，那么，干掉一臺(tái)WEB服務(wù)器的條件就必須有2個(gè)：1.有Chargen服務(wù)2.有HTTP 服務(wù)
方法：攻擊者偽造源IP給N臺(tái)Chargen發(fā)送連接請(qǐng)求（Connect），Chargen接收到連接后就會(huì)返回每秒72字節(jié)的字符流（實(shí)際上根據(jù)網(wǎng)絡(luò)實(shí)際情況，這個(gè)速度更快）給服務(wù)器。
5、Http指紋識(shí)別技術(shù)
Http指紋識(shí)別的原理大致上也是相同的：記錄不同服務(wù)器對(duì)Http協(xié)議執(zhí)行中的微小差別進(jìn)行識(shí)別.Http指紋識(shí)別比TCP/IP堆棧指紋識(shí)別復(fù)雜許多,理由是定制Http服務(wù)器的配置文件、增加插件或組件使得更改Http的響應(yīng)信息變的很容易,這樣使得識(shí)別變的困難；然而定制TCP/IP堆棧的行為 需要對(duì)核心層進(jìn)行修改,所以就容易識(shí)別.
要讓服務(wù)器返回不同的Banner信息的設(shè)置是很簡(jiǎn)單的,象Apache這樣的開(kāi)放源代碼的Http服務(wù)器,用戶可以在源代碼里修改Banner信息,然后重起Http服務(wù)就生效了；對(duì)于沒(méi)有公開(kāi)源代碼的Http服務(wù)器比如微軟的IIS或者是Netscape,可以在存放Banner信息的Dll文件中修 改,相關(guān)的文章有討論的,這里不再贅述,當(dāng)然這樣的修改的效果還是不錯(cuò)的.另外一種模糊Banner信息的方法是使用插件。
常用測(cè)試請(qǐng)求：
1：HEAD/Http/1.0發(fā)送基本的Http請(qǐng)求
2：DELETE/Http/1.0發(fā)送那些不被允許的請(qǐng)求,比如Delete請(qǐng)求
3：GET/Http/3.0發(fā)送一個(gè)非法版本的Http協(xié)議請(qǐng)求
4：GET/JUNK/1.0發(fā)送一個(gè)不正確規(guī)格的Http協(xié)議請(qǐng)求
Http指紋識(shí)別工具Httprint,它通過(guò)運(yùn)用統(tǒng)計(jì)學(xué)原理,組合模糊的邏輯學(xué)技術(shù),能很有效的確定Http服務(wù)器的類(lèi)型.它可以被用來(lái)收集和分析不同Http服務(wù)器產(chǎn)生的簽名。
6、其他：為了提高用戶使用瀏覽器時(shí)的性能，現(xiàn)代瀏覽器還支持并發(fā)的訪問(wèn)方式，瀏覽一個(gè)網(wǎng)頁(yè)時(shí)同時(shí)建立多個(gè)連接，以迅速獲得一個(gè)網(wǎng)頁(yè)上的多個(gè)圖標(biāo)，這樣能更快速完成整個(gè)網(wǎng)頁(yè)的傳輸。
HTTP1.1中提供了這種持續(xù)連接的方式，而下一代HTTP協(xié)議：HTTP-NG更增加了有關(guān)會(huì)話控制、豐富的內(nèi)容協(xié)商等方式的支持，來(lái)提供更高效率的連接。
HTTP消息由客戶端到服務(wù)器的請(qǐng)求和服務(wù)器到客戶端的響應(yīng)組成。請(qǐng)求消息和響應(yīng)消息都是由開(kāi)始行（對(duì)于請(qǐng)求消息，開(kāi)始行就是請(qǐng)求行，對(duì)于響應(yīng)消息，開(kāi)始行就是狀態(tài)行），消息報(bào)頭（可選），空行（只有CRLF的行），消息正文（可選）組成。
HTTP消息報(bào)頭包括普通報(bào)頭、請(qǐng)求報(bào)頭、響應(yīng)報(bào)頭、實(shí)體報(bào)頭。
每一個(gè)報(bào)頭域都是由名字+“：”+空格+值 組成，消息報(bào)頭域的名字是大小寫(xiě)無(wú)關(guān)的。
1、普通報(bào)頭
在普通報(bào)頭中，有少數(shù)報(bào)頭域用于所有的請(qǐng)求和響應(yīng)消息，但并不用于被傳輸?shù)膶?shí)體，只用于傳輸?shù)南ⅰ?/span>
eg：
Cache-Control 用于指定緩存指令，緩存指令是單向的（響應(yīng)中出現(xiàn)的緩存指令在請(qǐng)求中未必會(huì)出現(xiàn)），且是獨(dú)立的（一個(gè)消息的緩存指令不會(huì)影響另一個(gè)消息處理的緩存機(jī)制），HTTP1.0使用的類(lèi)似的報(bào)頭域?yàn)镻ragma。
請(qǐng)求時(shí)的緩存指令包括：no-cache（用于指示請(qǐng)求或響應(yīng)消息不能緩存）、no-store、max-age、max-stale、min-fresh、only-if-cached;
響應(yīng)時(shí)的緩存指令包括：public、private、no-cache、no-store、no-transform、must-revalidate、proxy-revalidate、max-age、s-maxage.
eg：為了指示IE瀏覽器（客戶端）不要緩存頁(yè)面，服務(wù)器端的JSP程序可以編寫(xiě)如下：response.sehHeader("Cache-Control","no-cache");
//response.setHeader("Pragma","no-cache");作用相當(dāng)于上述代碼，通常兩者//合用
這句代碼將在發(fā)送的響應(yīng)消息中設(shè)置普通報(bào)頭域：Cache-Control:no-cache
Date普通報(bào)頭域表示消息產(chǎn)生的日期和時(shí)間
Connection普通報(bào)頭域允許發(fā)送指定連接的選項(xiàng)。例如指定連接是連續(xù)，或者指定“close”選項(xiàng)，通知服務(wù)器，在響應(yīng)完成后，關(guān)閉連接
2、請(qǐng)求報(bào)頭
請(qǐng)求報(bào)頭允許客戶端向服務(wù)器端傳遞請(qǐng)求的附加信息以及客戶端自身的信息。
常用的請(qǐng)求報(bào)頭
Accept
Accept請(qǐng)求報(bào)頭域用于指定客戶端接受哪些類(lèi)型的信息。eg：Accept：image/gif，表明客戶端希望接受GIF圖象格式的資源；Accept：text/html，表明客戶端希望接受html文本。
Accept-Charset
Accept-Charset請(qǐng)求報(bào)頭域用于指定客戶端接受的字符集。eg：Accept-Charset:iso-8859-1,gb2312.如果在請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)域，缺省是任何字符集都可以接受。
Accept-Encoding
Accept-Encoding請(qǐng)求報(bào)頭域類(lèi)似于Accept，但是它是用于指定可接受的內(nèi)容編碼。eg：Accept-Encoding:gzip.deflate.如果請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)域服務(wù)器假定客戶端對(duì)各種內(nèi)容編碼都可以接受。
Accept-Language
Accept-Language請(qǐng)求報(bào)頭域類(lèi)似于Accept，但是它是用于指定一種自然語(yǔ)言。eg：Accept-Language:zh-cn.如果請(qǐng)求消息中沒(méi)有設(shè)置這個(gè)報(bào)頭域，服務(wù)器假定客戶端對(duì)各種語(yǔ)言都可以接受。
Authorization
Authorization請(qǐng)求報(bào)頭域主要用于證明客戶端有權(quán)查看某個(gè)資源。當(dāng)瀏覽器訪問(wèn)一個(gè)頁(yè)面時(shí)，如果收到服務(wù)器的響應(yīng)代碼為401（未授權(quán)），可以發(fā)送一個(gè)包含Authorization請(qǐng)求報(bào)頭域的請(qǐng)求，要求服務(wù)器對(duì)其進(jìn)行驗(yàn)證。
Host（發(fā)送請(qǐng)求時(shí)，該報(bào)頭域是必需的）
Host請(qǐng)求報(bào)頭域主要用于指定被請(qǐng)求資源的Internet主機(jī)和端口號(hào)，它通常從HTTP URL中提取出來(lái)的，eg：
我們?cè)跒g覽器中輸入：http://www.guet.edu.cn/index.html
瀏覽器發(fā)送的請(qǐng)求消息中，就會(huì)包含Host請(qǐng)求報(bào)頭域，如下：
Host：www.guet.edu.cn
此處使用缺省端口號(hào)80，若指定了端口號(hào)，則變成：Host：www.guet.edu.cn:指定端口號(hào)
User-Agent
我們上網(wǎng)登陸論壇的時(shí)候，往往會(huì)看到一些歡迎信息，其中列出了你的操作系統(tǒng)的名稱和版本，你所使用的瀏覽器的名稱和版本，這往往讓很多人感到很神奇，實(shí)際上，服務(wù)器應(yīng)用程序就是從User-Agent這個(gè)請(qǐng)求報(bào)頭域中獲取到這些信息。User-Agent請(qǐng)求報(bào)頭域允許客戶端將它的操作系統(tǒng)、瀏覽器和其它屬性告訴服務(wù)器。不過(guò)，這個(gè)報(bào)頭域不是必需的，如果我們自己編寫(xiě)一個(gè)瀏覽器，不使用User-Agent請(qǐng)求報(bào)頭域，那么服務(wù)器端就無(wú)法得知我們的信息了。
請(qǐng)求報(bào)頭舉例：
GET /form.html HTTP/1.1 (CRLF)
Accept:image/gif,image/x-xbitmap,image/jpeg,application/x-shockwave-flash,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/* (CRLF)
Accept-Language:zh-cn (CRLF)
Accept-Encoding:gzip,deflate (CRLF)
If-Modified-Since:Wed,05 Jan 2007 11:21:25 GMT (CRLF)
If-None-Match:W/"80b1a4c018f3c41:8317" (CRLF)
User-Agent:Mozilla/4.0(compatible;MSIE6.0;Windows NT 5.0) (CRLF)
Host:www.guet.edu.cn (CRLF)
Connection:Keep-Alive (CRLF)
(CRLF)
3、響應(yīng)報(bào)頭
響應(yīng)報(bào)頭允許服務(wù)器傳遞不能放在狀態(tài)行中的附加響應(yīng)信息，以及關(guān)于服務(wù)器的信息和對(duì)Request-URI所標(biāo)識(shí)的資源進(jìn)行下一步訪問(wèn)的信息。
常用的響應(yīng)報(bào)頭
Location
Location響應(yīng)報(bào)頭域用于重定向接受者到一個(gè)新的位置。Location響應(yīng)報(bào)頭域常用在更換域名的時(shí)候。
Server
Server響應(yīng)報(bào)頭域包含了服務(wù)器用來(lái)處理請(qǐng)求的軟件信息。與User-Agent請(qǐng)求報(bào)頭域是相對(duì)應(yīng)的。下面是
Server響應(yīng)報(bào)頭域的一個(gè)例子：
Server：Apache-Coyote/1.1
WWW-Authenticate
WWW-Authenticate響應(yīng)報(bào)頭域必須被包含在401（未授權(quán)的）響應(yīng)消息中，客戶端收到401響應(yīng)消息時(shí)候，并發(fā)送Authorization報(bào)頭域請(qǐng)求服務(wù)器對(duì)其進(jìn)行驗(yàn)證時(shí)，服務(wù)端響應(yīng)報(bào)頭就包含該報(bào)頭域。
eg：WWW-Authenticate:Basic realm="Basic Auth Test!" //可以看出服務(wù)器對(duì)請(qǐng)求資源采用的是基本驗(yàn)證機(jī)制。
4、實(shí)體報(bào)頭
請(qǐng)求和響應(yīng)消息都可以傳送一個(gè)實(shí)體。一個(gè)實(shí)體由實(shí)體報(bào)頭域和實(shí)體正文組成，但并不是說(shuō)實(shí)體報(bào)頭域和實(shí)體正文要在一起發(fā)送，可以只發(fā)送實(shí)體報(bào)頭域。實(shí)體報(bào)頭定義了關(guān)于實(shí)體正文（eg：有無(wú)實(shí)體正文）和請(qǐng)求所標(biāo)識(shí)的資源的元信息。
常用的實(shí)體報(bào)頭
Content-Encoding
Content-Encoding實(shí)體報(bào)頭域被用作媒體類(lèi)型的修飾符，它的值指示了已經(jīng)被應(yīng)用到實(shí)體正文的附加內(nèi)容的編碼，因而要獲得Content-Type報(bào)頭域中所引用的媒體類(lèi)型，必須采用相應(yīng)的解碼機(jī)制。Content-Encoding這樣用于記錄文檔的壓縮方法，eg：Content-Encoding：gzip
Content-Language
Content-Language實(shí)體報(bào)頭域描述了資源所用的自然語(yǔ)言。沒(méi)有設(shè)置該域則認(rèn)為實(shí)體內(nèi)容將提供給所有的語(yǔ)言閱讀者。
Content-Length
Content-Length實(shí)體報(bào)頭域用于指明實(shí)體正文的長(zhǎng)度，以字節(jié)方式存儲(chǔ)的十進(jìn)制數(shù)字來(lái)表示。
Content-Type
Content-Type實(shí)體報(bào)頭域用語(yǔ)指明發(fā)送給接收者的實(shí)體正文的媒體類(lèi)型。
Last-Modified
Last-Modified實(shí)體報(bào)頭域用于指示資源的最后修改日期和時(shí)間。
Expires
Expires實(shí)體報(bào)頭域給出響應(yīng)過(guò)期的日期和時(shí)間。為了讓代理服務(wù)器或?yàn)g覽器在一段時(shí)間以后更新緩存中(再次訪問(wèn)曾訪問(wèn)過(guò)的頁(yè)面時(shí)，直接從緩存中加載，縮短響應(yīng)時(shí)間和降低服務(wù)器負(fù)載)的頁(yè)面，我們可以使用Expires實(shí)體報(bào)頭域指定頁(yè)面過(guò)期的時(shí)間。eg：Expires：Thu，15 Sep 2006 16:23:12 GMT
HTTP1.1的客戶端和緩存必須將其他非法的日期格式（包括0）看作已經(jīng)過(guò)期。eg：為了讓瀏覽器不要緩存頁(yè)面，我們也可以利用Expires實(shí)體報(bào)頭域，設(shè)置為0，jsp中程序如下：response.setDateHeader("Expires","0");五、利用telnet觀察http協(xié)議的通訊過(guò)程
實(shí)驗(yàn)?zāi)康募霸恚?/span>
利用MS的telnet工具，通過(guò)手動(dòng)輸入http請(qǐng)求信息的方式，向服務(wù)器發(fā)出請(qǐng)求，服務(wù)器接收、解釋和接受請(qǐng)求后，會(huì)返回一個(gè)響應(yīng)，該響應(yīng)會(huì)在telnet窗口上顯示出來(lái)，從而從感性上加深對(duì)http協(xié)議的通訊過(guò)程的認(rèn)識(shí)。
六、HTTP協(xié)議相關(guān)技術(shù)補(bǔ)充
1、基礎(chǔ)：
高層協(xié)議有：文件傳輸協(xié)議FTP、電子郵件傳輸協(xié)議SMTP、域名系統(tǒng)服務(wù)DNS、網(wǎng)絡(luò)新聞傳輸協(xié)議NNTP和HTTP協(xié)議等
中介由三種：代理(Proxy)、網(wǎng)關(guān)(Gateway)和通道(Tunnel)，一個(gè)代理根據(jù)URI的絕對(duì)格式來(lái)接受請(qǐng)求，重寫(xiě)全部或部分消息，通過(guò) URI的標(biāo)識(shí)把已格式化過(guò)的請(qǐng)求發(fā)送到服務(wù)器。網(wǎng)關(guān)是一個(gè)接收代理，作為一些其它服務(wù)器的上層，并且如果必須的話，可以把請(qǐng)求翻譯給下層的服務(wù)器協(xié)議。一 個(gè)通道作為不改變消息的兩個(gè)連接之間的中繼點(diǎn)。當(dāng)通訊需要通過(guò)一個(gè)中介(例如：防火墻等)或者是中介不能識(shí)別消息的內(nèi)容時(shí)，通道經(jīng)常被使用。
代理(Proxy)：一個(gè)中間程序，它可以充當(dāng)一個(gè)服務(wù)器，也可以充當(dāng)一個(gè)客戶機(jī)，為其它客戶機(jī)建立請(qǐng)求。請(qǐng)求是通過(guò)可能的翻譯在內(nèi)部或經(jīng)過(guò)傳遞到其它的 服務(wù)器中。一個(gè)代理在發(fā)送請(qǐng)求信息之前，必須解釋并且如果可能重寫(xiě)它。代理經(jīng)常作為通過(guò)防火墻的客戶機(jī)端的門(mén)戶，代理還可以作為一個(gè)幫助應(yīng)用來(lái)通過(guò)協(xié)議處 理沒(méi)有被用戶代理完成的請(qǐng)求。
網(wǎng)關(guān)(Gateway)：一個(gè)作為其它服務(wù)器中間媒介的服務(wù)器。與代理不同的是，網(wǎng)關(guān)接受請(qǐng)求就好象對(duì)被請(qǐng)求的資源來(lái)說(shuō)它就是源服務(wù)器；發(fā)出請(qǐng)求的客戶機(jī)并沒(méi)有意識(shí)到它在同網(wǎng)關(guān)打交道。
網(wǎng)關(guān)經(jīng)常作為通過(guò)防火墻的服務(wù)器端的門(mén)戶，網(wǎng)關(guān)還可以作為一個(gè)協(xié)議翻譯器以便存取那些存儲(chǔ)在非HTTP系統(tǒng)中的資源。
通道(Tunnel)：是作為兩個(gè)連接中繼的中介程序。一旦激活，通道便被認(rèn)為不屬于HTTP通訊，盡管通道可能是被一個(gè)HTTP請(qǐng)求初始化的。當(dāng)被中繼 的連接兩端關(guān)閉時(shí)，通道便消失。當(dāng)一個(gè)門(mén)戶(Portal)必須存在或中介(Intermediary)不能解釋中繼的通訊時(shí)通道被經(jīng)常使用。
2、協(xié)議分析的優(yōu)勢(shì)—HTTP分析器檢測(cè)網(wǎng)絡(luò)攻擊
以模塊化的方式對(duì)高層協(xié)議進(jìn)行分析處理，將是未來(lái)入侵檢測(cè)的方向。
HTTP及其代理的常用端口80、3128和8080在network部分用port標(biāo)簽進(jìn)行了規(guī)定
3、HTTP協(xié)議Content Lenth限制漏洞導(dǎo)致拒絕服務(wù)攻擊
使用POST方法時(shí)，可以設(shè)置ContentLenth來(lái)定義需要傳送的數(shù)據(jù)長(zhǎng)度，例如ContentLenth:999999999，在傳送完成前，內(nèi)存不會(huì)釋放，攻擊者可以利用這個(gè)缺陷，連續(xù)向WEB服務(wù)器發(fā)送垃圾數(shù)據(jù)直至WEB服務(wù)器內(nèi)存耗盡。這種攻擊方法基本不會(huì)留下痕跡。
http://www.cnpaf.net/Class/HTTP/0532918532667330.html
4、利用HTTP協(xié)議的特性進(jìn)行拒絕服務(wù)攻擊的一些構(gòu)思
服務(wù)器端忙于處理攻擊者偽造的TCP連接請(qǐng)求而無(wú)暇理睬客戶的正常請(qǐng)求（畢竟客戶端的正常請(qǐng)求比率非常之?。?，此時(shí)從正常客戶的角度看來(lái)，服務(wù)器失去響應(yīng)，這種情況我們稱作：服務(wù)器端受到了SYNFlood攻擊（SYN洪水攻擊）。而Smurf、TearDrop等是利用ICMP報(bào)文來(lái)Flood和IP碎片攻擊的。本文用“正常連接”的方法來(lái)產(chǎn)生拒絕服務(wù)攻擊。
19端口在早期已經(jīng)有人用來(lái)做Chargen攻擊了，即Chargen_Denial_of_Service，但是！他們用的方法是在兩臺(tái)Chargen 服務(wù)器之間產(chǎn)生UDP連接，讓服務(wù)器處理過(guò)多信息而DOWN掉，那么，干掉一臺(tái)WEB服務(wù)器的條件就必須有2個(gè)：1.有Chargen服務(wù)2.有HTTP 服務(wù)
方法：攻擊者偽造源IP給N臺(tái)Chargen發(fā)送連接請(qǐng)求（Connect），Chargen接收到連接后就會(huì)返回每秒72字節(jié)的字符流（實(shí)際上根據(jù)網(wǎng)絡(luò)實(shí)際情況，這個(gè)速度更快）給服務(wù)器。
5、Http指紋識(shí)別技術(shù)
Http指紋識(shí)別的原理大致上也是相同的：記錄不同服務(wù)器對(duì)Http協(xié)議執(zhí)行中的微小差別進(jìn)行識(shí)別.Http指紋識(shí)別比TCP/IP堆棧指紋識(shí)別復(fù)雜許多,理由是定制Http服務(wù)器的配置文件、增加插件或組件使得更改Http的響應(yīng)信息變的很容易,這樣使得識(shí)別變的困難；然而定制TCP/IP堆棧的行為 需要對(duì)核心層進(jìn)行修改,所以就容易識(shí)別.
要讓服務(wù)器返回不同的Banner信息的設(shè)置是很簡(jiǎn)單的,象Apache這樣的開(kāi)放源代碼的Http服務(wù)器,用戶可以在源代碼里修改Banner信息,然后重起Http服務(wù)就生效了；對(duì)于沒(méi)有公開(kāi)源代碼的Http服務(wù)器比如微軟的IIS或者是Netscape,可以在存放Banner信息的Dll文件中修 改,相關(guān)的文章有討論的,這里不再贅述,當(dāng)然這樣的修改的效果還是不錯(cuò)的.另外一種模糊Banner信息的方法是使用插件。
常用測(cè)試請(qǐng)求：
1：HEAD/Http/1.0發(fā)送基本的Http請(qǐng)求
2：DELETE/Http/1.0發(fā)送那些不被允許的請(qǐng)求,比如Delete請(qǐng)求
3：GET/Http/3.0發(fā)送一個(gè)非法版本的Http協(xié)議請(qǐng)求
4：GET/JUNK/1.0發(fā)送一個(gè)不正確規(guī)格的Http協(xié)議請(qǐng)求
Http指紋識(shí)別工具Httprint,它通過(guò)運(yùn)用統(tǒng)計(jì)學(xué)原理,組合模糊的邏輯學(xué)技術(shù),能很有效的確定Http服務(wù)器的類(lèi)型.它可以被用來(lái)收集和分析不同Http服務(wù)器產(chǎn)生的簽名。
6、其他：為了提高用戶使用瀏覽器時(shí)的性能，現(xiàn)代瀏覽器還支持并發(fā)的訪問(wèn)方式，瀏覽一個(gè)網(wǎng)頁(yè)時(shí)同時(shí)建立多個(gè)連接，以迅速獲得一個(gè)網(wǎng)頁(yè)上的多個(gè)圖標(biāo)，這樣能更快速完成整個(gè)網(wǎng)頁(yè)的傳輸。
HTTP1.1中提供了這種持續(xù)連接的方式，而下一代HTTP協(xié)議：HTTP-NG更增加了有關(guān)會(huì)話控制、豐富的內(nèi)容協(xié)商等方式的支持，來(lái)提供更高效率的連接。
聲明：文章內(nèi)容整理來(lái)源于網(wǎng)絡(luò)，版權(quán)屬于原作者，如有問(wèn)題去，請(qǐng)聯(lián)系我們！
來(lái)源：https://www.cnblogs.com/unity3ds/p/5938606.html
- 上一篇：WiseGlove可穿戴戰(zhàn)術(shù)智能手勢(shì)手套 2021/5/9
- 下一篇：http協(xié)議詳解一 2021/5/8
