上一篇文章中使用nodejs程序解析了網頁編碼為gbk,gb2312,以及utf-8的情況，這里面有三種特殊的亂碼情況需要單獨的說明一下.

1，網頁編碼為utf-8,但是解析為亂碼，代表網站為www.guoguo-app.com。

這個問題真是個逗逼問題，查看網頁源碼中給出的編碼方式為utf8，如下：

<meta charset="UTF-8"><title>查快遞</title>

由于解析出來的始終是亂碼，我就抓包看了下，報文中的編碼方式為gbk，果然我使用gbk的方式之后，得到的不再是亂碼了。淘寶為了反爬蟲也是操碎了新，但是我也很好奇這種方式是怎么實現的，知道的告訴我。

GET / HTTP/1.1Host: www.guoguo-app.comConnection: closeHTTP/1.1 200 OKDate: Thu, 06 Apr 2017 01:56:23 GMTContent-Type: text/html;charset=GBKTransfer-Encoding: chunkedConnection: closeVary: Accept-EncodingVary: Accept-EncodingContent-Language: zh-CNServer: Tengine/Aserver

1，網頁編碼為utf-8,解析為亂碼情況二，代表網站http//andersonjiang.blog.sohu.com/

單純的查看網頁源碼看不出任何毛病，于是我又抓了一次包，得到如下情形：

GET / HTTP/1.1Host: andersonjiang.blog.sohu.comConnection: closeHTTP/1.1 200 OKContent-Type: text/html; charset=GBKTransfer-Encoding: chunkedConnection: closeServer: nginxDate: Thu, 06 Apr 2017 02:10:33 GMTVary: Accept-EncodingExpires: Thu, 01 Jan 1970 00:00:00 GMTRHOST: 192.168.110.68@11177Pragma: No-cacheCache-Control: no-cacheContent-Language: en-USContent-Encoding: gzipFSS-Cache: MISS from 13539701.18454911.21477824FSS-Proxy: Powered by 9935166.11245896.17873234

andersonjiang.blog.sohu.com這個網站同時采用了Transfer-Encoding: chunked傳輸編碼和Content-Encoding: gzip內容編碼功能，由于nodejs爬蟲沒有gzip解包功能，因此該網站提取不到任何字段，即title和charset等。要想提取此類網站則要添加gzip解包功能。

下面兩個網站www.cr173.com以及www.csdn.net是正常的抓包情況。

GET / HTTP/1.1Host: www.cr173.comConnection: closeHTTP/1.1 200 OKExpires: Thu, 06 Apr 2017 02:42:20 GMTDate: Thu, 06 Apr 2017 02:12:20 GMTContent-Type: text/htmlLast-Modified: Thu, 06 Apr 2017 00:52:42 GMTETag: "96a4141970aed21:0"Cache-Control: max-age=1800Accept-Ranges: bytesContent-Length: 158902Accept-Ranges: bytesX-Varnish: 1075189606Via: 1.1 varnishX-Via: 1.1 dxxz46:4 (Cdn Cache Server V2.0), 1.1 oudxin15:1 (Cdn Cache Server V2.0)Connection: closeGET / HTTP/1.1Host: www.csdn.netConnection: closeHTTP/1.1 200 OKServer: openrestyDate: Thu, 06 Apr 2017 02:18:59 GMTContent-Type: text/html; charset=utf-8Content-Length: 99363Connection: closeVary: Accept-EncodingLast-Modified: Thu, 06 Apr 2017 02:10:02 GMTVary: Accept-EncodingETag: "58e5a37a-18423"Accept-Ranges: bytes

3，網頁編碼為其他形式的編碼，解析為亂碼，例如：