金慶的專欄
C++博客
::
首頁
::
新隨筆
::
聯系
::
聚合
::
管理
::
423 隨筆 :: 0 文章 :: 454 評論 :: 0 Trackbacks
公告
我的隨筆
我的評論
我參與的隨筆
留言簿
(12)
給我留言
查看公開留言
查看私人留言
隨筆分類
(502)
1. C/C++(166)
(rss)
2. 網游開發(108)
(rss)
3. Golang(20)
(rss)
4. Linux/Unix(30)
(rss)
5. 軟工與管理(44)
(rss)
6. Python(23)
(rss)
7. Erlang(18)
(rss)
8. Rust(16)
(rss)
9. 其它(77)
(rss)
隨筆檔案
(423)
2023年1月 (1)
2022年11月 (1)
2022年10月 (2)
2022年9月 (1)
2022年4月 (6)
2022年1月 (2)
2021年12月 (4)
2021年11月 (6)
2021年10月 (2)
2021年9月 (2)
2021年8月 (7)
2021年7月 (2)
2021年5月 (2)
2021年3月 (1)
2021年2月 (2)
2021年1月 (1)
2020年12月 (1)
2020年10月 (1)
2020年9月 (5)
2020年8月 (1)
2020年7月 (1)
2020年6月 (1)
2020年4月 (2)
2020年3月 (3)
2020年2月 (3)
2020年1月 (1)
2019年12月 (1)
2019年9月 (2)
2019年4月 (2)
2019年1月 (1)
2018年12月 (1)
2018年11月 (3)
2018年10月 (1)
2018年9月 (3)
2018年8月 (3)
2018年7月 (2)
2018年6月 (4)
2018年5月 (4)
2018年4月 (4)
2018年3月 (1)
2018年1月 (2)
2017年12月 (2)
2017年11月 (3)
2017年10月 (3)
2017年8月 (7)
2017年7月 (1)
2017年6月 (1)
2017年5月 (3)
2017年4月 (3)
2017年3月 (3)
2017年2月 (2)
2017年1月 (2)
2016年12月 (5)
2016年11月 (2)
2016年10月 (2)
2016年9月 (1)
2016年8月 (6)
2016年7月 (3)
2016年6月 (2)
2016年5月 (4)
2016年4月 (2)
2016年3月 (2)
2016年1月 (3)
2015年12月 (2)
2015年11月 (2)
2015年10月 (1)
2015年8月 (2)
2015年7月 (1)
2015年6月 (1)
2015年5月 (4)
2015年4月 (3)
2015年3月 (4)
2015年2月 (5)
2015年1月 (4)
2014年12月 (3)
2014年11月 (3)
2014年10月 (2)
2014年9月 (3)
2014年8月 (1)
2014年4月 (4)
2014年3月 (1)
2014年2月 (4)
2014年1月 (5)
2013年12月 (5)
2013年11月 (5)
2013年9月 (2)
2013年8月 (2)
2013年7月 (2)
2013年6月 (2)
2013年5月 (1)
2013年1月 (2)
2012年12月 (1)
2012年11月 (1)
2012年9月 (1)
2012年8月 (3)
2012年7月 (2)
2012年6月 (1)
2012年4月 (3)
2012年3月 (2)
2012年2月 (3)
2012年1月 (2)
2011年11月 (2)
2011年10月 (3)
2011年9月 (2)
2011年8月 (2)
2011年7月 (3)
2011年6月 (2)
2011年5月 (3)
2011年1月 (2)
2010年12月 (1)
2010年11月 (2)
2010年10月 (2)
2010年9月 (3)
2010年8月 (2)
2010年7月 (3)
2010年6月 (1)
2010年5月 (3)
2010年4月 (3)
2010年3月 (5)
2010年2月 (4)
2010年1月 (4)
2009年12月 (2)
2009年11月 (3)
2009年10月 (4)
2009年9月 (3)
2009年8月 (2)
2009年7月 (4)
2009年6月 (1)
2009年5月 (3)
2009年4月 (4)
2009年3月 (2)
2009年2月 (5)
2009年1月 (1)
2008年12月 (7)
2008年11月 (4)
2008年10月 (1)
2008年9月 (3)
2008年8月 (4)
2008年7月 (3)
2008年6月 (4)
2008年5月 (6)
2008年4月 (7)
2008年3月 (6)
2008年1月 (5)
2007年12月 (7)
2007年11月 (4)
2007年10月 (5)
2007年9月 (6)
2007年8月 (8)
2007年7月 (5)
相冊
公告照片
搜索
積分與排名
積分 - 659030
排名 - 25
最新評論
1.?re: boost::asio::spawn 將一統C++網絡庫
asio 成為C++首選網絡庫
--linda
2.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--金慶
3.?re: mingw編譯OrzNet
能發送一個mingw編譯好的OrzNet庫給我嗎? liuweiqcxy@163.com
謝謝!
--劉威
4.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
5.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
閱讀排行榜
1.?"multiple definition of" 錯誤(11054)
2.?SVN中邪惡的replace(10972)
3.?VS2005編譯libevent(10429)
4.?混音算法的學習與研究(10230)
5.?C調用lua腳本的效率測試(9019)
評論排行榜
1.?VC6正在被拋棄(35)
2.?VS2005編譯libevent(21)
3.?"multiple definition of" 錯誤(18)
4.?C++引用優于指針(17)
5.?ACE與ASIO之間關于Socket編程的比較(16)
Firefox的HTTP內容解壓代碼閱讀
Firefox的HTTP內容解壓代碼閱讀
(轉載請注明來源于金慶的專欄)
參考firefox-2.0.0.4-source
RFC2612 3.5節Content codings, 內容編碼定義了三種內容壓縮方式:
gzip, compress, deflate, 但也可以注冊新的壓縮方式。
找到FireFox中的Http解壓代碼
:
Find 'deflate' in 'D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h' :
D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h(58): #define HTTP_DEFLATE_TYPE "deflate"
nsHttpCompressConv.h
#define
HTTP_DEFLATE_TYPE "deflate"
#define
HTTP_GZIP_TYPE "gzip"
#define
HTTP_X_GZIP_TYPE "x-gzip"
#define
HTTP_COMPRESS_TYPE "compress"
#define
HTTP_X_COMPRESS_TYPE "x-compress"
#define
HTTP_IDENTITY_TYPE "identity"
#define
HTTP_UNCOMPRESSED_TYPE "uncompressed"
typedef
enum
{
HTTP_COMPRESS_GZIP,
HTTP_COMPRESS_DEFLATE,
HTTP_COMPRESS_COMPRESS,
HTTP_COMPRESS_IDENTITY
} CompressMode;
定位到類與方法
:
class nsHTTPCompressConv : public nsIStreamConverter
nsHTTPCompressConv::AsyncConvertData(const char *aFromType, ...)
比較類型串,設置解壓模式。例
else if (!PL_strncasecmp(aFromType, HTTP_DEFLATE_TYPE, sizeof(HTTP_DEFLATE_TYPE)-1))
mMode = HTTP_COMPRESS_DEFLATE;
nsHTTPCompressConv::OnDataAvailable(...)
針對不同解壓模式進行解壓。
代碼閱讀:
switch
(mMode)
{
case
HTTP_COMPRESS_GZIP:
streamLen
=
check_header(iStr, streamLen,
&
rv);
case
HTTP_COMPRESS_DEFLATE:
break
;
default
:
}
HTTP_COMPRESS_COMPRESS沒有進行特別處理?
應該是無法解的,可能LZW解壓算法有專利問題。
Gzip進行頭部處理后就與deflate進行相似的解壓。
case
HTTP_COMPRESS_DEFLATE:
if
(mMode
==
HTTP_COMPRESS_DEFLATE)
/*
deflate
*/
else
/*
gzip
*/
break
;
deflate與gzip解壓的代碼幾乎相同,應該可以合成一塊代碼。
區別僅有:
deflate使用inflateInit(),而gzip使用inflateInit2()進行初始化,比inflateInit()多一個參數: -MAX_WBITS,表示處理raw deflate數據。因為gzip數據中的zlib壓縮數據塊沒有zlib header的兩個字節。使用inflateInit2時要求zlib庫忽略zlib header。在zlib手冊中要求windowBits為8..15,但是實際上其它范圍的數據有特殊作用,見zlib.h中的注釋,如負數表示raw deflate。
Apache的deflate變種可能也沒有zlib header,需要添加假頭后處理。即MS的錯誤deflate (raw deflate).zlib頭第1字節一般是0x78, 第2字節與第一字節合起來的雙字節應能被31整除,詳見rfc1950。例如Firefox的zlib假頭為0x7801,python zlib.compress()結果頭部為0x789c。
deflate添假頭,與gzip忽略頭部效果應該是一樣的,是否可以合并處理?
能否判斷頭部兩個字節是zlib頭部還是數據?是否有可能raw deflate數據按正常zlib塊處理了而不報錯?
check_header()
參考:
GZIP文件格式簡介
1. gz頭:0x1f8b
2. Z_DEFLATED標志:0x08
...
其中FLG.FEXTRA的處理有個錯誤,額外可選項的長度應該是兩個字節的合成:
mLen = ((uInt) c & 0377) << 8;
應改為
mLen |= ((uInt) c & 0377) << 8;
因為該額外字段一般在HTTP的應用中不會出現,所以沒有顯現出來。
我已提交:
Bugzilla@Mozilla – Bug 383984
注意:GZIP文件格式簡介中的額外字段的格式與rfc1952不一致,多了兩個“選項ID”字節。
還有,
case GZIP_COMMENT:
if (mFlags & GZIP_COMMENT)
應改為:
case GZIP_COMMENT:
if (mFlags & COMMENT)
該錯誤已提交,
Bugzilla@Mozilla – Bug 382849
zlib可以處理gzip頭部,但所有gz函數都是針對gz文件進行的,沒有直接在內存中處理gzip的,這好象是zlib功能上的一個不足吧?
相關rfc:
rfc1950: ZLIB Compressed Data Format Specification version 3.3
rfc1951: DEFLATE Compressed Data Format Specification version 1.3
(轉載請注明來源于金慶的專欄)
posted on 2007-07-09 12:13
金慶
閱讀(2224)
評論(0)
編輯
收藏
引用
所屬分類:
1. C/C++
只有注冊用戶
登錄
后才能發表評論。
【推薦】100%開源!大型工業跨平臺軟件C++源碼提供,建模,組態!
相關文章:
How are dtLinks created in NavMesh
C++ parameter passing rules
Naming Conventions for Accessors
Visual Studio 2019 Compiler Hangs
Fbx File Format Identifier
查找內存錯誤
std::thread 中的異常會丟失調用棧
用賦值代替 protobuf CopyFrom()
vs2017 linux 編譯輸出改成 vs 格式
為 LiteIDE 添加選中標記
網站導航:
博客園
IT新聞
BlogJava
博問
Chat2DB
管理
Powered by:
C++博客
Copyright © 金慶
99久久做夜夜爱天天做精品
|
中文字幕人妻色偷偷久久
|
人人狠狠综合久久亚洲婷婷
|
超级碰久久免费公开视频
|
久久精品这里只有精99品
|
久久精品国产久精国产果冻传媒
|
AV无码久久久久不卡蜜桃
|
久久国产视屏
|
国产成人久久精品区一区二区
|
精品久久久无码中文字幕天天
|
久久久久亚洲AV成人网人人网站
|
人人狠狠综合久久亚洲婷婷
|
久久久这里只有精品加勒比
|
91精品婷婷国产综合久久
|
亚洲中文字幕无码久久2020
|
色婷婷综合久久久久中文字幕
|
久久天天躁狠狠躁夜夜网站
|
色综合久久88色综合天天
|
97久久国产亚洲精品超碰热
|
久久久久久久97
|
亚洲欧洲久久av
|
亚洲人成无码网站久久99热国产
|
久久精品嫩草影院
|
久久99国产乱子伦精品免费
|
欧美麻豆久久久久久中文
|
精品久久久久久无码中文字幕
|
亚洲国产精品久久
|
69久久精品无码一区二区
|
嫩草伊人久久精品少妇AV
|
偷窥少妇久久久久久久久
|
日本国产精品久久
|
色综合久久中文字幕综合网
|
久久国产V一级毛多内射
|
久久男人AV资源网站
|
久久国产午夜精品一区二区三区
|
国产亚洲美女精品久久久
|
久久亚洲国产午夜精品理论片
|
91精品国产高清久久久久久io
|
国产韩国精品一区二区三区久久
|
91精品国产综合久久婷婷
|
国产精品一久久香蕉产线看
|