金慶的專欄
C++博客
::
首頁
::
新隨筆
::
聯(lián)系
::
聚合
::
管理
::
423 隨筆 :: 0 文章 :: 454 評(píng)論 :: 0 Trackbacks
公告
我的隨筆
我的評(píng)論
我參與的隨筆
留言簿
(12)
給我留言
查看公開留言
查看私人留言
隨筆分類
(502)
1. C/C++(166)
(rss)
2. 網(wǎng)游開發(fā)(108)
(rss)
3. Golang(20)
(rss)
4. Linux/Unix(30)
(rss)
5. 軟工與管理(44)
(rss)
6. Python(23)
(rss)
7. Erlang(18)
(rss)
8. Rust(16)
(rss)
9. 其它(77)
(rss)
隨筆檔案
(423)
2023年1月 (1)
2022年11月 (1)
2022年10月 (2)
2022年9月 (1)
2022年4月 (6)
2022年1月 (2)
2021年12月 (4)
2021年11月 (6)
2021年10月 (2)
2021年9月 (2)
2021年8月 (7)
2021年7月 (2)
2021年5月 (2)
2021年3月 (1)
2021年2月 (2)
2021年1月 (1)
2020年12月 (1)
2020年10月 (1)
2020年9月 (5)
2020年8月 (1)
2020年7月 (1)
2020年6月 (1)
2020年4月 (2)
2020年3月 (3)
2020年2月 (3)
2020年1月 (1)
2019年12月 (1)
2019年9月 (2)
2019年4月 (2)
2019年1月 (1)
2018年12月 (1)
2018年11月 (3)
2018年10月 (1)
2018年9月 (3)
2018年8月 (3)
2018年7月 (2)
2018年6月 (4)
2018年5月 (4)
2018年4月 (4)
2018年3月 (1)
2018年1月 (2)
2017年12月 (2)
2017年11月 (3)
2017年10月 (3)
2017年8月 (7)
2017年7月 (1)
2017年6月 (1)
2017年5月 (3)
2017年4月 (3)
2017年3月 (3)
2017年2月 (2)
2017年1月 (2)
2016年12月 (5)
2016年11月 (2)
2016年10月 (2)
2016年9月 (1)
2016年8月 (6)
2016年7月 (3)
2016年6月 (2)
2016年5月 (4)
2016年4月 (2)
2016年3月 (2)
2016年1月 (3)
2015年12月 (2)
2015年11月 (2)
2015年10月 (1)
2015年8月 (2)
2015年7月 (1)
2015年6月 (1)
2015年5月 (4)
2015年4月 (3)
2015年3月 (4)
2015年2月 (5)
2015年1月 (4)
2014年12月 (3)
2014年11月 (3)
2014年10月 (2)
2014年9月 (3)
2014年8月 (1)
2014年4月 (4)
2014年3月 (1)
2014年2月 (4)
2014年1月 (5)
2013年12月 (5)
2013年11月 (5)
2013年9月 (2)
2013年8月 (2)
2013年7月 (2)
2013年6月 (2)
2013年5月 (1)
2013年1月 (2)
2012年12月 (1)
2012年11月 (1)
2012年9月 (1)
2012年8月 (3)
2012年7月 (2)
2012年6月 (1)
2012年4月 (3)
2012年3月 (2)
2012年2月 (3)
2012年1月 (2)
2011年11月 (2)
2011年10月 (3)
2011年9月 (2)
2011年8月 (2)
2011年7月 (3)
2011年6月 (2)
2011年5月 (3)
2011年1月 (2)
2010年12月 (1)
2010年11月 (2)
2010年10月 (2)
2010年9月 (3)
2010年8月 (2)
2010年7月 (3)
2010年6月 (1)
2010年5月 (3)
2010年4月 (3)
2010年3月 (5)
2010年2月 (4)
2010年1月 (4)
2009年12月 (2)
2009年11月 (3)
2009年10月 (4)
2009年9月 (3)
2009年8月 (2)
2009年7月 (4)
2009年6月 (1)
2009年5月 (3)
2009年4月 (4)
2009年3月 (2)
2009年2月 (5)
2009年1月 (1)
2008年12月 (7)
2008年11月 (4)
2008年10月 (1)
2008年9月 (3)
2008年8月 (4)
2008年7月 (3)
2008年6月 (4)
2008年5月 (6)
2008年4月 (7)
2008年3月 (6)
2008年1月 (5)
2007年12月 (7)
2007年11月 (4)
2007年10月 (5)
2007年9月 (6)
2007年8月 (8)
2007年7月 (5)
相冊(cè)
公告照片
搜索
積分與排名
積分 - 656594
排名 - 25
最新評(píng)論
1.?re: boost::asio::spawn 將一統(tǒng)C++網(wǎng)絡(luò)庫
asio 成為C++首選網(wǎng)絡(luò)庫
--linda
2.?re: log4cxx中文輸出錯(cuò)誤補(bǔ)丁
評(píng)論內(nèi)容較長(zhǎng),點(diǎn)擊標(biāo)題查看
--金慶
3.?re: mingw編譯OrzNet
能發(fā)送一個(gè)mingw編譯好的OrzNet庫給我嗎? liuweiqcxy@163.com
謝謝!
--劉威
4.?re: log4cxx中文輸出錯(cuò)誤補(bǔ)丁
評(píng)論內(nèi)容較長(zhǎng),點(diǎn)擊標(biāo)題查看
--bigbad
5.?re: log4cxx中文輸出錯(cuò)誤補(bǔ)丁
評(píng)論內(nèi)容較長(zhǎng),點(diǎn)擊標(biāo)題查看
--bigbad
閱讀排行榜
1.?"multiple definition of" 錯(cuò)誤(11032)
2.?SVN中邪惡的replace(10955)
3.?VS2005編譯libevent(10413)
4.?混音算法的學(xué)習(xí)與研究(10203)
5.?C調(diào)用lua腳本的效率測(cè)試(9007)
評(píng)論排行榜
1.?VC6正在被拋棄(35)
2.?VS2005編譯libevent(21)
3.?"multiple definition of" 錯(cuò)誤(18)
4.?C++引用優(yōu)于指針(17)
5.?ACE與ASIO之間關(guān)于Socket編程的比較(16)
Firefox的HTTP內(nèi)容解壓代碼閱讀
Firefox的HTTP內(nèi)容解壓代碼閱讀
(轉(zhuǎn)載請(qǐng)注明來源于金慶的專欄)
參考firefox-2.0.0.4-source
RFC2612 3.5節(jié)Content codings, 內(nèi)容編碼定義了三種內(nèi)容壓縮方式:
gzip, compress, deflate, 但也可以注冊(cè)新的壓縮方式。
找到FireFox中的Http解壓代碼
:
Find 'deflate' in 'D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h' :
D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h(58): #define HTTP_DEFLATE_TYPE "deflate"
nsHttpCompressConv.h
#define
HTTP_DEFLATE_TYPE "deflate"
#define
HTTP_GZIP_TYPE "gzip"
#define
HTTP_X_GZIP_TYPE "x-gzip"
#define
HTTP_COMPRESS_TYPE "compress"
#define
HTTP_X_COMPRESS_TYPE "x-compress"
#define
HTTP_IDENTITY_TYPE "identity"
#define
HTTP_UNCOMPRESSED_TYPE "uncompressed"
typedef
enum
{
HTTP_COMPRESS_GZIP,
HTTP_COMPRESS_DEFLATE,
HTTP_COMPRESS_COMPRESS,
HTTP_COMPRESS_IDENTITY
} CompressMode;
定位到類與方法
:
class nsHTTPCompressConv : public nsIStreamConverter
nsHTTPCompressConv::AsyncConvertData(const char *aFromType, ...)
比較類型串,設(shè)置解壓模式。例
else if (!PL_strncasecmp(aFromType, HTTP_DEFLATE_TYPE, sizeof(HTTP_DEFLATE_TYPE)-1))
mMode = HTTP_COMPRESS_DEFLATE;
nsHTTPCompressConv::OnDataAvailable(...)
針對(duì)不同解壓模式進(jìn)行解壓。
代碼閱讀:
switch
(mMode)
{
case
HTTP_COMPRESS_GZIP:
streamLen
=
check_header(iStr, streamLen,
&
rv);
case
HTTP_COMPRESS_DEFLATE:
break
;
default
:
}
HTTP_COMPRESS_COMPRESS沒有進(jìn)行特別處理?
應(yīng)該是無法解的,可能LZW解壓算法有專利問題。
Gzip進(jìn)行頭部處理后就與deflate進(jìn)行相似的解壓。
case
HTTP_COMPRESS_DEFLATE:
if
(mMode
==
HTTP_COMPRESS_DEFLATE)
/*
deflate
*/
else
/*
gzip
*/
break
;
deflate與gzip解壓的代碼幾乎相同,應(yīng)該可以合成一塊代碼。
區(qū)別僅有:
deflate使用inflateInit(),而gzip使用inflateInit2()進(jìn)行初始化,比inflateInit()多一個(gè)參數(shù): -MAX_WBITS,表示處理raw deflate數(shù)據(jù)。因?yàn)間zip數(shù)據(jù)中的zlib壓縮數(shù)據(jù)塊沒有zlib header的兩個(gè)字節(jié)。使用inflateInit2時(shí)要求zlib庫忽略zlib header。在zlib手冊(cè)中要求windowBits為8..15,但是實(shí)際上其它范圍的數(shù)據(jù)有特殊作用,見zlib.h中的注釋,如負(fù)數(shù)表示raw deflate。
Apache的deflate變種可能也沒有zlib header,需要添加假頭后處理。即MS的錯(cuò)誤deflate (raw deflate).zlib頭第1字節(jié)一般是0x78, 第2字節(jié)與第一字節(jié)合起來的雙字節(jié)應(yīng)能被31整除,詳見rfc1950。例如Firefox的zlib假頭為0x7801,python zlib.compress()結(jié)果頭部為0x789c。
deflate添假頭,與gzip忽略頭部效果應(yīng)該是一樣的,是否可以合并處理?
能否判斷頭部?jī)蓚€(gè)字節(jié)是zlib頭部還是數(shù)據(jù)?是否有可能raw deflate數(shù)據(jù)按正常zlib塊處理了而不報(bào)錯(cuò)?
check_header()
參考:
GZIP文件格式簡(jiǎn)介
1. gz頭:0x1f8b
2. Z_DEFLATED標(biāo)志:0x08
...
其中FLG.FEXTRA的處理有個(gè)錯(cuò)誤,額外可選項(xiàng)的長(zhǎng)度應(yīng)該是兩個(gè)字節(jié)的合成:
mLen = ((uInt) c & 0377) << 8;
應(yīng)改為
mLen |= ((uInt) c & 0377) << 8;
因?yàn)樵擃~外字段一般在HTTP的應(yīng)用中不會(huì)出現(xiàn),所以沒有顯現(xiàn)出來。
我已提交:
Bugzilla@Mozilla – Bug 383984
注意:GZIP文件格式簡(jiǎn)介中的額外字段的格式與rfc1952不一致,多了兩個(gè)“選項(xiàng)ID”字節(jié)。
還有,
case GZIP_COMMENT:
if (mFlags & GZIP_COMMENT)
應(yīng)改為:
case GZIP_COMMENT:
if (mFlags & COMMENT)
該錯(cuò)誤已提交,
Bugzilla@Mozilla – Bug 382849
zlib可以處理gzip頭部,但所有g(shù)z函數(shù)都是針對(duì)gz文件進(jìn)行的,沒有直接在內(nèi)存中處理gzip的,這好象是zlib功能上的一個(gè)不足吧?
相關(guān)rfc:
rfc1950: ZLIB Compressed Data Format Specification version 3.3
rfc1951: DEFLATE Compressed Data Format Specification version 1.3
(轉(zhuǎn)載請(qǐng)注明來源于金慶的專欄)
posted on 2007-07-09 12:13
金慶
閱讀(2219)
評(píng)論(0)
編輯
收藏
引用
所屬分類:
1. C/C++
只有注冊(cè)用戶
登錄
后才能發(fā)表評(píng)論。
【推薦】100%開源!大型工業(yè)跨平臺(tái)軟件C++源碼提供,建模,組態(tài)!
相關(guān)文章:
How are dtLinks created in NavMesh
C++ parameter passing rules
Naming Conventions for Accessors
Visual Studio 2019 Compiler Hangs
Fbx File Format Identifier
查找內(nèi)存錯(cuò)誤
std::thread 中的異常會(huì)丟失調(diào)用棧
用賦值代替 protobuf CopyFrom()
vs2017 linux 編譯輸出改成 vs 格式
為 LiteIDE 添加選中標(biāo)記
網(wǎng)站導(dǎo)航:
博客園
IT新聞
BlogJava
博問
Chat2DB
管理
Powered by:
C++博客
Copyright © 金慶
久久精品亚洲一区二区三区浴池
|
91精品国产综合久久婷婷
|
精品久久久久成人码免费动漫
|
99久久精品国内
|
久久久亚洲欧洲日产国码aⅴ
|
最新久久免费视频
|
久久精品视屏
|
久久毛片免费看一区二区三区
|
亚洲欧美精品伊人久久
|
91亚洲国产成人久久精品网址
|
国产精品一久久香蕉产线看
|
色综合久久无码中文字幕
|
久久这里都是精品
|
国产aⅴ激情无码久久
|
伊人久久大香线蕉av不卡
|
97精品依人久久久大香线蕉97
|
精品一区二区久久
|
久久国产高清字幕中文
|
91亚洲国产成人久久精品
|
国产免费福利体检区久久
|
精品无码人妻久久久久久
|
日韩精品无码久久一区二区三
|
欧美色综合久久久久久
|
色天使久久综合网天天
|
久久久久久久久久久精品尤物
|
香蕉久久夜色精品升级完成
|
久久综合给合久久狠狠狠97色
|
久久夜色撩人精品国产小说
|
久久久久亚洲爆乳少妇无
|
亚洲成色999久久网站
|
精品久久人人爽天天玩人人妻
|
久久亚洲国产成人影院网站
|
精品久久久无码21p发布
|
久久精品天天中文字幕人妻
|
97久久精品人人做人人爽
|
久久亚洲精品无码观看不卡
|
午夜不卡久久精品无码免费
|
色综合久久中文综合网
|
久久精品国产AV一区二区三区
|
A狠狠久久蜜臀婷色中文网
|
亚洲国产成人久久综合野外
|