青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

流量統計:
Rixu Blog (日需博客)
日需博客,每日必需來踩踩哦..
posts - 108,comments - 54,trackbacks - 0

為了提高性能,幾乎所有互聯網應用都有緩存機制,其中Memcache是使用非常廣泛的一個分布式緩存系統。眾所周知,LAMP是非常經典的Web架構方式,但是隨著Nginx的成熟,越來越多的系統開始轉型為LNMP(Linux+Nginx+MySQL+PHP with fpm),這是因為Nginx采用基于事件機制的I/O多路復用思想設計,在高并發情況下其性能遠遠優于默認采用prefork模式的Apache,另外,相對于Apache,Nginx更輕量,同時擁有大量優秀的擴展模塊,使得在Nginx上可以實現一些美妙的功能。

傳統上,PHP中使用memcache的方法是使用php-memcachephp-memached擴展操作memcache,然而在Nginx上有構建更高效緩存機制的方法,本文將首先介紹這種機制,然后介紹具體的操作步驟方法,最后將對這種機制和傳統的PHP操作memcache的性能進行一個benchmark。

Nginx的Memc和SR Cache模塊

緩存策略的改進

我們知道,Nginx的核心設計思想是事件驅動的非阻塞I/O。Nginx被設計為可以配置I/O多路復用策略,在Unix系統中傳統的多路復用是采用select或poll,但是這兩個方法的問題是隨著監聽socket的增加,性能會下降,因為在linux內核中是采用輪詢的方式判斷是否可以觸發事件,換句話說算法的復雜度為O(N),而在較新的linux內核中引入了復雜度為O(1)的epoll,因此Nginx在Linux下默認采用epoll,而在FreeBSD下默認采用kqueue作為I/O策略。

即便是這樣,傳統的緩存策略仍可能造成效率低下,因為傳統上是通過PHP操作memcache的,要執行PHP代碼,Nginx就必然要和FastCGI通信,同時也要進入PHP的生命周期,因此SAPI、PHP Core和Zend Engine的一系列邏輯會被執行。更糟糕的是,fpm和PHP可能會阻塞,因此破壞了Nginx的非阻塞性。下圖展示了在memcache命中時整個處理過程。image

可以看到,即使memcache命中,還是要進入PHP的生命周期。我們知道,目前很多互聯網應用都使用RESTful規范進行設計,在RESTful應用下,普遍使用uri和查詢參數作為緩存的key,因此一種更高效的緩存策略是Nginx直接訪問memcache,并用$uri和$args等Nginx內置變量設定緩存key規則,這樣,當緩存命中時,Nginx可以跳過通過fastcgi和PHP通信的過程,直接從memcache中獲取數據并返回。memc-nginx和srcache-nginx正是利用這種策略提高了緩存的效率。下圖是這種高效緩存策略的示意圖(當memcache命中時)。

image

模塊介紹

memc-nginxsrcache-nginx模塊均為前淘寶工程師agentzh(章亦春)開發。其中memc模塊擴展了Nginx標準的memcache模塊,增加了set、add、delete等memcache命令,而srcache則是為location增加了透明的基于subrequest的緩存層。兩者配合使用,可以實現上一節提到的高效緩存機制。關于兩個模塊的詳細信息可以參考它們Nginx官網的wiki(memc wikisrcache wiki)頁。

安裝及配置

下面以LNMP環境介紹如何使用這兩個模塊構建緩存層。

因為Nginx并不支持模塊動態加載,所以要安裝新的模塊,必須重新編譯Nginx。首先下載兩個模塊(memc下載地址srcache下載地址),另外,為了發揮出緩存的最大性能,建議將memcache的upstream配置為keep-alive,為了支持upstream的keep-alive需要同時安裝http-upstream-keepalive-module

將模塊下載并解壓到合適的目錄,這里我Nginx使用的版本是1.0.4,與相關模塊一起解壓到了/home/zhangyang/downloads,如下圖所示。

image

其中紅框框起來的是我們需要用到的模塊。進入nginx目錄,執行下列命令:

./configure --prefix=/usr/local/nginx --add-module=../memc-nginx-module --add-module=../srcache-nginx-module --add-module=../ngx_http_upstream_keepalive
make
make install

這里我將nginx安裝到/usr/local/nginx下,你可以根據自己的需要更改安裝路徑,另外,我只列出了本文必要的configure命令,你也可以增加需要的configure選項。

然后需要對nginx進行配置,nginx默認主配置文件放在安裝目錄的conf下,例如我的主配置文件為/usr/local/nginx/conf/nginx.conf。

這里我只貼出相關的配置:

#Memcache服務upstream
upstream memcache {
server localhost:11211;
keepalive 512 single;
}
server {
listen 80;
server_name localhost;
#memc-nginx-module
location /memc {
internal;
memc_connect_timeout 100ms;
memc_send_timeout 100ms;
memc_read_timeout 100ms;
set $memc_key $query_string;
set $memc_exptime 300;
memc_pass memcache;
}
location / {
root /var/www;
index index.html index.htm index.php;
}
# pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000
#
location ~ \.php$ {
charset utf-8;
default_type text/html;
#srcache-nginx-module
set $key $uri$args;
srcache_fetch GET /memc $key;
srcache_store PUT /memc $key;
root /var/www;
fastcgi_pass 127.0.0.1:9000;
fastcgi_index index.php;
include fastcgi_params;
fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
}
}

下面解釋一下其中幾個點。

上文說過,memc-nginx是一個標準的upstream模塊,因此首先需要定義memcache的upstream。這里我在本機上啟動了一個memcache服務,端口為默認的11211,keepalive指令是http-upsteram-keepalive-module提供的功能,這里我們最大保持512個不立即關閉的連接用于提升性能。

下面是為memc-nginx-module配置location,我們配置為/memc,所有請求都通過請求這個location來操作memcache,memc-nginx-module存取memcache是基于http method語義的,使用http的GET方法表示get、PUT方法表示set、DELETE方法表示delete。這里我們將/memc設為internal表示只接受內部訪問,不接收外部http請求,這是為了安全考慮,當然如果需要通過http協議開放外部訪問,可以去掉internal然后使用denyallow指令控制權限。比較重要的是$memc_key這個變量,它表示以什么作為key,這里我們直接使用Nginx內置的$query_string來作為key,$memc_exptime表示緩存失效時間,以秒記。這里統一設為300(5分鐘),在實際應用中可以根據具體情況為不同的內容設置不同的過期時間。

最后我們為“~ \.php$”這個location配置了緩存,這表示所有以“.php”結尾的請求都會結果被緩存,當然這里只是示例需要,實際中一般不會這么配,而是為特定需要緩存的location配置緩存。

srcache_fetch表示注冊一個輸入攔截處理器到location,這個配置將在location進入時被執行;而srcache_store表示注冊一個輸出攔截器到location,當location執行完成并輸出時會被執行。注意srcache模塊實際可以與任何緩存模塊進行配合使用,而不必一定是memc。這里我們以$uri$args作為緩存的key。

經過上述配置后,相當于對Nginx增加了如下邏輯:當所請求的uri以“.php”結尾時,首先到memcache中查詢有沒有以$uri$args為key的數據,如果有則直接返回;否則,執行location的邏輯,如果返回的http狀態碼為200,則在輸出前以$uri$args為key,將輸入結果存入memcache。

更多配置

上一節給出了使用memc和srcache構建緩存層的最基本方法,實際應用中可能需要更多靈活的配置,例如為不同的location配置不同的緩存參數,根據返回內容而不是返回的http狀態碼確定是否緩存等等。可以有很多的方法實現這些需求,例如,srcache還支持兩個指令:srcache_fetch_skip和srcache_fetch_skip,這兩個指令接受一個參數,當參數已定義且非0時,則進行相應操作,否則不進行。例如,如果配置了srcache_fetch_skip $skip,這條指令,那么只有當$skip的值為非0時,才將結果緩存,如果配合ngx_lua模塊的set_by_lua指令,則可以實現復雜的緩存控制。如:

location /xxxx {
set $key ...;
set_by_lua $skip '
if ngx.var.cookie_foo == "bar" then
return 1
end
return 0
';
srcache_fetch_skip $skip;
srcache_store_skip $skip;
srcache_fetch GET /memc $key;
srcache_store GET /memc $key;
# proxy_pass/fastcgi_pass/...
}

這表示對/xxxx這個location的訪問,只有存在cookie “foo”且值為“bar”時緩存機制才起作用。關于ngx_lua的更多內容請參考其主頁

另外,我最近在春哥(章亦春在淘寶的昵稱)的微博上看到他目前正在完善srcache的功能,為其實現更多RFC2616的緩存行為標準。關于這個模塊的最新動態可以關注其github主頁。

Benchmark

下面對使用memc和srcache構建的緩存機制進行一個簡單的benchmark,并與使用PHP操作memcache的策略進行一個對比。為了簡單起見,我們的測試PHP腳本不去訪問I/O,而僅僅是調用phpinfo函數輸出PHP相關信息。

測試一共分三組進行:第一組在Nginx和PHP中均不開啟緩存,第二組僅使用PHP memcache緩存,第三組僅使用Nginx memcache緩存。三組都用ab程序去壓,并發數為20,請求次數為10000。

這里的測試環境是我的一個虛擬機,操作系統為Ubuntu10,內存512M。Nginx采用epoll,單worker進程,memcache最大并發數為1024,最大使用內存64m。

不開啟緩存

這一組我們不開啟緩存,PHP程序非常簡單:

<?php
phpinfo();
?>

測試結果如下:

image

PHP memcache緩存策略

第二組我們用PHP操作緩存,測試腳本為:

<?php
$memc = new Memcached;
$memc->addServer('localhost', 11211) or die('Connect to memcache server failed!');
$output = $memc->get('my_key');
if(empty($output))
{
ob_start();
phpinfo();
$output = ob_get_contents();
ob_end_clean();
$memc->set('my_key', $output, 300);
}
echo $output;*/
?>

測試結果如下:

image

Nginx memcache緩存策略

最后,我們將PHP腳本回歸到不使用緩存的版本,并配置好memc和srcache緩存機制。測試結果如下:

image

結果對比分析

為了直觀,我取“每秒處理請求數”、“平均每個請求處理時間”和“吞吐率”作為評價指標,制作了一張圖表。

image

我想看到圖表,結論已毋需我多言。在各項指標上使用memc和srcache構建的緩存機制都大大優于使用PHP操作memcache。其中每秒處理請求數(并發度)和吞吐率都是其9倍左右,而平均個請求所用時間僅有傳統策略的1/8。

這里要特別說明一下,這里之所以PHP memcache策略比不使用緩存優勢不明顯,是因為我們的PHP腳本不涉及I/O操作,如果其中存在如數據庫存取,PHP memcache的優勢還是有的,但不論如何,Nginx memcache策略在性能上的優勢是其無法比擬的。

另外,除了性能優勢外,使用這種策略還可以簡化PHP邏輯,因為緩存這一層都放在Nginx中了,PHP就從緩存操作中解放了出來,因此是一舉多得。

如果你的系統也構建在LNMP上(或LAMP)上,不妨使用本文提到的方法替代傳統的緩存策略,盡情享受性能上的提升。

?
Logo
作者:Gezidan
出處:http://www.rixu.net    
本文版權歸作者和博客園共有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出原文連接,否則保留追究法律責任的權利。



本文轉載自 http://www.cnblogs.com/leoo2sk/archive/2011/10/02/nginx-memc-and-srcache.html
posted on 2011-10-09 09:42 日需博客 閱讀(1549) 評論(1)  編輯 收藏 引用 所屬分類: Linux技術文章轉載

FeedBack:
# re: 使用memc-nginx和srcache-nginx模塊構建高效透明的緩存機制
2012-04-20 14:12 | rocdk890
好文章,測試下來看看  回復  更多評論
  
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            亚洲国产一区二区a毛片| 亚洲——在线| 欧美一区二区视频免费观看| 中文高清一区| 亚洲欧洲精品成人久久奇米网 | 性欧美在线看片a免费观看| 亚洲视频精品在线| 欧美伊人久久大香线蕉综合69| 欧美一区二区三区四区视频| 久久久久欧美精品| 欧美激情视频给我| 国产精品午夜av在线| 国产主播精品在线| 亚洲美女色禁图| 亚洲欧美日韩精品久久亚洲区 | 亚洲午夜一区| 久久精品视频免费观看| 欧美激情中文字幕乱码免费| av72成人在线| 久久精品视频免费| 欧美日韩中文另类| 亚洲国产成人精品女人久久久| 一区二区三区精品国产| 久久综合久久88| 一区二区三区偷拍| 欧美成人精品一区二区三区| 国产日韩精品综合网站| 在线视频欧美日韩精品| 老妇喷水一区二区三区| 亚洲视频欧美视频| 欧美精品久久久久a| 国产综合在线看| 亚洲欧美精品在线| 最新中文字幕亚洲| 性久久久久久久久| 国产精品第十页| 99riav国产精品| 欧美激情精品久久久久久免费印度 | 久久天天躁狠狠躁夜夜av| 国产精品久久久久久久久借妻| 亚洲国产日韩美| 久久免费视频网| 亚洲免费网址| 欧美三级特黄| 一区二区三区国产| 亚洲高清视频中文字幕| 久久久91精品国产| 国产日韩欧美亚洲| 亚洲欧美日韩中文视频| av不卡在线| 欧美午夜宅男影院在线观看| 艳女tv在线观看国产一区| 欧美www视频| 久久午夜电影| 亚洲国产导航| 国产欧美日韩中文字幕在线| 国产精品久久久久影院亚瑟| 99在线精品视频| 亚洲精品国产系列| 欧美激情视频在线免费观看 欧美视频免费一| 国产亚洲欧美一区二区| 欧美一区二区三区久久精品| 亚洲一区二区三区高清| 免费成人毛片| 久久精品国产免费观看| 国产原创一区二区| 久久夜色精品| 免播放器亚洲一区| 国产精品视区| 久久永久免费| 欧美一区二区三区在线免费观看| 欧美日韩亚洲免费| 日韩视频二区| 亚洲啪啪91| 男女精品视频| 国产啪精品视频| 欧美在线日韩| 久久久亚洲一区| 99这里只有精品| 亚洲一区二区三区高清| 精品999在线播放| 亚洲精品久久久久| 欧美三级午夜理伦三级中文幕| 香蕉免费一区二区三区在线观看| 欧美一区精品| 亚洲人人精品| 亚洲一区欧美二区| 在线电影院国产精品| 亚洲欧洲精品成人久久奇米网| 久久女同互慰一区二区三区| 国产精品久久久| 久久久久综合一区二区三区| 久久人人97超碰国产公开结果| 亚洲精品资源| 亚洲资源av| 亚洲成人在线网| 亚洲免费电影在线| 国内外成人免费激情在线视频网站| 欧美激情久久久久| 国产精品三级视频| 亚洲国产欧美精品| 国产精品影片在线观看| 欧美激情精品久久久久久免费印度 | 亚洲国产日韩欧美在线图片| 99精品99| 最新亚洲视频| 久久精品九九| 亚洲女ⅴideoshd黑人| 免费欧美日韩国产三级电影| 久久xxxx精品视频| 欧美性猛交99久久久久99按摩| 国产精品蜜臀在线观看| 亚洲午夜精品网| 99re成人精品视频| 欧美专区亚洲专区| 亚洲欧美日韩成人| 欧美欧美在线| 亚洲大胆人体在线| 国语自产偷拍精品视频偷| 夜夜嗨av一区二区三区| 亚洲欧洲免费视频| 久久婷婷色综合| 久热精品在线视频| 国产午夜精品理论片a级大结局| 亚洲六月丁香色婷婷综合久久| 一区二区三区亚洲| 欧美一级淫片aaaaaaa视频| 亚洲自拍三区| 欧美偷拍一区二区| 亚洲伦理久久| 一本大道久久精品懂色aⅴ| 噜噜噜在线观看免费视频日韩| 噜噜噜噜噜久久久久久91| 国内自拍一区| 久久精品一本| 美日韩免费视频| 亚洲电影第1页| 欧美国产日韩一二三区| 亚洲国产欧洲综合997久久| 亚洲美女在线视频| 欧美日韩中文字幕在线| 亚洲一级片在线观看| 性久久久久久久久| 国产一区二区高清| 久久一区二区三区国产精品| 亚洲大片一区二区三区| 一区二区欧美国产| 国产精品久久久久aaaa| 亚洲欧美另类综合偷拍| 欧美在线欧美在线| 在线不卡中文字幕| 欧美激情精品久久久久久变态| 亚洲国产日韩综合一区| 亚洲一区二区黄色| 国产中文一区二区| 欧美激情一区二区三区| 亚洲特黄一级片| 久久久噜噜噜久噜久久 | 亚洲桃花岛网站| 久久久久久亚洲精品杨幂换脸| 亚洲国产精品ⅴa在线观看 | 欧美成人在线影院| 一道本一区二区| 久久久天天操| 日韩一区二区福利| 国产精品一区视频网站| 久久久久久久一区二区| 国产色产综合产在线视频| 久久亚洲春色中文字幕久久久| 亚洲国产你懂的| 久久国产欧美日韩精品| 亚洲狠狠婷婷| 国产精品一区二区三区观看| 久久躁狠狠躁夜夜爽| 一区二区三区你懂的| 欧美a级片一区| 亚洲欧美精品伊人久久| 国产精品国产三级国产aⅴ9色| 欧美尤物巨大精品爽| 在线观看欧美视频| 国产精品美女主播在线观看纯欲| 欧美成人黑人xx视频免费观看| 亚洲午夜免费视频| 亚洲第一网站免费视频| 欧美一区精品| 9色国产精品| 激情久久久久久久久久久久久久久久| 欧美激情视频一区二区三区不卡| 久久成年人视频| 亚洲一级免费视频| 艳女tv在线观看国产一区| 欧美成人一区二区三区| 久久精品水蜜桃av综合天堂| 一区二区三区精品| 亚洲欧洲日产国码二区| 黄色在线一区| 国产偷久久久精品专区| 国产精品你懂得| 国产精品久久久久久模特| 欧美人与性动交a欧美精品|