[文章作者:张宴 本文版本:v1.2 最后修改:2008.01.02 转载请注明出处:http://blog.zyan.cc]

  我曾经写过一篇文章──《初步试用Squid的替代产品──Varnish Cache网站加速器》,但当时仅仅是用着玩,没做深入研究。

  今天写的这篇关于Varnish的文章,已经是一篇可以完全替代Squid做网站缓存加速器的详细解决方案了。网上关于Varnish的资料很少,中文资料更是微乎其微,希望本文能够吸引更多的人研究、使用Varnish。

  在我看来,使用Varnish代替Squid的理由有三点:
  1、Varnish采用了“Visual Page Cache”技术,在内存的利用上,Varnish比Squid具有优势,它避免了Squid频繁在内存、磁盘中交换文件,性能要比Squid高。
  2、Varnish的稳定性还不错,我管理的一台图片服务器运行Varnish已经有一个月,没有发生过故障,而进行相同工作的Squid服务器就倒过几次。
  3、通过Varnish管理端口,可以使用正则表达式快速、批量地清除部分缓存,这一点是Squid不能具备的。

  点击在新窗口中浏览此图片


  下面来安装Varnish网站缓存加速器(Linux系统):
  1、创建www用户和组,以及Varnish缓存文件存放目录(/var/vcache):
/usr/sbin/groupadd www -g 48
/usr/sbin/useradd -u 48 -g www www
mkdir -p /var/vcache
chmod +w /var/vcache
chown -R www:www /var/vcache


  2、创建Varnish日志目录(/var/logs/):
mkdir -p /var/logs
chmod +w /var/logs
chown -R www:www /var/logs


  3、编译安装varnish:
wget http://blog.zyan.cc/soft/linux/varnish/varnish-1.1.2.tar.gz
tar zxvf varnish-1.1.2.tar.gz
cd varnish-1.1.2
./configure --prefix=/usr/local/varnish
make && make install


  4、创建Varnish配置文件:
vi /usr/local/varnish/vcl.conf

  输入以下内容:
引用
backend myblogserver {
       set backend.host = "192.168.0.5";
       set backend.port = "80";
}

acl purge {
       "localhost";
       "127.0.0.1";
       "192.168.1.0"/24;
}

sub vcl_recv {
       if (req.request == "PURGE") {
               if (!client.ip ~ purge) {
                       error 405 "Not allowed.";
               }
               lookup;
       }

       if (req.http.host ~ "^blog.zyan.cc") {
               set req.backend = myblogserver;
               if (req.request != "GET" && req.request != "HEAD") {
                       pipe;
               }
               else {
                       lookup;
               }
       }
       else {
               error 404 "Zhang Yan Cache Server";
               lookup;
       }
}

sub vcl_hit {
       if (req.request == "PURGE") {
               set obj.ttl = 0s;
               error 200 "Purged.";
       }
}

sub vcl_miss {
       if (req.request == "PURGE") {
               error 404 "Not in cache.";
       }
}

sub vcl_fetch {
       if (req.request == "GET" && req.url ~ "\.(txt|js)$") {
               set obj.ttl = 3600s;
       }
       else {
               set obj.ttl = 30d;
       }
}

  这里,我对这段配置文件解释一下:
  (1)、Varnish通过反向代理请求后端IP为192.168.0.5,端口为80的web服务器;
  (2)、Varnish允许localhost、127.0.0.1、192.168.0.***三个来源IP通过PURGE方法清除缓存;
  (3)、Varnish对域名为blog.zyan.cc的请求进行处理,非blog.zyan.cc域名的请求则返回“Zhang Yan Cache Server”;
  (4)、Varnish对HTTP协议中的GET、HEAD请求进行缓存,对POST请求透过,让其直接访问后端Web服务器。之所以这样配置,是因为POST请求一般是发送数据给服务器的,需要服务器接收、处理,所以不缓存;
  (5)、Varnish对以.txt和.js结尾的URL缓存时间设置1小时,对其他的URL缓存时间设置为30天。

  5、启动Varnish
ulimit -SHn 51200
/usr/local/varnish/sbin/varnishd -n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -s file,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on


  6、启动varnishncsa用来将Varnish访问日志写入日志文件:
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/varnish.log &


  7、配置开机自动启动Varnish
vi /etc/rc.local

  在末尾增加以下内容:
引用
ulimit -SHn 51200
/usr/local/varnish/sbin/varnishd -n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -s file,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &


  8、优化Linux内核参数
vi /etc/sysctl.conf

  在末尾增加以下内容:
引用
net.ipv4.tcp_fin_timeout = 30
net.ipv4.tcp_keepalive_time = 300
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.ip_local_port_range = 5000    65000



  再看看如何管理Varnish:
  1、查看Varnish服务器连接数与命中率:
/usr/local/varnish/bin/varnishstat

  点击在新窗口中浏览此图片

  2、通过Varnish管理端口进行管理:
  用help看看可以使用哪些Varnish命令:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 help

引用
Available commands:
ping [timestamp]
status
start
stop
stats
vcl.load
vcl.inline
vcl.use
vcl.discard
vcl.list
vcl.show
param.show [-l] []
param.set
help [command]
url.purge
dump.pool


  3、通过Varnish管理端口,使用正则表达式批量清除缓存:
  (1)、例:清除类似http://blog.zyan.cc/a/zhangyan.html的URL地址):
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge /a/

  (2)、例:清除类似http://blog.zyan.cc/tech的URL地址:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge w*$

  (3)、例:清除所有缓存:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge *$


  4、一个清除Squid缓存的PHP函数(清除Varnish缓存同样可以使用该函数,无需作任何修改,十分方便):


  附1:Varnish官方网站:http://www.varnish-cache.org/

  附2:2007年12月10日,我写了一个每天0点运行,按天切割Varnish日志,生成一个压缩文件,同时删除上个月旧日志的脚本(/var/logs/cutlog.sh):
  /var/logs/cutlog.sh文件内容如下:
引用
#!/bin/sh
# This file run at 00:00
date=$(date -d "yesterday" +"%Y-%m-%d")
pkill -9 varnishncsa
mv /var/logs/youvideo.log /var/logs/${date}.log
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &
mkdir -p /var/logs/youvideo/
gzip -c /var/logs/${date}.log > /var/logs/youvideo/${date}.log.gz
rm -f /var/logs/${date}.log
rm -f /var/logs/youvideo/$(date -d "-1 month" +"%Y-%m*").log.gz

  设置在每天00:00定时执行:
  
/usr/bin/crontab -e
  或者  
vi /var/spool/cron/root
  输入以下内容:
引用
0 0 * * * /bin/sh /var/logs/cutlog.sh



Tags: , , ,



技术大类 » Cache与存储 | 评论(8741) | 引用(0) | 阅读(862419)
sam Email
2021-7-23 01:28
The Garmin lifetime updater is a free program which lets you update and manage maps on your garmin device. You can download Garmin lifetime updater for Windows and MAC fro official garmin site. The latest version of garmin lifetime updater is 2.1.11 which is available for both, 32 and 64 bit pcs.https://sites.google.com/view/garmin-com-lifetimeupdater/home
jessicajones Email
2021-7-23 16:16
Coinbase Pro is just as easy and user friendly with the huge advantage of saving you a lot of money in fees! Coinbase Pro Login |   Coinbase Pro Login |
Norain Email
2021-7-24 13:41
Thank you for this brief explanation and very nice information. This post gives truly quality information. Hope to see you again. I find that this post is really amazing.Office.com/setup
Cheap assignment help Email Homepage
2021-7-24 17:52
The structure of someone’s assignment is structured in such some way that you simply don’t ought to face hassle whereas building your mission, we tend to pay attention to everything so that you don’t have any drawback and that we additionally keep a backup set up beforehand. Success in supplying you with all the facilities of labor the prep, Coursework writing services facilitate offers you 24 hours facility.
metrendbestmicro Email Homepage
2021-7-24 19:31
trenndmicro Email Homepage
2021-7-24 19:31
Bin Solonm Email
2021-7-24 23:20
Great work and this is going to be the best CIPD assignment writing service.
Billu Shaban Email
2021-7-24 23:56
Good to see so many assignments writers here. So .get help with CIPD assignments and getting CIPD assignments done
Herny Homepage
2021-7-25 00:59
If the hosting settings to use QuickBooks multi user is not properly configured, then you are sure to face some issues. To fix QuickBooks multi-user mode not working issue, you must check the firewall or antivirus settings in your device and make sure it is not creating a possible communication issue between the two devices. You may also check the QuickBooks database servers.
gaurav Email Homepage
2021-7-25 15:07
The matter you we highlighted above is surely value able for anyone to workout. the concept of your article is very true and It will result in a positive way.
ندى
2021-7-25 19:00
<a href="https://fagor.agent-number.com">رقم صيانه فاجور</a><a href="https://electrolux.agent-number.com">رقم صيانه اليكترولوكس</a><a href="https://elba.agent-number.com">رقم صيانه البا</a><a href="https://drake.agent-number.com">رقم صيان دراكي</a><a href="https://daewoo.agent-number.com">رقم صيانه دايو</a><a href="https://crafft.agent-number.com">رقم صيانه كرافت</a><a href="https://carrier.agent-number.com">رقم صيانه كارير</a><a href="https://canon.agent-number.com">رقم صيانه كانون</a><a href="https://candy.agent-number.com">رقم صيانه كاندي</a><a href="https://caira.agent-number.com">رقم صيانه كيرا</a><a href="https://bosch.agent-number.com">رقم صيانه بوش</a><a href="https://black-decker.agent-number.com">رقم صيانه بلاك اند دكر</a><a href="https://benq.agent-number.com">رقم صيانه بينك </a><a href="https://ata.agent-number.com">رقم صيانه اية تى اية</a><a href="https://americool.agent-number.com">رقم صيانه امريكول</a><a href="https://alaska.agent-number.com">رقم صيانه الاسكا</a><a href="https://akon.agent-number.com">رقم صيانه اكون</a><a href="https://akai.agent-number.com">رقم صيانه اكاى</a><a href="https://age.agent-number.com">رقم صيانه اية جي اية</a><a href="https://admiral.agent-number.com">رقم صيانه ادميرال</a>
ندى
2021-7-25 19:01
 رقم صيانه اريستونرقم صيانه بيكورقم صيانه اليكتروستاررقم صيانه فريجيديررقم صيانه جينرال اليكتريكرقم صيانه جولدى رقم صيانه كريازىرقم صيانه ال جىرقم صيانه سامسونجرقم صيانه شاربرقم صيانه سيمنسرقم صيانه توشيبا رقم صيانه يونيون اير رقم صيانه وايت وستنجهاوسرقم صيانه وايت بوينترقم صيانه وايت ويلرقم صيانه زانوسيرقم صيانه يوركرقم صيانه اكسبيررقم صيانه وستنجهاوسرقم صيانه وايت ليبولرقم صيانه وايرليبولرقم صيانه فايلنترقم صيانه يونيفرسالرقم صيانه اليترارقم صيانه ترينرقم صيانه ترنيدورقم صيانه طومسونرقم صيانه تكنو جازرقم صيانه سيمفونيرقم صيانه سونيرقم صيانه سميجرقم صيانه سكاىرقم صيانه سيلتالرقم صيانه سانيورقم صيانه بريمارقم صيانه بريمارقم صيانه بلوتورقم صيانه فليبسرقم صيانه باسابرقم صيانه باناسونيكرقم صيانه اوليمبكرقم صيانه نورجرقم صيانه نيكونرقم صيانه ناشونالرقم صيانه ميديارقم صيانه ميتاجرقم صيانه ماجيك شيفرقم صيانه كولديررقم صيانه كيننودرقم صيانه كينموررقم صيانه كلفنيتوررقم صيانه جونكررقم صيانه جاكرقم صيانه انديسترقم صيانه ايديالرقم صيانه ايبرنارقم صيانه هيونداىرقم صيانه هيوماكسرقم صيانه هوت بوينترقم صيانه هوفررقم صيانه هيتاشيرقم صيانه هايسينسرقم صيانه هايررقم صيانه جروندجرقم صيانه جرينرقم صيانه جودلىرقم صيانه جي ام سيرقم صيانه جليم جازرقم صيانه جيبسونرقم صيانه جالانزرقم صيانه جي هانزرقم صيانه فريشرقم صيانه فيكسرقم صيانه فاجوررقم صيانه اليكترولوكسرقم صيانه البارقم صيان دراكيرقم صيانه دايورقم صيانه كرافترقم صيانه كاريررقم صيانه كانونرقم صيانه كانديرقم صيانه كيرارقم صيانه بوشرقم صيانه بلاك اند دكررقم صيانه بينكرقم صيانه اية تى ايةرقم صيانه امريكولرقم صيانه الاسكارقم صيانه اكونرقم صيانه اكاىرقم صيانه اية جي ايةرقم صيانه ادميرالÂ
ندى
2021-7-25 19:01
رقم صيانه دايورقم صيانه كرافترقم صيانه كاريررقم صيانه كانونرقم صيانه كانديرقم صيانه كيرارقم صيانه بوشرقم صيانه بلاك اند دكررقم صيانه بينكرقم صيانه اية تى ايةرقم صيانه امريكولرقم صيانه الاسكارقم صيانه اكونرقم صيانه اكاىرقم صيانه اية جي ايةرقم صيانه ادميرال
ندى
2021-7-25 19:02
https://ata.agent-number.comhttps://americool.agent-number.comhttps://alaska.agent-number.comhttps://akon.agent-number.comhttps://akai.agent-number.comhttps://age.agent-number.comhttps://admiral.agent-number.com
ندى
2021-7-25 19:02
<a href="https://americool.agent-number.com">رقم صيانه امريكول</a><a href="https://alaska.agent-number.com">رقم صيانه الاسكا</a><a href="https://akon.agent-number.com">رقم صيانه اكون</a><a href="https://akai.agent-number.com">رقم صيانه اكاى</a><a href="https://age.agent-number.com">رقم صيانه اية جي اية</a><a href="https://admiral.agent-number.com">رقم صيانه ادميرال</a>
ندى
2021-7-25 19:02
这是一条隐藏评论或留言。您需要以合适的身份登入后才能看到。
ندى
2021-7-25 19:03
<a href="https://americool.agent-number.com">رقم صيانه امريكول</a><a href="https://alaska.agent-number.com">رقم صيانه الاسكا</a><a href="https://akon.agent-number.com">رقم صيانه اكون</a><a href="https://akai.agent-number.com">رقم صيانه اكاى</a><a href="https://age.agent-number.com">رقم صيانه اية جي اية</a><a href="https://admiral.agent-number.com">رقم صيانه ادميرال</a>
ندى
2021-7-25 19:03
这是一条隐藏评论或留言。您需要以合适的身份登入后才能看到。
ندى
2021-7-25 19:03
这是一条隐藏评论或留言。您需要以合适的身份登入后才能看到。
分页: 236/438 第一页 上页 231 232 233 234 235 236 237 238 239 240 下页 最后页
发表评论
表情
emotemotemotemotemot
emotemotemotemotemot
emotemotemotemotemot
emotemotemotemotemot
emotemotemotemotemot
打开HTML
打开UBB
打开表情
隐藏
记住我
昵称   密码   游客无需密码
网址   电邮   [注册]