张宴的博客

使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Thu, 29 Nov 2007 14:11:29 +0000

　　[文章作者：张宴本文版本：v1.2 最后修改：2008.01.02 转载请注明出处：http://blog.zyan.cc]

　　我曾经写过一篇文章──《初步试用Squid的替代产品──Varnish Cache网站加速器》，但当时仅仅是用着玩，没做深入研究。

　　今天写的这篇关于Varnish的文章，已经是一篇可以完全替代Squid做网站缓存加速器的详细解决方案了。网上关于Varnish的资料很少，中文资料更是微乎其微，希望本文能够吸引更多的人研究、使用Varnish。

　　在我看来，使用Varnish代替Squid的理由有三点：
　　1、Varnish采用了“Visual Page Cache”技术，在内存的利用上，Varnish比Squid具有优势，它避免了Squid频繁在内存、磁盘中交换文件，性能要比Squid高。
　　2、Varnish的稳定性还不错，我管理的一台图片服务器运行Varnish已经有一个月，没有发生过故障，而进行相同工作的Squid服务器就倒过几次。
　　3、通过Varnish管理端口，可以使用正则表达式快速、批量地清除部分缓存，这一点是Squid不能具备的。

　　

　　下面来安装Varnish网站缓存加速器（Linux系统）：
　　1、创建www用户和组，以及Varnish缓存文件存放目录（/var/vcache）：
............

Tags - linux , squid , varnish , cache

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Mon, 03 Dec 2007 02:28:02 +0000

varnish如何做到在不重启的情况下重新载入配置文件

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Mon, 03 Dec 2007 02:29:03 +0000

用varnish做反向代理的时候，登录一般的网站没有任何问题。登录DZ论坛的后台出现无法登录，没有任何提示。用squid就没有这样的问题，不知道那位老大遇到过这样的问题。

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Tue, 04 Dec 2007 15:42:16 +0000

张兄，今天测了一下varnish,原来用nginx+squid ESTAB连接大概在1700的机器换了varnish后连接数只有300多了，访问起来一切正常，cacti查看到流量也是正常的，难道varnish就强在这？配置是按您的配置做的。
另外还有个问题vcache这个目录是用来保存cache文件的是吗？我在ll vcache里什么文件都没有。
还有用varnish这个方法还解决了一直让我头疼的squid不支持iis compress问题，实在太感谢了

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Wed, 05 Dec 2007 02:06:47 +0000

今天遇到的问题貌似跟楼上说的一样，varnish做反向代理后dvbbs登陆不正常，用户登陆后显示同一个用户名，验证码不变。

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Thu, 06 Dec 2007 08:20:36 +0000

正好这两天我在自己的BLOG上也做了varnish缓存的实验
用varnishncsa输出日志，但发现里面有不少日志条目是127.0.0.1来的访问，觉得比较奇怪，是不是varnishd工作时候产生的？上网找也没找到相关的解释。
老大你有没有相关知识分享一下？嘿嘿

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 07 Dec 2007 04:50:22 +0000

discuz 做缓存的话 ,可以试试使用缓存帖子分页。

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 07 Dec 2007 06:12:12 +0000

varnish可以实现类似于squid那样的父子节点关系吗？

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 07 Dec 2007 06:51:07 +0000

今天在另外一个平台上使用varnish测试
增加了
if (req.request != "GET" && req.request != "HEAD") {
pipe;
}
elseif(req.url ~ "\.(aspx|asp|shtml|vimg)($|\?)") {
pass;
}
else {
lookup;
}
}
后还是偶尔有用户登陆后显示别人的用户名
而且程序员更新js文件后不能马上看到
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge *$
purge所有后也不行，还发现一个小问题执行 varnishadm后容易使varnishd父进程吃cpu 100%一直下不来
我的访问量在 350 request/sec
e文的理解能力比较查在man跟官方faq里似乎没看到类似情况

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 07 Dec 2007 09:57:21 +0000

缓存不该缓存的对象的问题
也许可以通过在recv里
if (req.http.Cache-Control ~ "no-cache") {
pass;
}
在fetch里加
if (obj.http.Pragma ~ "no-cache" || obj.http.Cache-Control ~ "no-cache" || obj.http.Cache-Control ~ "private") {
pass;
}

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Mon, 10 Dec 2007 08:00:33 +0000

ping [timestamp]
status
start
stop
stats
vcl.load
vcl.inline
vcl.use
vcl.discard
vcl.list
vcl.show
param.show [-l] []
param.set
help [command]

telnet 管理有个 vcl.load 应该可以不重启的情况下重新载入配置文件

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Thu, 20 Dec 2007 04:02:51 +0000

张老师，我装好了，一切正常，只提到的管理这些功能不正常：
[root@linux1 ~]# /usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500
usage: varnishadm -T [address]:port command [...]

上面命令明明没有问题,端口监听也正常.

[root@linux1 ~]# /usr/local/varnish/bin/varnishstat
Cannot open /usr/local/varnish/var/varnish/www.38hao.org/_.vsl: No such file or directory
但是我的，这_.vsl文件明明是在/data/cache目录下，他非到 /usr/local/varnish/var/varnish/下读！

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 21 Dec 2007 01:59:05 +0000

[root@localhost root]# cat start_cache.sh
ulimit -SHn 51200
/usr/local/varnish/sbin/varnishd -n /home/cache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:81 -s file,/home/cache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on
/usr/local/varnish/bin/varnishncsa -n /home/cache -w /home/logs/www.log &
[root@localhost root]# sh start_cache.sh
file /home/cache/varnish_cache.data size 1073741824 bytes (262144 fs-blocks, 262144 pages)
Using old SHMFILE
[root@localhost root]# netstat -untl
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address Foreign Address State
tcp 0 0 0.0.0.0:199 0.0.0.0:* LISTEN
tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN
tcp 0 0 0.0.0.0:21 0.0.0.0:* LISTEN
tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN
tcp 0 0 127.0.0.1:25 0.0.0.0:* LISTEN
udp 0 0 0.0.0.0:161 0.0.0.0:*

服务启动时也不报错，就是看不到varnish监听的端口，如何debug? 实在看不出什么问题，
请张老师指点一下！

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 21 Dec 2007 08:49:42 +0000

(1)、Varnish通过反向代理请求后端IP为192.168.0.5，端口为80的web服务器；
backend.host 如果有多台的话是否也可以象 SQUID 那样设置在 hosts文件里面，
(3)、Varnish对域名为blog.s135.com的请求进行处理，非blog.s135.com域名的请求则返回“Zhang Yan Cache Server”；
squid 可以根据到目的IP是否符合在判断是否可以使用这样就不用判断域名不知道在 Varnish 也可以这样设置

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Sun, 23 Dec 2007 00:34:33 +0000

张老师，我服务器上用varnish+nginx在同一台机器上跑，运行没有三分钟的时候，就开始卡，仍后几乎网页打不开。不知道什么原因，而我在本地虚拟环境测试一点问题都没有，只是本地的是varnish+apache,而线上服务器是varnish+nginx，有点不解，请张老师指点一下，有遇到想关问题的朋友指点一下！
原来本地是squid+nginx速度飞快，现在是varnish+nginx就卡得不行...

[评论] 使用Varnish代替Squid做网站缓存加速器的详细解决方案[原创]

Fri, 04 Jan 2008 09:41:29 +0000

问下varnish 怎么配置泛域名的主机，我很很多二级域名，比如 xx.abc.com ，一个一个加好麻烦。。。squid 或者nginx 都支持 .abc.com 的