我的代理缓存路径设置得非常大
proxy_cache_path /var/lib/nginx/cache levels=1:2 keys_zone=staticfilecache:180m max_size=700m;
并且使用的尺寸仅为
sudo du -sh *
14M cache
4.0K proxy
代理缓存有效设置为
proxy_cache_valid 200 120d;
我通过以下方式跟踪 HIT 和 MISS
add_header X-Cache-Status $upstream_cache_status;
尽管进行了这些设置,我还是看到了很多未命中。这些页面是我一小时前特意运行缓存预热器的。
我如何调试这些 MISS 发生的原因?我如何确定 MISS 是否是由于驱逐、过期、一些流氓标头等等?Nginx 是否提供了相关命令?
编辑:完整配置
# at http level
proxy_cache_path /var/lib/nginx/cache levels=1:2 inactive=400d keys_zone=staticfilecache:180m max_size=700m;
proxy_temp_path /var/lib/nginx/proxy;
proxy_connect_timeout 30;
proxy_read_timeout 120;
proxy_send_timeout 120;
#prevent header too large errors
proxy_buffers 256 16k;
proxy_buffer_size 32k;
#httpoxy exploit protection
proxy_set_header Proxy "";
# at server level
add_header Cache-BYPASS-Reason $skip_reason;
# define nginx variables
set $do_not_cache 0;
set $skip_reason "";
set $bypass 0;
# security for bypass so localhost can empty cache
if ($remote_addr ~ "^(127.0.0.1|Web.Server.IP)$") {
set $bypass $http_8X0;
}
# skip caching WordPress cookies
if ($http_cookie ~* "comment_author_|wordpress_(?!test_cookie)|wp-postpass_" ) {
set $do_not_cache 1;
set $skip_reason Cookie;
}
# Don't cache URIs containing the following segments
if ($request_uri ~* "/wp-admin/|/xmlrpc.php|wp-.*.php") {
set $skip_cache 1;
set $skip_reason URI;
}
# https://guides.wp-bullet.com/how-to-configure-nginx-reverse-proxy-wordpress-cache-apache/
location / {
proxy_pass http://127.0.0.1:8000;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto https;
proxy_set_header X-Forwarded-Port 443;
proxy_set_header Host $host;
proxy_set_header Accept-Encoding "";
# may need to comment out proxy_redirect if get login redirect loop
proxy_redirect off;
proxy_cache_key "$scheme://$host$uri";
add_header X-Nginx-Cache-Head "$scheme://$host$uri";
proxy_cache staticfilecache;
proxy_cache_valid 200 301 302 100d;
proxy_cache_valid 404 1m;
add_header Cache-Control public;
proxy_ignore_headers Expires;
proxy_ignore_headers "Cache-Control";
proxy_ignore_headers X-Accel-Expires;
proxy_hide_header "Cache-Control";
proxy_hide_header Pragma;
proxy_hide_header Server;
proxy_hide_header Request-Context;
proxy_hide_header X-Powered-By;
proxy_cache_revalidate on;
proxy_hide_header X-AspNet-Version;
proxy_hide_header X-AspNetMvc-Version;
#proxy_pass_header X-Accel-Expires;
add_header X-Nginx-Cache-Status $upstream_cache_status;
proxy_cache_use_stale error timeout invalid_header updating http_500 http_502 http_503 http_504;
proxy_cache_bypass $arg_nocache $do_not_cache $http_8X0;
proxy_no_cache $do_not_cache;
}
location ~* \.(jpg|png|gif|jpeg|css|js|mp3|wav|swf|mov|doc|pdf|xls|ppt|docx|pptx|xlsx)$ {
proxy_cache_valid 200 120d;
expires 364d;
add_header Cache-Control public;
proxy_pass http://127.0.0.1:8000;
proxy_cache staticfilecache;
add_header X-Nginx-Cache-Status $upstream_cache_status;
proxy_cache_use_stale error timeout invalid_header updating http_500 http_502 http_503 http_504;
}
答案1
您可能需要将inactive
参数设置proxy_cache_path
为大于某个值120d
(或您希望最大缓存时间实际为的值)。默认非活动时间为 10 分钟。只要您缓存的 URL 在非活动参数的时间范围内被访问,您的缓存就是有效的,但如果在该时间范围内未被访问,它将被从缓存中移除。请参阅了解 nginx proxy_cache_path 指令了解更多信息。
我认为这不属于典型的 $upstream_cache_status 样式调试因为缓存清理不会在请求/响应周期内发生。据我所知,如果 nginx 工作进程没有执行其他任何操作,它会将缓存清理作为低优先级任务执行。我不确定此活动会显示在日志中的哪个位置,但它很可能只会在启用调试的版本中显示。
答案2
缓存:
您是否proxy_cache
在您的location
或server
块中启用了?
例如location /
,Nginx 文档。
proxy_cache_path /var/lib/nginx/cache levels=1:2 keys_zone=staticfilecache:180m max_size=700m;
server {
# ...
location / {
proxy_cache my_cache;
proxy_cache_revalidate on;
proxy_cache_min_uses 3;
proxy_cache_use_stale error timeout updating http_500 http_502
http_503 http_504;
proxy_cache_background_update on;
proxy_cache_lock on;
# ...
}
为了使缓存正常工作,您至少需要两个强制设置:
如果您将其设置在某个location
块中,您确定这是您想要缓存的块吗?
分析
如果您希望分析命中结果,您可以为其创建一个特定的日志:
log_format cache_st '$remote_addr - $upstream_cache_status [$time_local] '
'"$request" $status $body_bytes_sent '
'"$http_referer" "$http_user_agent"';
并且在同一个server
或location
块中,您可以将其添加为辅助日志,这样您就不会错过其他内容:
access_log /var/log/nginx/domain.com.access.log;
access_log /var/log/nginx/domain.com.cache.log cache_st;
然后您可以检查一些统计数据:
HIT、MISS、BYPASS、EXPIRED 对比
awk '{print $3}' cache.log | sort | uniq -c | sort -r
错过网址:
awk '($3 ~ /MISS/)' cache.log | awk '{print $7}' | sort | uniq -c | sort -r
绕过 URL:
awk '($3 ~ /BYPASS/)' cache.log | awk '{print $7}' | sort | uniq -c | sort -r
MISS 与 BYPASS
- 错过当模式配置为缓存但在请求时未缓存时,会发生这种情况。在正确的配置中,后续请求将根据缓存持续时间等参数从缓存中提供。
- 旁路当模式明确配置为不使用缓存时,就会发生这种情况。例如,跳过已登录用户的缓存。后续请求也将被绕过。
分析来源:-https://easyengine.io/tutorials/nginx/upstream-cache-status-in-access-log/
另一种即时分析的选择通过控制台使用 GoAccess,这是一个非常好的实时网络日志分析器,只需要ncurses上班:https://goaccess.io/
答案3
尝试缓存什么?cms?静态页面?通常,如果支持发送 no-cache 、expire -1 或 cache private ,您将会遇到未命中。如果是 cookie,您也会遇到未命中。