nginx上传缓存

① nginx如何实现负载均衡、限流、缓存、黑白名单和灰度发布

1.负载均衡配置

2.失败重试配置

在fail_timeout时间内失败了max_fails次请求后,认为上游服务器不可用,就会将服务地址剔除掉,fail_timeout时间后会再次将服务器加入存活列表进行重试。

limit_req_zone指令设置参数

参数说明

limit_req_zone定义在http块中，$binary_remote_addr表示保存客户端IP地址的二进制形式。

Zone定义IP状态及URL访问频率的共享内存区域。zone=keyword标识区域的名字，以及冒号后面跟区域大小。16000个IP地址的状态信息约1MB，例子区域可以存储160000个IP地址。

Rate定义最大请求速率。示例中速率不能超过每秒10个请求。

设置限流

burs排队大小,nodelay不限制单个请求间的时间。具体使用可以查看高并发场景如何使用nginx实现限流-实战篇

不限流白名单

该配置说明 192.168.1.0/24网段的ip访问是不限流的,其它限流。ip后面数字的含义

24表示子网掩码:255.255.255.0

16表示子网掩码:255.255.0.0

8表示子网掩码:255.0.0.0

1.浏览器缓存 静态资源缓存用expire

Response Header中添加了Expires和Cache-Control

所谓的静态资源一般包括一直不变的图像,如网站的logo,js、css静态文件还有可下载的内容，媒体文件

协商缓存(add_header ETag/Last-Modified value)包括html文件,经常替换的图片,经常需要修改的js、css文件和基本不变的api接口

不需要缓存包括用户隐私等敏感数据,用户经常变动的api接口

2.代理层缓存

在本地磁盘创建一个文件目录,根据我们的配置把请求资源以k(key自定义,这边用url的hash值)->v形式缓存到目录里,并根据需求对内容设置缓存时长,比如状态码为200缓存10分钟,其余的缓存1分钟等待。要清理缓存可以借助purger的功能。如果ab测试/个性化需求时应禁用浏览器缓存,否则会因为缓存导致误差。

方式一

方式二 lua+redis动态黑名单(openresty)

配置(/usr/local/openresty/nginx/conf/nginx.conf)

lua脚本编写(ip_blacklist.lua)

1.根据cookie实现灰度发布

根据cooke查询version值，根据version跳转到对应的host,如果没有匹配上的就跳转到默认配置。

2.根据来路ip实现灰度发布

② Nginx作为缓存服务

  上一篇文章讲了Nginx作为代理服务的使用方式，这篇文章我们讲一讲Nginx作为缓存服务是怎么工作的，以及实战的使用。
  先看一张图：

  面对第一次客户端的应用Nginx需要从后端的服务获取数据，对于后续的请求，Nginx若进行了缓存就不再从后端服务获取数据。

语法：proxy_cache_path path [levels=levels].只能用在http中。

  proxy_cache zone | off。默认是关闭的，可以用在http,server,location中。

访问zzm这个路径的时候，会返回配置文件中的spring.s项，具体值可以参考我们的启动设置：

三个后台金正分别对应6000端口，6001端口，6002端口

所以我们访问ip:port/zzm的时候会自动去访问后台

我们首先注释掉proxy_cache zzm_cache;进行访问，也就是没有缓存的情况下，访问3次：

我们可以看到没有缓存的情况下，会进行轮询访问，每次访问的结果不一样，而且我们的缓存路径什么都没有，让我想起了一首歌空空如也：

好奇的看了下目录下的文件内容：

add_header Nging-Cache "$upstream_cache_status";

当我们没有缓存的时候，我们可以看到应答会是MISS：

现在nginx.conf中加入新的配置项：

此时我们怒刷前端页面，会发现后端日志如下：

Nginx的缓存服务就讲到这里，欢迎大家指正

③ nginx 缓存机制

Nginx缓存的基本思路
基本思想是利用客户访问的时间局部性原理，对客户已经访问过的内容在Nginx服务器本地建立副本，这样在一段时间内再次访问该数据，就不需要通过Nginx服务器再次向后端服务器发出请求，所以能够减少Nginx服务器与后端服务器之间的网络流量，减轻网络拥塞，同时还能减小数据传输延迟，提高用户访问速度。同时，当后端服务器宕机时，Nginx服务器上的副本资源还能够回应相关的用户请求，这样能够提高后端服务器的鲁棒性。

对于缓存，我们大概会有以下问题：
（1）缓存文件放在哪儿？
（2）缓存的空间大小是否可以限定?
（3）如何指定哪些请求被缓存？
（4）缓存的有效期是多久？
（5）对于某些请求，是否可以不走缓存？

解决这些问题后，nginx的缓存也就基本配置完成了，下面看详细配置过程
开启缓存

要使用缓存，首先要使用 proxy_cache_path 这个指令（必须放在 http 上下文的顶层位置），然后在目标上下文中使用 proxy_cache 指令

配置示例

proxy_cache_path 有两个必填参数，第一个参数为 缓存目录，第二个参数keys_zone指定缓存名称和占用内存空间的大小（注：示例中的10m是对内存中缓存内容元数据信息大小的限制，如果想限制缓存总量大小，需要用 max_size 参数）

proxy_cache 的参数为之前指定的缓存名称

缓存管理的相关进程
在缓存工作中有两个附加进程：
（1）缓存管理器
定期检查缓存状态，看缓存总量是否超出限制，如果超出，就移除其中最少使用的部分
（2）缓存加载器
加载器只在nginx启动后运行一次，把缓存内容的元数据信息加载到内存空间，如果一次性加载全部缓存信息，会大量消耗资源，使nginx在启动后的几分钟里变慢，为避免此问题，有3种加载策略：
loader_threshold – 指定每次加载执行的时间
loader_files – 每次最多加载的数量
loader_sleeps – 每次加载的延时
例如：
proxy_cache_path /data/nginx/cache keys_zone=one:10m loader_threshold=300 loader_files=200;
指定缓存哪些请求
nginx默认会缓存所有 get 和 head 方法的请求结果，缓存的key默认使用请求字符串
（1）自定义key
例如 proxy_cache_key " request_uri cookie_nocache arg_comment;
如果任何一个参数值不为空，或者不等于0，nginx就不会查找缓存，直接进行代理转发
综合示例

nginx 缓存机制
三分钟看懂Nginx服务器的缓存原理和机制

④ Nginx的反向代理：实现灵活的请求转发和内容缓存

深入探讨Nginx的反向代理功能，旨在实现灵活的请求转发和内容缓存，以优化网站性能和用户体验。Nginx作为强大的代理服务器，不仅能够将客户端请求转发至不同的后端服务器，还能进行负载均衡和动态请求分发。此外，其内容缓存功能也值得深入研究，通过配置和优化缓存策略，可以显着提升网站响应速度。

一、代理服务器的简介

代理服务器用于在多个服务器之间分配负载、展示不同网站的内容，或通过HTTP以外的协议传递请求至应用服务器。通过合理配置，代理服务器能够提供高效、流畅的网络服务。

二、请求传递给代理的服务器

通过在Nginx中使用proxy_pass指令，可以将请求转发至指定的代理服务器。例如，将请求传递至域名或IP地址，甚至包括端口号，实现与外部服务器的通信。

三、代理多个服务器

使用upstream指令，Nginx能够代理多个服务器。通过调整weight参数实现负载均衡，确保资源在服务器间均衡分配，提高服务稳定性。

四、实现负载均衡

负载均衡是通过weight参数来调整权重实现的，确保不同服务器能够根据权重接收请求，有效利用资源。此外，Nginx还支持代理本机服务器，灵活性更强。

五、RESTful介绍

RESTful架构简化了资源访问地址模式，使得Nginx配置文件更简洁、易于维护。利用RESTful，可以更高效地管理资源，降低配置复杂性，同时支持模块化配置，提高可扩展性。

六、Nginx conf中http与server的关系

Nginx配置文件中的http与server块的关系是N对N，但实际实现过程中通过代码逻辑细化为1对N，简化了复杂流程，便于操作和维护。

七、进阶：Nginx基础组件使用

学习Nginx源码提供的基础组件，如ngx_str、list、queue、hash、array等，有助于更深入地理解Nginx工作原理。 ngx_str组件提供了字符串操作功能，对于日常开发和配置优化至关重要。

总结

掌握Nginx反向代理的配置与优化，能够显着提升网站性能和用户体验。关注技术分享公众号《Lion 莱恩呀》，获取更多学习资源和深入探讨。对C/C++、Linux系统及云原生技术感兴趣的读者，可访问链接了解白金学习卡，覆盖从基础架构到高性能技术的全面学习内容。

⑤ Nginx缓存设置教程

| 这篇文章主要介绍了Nginx缓存设置案例详解,本篇文章通过简要的案例,讲解了该项技术的了解与使用,以下就是详细内容,需要的朋友可以参考下 |

在开发调试web的时候，经常会碰到因浏览器缓存(cache)而经常要去清空缓存或者强制刷新来测试的烦恼，提供下apache不缓存配置和nginx不缓存配置的设置。在常用的缓存设置里面有两种方式，都是使用add_header来设置：分别为Cache-Control和Pragma。

对于站点中不经常修改的静态内容（如图片，JS，CSS），可以在服务器中设置expires过期时间，控制浏览器缓存，达到有效减小带宽流量，降低服务器压力的目的。

以Nginx服务器为例：

【背景】：Expires是Web服务器响应消息头字段，在响应http请求时告诉浏览器在过期时间前浏览器可以直接从浏览器缓存取数据，而无需再次请求。

【相关资料】

1、Cache-control策略

Cache-Control与Expires的作用一致，都是指明当前资源的有效期，控制浏览器是否直接从浏览器缓存取数据还是重新发请求到服务器取数据。只不过Cache-Control的选择更多，设置更细致，如果同时设置的话，其优先级高于Expires。

http协议头Cache-Control ：

值可以是public、private、no-cache、no- store、no-transform、must-revalidate、proxy-revalidate、max-age

各个消息中的指令含义如下：

Last-Modified/If-Modified-Since

其最终达到的就是等效于设置这三类html缓存技术：