redis是nosql数据库,mysql是sql数据库,都是数据库因此可以参考mysql整合ssm项目的过程。
2.9.0
1.7.1.RELEASE
redis.clients
jedis
${redis.version}
org.springframework.data
spring-data-redis
${redis.spring.version}
redis.properties 配置文件:
redis.hostName=localhost
redis.port=6379
redis.password=123456
redis.timeout=10000
redis.maxIdle=300
redis.maxTotal=1000
redis.maxWaitMillis=1000
redis.minEvictableIdleTimeMillis=300000
redis.numTestsPerEvictionRun=1024
redis.timeBetweenEvictionRunsMillis=30000
redis.testOnBorrow=true
redis.testWhileIdle=true
redis.expiration=3600
applicationContext.xml:
classpath:jdbc.properties
classpath:redis.properties
首先需要一个缓冲策略类,用于储存信息
package com.xzs.ssm.redis;
import lombok.extern.slf4j.Slf4j;
import org.springframework.cache.interceptor.KeyGenerator;
import org.springframework.util.ClassUtils;
import java.lang.reflect.Array;
import java.lang.reflect.Method;
@Slf4j
public class CacheKeyGenerator implements KeyGenerator {
// custom cache key
public static final int NO_PARAM_KEY = 0;
public static final int NULL_PARAM_KEY = 53;
@Override
public Object generate(Object target, Method method, Object... params) {
StringBuilder key = new StringBuilder();
key.append(target.getClass().getSimpleName()).append(".").append(method.getName()).append(":");
if (params.length == 0) {
key.append(NO_PARAM_KEY);
} else {
int count = 0;
for (Object param : params) {
if (0 != count) {//参数之间用,进行分隔
key.append(',');
}
if (param == null) {
key.append(NULL_PARAM_KEY);
} else if (ClassUtils.isPrimitiveArray(param.getClass())) {
int length = Array.getLength(param);
for (int i = 0; i < length; i++) {
key.append(Array.get(param, i));
key.append(',');
}
} else if (ClassUtils.isPrimitiveOrWrapper(param.getClass()) || param instanceof String) {
key.append(param);
} else {//Java一定要重写hashCode和eqauls
key.append(param.hashCode());
}
count++;
}
}
String finalKey = key.toString();
// IEDA要安装lombok插件
log.debug("using cache key={}", finalKey);
return finalKey;
}
}
1、定义查询接口使用Cacheable注解
Spring会在其被调用后将其返回值缓存起来,以保证下次利用同样的参数来执行该方法时可以直接从缓存中获取结果,而不需要再次执行该方法。Spring在缓存方法的返回值时是以键值对进行缓存的,值就是方法的返回结果。
package com.xzs.ssm.biz;
import com.zking.ssm.model.Clazz;
import com.zking.ssm.util.PageBean;
import org.springframework.cache.annotation.Cacheable;
import java.util.List;
import java.util.Map;
public interface ClazzBiz {
@Cacheable("clz")
Clazz selectByPrimaryKey(Integer cid);
}
2、编写测试类
package com.xzs.shiro;
import com.zking.ssm.biz.ClazzBiz;
import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;
@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations={"classpath:applicationContext.xml"})
public class ClazzBizTest {
@Autowired
private ClazzBiz clazzBiz;
@Test
public void test1(){
System.out.println(clazzBiz.selectByPrimaryKey(10));
System.out.println(clazzBiz.selectByPrimaryKey(10));
}
}
第一次运行时:(查询两次)
第二次运行时:(无查询语句)
@Cacheable可以指定三个属性,value、key和condition。
我可定义key值来修改我们保存到redis缓冲的key值,并且可通过condition来制定什么时候需要缓冲,进一步优化性能。
自定义策略,如果查询的cid大于6才进行缓冲
package com.xzs.ssm.biz; import com.zking.ssm.model.Clazz; import com.zking.ssm.util.PageBean; import org.springframework.cache.annotation.Cacheable; import java.util.List; import java.util.Map; public interface ClazzBiz { @Cacheable(value = "clz",key = "'cid:'+#cid",condition = "#cid > 6") Clazz selectByPrimaryKey(Integer cid); }
它的使用与Cacheable的使用一致,它们的区别:
package com.xzs.ssm.biz;
import com.zking.ssm.model.Clazz;
import com.zking.ssm.util.PageBean;
import org.springframework.cache.annotation.Cacheable;
import java.util.List;
import java.util.Map;
public interface ClazzBiz {
@CachePut(value = "clz",key = "'cid:'+#cid",condition = "#cid > 6")
Clazz selectByPrimaryKey(Integer cid);
}
测试:
public class ClazzBizTest {
@Autowired
private ClazzBiz clazzBiz;
@Test
public void test1(){
System.out.println(clazzBiz.selectByPrimaryKey(9));
System.out.println(clazzBiz.selectByPrimaryKey(9));
}
}
不管运行多少次,它还是会查询数据库,即便已经将数据存储到redis中
现在模拟一个场景:我在某系统中增加了一条数据,在主界面中会显示该条数据。而数据是从缓冲中拿取的,而新增的数据并没有立即添加到缓冲中。那我们如何保证redis数据与数据库数据的一致性呢?
方案一:手动刷新数据同步策略
这样我们每次添加了新的数据,需要手动点击刷新缓冲键,显然这个对管理者不便的。
方案二:利用Quartz作业调度框架,定时刷新任务
Quartz是一个开源的作业调度框架,用于在Java应用程序中实现任务调度和定时任务管理。它提供了一种简单而强大的方式来安排和执行各种类型的作业,包括定时任务、周期性任务和异步任务。
Quartz框架的核心概念是作业(Job)和触发器(Trigger)。作业是要执行的任务,而触发器定义了作业执行的时间和频率。通过配置作业和触发器,可以实现灵活的任务调度和执行。
在Redis中,它本身并没有直接使用Quartz框架。然而,我们可以结合使用Quartz和Redis来实现一些特定的功能,例如:
使用Quartz调度任务,将任务的执行结果存储到Redis中,以便其他系统或模块可以读取和处理。
使用Quartz定时清理Redis中的过期数据,以确保Redis的存储空间得到有效利用。
使用Quartz定时刷新Redis中的缓存数据,以保持数据的最新性。
使用Quartz和Redis实现分布式锁机制,确保在多个节点上的任务调度不会发生冲突。
1、击穿(Cache Miss) 击穿指的是在高并发情况下,当一个缓存键(key)不存在于缓存中,但是被大量请求同时查询时,这些请求会直接访问数据库,导致数据库压力过大。这种情况下,缓存无法发挥作用,而且数据库可能会因此而崩溃。
解决方案:
2、穿透(Cache Penetration) 穿透指的是当一个缓存键不存在于缓存中,并且被大量请求同时查询时,这些请求都会直接访问数据库,导致数据库压力过大。与击穿不同的是,穿透是因为查询的键根本不存在于缓存中。
解决方案:
在查询数据库之前,可以添加一个布隆过滤器(Bloom Filter)来快速判断查询的键是否存在于缓存中。如果不存在,可以直接返回空结果,而不是访问数据库。
对于查询结果为空的情况,也可以将空结果缓存一段时间,以避免频繁查询数据库。
3、雪崩(Cache Avalanche) 雪崩指的是在缓存中大量的缓存键同时过期或失效,导致大量请求直接访问数据库,造成数据库压力过大,甚至崩溃。
解决方案:
设置缓存键的过期时间时,可以引入随机值,使得缓存键的过期时间分散开来,避免大量缓存键同时过期。
使用热点数据预加载(Cache Pre-warming)策略,提前加载热门数据到缓存中,减少缓存键同时失效的可能性。
使用多级缓存架构,将缓存分为多个层级,以降低整体缓存失效的风险。
总结: 在解决这些问题时,我们需要综合考虑系统的并发性、可用性和性能。通过合理的缓存策略、锁机制、预加载与使用调度框架等手段,可以有效地解决Redis中的击穿、穿透和雪崩问题,提高系统的稳定性和性能。