Redis 缓存穿透

Redis 缓存穿透

https://www.cnblogs.com/jiekzou/p/9212114.html

场景描述：我们在项目中使用缓存通常都是先检查缓存中是否存在，如果存在直接返回缓存内容，如果不存在就直接查询数据库然后再缓存查询结果返回。这个时候如果我们查询的某一个数据在缓存中一直不存在，就会造成每一次请求都查询DB，这样缓存就失去了意义，在流量大时，可能DB就挂掉了。

穿透：频繁查询一个不存在的数据，由于缓存不命中，每次都要查询持久层。从而失去缓存的意义。

常用解决办法：

①用一个bitmap和n个hash函数做布隆过滤器过滤没有缓存的键。

②持久层查询不到就缓存空结果，有效时间为数分钟。

我这里使用的是双重检测同步锁方式。

修改AreaService接口，添加如下两个接口方法，selectAllArea2方法是可能会导致缓存穿透的方法。

List<Area> selectAllArea();
List<Area> selectAllArea2();

修改接口的实现类AreaServiceImpl：

复制代码

@Autowired

private RedisService redisService;

private JSONObject json = new JSONObject();

/**
 * 从缓存中获取区域列表
 *
 * @return
 */
private List<Area> getAreaList() {
    String result = redisService.get("redis_obj_area");
    if (result == null || result.equals("")) {
        return null;
    } else {
        return json.parseArray(result, Area.class);
    }
}

@Override
public List<Area> selectAllArea() {
    List<Area> list = getAreaList();
    if (list == null) {
        synchronized (this) {
            list = getAreaList(); //双重检测锁
            if (list == null) {
                list = areaMapper.selectAllArea();
                redisService.set("redis_obj_area", json.toJSONString(list));
                System.out.println("请求的数据库。。。。。。");
            } else {
                System.out.println("请求的缓存。。。。。。");
            }
        }
    } else {
        System.out.println("请求的缓存。。。。。。");
    }
    return list;
}

@Override
public List<Area> selectAllArea2() {
    List<Area> list = getAreaList();
    if (list == null) {
        list = areaMapper.selectAllArea();
        redisService.set("redis_obj_area", json.toJSONString(list));
        System.out.println("请求的数据库。。。。。。");
    } else {
        System.out.println("请求的缓存。。。。。。");
    }
    return list;
}

复制代码

运行程序，在浏览器中输入地址http://localhost:8083/boot/getAll，第一次访问

2018-06-22 10:21:24.730 INFO 10436 --- [nio-8083-exec-1] com.alibaba.druid.pool.DruidDataSource : {dataSource-1} inited

请求的数据库。。。。。。

刷新浏览器地址，第二次访问

请求的缓存。。。。。。

再打开我们的redis可视化管理工具

在之前配置mysql数据库连接的时候，由于没有指定是否采用SSL，所以控制台会有一个警告信息，如下所示：

这个是因为使用的mysql版本比较高，要求开启SSL，所以控制台会有一个警告，当然，你也可以忽略，如果要去除这个警告，可以在之前的mysql连接配置后面添加：&useSSL=false

datasource:

url: jdbc:mysql://localhost:3306/demo?&useSSL=false

删除redis中的这个key值，我们通过使用一个并发测试工具来模拟缓存穿透的现象，这里使用到了jmeter这个并发测试工具。jmeter官网： https://jmeter.apache.org/。jmeter更多使用教程：https://www.yiibai.com/jmeter/

将jmter下载到本地，然后解压，双击jmeter.bat运行

（1）右键单击“测试计划”，新建测试组

（2）新建HTTP请求

（3）保存并运行测试，这是时候其实已经在开始运行了，我们可以通过“选项"——“Log Viewer"，来查看运行日志。

此时再查看IDEA中的控制台运行情况如下：

我们看到有四次进行了数据库查询，而我们想要的其实是只进行一次数据库查询，其它的都是直接从缓存中进行查询。

重新删除redis中的key值redis_obj_area，我们再来测试一下采用了双重检测同步锁的方法selectAllArea2

修改jmeter中的请求路径

然后运行，我们再看下IDEA中控制台中的记录：

现在只有第一次是从数据库中读取了。

当然，如果我们不采用测试工具的话，我们也可以自己写一个单元测试，来进行并发测试。

单元测试类AreaServiceImplTest的代码：

复制代码

@RunWith(SpringRunner.class)

@SpringBootTest

public class AreaServiceImplTest {

@Autowired

public AreaService areaService;

@Before

public void setUp() throws Exception {

}

@Test
public void selectAllArea() throws InterruptedException {
    final CountDownLatch latch= new CountDownLatch(4);//使用java并发库concurrent
    //启用10个线程
    for(int i=1;i<=10;i++){
        new Thread(new Runnable(){
            public void run(){
                try {
                    //Thread.sleep(100);
                } catch (Exception e) {
                    e.printStackTrace();
                }
                areaService.selectAllArea();
                System.out.println(String.format("子线程%s执行！",Thread.currentThread().getName()));
                latch.countDown();//让latch中的数值减一
            }
        }).start();
    }
    //主线程
    latch.await();//阻塞当前线程直到latch中数值为零才执行
    System.out.println("主线程执行！");
}
@Test
public void selectAllArea2() throws InterruptedException {
    final CountDownLatch latch= new CountDownLatch(4);//使用java并发库concurrent
    //启用10个线程
    for(int i=1;i<=10;i++){
        new Thread(new Runnable(){
            public void run(){
                try {
                    //Thread.sleep(100);
                } catch (Exception e) {
                    e.printStackTrace();
                }
                areaService.selectAllArea2();
                System.out.println(String.format("子线程%s执行！",Thread.currentThread().getName()));
                latch.countDown();//让latch中的数值减一
            }
        }).start();
    }
    //主线程
    latch.await();//阻塞当前线程直到latch中数值为零才执行
    System.out.println("主线程执行！");
}
@Test
public void selectAllArea3(){
    Runnable runnable=new Runnable() {
        @Override
        public void run() {
            areaService.selectAllArea2();
        }
    };
    ExecutorService executorService=Executors.newFixedThreadPool(4);
    for (int i=0;i<10;i++){
        executorService.submit(runnable);
    }
}

}

复制代码

运行结果，和使用jmeter是差不多的。