Redis是单线程,主要是指Redis的⽹络IO和键值对读写是由⼀个线程来完成的,这也是Redis对外提供键值存储服务的主要流程。但Redis的其他功能,⽐如持久化、异步删除、集群数据同步等,其实是由额外的线程执⾏的。
1.为什么使用单线程?
1.1 多线程开销
 
系统中通常会存在被多线程同时访问的共享资源,⽐如⼀个共享的数据结构。当有多个线程要修改这个共享资源时,为了保证共享资源的正确性,就需要有额外的机制进⾏保证,⽽这个额外的机制,就会带来额外的开销。
Redis有List的数据类型,并提供出队(LPOP)和⼊队(LPUSH)操作。假设Redis采⽤多线程设计,为了保证队列⻓度的正确性,Redis需要让线程A和B的LPUSH和LPOP串⾏执⾏,这样⼀来,Redis可以⽆误地记录它们对List⻓度的修改。否则,我们可能就会得到错误的⻓度结果。这就是多线程编程模式⾯临的共享资源的并发访问控制问题。
并发访问控制⼀直是多线程开发中的⼀个难点问题,如果没有精细的设计,⽐如说,只是简单地采⽤⼀个粗粒度互斥锁,就会出现不理想的结果:即使增加了线程,⼤部分线程也在等待获取访问共享资源的互斥锁,并⾏变串⾏,系统吞吐率并没有随着线程的增加⽽增加。
 
1.2 单线程为什么快?
  • Redis的⼤部分操作在内存上完成,再加上它采⽤了⾼效的数据结构,例如哈希表和跳表,这是它实现⾼性能的⼀个重要原因。
  • Redis采⽤了多路复⽤机制,使其在⽹络IO操作中能并发处理⼤量的客⼾端请求,实现⾼吞吐率。
 
1.2.1 多路复用机制
Linux中的IO多路复⽤机制是指⼀个线程处理多个IO流,就是我们经常听到的select/epoll机制。简单来说,在Redis只运⾏单线程的情况下,该机制允许内核中,同时存在多个监听套接字和已连接套接字。内核会⼀直监听这些套接字上的连接请求或数据请求。⼀旦有请求到达,就会交给Redis线程处理,这就实现了⼀个Redis线程处理多个IO流的效果。
下图就是基于多路复⽤的Redis IO模型。图中的多个FD就是刚才所说的多个套接字。Redis⽹络框架调⽤epoll机制,让内核监听这些套接字。此时,Redis线程不会阻塞在某⼀个特定的监听或已连接套接字上,既,不会阻塞在某⼀个特定的客⼾端请求处理上。正因为此,Redis可以同时和多个客⼾端连接并处理请求,从⽽提升并发性。
 

  • select/epoll⼀旦监测到FD上有请求到达时,就会触发相应的事件。
  • 事件会被放进⼀个事件队列,Redis单线程对该事件队列不断进⾏处理。
  • 同时,Redis在对事件队列中的事件进⾏处理时,会调⽤相应的处理函数,这就实现了基于事件的回调。因为Redis⼀直在对事件队列进⾏处理,所以能及时响应客⼾端请求,提升Redis的响应性能。
 
 
Redis单线程处理IO请求性能瓶颈:
 
1、任意⼀个请求在server中⼀旦发⽣耗时,都会影响整个server的性能
1.1:操作bigkey:写⼊⼀个bigkey在分配内存时需要消耗更多的时间,同样,删除bigkey释放内存同样会产⽣耗时;
1.2:使⽤复杂度过⾼的命令:例如SORT/SUNION/ZUNIONSTORE,或者O(N)命令,但是N很⼤,例如lrange key 0 -1⼀次查询全量数据;
1.3:⼤量key集中过期:Redis的过期机制也是在主线程中执⾏的,⼤量key集中过期会导致处理⼀个请求时,耗时都在删除过期key,耗时变⻓;
1.4:⼤量key集中过期:Redis的过期机制也是在主线程中执⾏的,⼤量key集中过期会导致处理⼀个请求时,耗时都在删除过期key,耗时变⻓;
1.5:AOF刷盘开启always机制:每次写⼊都需要把这个操作刷到磁盘,写磁盘的速度远⽐写内存慢,会拖慢Redis的性能;
1.6:主从全量同步⽣成RDB:虽然采⽤fork⼦进程⽣成数据快照,但fork这⼀瞬间也是会阻塞整个线程的,实例越⼤,阻塞时间越久;
2、并发量⾮常⼤时,单线程读写客⼾端IO数据存在性能瓶颈,虽然采⽤IO多路复⽤机制,但是读写客⼾端数据依旧是同步IO,只能单线程依次读取客⼾端的数据,⽆法利⽤到CPU多核。
 

⾼性能IO模型:为什么单线程Redis能那么快的更多相关文章

  1. 单线程 Redis 为什么这么快,看看这篇就知道了

    Redis 作为一种 KV 缓存服务器,有着极高的性能,相对于 Memcache,Redis 支持更多种数据类型,因此在业界应用广泛. 记得刚毕业那会参加面试,面试官会问我 Redis 为什么快,由于 ...

  2. 03 高性能IO模型:采用多路复用机制的“单线程”Redis

    本篇重点 三个问题: "Redis真的只有单线程吗?""为什么用单线程?""单线程为什么这么快?" "Redis真的只有单线程吗? ...

  3. Redis基础篇(二)高性能IO模型

    我们经常听到说Redis是单线程的,也会有疑问:为什么单线程的Redis能那么快? 这里要明白一点:Redis是单线程,主要是指Redis的网络IO和键值对读写是由一个线程来完成的,这也是Redis对 ...

  4. 详解redis网络IO模型

    前言 "redis是单线程的" 这句话我们耳熟能详.但它有一定的前提,redis整个服务不可能只用到一个线程完成所有工作,它还有持久化.key过期删除.集群管理等其它模块,redi ...

  5. Linux五种IO模型性能分析

    1. 概念理解 在进行网络编程时,我们常常见到同步(Sync)/异步(Async),阻塞(Block)/非阻塞(Unblock)四种调用方式: 同步:       所谓同步,就是在发出一个功能调用时, ...

  6. Windows五种IO模型性能分析和Linux五种IO模型性能分析

    Windows五种IO模型性能分析和Linux五种IO模型性能分析 http://blog.csdn.net/jay900323/article/details/18141217 http://blo ...

  7. Redis为什么使用单进程单线程方式也这么快

    [转] http://www.syyong.com/db/Redis-why-the-use-of-single-process-and-single-threaded-way-so-fast.htm ...

  8. Redis 为什么使用单进程单线程方式也这么快(转载)

    Redis 采用的是基于内存的采用的是单进程单线程模型的 KV 数据库,由 C 语言编写.官方提供的数据是可以达到100000+的 qps.这个数据不比采用单进程多线程的同样基于内存的 KV 数据库 ...

  9. 网络编程并发 多进程 进程池,互斥锁,信号量,IO模型

    进程:程序正在执行的过程,就是一个正在执行的任务,而负责执行任务的就是cpu 操作系统:操作系统就是一个协调.管理和控制计算机硬件资源和软件资源的控制程序. 操作系统的作用: 1:隐藏丑陋复杂的硬件接 ...

  10. 为什么说Redis是单线程的以及Redis为什么这么快!

    参考文章:https://blog.csdn.net/xlgen157387/article/details/79470556 redis简介 Redis是一个开源的内存中的数据结构存储系统,它可以用 ...

随机推荐

  1. JS篇(004)-js 是一门怎样的语言,它有什么特点?

    答案: 1.脚本语言.JavaScript 是一种解释型的脚本语言,C.C++等语言先编译后执行,而 JavaScript 是在程序的运行过程中逐行进行解释. 2.基于对象.JavaScript 是一 ...

  2. MongoDB 分片模式

    Sharding (分片模式) 副本集可以解决主节点发生故障导致数据丢失或不可用的问题,但遇到需要存储海量数据的情况时,副本集机制就束手无策了.副本集中的一台机器可能不足以存储数据,或者说集群不足以提 ...

  3. 第三课 Hello World显示

    HelloWorld 1.新建文件件 2.新建java文件 3.编写代码 public class Hello{ public static void main(String[] args){ Sys ...

  4. python机器学习——线性回归方法

    背景与原理: 线性回归是机器学习建模中最为简单的模型,也是计算起来最为直观的模型 所谓线性回归,我们要建立的是这样的模型:对一组数据,每组数据形如$(x_{1},...,x_{n},y)$,我们希望构 ...

  5. WPF_MahApps.Metro界面主题使用

    一.创建WPF项目: 二.下载MahApps.Metro: 三.修改MainWindow.xaml 1.添加一栏: xmlns:mah="clr-namespace:MahApps.Metr ...

  6. 系统U盘安装Windows无法打开install.wim的问题

    我们在使用UltraISO工具制作Windows操作系统安装U盘,使用U盘启动,在安装Windows操作系统的过程中,出现类似"Windows无法打开所需的文件X:\sources\inst ...

  7. ESXI不重启增加硬盘空间更新

    ESXI虚拟机Linux添加新磁盘后,可以通过重新扫描SCSI总线,在不重启虚拟机的情况下添加SCSI设备在线扩容磁盘(不停机)后,添加磁盘无法识别的问题,尝试了多种办法,最终通过重新扫描SCSI设备 ...

  8. Jndi结合DynamicDataSource实现多数据源配置

    首先注意本框架是SSM,配置主要在两个地方.第一个是applicationContext.xml,第二个文件是Tomcat下面的context.xml里面 1.context.xml文件配置的代码如下 ...

  9. What is the Best Python IDE for Data Science?

    Created by Guido van Rossum, Python was first released back in 1991. The interpreted high-level prog ...

  10. 怎样修改linux内核

    1.先查看linux内核 uname -a 2.打开内核配置文件 sudo vi /etc/default/grub 3.跟新grub文件 sudo update-grub 4.最后重启电脑 sudo ...