浅谈WEB中的高并发
转载:https://www.cnblogs.com/guan-520/p/9575848.html
何谓高并发
高并发指的是:在同时或极短时间内,有大量的请求到达服务端,每个请求都需要服务端耗费资源进行处理,并做出相应的反馈。
从服务端视角看高并发服务端处理请求需要耗费服务端的资源,比如能同时开启的进程数、能同时运行的线程数、网络连接数、
cpu、I/O、内存等等,由于服务端资源是有限的,那么服务端能同时处理的请求也是有限的;
高并发问题的本质就是:资源的有限性
高并发带来的问题
服务端的处理和响应会越来越慢,甚至会丢弃部分请求不予处理,更严重的会导致服务端崩溃。高并发问题并不是互联网应用独有。
高并发问题的层面比如:前端请求、Web服务器、Web应用、数据库等。
高并发处理的基本思路
一:从客户端看
1:尽量减少请求数量,比如:依靠客户端自身的缓存或处理能力
2:尽量减少对服务端资源的不必要耗费,比如:重复使用某些资源,如连接池
客户端处理的基本原则就是:能不访问服务端就不要访问
二:从服务端看
1:增加资源供给,比如:
(1)更大的网络带宽;
(2)使用更高配置的服务器;
(3)使用高性能的Web服务器;
(4)使用高性能的数据库;
2:请求分流,比如:
(1)使用集群;
(2)分布式的系统架构;
3:应用优化,比如:
(1)使用更高效的编程语言
(2)优化处理业务逻辑的算法
(3)优化访问数据库的SQL
服务端的处理基本原则是:分而治之,并提高单个请求的处理速度。
高并发处理的基本手段
客户端发出请求层面,常见的手段有:
1:尽量利用浏览器的缓存功能,减少访问服务端,比如:js、css、图片等;
2:可以考虑使用压缩传输的功能,减少网络流量,也会提高传输速度;
3:考虑使用异步请求,分批获取数据;
前端接收客户端请求层面,常见的手段有:
1:动静分离,部分静态资源可以直接从Nginx返回;
2:按请求的不同,分发到不同的后端进行处理,比如:负载均衡、业务拆分访问等;
3:前面再加上一层来做多个Nginx的负载均衡,比如:LVS、F5等;
4:还可以在更前面使用CDN服务;
5:还可以对动态内容进行缓存,尽量减少访问后端服务;
6:使用页面片断缓存技术,比如ESI(Edge Side Includes );
Web服务器层面,常见的手段有:
1:使用最新的JVM,并进行配置优化;
2:合理选择服务器的运行模式,比如有些服务器有Client和Server之分;
3:对Web服务器进行配置优化,比如:调整内存数量、线程数量等;
4:提供多个能提供相同服务的Web服务器,以实现负载均衡;
5:仔细规划Web服务器上部署的应用规模;
6:对Web服务器进行集群;
7:提供专门的图片、文件、视频等静态资源服务器;
Web应用层面,常见的手段有:
1:动态内容静态化;
2:Java开发优化;
3:优化处理业务逻辑的算法;
4:合理高效的利用缓存;
5:优化访问数据库的Sql,可以考虑利用存储过程等数据库的能力;
6:合理使用多线程,加快业务处理;
7:部分业务可以考虑内存数据库,或者是进行纯内存处理;
8:尽量避免远程调用、大量I/O等耗时的操作;
9:合理规划事务等较为耗资源的操作;
10:合理使用异步处理;
11:对部分业务考虑采用预处理或者预计算的方式,减少实时计算量;
12:内部系统间的业务尽量直接调用、直接处理,减少WebService、工作流等;
数据库层面,常见的手段有:
1:合理选择数据库的引擎,比如Mysql的InnoDB与MyISAM引擎;
2:进行配置优化;
3:可以考虑使用存储过程来处理复杂的数据逻辑;
4:数据库集群,进行读写分离;
5:合理设计数据库的表结构、索引等;
6:分库、分表,降低单库、单表的数据量;
7:合理使用NoSql;
浅谈WEB中的高并发的更多相关文章
- 浅谈web应用的高可用
1.熟悉几个组件 1.1.apache —— 它是Apache软件基金会的一个开放源代码的跨平台的网页服务器,属于老牌的web服务器了,支持基于Ip或者域名的虚拟主机,支持代理服务器,支持安全 ...
- 浅谈web应用的负载均衡、集群、高可用(HA)解决方案(转)
1.熟悉几个组件 1.1.apache —— 它是Apache软件基金会的一个开放源代码的跨平台的网页服务器,属于老牌的web服务器了,支持基于Ip或者域名的虚拟主机,支持代理服务器,支持安 ...
- 浅谈iOS中的userAgent
浅谈iOS中的userAgent User-Agent(用户代理)字符串是Web浏览器用于声明自身型号版本并随HTTP请求发送给Web服务器的字符串,在Web服务器上可以获取到该字符串. 在公司产 ...
- 【架构】浅谈web网站架构演变过程
浅谈web网站架构演变过程 前言 我们以javaweb为例,来搭建一个简单的电商系统,看看这个系统可以如何一步步演变. 该系统具备的功能: 用户模块:用户注册和管理 商品模块:商品展示和管 ...
- 浅谈HTTP中GET、POST用法以及它们的区别
浅谈HTTP中GET.POST用法以及它们的区别 HTTP定义了与服务器交互的不同方法,最基本的方法有4种,分别是GET,POST,PUT,DELETE.URL全称是资源描述符.我们可以这样认为: 一 ...
- 浅谈MySQL中优化sql语句查询常用的30种方法 - 转载
浅谈MySQL中优化sql语句查询常用的30种方法 1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中使 ...
- 转:浅谈HTTP中Get、Post、Put与Delete的区别
1.GET请求会向数据库发索取数据的请求,从而来获取信息,该请求就像数据库的select操作一样,只是用来查询一下数据,不会修改.增加数据,不会影响资源的内容,即该请求不会产生副作用.无论进行多少次操 ...
- 转【】浅谈sql中的in与not in,exists与not exists的区别_
浅谈sql中的in与not in,exists与not exists的区别 1.in和exists in是把外表和内表作hash连接,而exists是对外表作loop循环,每次loop循环再对内表 ...
- 浅谈sql中的in与not in,exists与not exists的区别
转 浅谈sql中的in与not in,exists与not exists的区别 12月12日北京OSC源创会 —— 开源技术的年终盛典 » sql exists in 1.in和exists ...
随机推荐
- eclipse下生成Java类图和时序图,生成UML图
1.安装和使用AmaterasUML 安装AmaterasUML前,需要先安装GEF采用eclipse在线安装方式安装就好.eclipse在线安装GEF的地址:http://download.ecli ...
- 在Android初次的前期学习中的二个小例子(2)
Hello13:SQLite数据库 一.简述SQLite的概念和主要特性 SQLite是一个轻量级的关系型数据库,运算速度快,占用资源少,使用非常方便,支持SQL语法标准和数据库事务原则. 相对于Sh ...
- redis基础学习---1
5.1.xshell传输文件命令快捷键:alt+p 2.当运行一个程序时,想退出按ctrl+c退出 3.给用户权限:chmod 777 redis.conf 另一种方式:chmod –x 4. 5.查 ...
- R语言与概率统计(三) 多元统计分析(上)
> #############6.2一元线性回归分析 > x<-c(0.10,0.11,0.12,0.13,0.14,0.15,0.16,0.17,0.18,0.20,0.21,0. ...
- Go项目实战:打造高并发日志采集系统(二)
日志统计系统的整体思路就是监控各个文件夹下的日志,实时获取日志写入内容并写入kafka队列,写入kafka队列可以在高并发时排队,而且达到了逻辑解耦合的目的.然后从kafka队列中读出数据,根据实际需 ...
- 【问题案例】K8S-Master修改IP地址之后,重新初始化的方法。
使用kubeadm命令,执行:kubeadm reset 重新执行初始化:kubeadm init --kubernetes-version=v1.14.1 --pod-network-cidr=10 ...
- Python3 Selenium自动化web测试 ==> 第五节 WebDriver高级应用 -- 使用JavaScript操作页面元素
学习目的: 中级水平技术提升 在WebDriver脚本代码中执行JS代码,可以解决某些 .click()方法无法生效等问题 正式步骤: Python3代码如下 # -*- coding:utf-8 - ...
- Leetcode之动态规划(DP)专题-188. 买卖股票的最佳时机 IV(Best Time to Buy and Sell Stock IV)
Leetcode之动态规划(DP)专题-188. 买卖股票的最佳时机 IV(Best Time to Buy and Sell Stock IV) 股票问题: 121. 买卖股票的最佳时机 122. ...
- 【计算机视觉】Histogram of Oriented Gridients(HOG) 方向梯度直方图
Histogram of Oriented Gridients(HOG) 方向梯度直方图 Histogram of Oriented Gridients,缩写为HOG,是目前计算机视觉.模式识别领域很 ...
- Ubuntu16.04安装python3.7及相应的pip
Ubuntu16.04安装python3.7及相应的pip:https://blog.csdn.net/qq_29837161/article/details/83616364 多版本Python安装 ...