Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载)
Java生鲜电商平台-性能优化以及服务器优化的设计与架构
说明:Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构,我采用以下三种维度来讲解
1. 代码层面。
2. 数据库层面。
3. 服务器层面
诚然,性能优化这个方面的确是一个长期的过程,并不是大伙们看了我的文章后就觉得可以做的很好的,我这边只是起一个抛砖引玉的作用,给大伙一种解决问题的思路与方向。
1. Java代码层面优化
补充说明:Java代码层面优化,你需要知道的是,那些代码需要优化,我们知道八二定律告诉我们,80%的性能问题出在20%的代码上,我们需要的是找到那些20%的代码进行针
对性的优化,这样才能把服务的质量优化得最好。
那么如何进行监控呢?又怎么样进行监控呢?可以先看前一篇文章:<Java开源生鲜电商平台-监控模块的设计与架构(源码可下载)>. 具体情况大家可以去看。
我列举几个常见的优化方案:用实战来说明一切。
看以下代码:
我们知道,买家在支付成功后,支付宝或者微信会服务端回调,然后我们处理自己的业务。
相应的业务,我们在订单服务器层创建一个方法:
/**
* 支付返回
* @return orderInfo 订单信息
*/
public void payReturn(OrderInfo orderInfo,PayLogs payLogs);
业务实现有以下需要注意的,(我只分享核心内容,非核心的大家自己去看源代码即可)
1. 更新支付状态,变成已付款,
2.更新配送状态,待配送。
3. 更改交易日志表,变成已经付款。
4. 更新订单明细表,记录所有的订单明细都有效。
5.更新用户的余额为0,
6. 记录相关的操作日志等等。
相应的代码如下:(spring 事物控制在服务层,如果以上6个步骤有一个错误,则全部回滚。)
@Override
public void payReturn(OrderInfo orderInfo, PayLogs payLogs) {
orderInfoDao.payReturn(orderInfo);
orderItemDao.updateOrderItemByOrderNumber(orderInfo.getOrderNumber());
buyerDao.updateBuyerBalanceToZero(orderInfo.getBuyerId());
payLogsDao.updatePayLogs(payLogs);
logDao.insertOperatorLogs(orderInfo,payLogs);
}
我们发现,以上6补需要采用5个数据库连接才可以完成,而且在同一个事务里面,因为需要保证数据的一致性。
我们发现,整个业务的操作需要2s完成,对于我们监控业务在500ms的目标,相距太远了,怎么办?
以上代码,究竟那块的性能最差呢?
orderInfoDao.payReturn(orderInfo); 花费:100ms
orderItemDao.updateOrderItemByOrderNumber(orderInfo.getOrderNumber()); 花费300ms
buyerDao.updateBuyerBalanceToZero(orderInfo.getBuyerId()); 花费200ms
payLogsDao.updatePayLogs(payLogs); 花费800ms
logDao.insertOperatorLogs(orderInfo,payLogs); 花费600ms
综合以上分析,我们需要把同步改成异步,分析出问题的关键。
payLogsDao.updatePayLogs(payLogs); 这块代码进行了优化。
我们惊奇的发现,用户存在刷单的情况,就是不停的支付,就是不支付,对于线上1000多个买家而言,平均每天2单-5单,每单平均订单数在1-10之间
那么一个月的订单日志记录就是:1000*30*5*10=1500000记录,我的天,问题出在这里。日志表也有巨大的量。
最终解决方案:同步改异步进行处理。用redis队列处理,最终性能提高到了500ms内。
一个核心的思想就是:找出问题,解决问题,分而治之的原理进行处理。但是大部分人都输在找问题在,不是找问题难,而是找到核心出问题的代码难。监控那篇文章大伙可以再看看。
2. 数据库方面
补充说明:数据库方面无外乎就是关联查询的时候,增加索引,使查询性能更高。那么到底如何做呢?
查询优化:
1.使用慢查询日志去发现慢查询。
2. 使用执行计划去判断查询是否正常运行。
3. 总是去测试你的查询看看是否他们运行在最佳状态下 –久而久之性能总会变化。
4. 避免在整个表上使用count(*),它可能锁住整张表。
相关的优化理论,我已经整理到以前的一篇文章了,这边就不再列举
查看《Mysql性能优化》---https://www.cnblogs.com/jurendage/p/3798703.html
3. 服务器监控
说明:我们所说的服务器优化,很大部分是指的tomcat的优化,而不是大家所说的Linux本身的优化,当然这样文章很多,笔者只是用实际说话,看看我们的B2B电商平台如何进行服务器性能的优化。
3.1 tomcat的JVM优化。
这个根据大家自己的电脑进行配置,具体情况需要大家百度自己研究,说来话长
#!/bin/sh
JAVA_OPTS="-server -Xms1024M -Xmx1024M -Xss512k -XX:+AggressiveOpts -XX:+UseBiasedLocking -XX:+DisableExplicitGC -XX:+PrintGCDetails -XX:+PrintGCDateStamps -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/log/buyer/gcdump -XX:MaxTenuringThreshold=15 -XX:+UseConcMarkSweepGC -XX:+UseParNewGC -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullCollection -XX:LargePageSizeInBytes=128m -XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly -Djava.awt.headless=true"
这个是笔者的阿里云的服务器的优化。
3.2 tomcat的连接池优化
<Connector port="8081" protocol="org.apache.coyote.http11.Http11NioProtocol"
connectionTimeout="20000"
maxConnections="1000"
maxThreads="100"
minSpareThreads="50"
acceptCount="500"
enableLookups="false"
compression="on"
URIEncoding="UTF-8"
redirectPort="8443" />
相关的优化方案可能很多,但是这些都是笔者1年半的实战总结,可能又不算很好的地方,但是稳定性压倒一切,希望分享出来,一起努力。。
总结:优化是一个长期的过程,无外乎就是代码级别,数据库级别,服务器级别,负载均衡等等手段
我写文章的目的也跟大家说下,以免大家误会
第一,项目生产环境运行了一年半了.
第二,这个是技术分享.
第三,我人不是很顽固,是很执着。
第四,我想让更多的人学习好技术一起奋斗,所以我坚持,天天写,日日写,月月写。
第五,如果你写过博客,你就知道坚持是很难的一件事情,
第六,你要知道我每篇文章都是cnblogs的头条,而且每篇文章的都是精华,访问量都到3000+
其实我需要的互相学习,互相进步,仅此而已。
Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载)的更多相关文章
- 39、生鲜电商平台-redis缓存在商品中的设计与架构
说明:Java开源生鲜电商平台-redis缓存在商品中的设计与架构. 1. 各种计数,商品维度计数和用户维度计数 说起电商,肯定离不开商品,而附带商品有各种计数(喜欢数,评论数,鉴定数,浏览数,etc ...
- Java生鲜电商平台-redis缓存在商品中的设计与架构
Java生鲜电商平台-redis缓存在商品中的设计与架构 说明:Java开源生鲜电商平台-redis缓存在商品中的设计与架构. 1. 各种计数,商品维度计数和用户维度计数 说起电商,肯定离不开商品,而 ...
- Java开源生鲜电商平台-监控模块的设计与架构(源码可下载)
Java开源生鲜电商平台-监控模块的设计与架构(源码可下载) 说明:Java开源生鲜电商平台-监控模块的设计与架构,我们谈到监控,一般设计到两个方面的内容: 1. 服务器本身的监控.(比如:linux ...
- Java开源生鲜电商平台-安全设计与架构(源码可下载)
Java开源生鲜电商平台-安全设计与架构(源码可下载) 说明:Java开源生鲜电商平台是一个B2B的生鲜电商平台,由于是APP的一种模式,所以安全方面一般会思考以下几个维度: 1.数据安全. 2.传输 ...
- Java开源生鲜电商平台-系统简介
Java开源生鲜电商平台-系统简介 1.生鲜电商平台的价值与定位. 生鲜电商平台是一家致力于打造全国餐饮行业智能化.便利化.平台化与透明化服务的创新型移动互联网平台,连接买家与卖家之间的一个平台 看以 ...
- Java开源生鲜电商平台-系统架构与技术选型(源码可下载)
Java开源生鲜电商平台-系统架构与技术选型(源码可下载) 1. 硬件环境 公司服务器 2. 软件环境 2.1 操作系统 Linux CentOS 6.8系列 2.2 反向代理/web服务器 ...
- Java开源生鲜电商平台-盈利模式详解(源码可下载)
Java开源生鲜电商平台-盈利模式详解(源码可下载) 该平台提供一个联合买家与卖家的一个平台.(类似淘宝购物,这里指的是食材的购买.) 平台有以下的盈利模式:(类似的平台有美菜网,食材网等) 1. 订 ...
- Java开源生鲜电商平台-用户表的设计(源码可下载)
Java开源生鲜电商平台-用户表的设计(源码可下载) 说明:由于该系统属于B2B平台,不设计到B2C的架构. 角色分析:买家与卖家. 由于买家与卖家所填写的资料都不一样,需要建立两站表进行维护,比如: ...
- Java开源生鲜电商平台-商品表的设计(源码可下载)
Java开源生鲜电商平台-商品表的设计(源码可下载) 任何一个电商,无论是B2C还是B2B的电商,商品表的设计关系到整个系统架构的核心. 1. 商品基本信息表:用单词:goods做为商品表 2. 商品 ...
随机推荐
- iframe之局部刷新
例如: <iframe src="1.htm" name="ifrmname" id="ifrmid"></ifram ...
- JAVA 平台
由Java虚拟机和Java核心类所构成.它为纯Java程序提供了统一的编程接口,而不管下层操作系统是什么. 目录 1Java术语 2移动平台 3桌面应用平台 4企业级平台 5JRE的成分 1J ...
- Java面试与回答技巧(1.如何正确的面试)
在IT行业中,大部分公司很难用有效的方式招到合适的人.直接暴露出来的问题是:・花重金招了一个人,但实际的战斗力还比不上应届毕业生.・招聘了一个知名企业的高管,引入了一些高大上的技术,结果本来稳定的生产 ...
- python3学习笔记1---引用http://python3-cookbook.readthedocs.io/zh_CN/latest/
2018-02-28数据结构和算法(1) 1.1解压序列赋值给多个变量: 任何的序列(或者是可迭代对象)可以通过一个简单的赋值语句解压并赋值给多个变量. 唯一的前提就是变量的数量必须跟序列元素的数量是 ...
- 拖拽模块move1
刚开的博客,想着写点什么,以前写过拖拽函数,后来又学习了模块化,于是一直想把之前写的拖拽函数封成一个独立的模块,方便以后调用,说干就干,下面码代码... <script> var move ...
- 多线程中操作UI
遇到过要在工作线程中去更新UI以让用户知道进度,而在多线程中直接调用UI控件操作是错误的做法. 最后解决方法是将操作UI的代码封装,通过Invoke / BeginInvoke 去委托调用. 代码封装 ...
- NSURLSession 所有的都在这里(二)
前面一篇我们说了什么? 这是这个关于NSURLSession的第二篇文章,第一篇再加上这篇文章,就大概的把NSURLSession的API以及一些简单使用我们也就说的差不多了,这篇文章总结哪些点呢?相 ...
- Postgresql中临时表(temporary table)的特性和用法
熟悉Oracle的人,相比对临时表(temporary table)并不陌生,很多场景对解决问题起到不错的作用,开源库Postgresql中,也有临时表的概念,虽然和Oracle中临时表名字相同,使用 ...
- ML.NET指南
ML.NET是一个免费的.开源和跨平台的机器学习框架,使您能够构建定制的机器学习解决方案,并将它们集成到您的. net应用程序.本指南提供了许多关于与ML.NET合作资源. 关于ML.NET的更多信息 ...
- Robot framework(RF) 用户关键字
3.6 用户关键字 在Robot Framework 中关键字的创建分两种:系统关键字和用户关键字. 系统关键字是需要通过脚本开发相应的类和方法,从而实现某一逻辑功能. 用户关键字是根据业务的需求利 ...