C# 大型电商项目性能优化(一)
经过几个月的忙碌,我厂最近的电商平台项目终于上线,期间遇到的问题以及解决方案,也可以拿来和大家多做交流了。
我厂的项目大多采用C#.net,使用逐渐发展并流行起来的EF(Entity Framework)框架,并搭配使用丹麦的一款主打CMS, DMS的.net web应用程序sitecore。
本篇为基础篇,侧重于阐述编码规范和一些编码技巧对系统性能的影响。不规范的编码方式,可能对单个方法或模块产生的性能影响是微不足道的,但在大型电商项目中,高并发的场景随处可见,欠妥的编码方式,可能会对整个系统的性能及用户体验,造成很大的影响。
作为电商项目,对性能影响最明显的模块,莫过于下订单及修改库存。在高并发场景下,这些模块的数据库存取的性能要求是非常高的,少许的性能浪费,都可能使系统在使用中的表现差强人意。
首先,我们来阐述一下EF框架下得编码规范。这里我们可以参考msdn关于IQueryable<T>及IEnumerable<T>的介绍:
对于在内存中集合上运行的方法(即扩展 IEnumerable< T> 的那些方法),返回的可枚举对象将捕获传递到方法的参数。在枚举该对象时,将使用查询运算符的逻辑,并返回查询结果。
与之相反,扩展 IQueryable <T> 的方法不会实现任何查询行为,但会生成一个表示要执行的查询的表达式树。查询处理由源 IQueryable<T> 对象处理。
IQueryable<T>会生成一个查询表达式树,并不会将数据直接取出来,但该对象的扩展方法为我们提供了大量的高效辅助功能,例如判断数据是否存在的Any(),查询数据数量的Count(),统计计数属性的Sum()等,EF会帮助我们生成最优的sql,以减少数据库存取时的性能损耗。这些方法,我们都可以用比较笨拙的编码方式进行实现,但其效率会低很多。
另外,编码过程中应尽可能避免使用ToList()方法及GetById()方法,这里依旧可以参考msdn,但笔者可以直白地去描述:采用这两种方法后,程序会直接将数据从数据库中读取出来,并加载到内存,接下来我们可以直接操作这些实实在在的数据,并使用List<T>所扩展的方法。然而这种方案会造成以下性能问题:
1.将未经业务处理的表达式树直接用来查询数据,其数据量太大,数据库的存取,磁盘的IO,都需要消耗大量的时间和空间。
2.EF支持的导航属性,会将相关联的对象都查出来,届时庞大的数据又拥有更庞大的分支,让内存和CPU飙升。
为了避免上述问题,EF为我们提供了行之有效的方法:
1.查询初期少用ToList()及GetDtoById()方法。
2.查询过程中,使用Select()和SelectMany()方法,只选取自己所需要的属性或对象。
为了看出不规范的编码方式带来的性能损耗,我们来看一段例子比较:
1.以下是只选取自己所需的属性的代码:
var productSKU = unitOfWork.ProductSku.Get(p => p.Id == item.SKUId)
.Select(p => new { p.Id, p.ProductId, p.Product })
.FirstOrDefault();
提交订单耗时的截图:

2.采用GetById()方法:
var productSKU = unitOfWork.ProductSku.GetByID(item.SKUId);
提交订单耗时截图:

笔者电脑老旧,该数据在i5 8G ram的计算机中仅需要200ms的时长,在性能更强的服务器上耗时更短。
从对比中我们可以看到:仅仅只修改了一个方法,程序请求的耗时竟有将近一倍的误差!如果我们的代码中充斥着这种懒惰的不规范写法,在高并发场景下,系统会被拖得很慢,甚至会出现程序报错。
接下来,我们说下抛开EF框架的做法,擅长sql编程的园友,可能会不屑EF的提供的各种方案,直接写sql,采用ADO不是更快吗?的确,直接运行sql会让程序更快,ADO的速度是大家所认可的。EF也支持大家使用直接编写sql的方式:
var productSKU = dbContext.Database.SqlQuery<ProductSku>(sqlStr);
如果sql编程功力深厚,笔者是非常支持这种编程方案的。但EF框架也有其天生的优势:
1.EF框架让更多的初级软件从业者更快地学习和编写程序
2.EF提供的完善的扩展方法,帮助软件从业人员实现各种功能
3.规范编写的EF C#代码,并不会比原生的sql慢太多
这让笔者想起C#.net与Java程序员之间的矛盾^_^。笔者因为机缘巧合,也写过一段时间的Java。
二者的设计理念确实有所不同:
1.C#.net让初学者更快地入门,提供了更多的类库和方法,其出色的IDE让编程人员省心省力。且C#.net已经开源。
2.Java则需要编程人员做更多的思考,自己配置环境变量,自己敲命令行,让编程人员在思考的过程中加深对计算机原理、操作系统和软件工程的认识。
毫无疑问:两者都是当代最出色的高级程序语言(PHP,Python,JavaScript等的同行勿喷^_^)与其花时间争论谁才是最好的语言,不如兼而学之。
以上是本次性能优化介绍的基础篇,后续会为大家带来数据库层面的优化经验及体会。
C# 大型电商项目性能优化(一)的更多相关文章
- Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载)
Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载) 说明:Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构,我采用以下三种维度来讲解 1. 代码层面. 2. 数 ...
- Spark大型电商项目实战-及其改良之番外(1)-将spark前端页面效果高效拷贝至博客
Spark大型电商项目实战-及其改良这个系列的时间轴展示图一直在变....1-3篇是用图直接表示时间轴,用一段简陋的html代码表示时间表.第4篇开始才是用比较完整的前端效果,能移动.缩放时间轴,鼠标 ...
- C#大型电商项目优化(二)——嫌弃EF与抛弃EF
上一篇博文中讲述了使用EF开发电商项目的代码基础篇,提到EF后,一语激起千层浪.不少园友纷纷表示:EF不适合增长速度飞快的互联网项目,EF只适合企业级应用等等. 也有部分高手提到了分布式,确实,性能优 ...
- vue大型电商项目尚品汇(前台篇)day01
学完vue2还是决定先做一个比较经典,也比较大的项目来练练手好一点,vue3的知识不用那么着急,先把vue2用熟练了,vue3随时都能学. 这个项目确实很经典包含了登录注册.购物车电商网站该有的都有, ...
- Spark大型电商项目实战-及其改良(3) 分析sparkSQL语句的性能影响
之前的运行数据被清除了,只能再运行一次,对比一下sparkSQL语句的影响 纯SQL的时间 对应时间表 th:first-child,.table-bordered tbody:first-child ...
- Spark大型电商项目实战-及其改良(2) RDD优化效果不稳定的真正原因
首先看没有map join的第2任务: 时间线如下 接着是对应id的算子计算时间表 Stage Id Description Submitted Duration Tasks: Succeeded/T ...
- C#大型电商项目优化(三)——扩展性与支付
上一篇文章引来不少非议,笔者并非对EF有看法,而是针对不同的业务场景和框架背景,挑选不同的方案.每个方案都有其优势劣势,挑选最快速,最简单的方案,是笔者的初衷. 看评论也是学习的过程,然而有些只做评价 ...
- Spark大型电商项目实战-及其改良(1) 比对sparkSQL和纯RDD实现的结果
代码存在码云:https://coding.net/u/funcfans/p/sparkProject/git 代码主要学习https://blog.csdn.net/u012318074/artic ...
- vue大型电商项目尚品汇(前台篇)day02
现在正式回归,开始好好做项目了,正好这一个项目也开始慢慢的开始起色了,前面的准备工作都做的差不多了. 而且我现在也开始慢慢了解到了一些项目才开始需要的一些什么东西了,vuex.router这些都是必备 ...
随机推荐
- csdn中使用git的一些注意事项---免得走弯路
csdn中使用git必须的条件(windows系统下): 1.本机当前登录用户文件夹下必须有.ssh隐藏文件,并且这个文件中必须有用git bash中用命令生成的密钥文件:id_rsa id_rsa ...
- 【第五篇】SAP ABAP7.5x新语法之命名规约
公众号:SAP Technical 本文作者:matinal 原文出处:http://www.cnblogs.com/SAPmatinal/ 原文链接:SAP ABAP7.5x系列之命名规约 命名 ...
- 位运算符&与、或|、异或^
&按照二进制位进行运算 如:运算规则:0&0=0: 0&1=0:1&0=0:1&1=1:即:两位同时为“1”,结果才为“1”,否则为0[有0则0] 3& ...
- Gogs基本使用介绍
Gogs简介 Gogs 是一款类似GitHub的开源文件/代码管理系统(基于Git),Gogs 的目标是打造一个最简单.最快速和最轻松的方式搭建自助 Git 服务.使用 Go 语言开发使得 Gogs ...
- Request获取客户端IP
获取客户端的IP地址的方法是:request.getRemoteAddr() ,这种方法在大部分情况下都是有效的.但是在通过了Apache,Squid等反向代理软件就不能获取到客户端的真实IP地址了. ...
- AMP架构补充与wordpress部署
1.httpd的虚拟主机不能使用的问题 httpd中新建一个虚拟主机,并添加访问URI路径的时候,需要给此路径指定访问权限.今天遇到一个虚拟主机不能使用的问题,语法检测没有报错,并且还可以正常启动服务 ...
- ios 百度地图使用
第一步.引入 1.下载SDK 地址http://developer.baidu.com/map/index.php?title=iossdk/sdkiosdev-download 2.解压出Baid ...
- js常见错误类型
(1)SyntaxError SyntaxError是解析代码时发生的语法错误 // 变量名错误 var 1a; // 缺少括号 console.log 'hello'); (2)ReferenceE ...
- pek (北大oj)3070
思路:矩阵快速幂, 二分加速 #include<cstdio> #include<cstring> #define ll long long #define mod 10000 ...
- Recurrences UVA - 10870 (斐波拉契的一般形式推广)
题意:f(n) = a1f(n−1) + a2f(n−2) + a3f(n−3) + ... + adf(n−d), 计算这个f(n) 最重要的是推出矩阵. #include<cstdio> ...