测试EntityFramework,Z.EntityFramework.Extensions,原生语句在不同的查询中的表现。原来池化与非池化设定是有巨大的影响的。
Insert测试,只测试1000条的情况,多了在实际的项目中应该就要另行处理了。
using System;
using System.Collections.Generic;
using System.Configuration;
using System.Data.Entity;
using System.Diagnostics;
using System.Linq;
using EE.Service.DbAccess;
using EE.Service.DbEntity;
using EntityFramework.Extensions;
using EntityFramework.Future;
using MySql.Data.MySqlClient; namespace EE.Services.ConsoleTest.DbAccessTests
{
public class EFPerformanceTest
{
public static void Run()
{
//InsertTest(); UpdateTests();
} #region UpdateTest() static void UpdateTests()
{
var list = new List<SmsLog>();
for (int i = ; i < ; i++)
{
list.Add(new SmsLog() { Id = i, AppId = $"{i}_", CreateTime = DateTime.Now });
}
var sw = new Stopwatch();
Watcher(sw, EFInit, list.GetRange(, )); Watcher(sw, MySqlSelect, list); Watcher(sw, EFSelect,list); Watcher(sw, MySqlUpdate, list); Watcher(sw, EFBulkUpdate, AddRangeId(list)); Watcher(sw, EFUpdateWithNoState, AddRangeId(list)); Watcher(sw, EFUpdate, AddRangeId(list)); } static IEnumerable<SmsLog> AddRangeId(IEnumerable<SmsLog> logs)
{
foreach (var log in logs)
{
log.Id += ;
}
return logs;
} static int EFSelect(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
var val = ;
foreach (var item in items)
{
var rst = (from tb in db.SmsLogs where tb.Id == select tb).FirstOrDefault();
if (rst != null) val++;
}
return val;
}
} static int EFUpdate(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
foreach (var item in items)
{
//db.SmsLogs.Attach(item);
var o = db.SmsLogs.Where(x => x.Id == item.Id).FirstOrDefault();
if (o == null) continue;
o.AppId = item.AppId+"U";
o.CreateTime = item.CreateTime;
}
var val = db.SaveChanges();
return val;
}
} static int EFUpdateWithNoState(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
db.Configuration.AutoDetectChangesEnabled = false;
db.Configuration.ValidateOnSaveEnabled = false;
db.Configuration.LazyLoadingEnabled = false;
db.Configuration.ProxyCreationEnabled = false;
var val = ;
foreach (var item in items)
{
//传统更新方式 .. 更新不了(没有状态,无法完成更新)
var o = db.SmsLogs.Where(x => x.Id == item.Id).FirstOrDefault();
if (o == null) continue;
o.AppId = item.AppId+"SU";
o.CreateTime = item.CreateTime;
}
val = db.SaveChanges();
return val;
}
} static int EFBulkUpdate(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
foreach (var item in items)
{
var o = db.SmsLogs.Where(x => x.Id == item.Id).FirstOrDefault();
if (o == null) continue;
o.AppId = item.AppId+"BU";
o.CreateTime = item.CreateTime;
}
db.BulkSaveChanges();
return ;
}
} static int MySqlUpdate(IEnumerable<SmsLog> items)
{
var val = ;
var connStr = ConfigurationManager.ConnectionStrings["EEServiceLogDb"].ConnectionString;
using (var conn = new MySqlConnection(connStr))
{
conn.Open();
foreach (var item in items)
{
val += MySqlHelper.ExecuteNonQuery(conn, "Update SmsLogs set AppId=@appId,CreateTime=@createTime where Id = @id;", new MySqlParameter("@appId", item.AppId+"S"), new MySqlParameter("@createTime", item.CreateTime), new MySqlParameter("@id", item.Id));
}
conn.Close();
}
return val;
}
static int MySqlSelect(IEnumerable<SmsLog> items)
{
var val = ;
var connStr = ConfigurationManager.ConnectionStrings["EEServiceLogDb"].ConnectionString;
using (var conn = new MySqlConnection(connStr))
{
conn.Open();
foreach (var item in items)
{
var dr = MySqlHelper.ExecuteReader(conn, "select * from SmsLogs where Id = @id;", new[] { new MySqlParameter("@id", item.Id) });
while (dr.Read())
{
val += ;
}
dr.Close();
}
conn.Close();
}
return val;
} #endregion #region InsertTest() static void InsertTest()
{
var list = new List<SmsLog>();
for (int i = ; i < ; i++)
{
list.Add(new SmsLog() { AppId = $"{i}", CreateTime = DateTime.Now });
}
var sw = new Stopwatch(); Watcher(sw, EFInit, list.GetRange(, ));
Watcher(sw, EFBulkInsert, list);
Watcher(sw, EFInsertWithNoState, list);
Watcher(sw, EFInsert, list);
Watcher(sw, MySqlInsert, list);
//Watcher(sw, EFInsert, list); } static int EFInsert(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
foreach (var item in items)
db.SmsLogs.Add(item); var val = db.SaveChanges();
return val;
}
} static int EFInsertWithNoState(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
db.Configuration.AutoDetectChangesEnabled = false;
db.Configuration.ValidateOnSaveEnabled = false;
db.Configuration.LazyLoadingEnabled = false;
db.Configuration.ProxyCreationEnabled = false; foreach (var item in items)
db.SmsLogs.Add(item); var val = db.SaveChanges();
return val;
}
} static int EFBulkInsert(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
//db.Configuration.AutoDetectChangesEnabled = false;
//db.Configuration.ValidateOnSaveEnabled = false;
foreach (var item in items)
db.SmsLogs.Add(item); db.BulkSaveChanges();
return ;
}
} static int MySqlInsert(IEnumerable<SmsLog> items)
{
var val = ;
var connStr = ConfigurationManager.ConnectionStrings["EEServiceLogDb"].ConnectionString;
using (var conn = new MySqlConnection(connStr))
{
conn.Open();
foreach (var item in items)
{
val += MySqlHelper.ExecuteNonQuery(conn, "Insert into SmsLogs(AppId,CreateTime)values(@appId,@createTime)", new MySqlParameter("@appId", item.AppId), new MySqlParameter("@createTime", item.CreateTime));
}
conn.Close();
}
return val;
} #endregion /// <summary>
/// 初始化一下,尽量减少EF初始化时间的影响
/// </summary>
/// <param name="items"></param>
/// <returns></returns>
static int EFInit(IEnumerable<SmsLog> items)
{
using (var db = new ServiceLogDbContent())
{
foreach (var item in items)
{
var o = db.SmsLogs.FirstOrDefault(x => x.Id == item.Id);
if (o != null)
{
o.AppId = "Init";
}
}
var val = db.SaveChanges();
return val;
}
} static void Watcher<T>(Stopwatch stopwatch, Func<IEnumerable<T>, int> func, IEnumerable<T> list)
{
if (stopwatch == null) stopwatch = new Stopwatch();
stopwatch.Reset();
Console.WriteLine($"[{DateTime.Now:HH:mm:ss ffffff}] {func.Method.Name} BEGIN =====================================================");
stopwatch.Start();
var val = func(list);
stopwatch.Stop();
Console.WriteLine($"[{DateTime.Now:HH:mm:ss ffffff}] {func.Method.Name}[{stopwatch.Elapsed} IN<{list.Count()}> -> RS<{val}>]");
//Console.WriteLine($"[{DateTime.Now:HH:mm:ss ffffff}] {func.Method.Name} end");
} }
}
本机开发机,DB在内网服务器上。测试结果:

可以看到,EF的初始执行还是蛮耗时间的。扩展的BuilInsert要比循环的MySqlInsert语句效率还好一些。关掉状态跟踪与默认情况,差别不大(不知是不是我写的有问题)。

这么一看,是因为查询慢吗?
更新的方式就是选Where出对象,再修改对象的值,再SaveChagnes。 难道是我写的方式不对?为什么查询这么慢?
-----------------------------------------------------------------------------------------------------------------------------------
原来不是我的写的问题,而是配置问题,连接串中没有池化与有池化的结果相差近10倍。这算什么???

Pooling=false|true;
连接串中的这个就是影响性能差别巨大的“元凶”
下面的是EF的Save,即AddOrUpdate ,通过1000条的测试发现:耗时都在4~5秒左右。比起先Select再Update还是要耗时一些。所以在性能有要求的地方,要稍微慎重一些。是不是先读取后赋值一下再Update。还是直接AddOrUpdate

测试EntityFramework,Z.EntityFramework.Extensions,原生语句在不同的查询中的表现。原来池化与非池化设定是有巨大的影响的。的更多相关文章
- 第九节: EF的性能篇(二) 之 Z.EntityFramework.Extensions程序集解决EF的性能问题
一. 综述 该模块主要介绍:EF的性能优化插件Z.EntityFramework.Extensions,该插件收费. (一). 简介 1. 相关网站:http://www.zzzprojects.co ...
- 【EF】解决EF批量操作,Z.EntityFramework.Extensions 过期方案
方案一: 使用EntityFramework.Extended优点: 启下载量是Z.EntityFramework.Extensions的10倍+ 不会过期缺点:不能批量Insert 方案二:解决批量 ...
- 自己动手破解Z.EntityFramework.Extensions 4.0.11.0的方法
因为项目中使用到Z.EntityFramework.Extensions 和 Z.EntityFramework.Plus(免费开源)两个类库,但是Z.EntityFramework.Extensio ...
- 破解EFCore扩展Dll --- Z.EntityFramework.Extensions.EFCore
安装 Z.EntityFramework.Extensions.EFCore Install-Package Z.EntityFramework.Extensions.EFCore -Version ...
- 第二十三节: EF性能篇(三)之基于开源组件 Z.EntityFrameWork.Plus.EF6解决EF性能问题
一. 开篇说明 EF的性能问题一直以来经常被人所吐槽,究其原因在于“复杂的操作在生成SQL阶段耗时长,且执行效率不高”,但并不是没有办法解决,从EF本身举几个简单的优化例子: ①:如果仅是查询数据,并 ...
- Cookies 初识 Dotnetspider EF 6.x、EF Core实现dynamic动态查询和EF Core注入多个上下文实例池你知道有什么问题? EntityFramework Core 运行dotnet ef命令迁移背后本质是什么?(EF Core迁移原理)
Cookies 1.创建HttpCookies Cookie=new HttpCookies("CookieName");2.添加内容Cookie.Values.Add(&qu ...
- MongoDB学习笔记~使用原生语句实现三层集合关系的更新
回到目录 MongoDB的文档型数据结构使得它在存储数据上很像JSON,在可读性方面很强,然而这种复杂的结构在update时相对麻烦一些,而对于官方给出的文档说的也不够细致,有些东西也是模棱两可的态度 ...
- Mysql存储之原生语句操作(pymysql)
Mysql存储之原生语句操作(pymysql) 关系型数据库是基于关系模型的数据库,而关系模型是通过二维表时实现的,于是构成了行列的表结构. 表可以看作是某个实体的集合,而实体之间存在联系,这个就需要 ...
- sql语句(已在Oracle中测试,之后有添加内容放在评论中)
1增 1.1[创建一张表] create table 表名(列名 类型); 例: ),性别 ),出生日期 date); ),sex ),出生日期 date); 1.2[插入单行]insert [int ...
随机推荐
- scheduleInRunLoop作用
例子一: - (void)setUpStreamForFile:(NSString *)path { // iStream is NSInputStream instance variable iSt ...
- OpenCASCADE Data Exchange - 3D PDF
OpenCASCADE Data Exchange - 3D PDF eryar@163.com Abstract. Today most 3D engineering model data are ...
- 创建SSH Key连接github或gitlab
mac下用SoureceTree下载github或gitlab上的项目时,需要进行ssh key验证.每次重装系统啥的都要重新弄,我在csdn上看到一篇不错的文章.转载一下,以后自己找起来也方便. 地 ...
- ITTC数据挖掘平台介绍(七)强化的数据库, 虚拟化,脚本编辑器
一. 前言 好久没有更新博客了,最近一直在忙着找工作,目前差不多尘埃落定.特别期待而且准备的都很少能成功,反而是没怎么在意的最终反而能拿到,真是神一样的人生. 言归正传,一直以来,数据挖掘系统的数据类 ...
- Java Collection知识总结
首先说说java中常用的集合容器:ArrayList,LinkedList,Vector,HashMap,Hashtable,HashSet,TreeSet.[就个人认为] java集合容器本人理解为 ...
- C#:解决WCF中服务引用 自动生成代码不全的问题。
问题描述: 如下图:打叉的部分是引用不成功的部分 ,在web.config文件中没有自动添加其引用代码. 英文解释 在服务引用选择自己的项目的程序集就行了,如下图: 特别注意:这些程序集一定要在自己的 ...
- 【分布式】Zookeeper数据与存储
一.前言 前面分析了Zookeeper对请求的处理,本篇博文接着分析Zookeeper中如何对底层数据进行存储,数据存储被分为内存数据存储于磁盘数据存储. 二.数据与存储 2.1 内存数据 Zooke ...
- FFmpeg学习2:解码数据结构及函数总结
在上一篇文章中,对FFmpeg的视频解码过程做了一个总结.由于才接触FFmpeg,还是挺陌生的,这里就解码过程再做一个总结. 本文的总结分为以下两个部分: 数据读取,主要关注在解码过程中所用到的FFm ...
- .Net语言 APP开发平台——Smobiler学习日志:如何快速实现类似于微信的悬浮显示二维码效果
最前面的话:Smobiler是一个在VS环境中使用.Net语言来开发APP的开发平台,也许比Xamarin更方便 样式一 一.目标样式 我们要实现上图中的效果,需要如下的操作: 1.从工具栏上的&qu ...
- C#中级-常用多线程操作(持续更新)
一.前言 多线程操作一直是编程的常用操作,掌握好基本的操作可以让程序运行的更加有效.本文不求大而全,只是将我自己工作中常常用到的多线程操作做个分类和总结.平时记性不好的时候还能看看.本文参 ...