前言

我们知道,有时候在一些项目中,为了性能,往往会一次性加载很多条记录来进行循环处理(备注:而非列表呈现)。比如:从数据库中加载 10000 个用户,并且每个用户包含了 20  个“爱好”,在 WinForm 界面我们需要用进度条的方式实时显示每个用户处理的进度,这时候当然是一次性加载很多条记录来进行循环处理更加快速。如下图:

问题和解决方案

通常,我们会先 foreach 从数据库中加载的用户集合,然后从“爱好”集合中筛选出某个用户的所有爱好来进行处理。比如如下代码:

foreach (var userItem in userList)
{
List<Hobby> tempHobbyList = hobbyList.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
//...其它的代码
}
}

如下图,我们编写了如上面的代码来进行实际测试,结果发现,当 userList 足够多、或者 hobbyList 足够多,或者 userList、hobbyList 同时都足够多时,性能会大大的降低,这时候就需要我们改变方式,采用先把 hobbyList 安装 userId 进行分组(GroupBy)变成 Dictionary<int, List<Hobby>>,然后在 userList 的循环体中直接从 Dictionary<int, List<Hobby>> 从检索,这样性能会大大提高。

实际测试

namespace ConsAppTest
{
class User
{
public int Id { get; set; }
public string Name { get; set; }
public int? Age { get; set; }
} class Hobby
{
public int HobbyId { get; set; }
public string HobbyName { get; set; }
public int UserId { get; set; }
} class Program
{
private const int UserCountForNew = ;
private const int HobbyCountForEveryUser = ; private static async Task Main(string[] args)
{
string messageTemplate = $"产生 { UserCountForNew } 个虚拟用户,并且每个虚拟用户产生了 { HobbyCountForEveryUser } 个“爱好”共耗时 {{0}} 秒。"; //下面是方案1 - 开始
Stopwatch globalWatch1 = Stopwatch.StartNew();
List<User> userList1;
List<Hobby> hobbyList1;
CreateUserListAndHobbyList(out userList1, out hobbyList1);
globalWatch1.Stop();
double totalSeconds1 = (double)globalWatch1.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds1.ToString("#.##")); Stopwatch stage1Watch = Stopwatch.StartNew();
foreach (var userItem in userList1)
{
List<Hobby> tempHobbyList = hobbyList1.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
}
stage1Watch.Stop();
double stage1WatchTotalSeconds = (double)stage1Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案1总耗时:{0}\n\n", stage1WatchTotalSeconds.ToString("#.##"));
//下面是方案1 - 结束 //下面是方案2 - 开始
Stopwatch globalWatch2 = Stopwatch.StartNew();
List<User> userList2;
List<Hobby> hobbyList2;
CreateUserListAndHobbyList(out userList2, out hobbyList2);
globalWatch2.Stop();
double totalSeconds2 = (double)globalWatch2.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds2.ToString("#.##")); Stopwatch stage2Watch = Stopwatch.StartNew();
foreach (var userItem in userList2)
{
List<Hobby> tempHobbyList = hobbyList2.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
hobbyList2.RemoveAll(c => c.UserId == userItem.Id);
}
stage2Watch.Stop();
double stage2WatchTotalSeconds = (double)stage2Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案2总耗时:{0}\n\n", stage2WatchTotalSeconds.ToString("#.##"));
//下面是方案2 - 结束 //下面是方案3 - 开始
Stopwatch globalWatch3 = Stopwatch.StartNew();
List<User> userList3;
List<Hobby> hobbyList3;
CreateUserListAndHobbyList(out userList3, out hobbyList3);
globalWatch3.Stop();
double totalSeconds3 = (double)globalWatch3.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds3.ToString("#.##")); Stopwatch stage3Watch = Stopwatch.StartNew();
Dictionary<int, List<Hobby>> keyValuePairs = hobbyList3.GroupBy<Hobby, int>(c => c.UserId).ToDictionary(c => c.Key, c => c.ToList());
foreach (var userItem in userList3)
{
List<Hobby> tempHobbyList = keyValuePairs[userItem.Id];
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
}
stage3Watch.Stop();
double stage3WatchTotalSeconds = (double)stage3Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案3总耗时:{0}\n\n", stage3WatchTotalSeconds.ToString("#.##")); //下面是方案3 - 结束 Console.ReadLine(); } private static void CreateUserListAndHobbyList(out List<User> rightUserList, out List<Hobby> rightHobbyList)
{
List<User> userList = new List<User>();
List<Hobby> hobbyList = new List<Hobby>();
int hobbyIndex = ;
for (int i = ; i <= UserCountForNew; i++)
{
int userId = i;
userList.Add(new User { Id = userId, Name = "张三" + userId, Age = userId });
for (int j = ; j < HobbyCountForEveryUser; j++)
{
hobbyIndex++;
hobbyList.Add(new Hobby
{
HobbyId = hobbyIndex,
HobbyName = "唱歌" + hobbyIndex,
UserId = userId
});
}
}
rightUserList = userList;
rightHobbyList = hobbyList;
} }
}

运行截图

结论

最终,我们看到,这三种方案,每种方案都产生 6000 个虚拟用户,并且每个虚拟用户产生了 20 个“爱好”。第一二种方案检索的速度要 8秒、9秒左右,而第三种方案从 Dictionary<int, List<Hobby>> 中检索只需要 0.01 到 0.02 秒,可谓是性能大大提升。

谢谢浏览!

实例演示 C# 中 Dictionary<Key, Value> 的检索速度远远大于 hobbyList.Where(c => c.UserId == user.Id)的更多相关文章

  1. vue.js(09)--v-for中的key

    v-for中key的使用注意事项 <!DOCTYPE html> <html lang="en"> <head> <meta charse ...

  2. ASP.NET中Dictionary基本用法实例分析

    本文实例讲述了ASP.NET中Dictionary基本用法.分享给大家供大家参考,具体如下: //Dictionary位于System.Collections.Generic命名空间之下 /*  * ...

  3. 最简实例演示asp.net5中用户认证和授权(3)

    上接: 最简实例演示asp.net5中用户认证和授权(2) 在实现了角色的各种管理接口后,下一步就是实现对用户的管理,对用户管理的接口相对多一些,必须要实现的有如下三个: 1 public inter ...

  4. 最简实例演示asp.net5中用户认证和授权(2)

    上接最简实例演示asp.net5中用户认证和授权(1) 基础类建立好后,下一步就要创建对基础类进行操作的类了,也就是实现基础类的增删改查(听起来不太高大上),当然,为了使用asp.net5的认证机制, ...

  5. .Net 中HashTable,HashMap 和 Dictionary<key,value> 和List<T>和DataTable的比较

    参考资料 http://www.cnblogs.com/MichaelYin/archive/2011/02/14/1954724.html http://zhidao.baidu.com/link? ...

  6. 最简实例演示asp.net5中用户认证和授权(4)

    上篇: 最简实例演示asp.net5中用户认证和授权(3) 上面我们把自定义认证和授权的相关的最小基础类和要实现的接口都实现了,下面就是如何来进行认证和授权的配置. 首先我们要告诉系统,我们的用户和角 ...

  7. 最简实例演示asp.net5中用户认证和授权(1)

    asp.net5中,关于用户的认证和授权提供了非常丰富的功能,如果结合ef7的话,可以自动生成相关的数据库表,调用也很方便. 但是,要理解这么一大堆关于认证授权的类,或者想按照自己项目的特定要求对认证 ...

  8. ASP.NET Core 6框架揭秘-实例演示版[持续更新中…]

    作为<ASP.NET Core 3框架揭秘>的升级版,<ASP.NET Core 6框架揭秘>提供了很多新的章节,同时对现有的内容进行大量的修改.虽然本书旨在对ASP.NET ...

  9. ASP.NET Core 6框架揭秘实例演示[08]:配置的基本编程模式

    .NET的配置支持多样化的数据源,我们可以采用内存的变量.环境变量.命令行参数.以及各种格式的配置文件作为配置的数据来源.在对配置系统进行系统介绍之前,我们通过几个简单的实例演示一下如何将具有不同来源 ...

随机推荐

  1. [阅读笔记]EfficientDet

    EfficientDet 文章阅读 Google的网络结构不错,总是会考虑计算性能的问题,从mobilenet v1到mobile net v2.这篇文章主要对近来的FPN结构进行了改进,实现了一种效 ...

  2. Java之IO初识(字节流和字符流)

    IO概述 生活中,你肯定经历过这样的场景.当你编辑一个文本文件,忘记了 ctrl+s ,可能文件就白白编辑了.当你电脑上插入一个U盘,可以把一个视频,拷贝到你的电脑硬盘里.那么数据都是在哪些设备上的呢 ...

  3. xlwings 操作 excel

    xlwings: xlwings是一个Python库,它使Python的一些数据分析特性可以在Excel实例中使用,包括对numpy数组.pandas Series和DataFrame的支持.与其他任 ...

  4. 压测 swoole_websocket_server 性能

    概述 这是关于 Swoole 入门学习的第十篇文章:压测 swoole_websocket_server 性能. 第九篇:Swoole Redis 连接池的实现 第八篇:Swoole MySQL 连接 ...

  5. Selenium(十四):自动化测试模型介绍、模块化驱动测试案例、数据驱动测试案例

    1. 自动化测试模型介绍 随着自动化测试技术的发展,演化为了集中模型:线性测试.模块化驱动测试.数据驱动测试和关键字驱动测试. 下面分别介绍这几种自动化测试模型的特点. 1.1 线性测试 通过录制或编 ...

  6. python判断字符串中是否包含子字符串

    python判断字符串中是否包含子字符串 s = '1234问沃尔沃434' if s.find('沃尔沃') != -1:     print('存在') else:     print('不存在' ...

  7. 松软科技web课堂:SQLServer之MID() 函数

    MID() 函数 MID 函数用于从文本字段中提取字符. SQL MID() 语法 SELECT MID(column_name,start[,length]) FROM table_name 参数 ...

  8. JS 简介

    JS 简介 JavaScript 是世界上最流行的编程语言. 这门语言可用于 HTML 和 web,更可广泛用于服务器.PC.笔记本电脑.平板电脑和智能手机等设备. avaScript 是脚本语言 J ...

  9. opencv-python图像处理基础(一)

    #一.读取图像数据 import cv2 img=cv2.imread("d:/image0.JPG") #读取图片数据 print(img) cv2.imshow('image' ...

  10. OC-AVAudioSession的知识小记

    参考文章:https://www.cnblogs.com/junhuawang/p/7920989.html 音频输出作为硬件资源,对于iOS系统来说是唯一的,那么要如何协调和各个App之间对这个稀缺 ...