C# 基础知识系列- 17 小工具优化
0. 前言
不知道有没有动手能力强的小伙伴照着上一篇的内容写过程序呢?如果有的话,应该会在使用的时候发现以下几个问题:
- 每次启动都需要经过漫长的时间去遍历磁盘里的文件目录
- 因为数据是用的字典保存的,所以会消耗大量的内存空间
- 不能多次查询
现在我们就针对这些问题,让我们的小工具实用起来。
1. 分析与实现
在动手之前,我们先分析一下问题。在实际开发之前,无论是接到什么需求都要先仔细分析一下,确定好方案再动手方为开发的正道。嗯,没毛病。因为开发过程中跟产品对线、跟客户对线要占整个项目的一半左右时间。好了,不废话了。继续:
遍历文件目录的时间过长,那么我们是不是可以用异步并发去遍历呢?
数据用字典保存会消耗内存空间,那么我们是不是可以用其他的方式保存呢?
不能多次查询,是不是可以使用循环,然后设置一个退出条件?
1.1 C#的异步/并发实现
在C#里,异步和并发的实现是依据线程、任务来实现的。在之前《C# 基础知识系列- 12 任务和多线程》里大概介绍了一下线程和任务,我们知道线程本身是没法返回数据的,它与主线程进行数据交互的过程十分需要注意线程安全。而任务可以返回数据,不需要像线程一样小心翼翼地与主线程进行数据交互。任务有一个优点,它比线程更轻量,所以在当前环境下我们可以试试任务。
当然,线程也有优点,那就是线程的运行环境相对更封闭一点,它能完成一个长的大型运算。
那么继续上一篇的内容,先引用 :
using System.Threading.Tasks;
先提取一组根据可枚举目录集合创建任务组并取得结果的方法:
public static Dictionary<string,List<string>> OverDirectories(IEnumerable<DirectoryInfo> directories)
{
var tasks = directories.Select(dir => Task.Run(()=>OverDirectories(dir))).ToArray();
Task.WaitAll(tasks);// 这行的意思是等待所有任务完成
return Concat(tasks.Select(t=>t.Result).ToArray());
}
然后改造原有的OverDirectories方法:
public static Dictionary<string,List<string>> OverDirectories(DirectoryInfo rootDirectory)
{
Console.WriteLine($"正在遍历目录:{rootDirectory.FullName}");
var dict = new Dictionary<string, List<string>>();
IEnumerable<FileInfo> files = new List<FileInfo>();
try
{
files = rootDirectory.EnumerateFiles();
}
catch(Exception e)
{
Console.WriteLine($"错误信息:{e}");//打印错误信息
}
foreach(var file in files)
{
var key = Path.GetFileNameWithoutExtension(file.Name);
if(!dict.ContainsKey(key))
{
dict[key] = new List<string>();
}
dict[key].Add(file.FullName);
}
try
{
var dirs = rootDirectory.EnumerateDirectories();
return Concat(dict, OverDirectories(dirs));// 采用线程版的方法进行遍历
}
catch (System.Exception e)
{
Console.WriteLine($"错误信息:{e}");//打印错误信息
}
return dict;
}
1.2 数据复用
理想状态下,我们的数据应该是保存在数据库的,但因为数据库的操作是在下一系列的教程中,所以目前只能舍弃这个设想。
那么,利用现有方式,我们可以使用文件作为缓存的方式,也就是说把数据保存在文件里,在需要的时候从文件中读取出来。这时候就需要一组操作文件的方法。
首先,声明一个静态变量:
public static readonly string TempFile = "temp.txt";
然后编写读取、存放数据的方法:
public static void WriteLinesToTemp(List<string> lines)
{
File.AppendAllLines(TempFile, lines);
}
public static List<string> Search(string file)
{
var lines = File.ReadLines(file);
var results = lines.Where(line=>Path.GetFileNameWithoutExtension(line).Contains(file));
return results.ToList();
}
这时候在文件中存放的都是路径文件,所以需要重新修改遍历文件路径的方法,只保留路径:
public static List<string> OverDirectories(DirectoryInfo rootDirectory)
{
Console.WriteLine($"正在遍历目录:{rootDirectory.FullName}");
List<string> files = new List<string>();
try
{
files.AddRange(rootDirectory.GetFiles().Select(f=>f.FullName).ToList());
Console.WriteLine($"在目录:{rootDirectory.FullName} 下 找到 文件:{files.Count} 个");
}
catch(Exception e)
{
Console.WriteLine($"加载目录:{rootDirectory.FullName} 中\t错误信息:{e}");//打印错误信息
}
try
{
var dirs = rootDirectory.GetDirectories();
OverDirectories(dirs);
}
catch (System.Exception e)
{
Console.WriteLine($"在下探目录{rootDirectory.FullName}时发生错误:{e}");
}
return files;
}
public static void OverDirectories(IEnumerable<DirectoryInfo> directories)
{
var tasks =new List<Task<List<string>>>( directories.Select(dir => Task.Run(()=>OverDirectories(dir))));
while(tasks.Any())
{
var completeds = tasks.Where(t=>t.IsCompleted).ToList(); // 提取所有已完成的任务
foreach(var t in completeds)
{
WriteLinesToTemp(t.Result);// 保存文件列表
tasks.Remove(t);//移除已处理的任务
}
}
}
最后修改主方法,设置启动时遍历路径的规则:
static void Main(string[] args)
{
if(!File.Exists(TempFile))// 缓存文件存在,则认为上次已经遍历成功了
{
var drivers = GetDrivers();
OverDirectories(drivers);
}
Console.WriteLine("请输入要查询的文件名:");
var search = Console.ReadLine().Trim();
}
1.3 循环使用并设置退出条件
设置用户输入q或Q的时候退出程序,这时候就需要改造Main方法了:
static void Main(string[] args)
{
Console.WriteLine("文件查询小工具启动了……");
if(!File.Exists(TempFile))
{
Console.WriteLine("尚未加载缓存记录,数据加载中……");
var drivers = GetDrivers();
OverDirectories(drivers);
Console.WriteLine("数据加载完成");
Thread.Sleep(500);
Console.Clear();// 清除控制台
}
while(true)
{
Console.WriteLine("请输入要查询的文件名(输入q/Q 退出):");
var search = Console.ReadLine().Trim();// 去除多余的空白字符
if(search == "q" || search == "Q")//添加退出条件
{
break;
}
Console.WriteLine("查询中……");
var results = Search(search);
Console.WriteLine("查询结果:");
foreach(var r in results)
{
Console.WriteLine(r);
}
}
Console.WriteLine("程序已退出!");
}
在main 方法里加了很多提示语句,以方便使用。
2. 总结
以上是第一次实战课的所有内容。欢迎各位小伙伴们踊跃讨论。这个小工具并不完善,但是随着我们对.net core的了解和深入就会写的得心应手了。
更多内容烦请关注我的博客《高先生小屋》

C# 基础知识系列- 17 小工具优化的更多相关文章
- C# 基础知识系列- 16 开发工具篇
0. 前言 这是C# 基础知识系列的最后一个内容讲解篇,下一篇是基础知识-实战篇.这一篇主要讲解一下C#程序的结构和主要编程工具. 1. 工具 工欲善其事必先利其器,在实际动手之前我们先来看看想要编写 ...
- C# 基础知识系列- 17 实战篇 编写一个小工具(1)
0. 前言 这是对C# 基础系列的一个总结,现在我们利用之前学到的知识做一个小小的工具来给我们使用. 如果有看过IO篇的小伙伴,应该有印象.当时我提过一个场景描述,我们在平时使用系统的时候,经常会为了 ...
- C# 基础知识系列- 14 IO篇 流的使用
0. 前言 继续之前的C# IO流,在前几篇小短片中我们大概看了下C# 的基础IO也对文件.目录和路径的操作有了一定的了解.这一篇开始,给大家演示一下流的各种操作.以文件流为例,一起来看看如何操作吧. ...
- C# 基础知识系列- 14 IO篇 文件的操作 (3)
本篇继续前两篇内容,跟大家介绍一下Path类以及FileSystemInfo这个类的主要方法和属性. 上文提到,在<C# 基础知识系列-IO篇>之文件相关的内容完结之后,会带领大家开发一个 ...
- 学习javascript基础知识系列第三节 - ()()用法
总目录:通过一段代码学习javascript基础知识系列 注意: 为了便于执行和演示,建议使用chrome浏览器,按F12,然后按Esc(或手动选择)打开console,在console进行执行和演示 ...
- C# 基础知识系列- 3 集合数组
简单的介绍一下集合,通俗来讲就是用来保管多个数据的方案.比如说我们是一个公司的仓库管理,公司有一堆货物需要管理,有同类的,有不同类的,总而言之就是很多.很乱.我们对照集合的概念对仓库进行管理的话,那么 ...
- C# 基础知识系列- 12 任务和多线程
0. 前言 照例一份前言,在介绍任务和多线程之前,先介绍一下异步和同步的概念.我们之间介绍的知识点都是在同步执行,所谓的同步就是一行代码一行代码的执行,就像是我们日常乘坐地铁通过安检通道一样,想象我们 ...
- C# 基础知识系列-13 常见类库(三)
0. 前言 在<C# 基础知识系列- 13 常见类库(二)>中,我们介绍了一下DateTime和TimeSpan这两个结构体的内容,也就是C#中日期时间的简单操作.本篇将介绍Guid和Nu ...
- 基础知识系列☞C#中→属性和字段的区别
"好吧...准备写个'基础知识系列',算是记录下吧,时时看看,更加加深记忆···" 其实本来准备叫"面试系列"... 字段.属性.你先知道的哪个概念? ***我 ...
随机推荐
- 刨根问底系列(3)——关于socket api的原子操作性和线程安全性的探究和实验测试(多线程同时send,write)
多个线程对同一socket同时进行send操作的结果 1. 概览 1.1 起因 自己写的项目里,为了保证连接不中断,我起一个线程专门发送心跳包保持连接,那这个线程在send发送数据时,可能会与主线程中 ...
- Pytest系列(21)- allure的特性,@allure.description()、@allure.title()的详细使用
如果你还想从头学起Pytest,可以看看这个系列的文章哦! https://www.cnblogs.com/poloyy/category/1690628.html 前言 前面介绍了两种allure的 ...
- AJ学IOS(04)UI之半小时搞定Tom猫
AJ分享 必须精品 效果图 曾经风靡一时的tom猫其实制作起来那是叫一个相当的easy啊 功能全部实现,(关键是素材,没有素材的可以加我微信) 新手也可以很快的完成tom这个很拉轰的ios应用哦 然 ...
- G++编译链接的那些事
语言 CPP 前言 虽然 VSCodeC++ 编辑器非常受大家的欢迎,无论是大佬还是小白都说对其爱不释手... 我...用了一段时间后发现实在是麻烦,配置往往花费我大量时间.可以说真的是吃力不 ...
- powershell提示无法将“”项识别
解决: 完成! 解释: 权限问题.Powershell脚本的4种执行权限介绍,Windows默认不允许任何脚本运行,我们可以使用"Set-ExecutionPolicy"cmdle ...
- 详解PHP反序列化中的字符逃逸
首发先知社区,https://xz.aliyun.com/t/6718/ PHP 反序列化字符逃逸 下述所有测试均在 php 7.1.13 nts 下完成 先说几个特性,PHP 在反序列化时,对类中不 ...
- 转:Cookies 和 Session的区别
转自:http://blog.csdn.net/axin66ok/article/details/6175522 1.cookie 是一种发送到客户浏览器的文本串句柄,并保存在客户机硬盘上,可以用来在 ...
- ApiPost V3创事记:一个痛并快乐着的创业故事
前言 无论是对于国家,还是对于我们个人,2020年4月,是注定是一个不同往年的4月.一场突如起来的疫情打破了我们原来的生活曲线,让我们知道了什么是苦难,什么是团结,什么是坚持,什么是胜利. 一.大幕开 ...
- 实战 | 将Apache Hudi数据集写入阿里云OSS
1. 引入 云上对象存储的廉价让不少公司将其作为主要的存储方案,而Hudi作为数据湖解决方案,支持对象存储也是必不可少.之前AWS EMR已经内置集成Hudi,也意味着可以在S3上无缝使用Hudi.当 ...
- Linux系统安装docker教程-CentOS7(完美教程)
一.前言 最近有网友反应不在安装Linux 安装docker,为了方便大家更快的安装,以CentOS7安装为例,写了一篇比较简单的博客,让大家学习. 二.背景介绍 Linux,全称GNU/Linux ...