title author date CreateTime categories
C# 快速释放内存的大数组
lindexi
2018-08-10 19:16:52 +0800
2018-2-13 17:23:3 +0800
C#

本文告诉大家如何使用 Marshal 做出可以快速释放内存的大数组。
最近在做 3D ,需要不断申请一段大内存数组,然后就释放他,但是 C# 对于大内存不是立刻释放,所以就存在一定的性能问题。
在博客园看到了一位大神使用 Marshal 做出快速申请的大数组,于是我就学他的方法来弄一个。本文告诉大家这个类是如何使用。

在使用的时候,先来看下原来的 C# 的大数组性能。可以看到在不停gc,性能不好

      static void Main(string[] args)
{
for (int i = 0; i < 10000; i++)
{
Foo();
}
Console.ReadKey();
} private static void Foo()
{
var foo = new byte[1000000000];
}

介绍

在使用 Marshal 之前需要知道这是什么,其实 Marshal 就是一个提供 COM 互操作的方法。

使用

下面使用一个快速申请 int 数组来告诉大家如何使用。

是否还记得 C 的申请数组?其实下面的方法和 C 的相同

            int n = 100000;//长度
IntPtr buffer = Marshal.AllocHGlobal(sizeof(int) * n);

这时就可以使用 buffer 作为数组

下面对他的第 k 个元素修改

            IntPtr buffer = Marshal.AllocHGlobal(sizeof(int) * n);
int k = 2; IntPtr t = buffer + k * sizeof(int);
var p = Marshal.PtrToStructure<int>(t);
Console.WriteLine("p " + p); //196713 这时的值是不确定 p = 2;
Marshal.StructureToPtr(p,t,false); p = Marshal.PtrToStructure<int>(t);
Console.WriteLine("p " + p);//2 //遍历
Console.WriteLine("遍历");
for (int i = 0; i < 10; i++)
{
t = buffer + i * sizeof(int);
Console.WriteLine(Marshal.PtrToStructure<int>(t));
}

遍历:

            43909312
44502144
2
0
0
24
1357220181
196712
550912
543686656

可以从上面的代码看到,主要使用的两个方法是 StructureToPtr 和 PtrToStructure ,而 StructureToPtr 就是从指定类型写到指针,希望大家还知道如何使用指针,PtrToStructure 就是从指针指向的地方开始读数据,读指定类型的数据。所以可以从 Marshal 把一个类型使用另一个类型来读取,但是一般需要读取的类型都需要是确定类型大小的,如 char 可以、string 不可以。

反过来,StructureToPtr 是对指定指针写入指定的类型,同样也是需要确定这个类型的大小,如可以写入 char 但是不可以写入 string。这就是对数组读写的方法。

那么遍历的时候什么输出一些诡异的值,实际上因为没有初始化,里面的值是不确定的。我觉得用这个做随机数也不错。

使用 Marshal 是比较安全,因为 ms 做了很多处理,但是也会让程序闪退,如下面的代码

        private static void Foo()
{
int n = 100000;//长度
IntPtr buffer = Marshal.AllocHGlobal(sizeof(int) * n); try
{
var t = buffer + (n * 10) * sizeof(int);
var p = Marshal.PtrToStructure<int>(t);
}
catch (Exception e)
{
Console.WriteLine(e);
} Marshal.FreeHGlobal(buffer);
}

会出现异常 System.AccessViolationException,这个异常是无法 catch 的,所以使用的时候最好封装一下

“System.AccessViolationException”类型的未经处理的异常在 未知模块
尝试读取或写入受保护的内存。这通常指示其他内存已损坏

如果需要 catch 那么请在 app.config 添加下面的代码

<?xml version="1.0" encoding="utf-8" ?>
<configuration>
<runtime>
<legacyCorruptedStateExceptionsPolicy enabled="true" />
</runtime>
</configuration>

然后在 Main 函数添加 HandleProcessCorruptedStateExceptions ,请看代码

        [HandleProcessCorruptedStateExceptions]
static void Main(string[] args)
{
AppDomain.CurrentDomain.UnhandledException += CurrentDomain_UnhandledException; for (int i = 0; i < 100000; i++)
{
try
{
Foo();
}
catch (Exception e)
{
Console.WriteLine(e); }
}
Console.WriteLine("完成");
Console.ReadKey();
}

这时可以看到进入 UnhandledException ,但是无法接住,软件还是会崩溃

释放内存

那么如何释放内存?因为这个申请是没有经过管理的,如果没有手动释放,那么就出现内存泄露。

        static void Main(string[] args)
{
for (int i = 0; i < 10000; i++)
{
Foo();
}
Console.ReadKey();
} private static void Foo()
{
int n = 100000;//长度
IntPtr buffer = Marshal.AllocHGlobal(sizeof(int) * n); }

上面的代码很快就可以看到内存占用到2G,所以需要手动释放

            Marshal.FreeHGlobal(buffer);

原来的 byte 数组需要使用 1G 内存,而且速度很慢,而现在使用这个方法只需要 7M 内存,速度很快

所以在需要进行大数组申请的时候,需要不停释放,就可以使用这个方法。

如果想使用封装好的,请看下面的大神弄好的类

参见:C#+无unsafe的非托管大数组(large unmanaged array in c# without 'unsafe' keyword) - BIT祝威 - 博客园

实际使用

实际在哪些地方使用?实际上因为很多时候都是使用实例化池,但是实例化池在进入游戏的时候,可以让gc不会让程序暂停,但是会在游戏进入下一关的时候,无法快速清理数据。所以这时就可以使用 Marshal 做实例化池,瞬间就可以清空。

上面的方法暂时不告诉大家如何做,因为涉及到公司的使用。

2018-8-10-C#-快速释放内存的大数组的更多相关文章

  1. C# 快速释放内存的大数组

    本文告诉大家如何使用 Marshal 做出可以快速释放内存的大数组. 最近在做 3D ,需要不断申请一段大内存数组,然后就释放他,但是 C# 对于大内存不是立刻释放,所以就存在一定的性能问题. 在博客 ...

  2. 让.NET程序快速释放内存的办法

    原文:让.NET程序快速释放内存的办法 公司里的一个程序,经过了N个人的手后发现上了生产内存会一直涨,直到物理内存几乎被占用完毕后突然就下降下来(估计是GC给释放了),然后再一直涨.这个程序主要是对字 ...

  3. C#中快速释放内存,任务管理器可查证

    先close() 再dispose() 之后=null 最后GC.Collect() 如: ms.Close();//关闭流,并释放与之相关的资源 ms.Dispose();//如果是流的话,默认只会 ...

  4. CF731C Socks并查集(森林),连边,贪心,森林遍历方式,动态开点释放内存

    http://codeforces.com/problemset/problem/731/C 这个题的题意是..小明的妈妈给小明留下了n只袜子,给你一个大小为n的颜色序列c 代表第i只袜子的颜色,小明 ...

  5. C/C++动态分配与释放内存的区别详细解析

    以下是对C与C++中动态分配与释放内存的区别进行了详细的分析介绍,需要的朋友可以过来参考下 1. malloc()函数1.1 malloc的全称是memory allocation,中文叫动态内存分配 ...

  6. Delphi动态创建组件,并释放内存

    开发所用delphi版本是xe2,效果图如下: 代码如下: ---------------------------------------------------------------------- ...

  7. 如何为linux释放内存和缓存

    如何为linux释放内存和缓存_华陌飞尘_新浪博客 如何为linux释放内存和缓存    (2011-10-20 10:49:01)        标签:    linux    swap    me ...

  8. 10分钟快速入门Redis

    Redis安装 来源:https://github.com/jaywcjlove/handbook 官方编译安装 $ wget http://download.redis.io/releases/re ...

  9. 申请Office 365一年免费的开发者账号攻略(2018年10月份版本)

    要进行Office 365开发,当然需要有完整的Office 365环境才可以.为了便于广大开发人员快速地启动这项工作,微软官方给所有开发人员提供了免费的一年开发者账号   那么如何申请Office ...

随机推荐

  1. Postfix+Dovecot+MySQL搭建邮件服务器(续)

    上一篇中的原文中$7$是错的,应该用$6$, 找到: 原因可参考 https://passlib.readthedocs.io/en/stable/lib/passlib.hash.sha512_cr ...

  2. MapReduce 图解流程超详细解答(2)-【map阶段】

    接上一篇讲解:http://blog.csdn.net/mrcharles/article/details/50465626 map任务:溢写阶段 正如我们在执行阶段看到的一样,map会使用Mappe ...

  3. ArcMap中给点shp添加字段后,shp文件破坏无法打开

    这两天遇到一个奇怪的问题,在整理项目中的建筑物数据时发现,有几个图层进行字段添加后出现问题,shp文件被损坏了.这问题很隐蔽,给shp添加字段后不报错,进行赋值,报错如下: 但是无论是选择“是”还是“ ...

  4. Pycharm 添加第三方库

    坏境:pycharm专业版 点击:file ——>setting ——>Project:python source code ——>Project interpreter ——> ...

  5. leetcode 850. Rectangle Area II

    给定一些矩形2 求覆盖面积 矩形不超过200个 1 算法1 朴素思想 虽然朴素但是代码却有意思 利用容斥原理 复杂度高达 N*2^N class Solution: def intersect(rec ...

  6. SpringMVC注解开发方式

    环境准备 springmvc版本:spring3.2 需要spring3.2所有jar(一定包括spring-webmvc-3.2.0.RELEASE.jar 工程结构 配置前端控制器(web.xml ...

  7. 开发者说 | 分布式事务中间件 Seata 的设计原理

    导读 微服务架构体系下,我们可以按照业务模块分层设计,单独部署,减轻了服务部署压力,也解耦了业务的耦合,避免了应用逐渐变成一个庞然怪物,从而可以轻松扩展,在某些服务出现故障时也不会影响其它服务的正常运 ...

  8. web前端学习(四)JavaScript学习笔记部分(8)-- JavaScript 浏览器对象

    1.window对象 1.1.window对象: window对象是BOM的核心,window对象指当前的浏览器窗口 所有javaScript全局对象.函数以及变量均自动生成为window对象的成员 ...

  9. js的剪贴板事件

    定义 剪贴板操作包括剪切(cut).复制(copy)和粘贴(paste)这三个操作,快捷键分别是ctrl+x.ctrl+c.ctrl+v.当然也可以使用鼠标右键菜单进行操作 关于这3个操作共对应下列6 ...

  10. java 7,8 排序异常

    排序报 java.lang.IllegalArgumentException: Comparison method violates its general contract! 要明确返回-1, 0, ...