c# 异步进阶————channel [一]
前言
该系列为异步编程的进阶篇,其实也不能这么讲。世界上本没有进阶篇,只能说是高级篇(高级篇不能说多高级,是对底层的封装的意思),只要是加深理解都是进阶。
本章先介绍一下channel。
正文
下面没什么好说的,把文档贴一下。
https://docs.microsoft.com/zh-cn/dotnet/api/system.threading.channels?view=net-6.0
Channels 是做什么的呢?
提供用于在生成者和使用者之间以异步方式传递数据的一组同步数据结构。
这里面有同步又有异步,到底该怎么理解呢?
首先这里面有生成者和使用者两个概念。
那么怎么理解同步数据呢? 就是说使用者是按照生成者的生成数据顺序进行使用的。
然后这个异步方式传递数据是怎么回事呢? 那就是说比如生成者生产了一条消息,然后使用者使用了,然后生产者才能继续生成,那么就是同步,反之就是异步。
为什么用同步来举例,然后反之就是异步呢? 因为异步的情况太多了。
那么这里就解释完了。
然后这里要说明一点的就是有些初学者难理解这里说的channel 是一种数据结构,里面不是有方法吗?
先说下数据结构的含义:
A data structure is a storage that is used to store and organize data. It is a way of arranging data on a computer so that it can be accessed and updated efficiently.
数据结构是一种用来存储和组织数据的存储器。然后一种编排数据的方法用来访问和更新数据。
所以数据结构不仅仅是用来存储的,里面还有组织数据的能力。
比如我们的数组、集合啊,都是数据结构。 其实就两个特征,一个是存储,另外一个是组织。
然后里面有上面这些类哈。
来看下第一个类:
BoundedChannelOptions 继承自channelOptions。
那么还是先看channelOptions。
这里面除了AllowSynchronousContinuations,其他含义很清楚了,就不看了。这个AllowSynchronousContinuations 又很绕,等下实践的时候再看下。
BoundedChannelOptions 从表面意思是有边界的配置, 比 channeloptions 多了两个东西。
里面就是限制管道中的最大消息数,另一个就是如果到达消息数后,怎么处理的问题。
处理方式有很多种:
然后思考一个问题,那就是为什么要限制里面的消息数。
这里面和缓存一个道理,比如说不断的往里面加入消息数,且消费者无法消费完,然后内存就会不断的升高,因为我们的内存有限,不然做到无限缓存。
而且还有一个问题,那就是如果消费不完,然后不断往里面增加数据还会增加io成本,所以说应该考虑自己的消费情况,来设置最大消息数。
channel 提供了有边界选项,同样也提供了无边界的UnboundedChannelOptions 。
这里有人就会问了, 为啥要无边界的,上面不是说要设置有边界的,无边界不是会有问题吗?
是的,无边界的确会有问题。
这个无边界的选择意思是让你自己控制生产速度。
举个例子,比如说你需要进行对流量控制,每条消息的大小都不一样,那么这个时候你对消息数进行限制,就是达不到效果的。
这里要说明的无边界不是真的让你放飞自我。如果你肯定消费者一定能达到预期的消费,那么你也可以不限制,但是最好不要这么做。
因为channel 毕竟是单台机器的使用, 不像kafka这种集群模式的,具备很大的存储能力。仅个人建议,如有不同想法可以交流一下。
channel 这个类,就是一个构造器,创建有边界的channel 和无边界的。
创建出来的channel 有 读取器和写入器:
至于例子,在网上找了一个例子:
using System.Threading.Channels;
var channel = Channel.CreateUnbounded<int>();
Task.Run(async () =>
{
for (int i = 0; i < 10; i++)
{
await Task.Delay(TimeSpan.FromMilliseconds(200));
await channel.Writer.WriteAsync(i);// 生产者写入消息
if (i > 5)
{
channel.Writer.Complete(); //生产者也可以明确告知消费者不会发送任何消息了
}
}
});
Task.Run(async () =>
{
await foreach (var item in channel.Reader.ReadAllAsync())//async stream,在没有被生产者明确Complete的情况下,这里会一致阻塞下去
{
Console.WriteLine(item);
}
Console.WriteLine("done");
});
Console.ReadKey();
这个例子比较简单,后面会编写一个kafka 批量消费的库,里面用到了这个channel,到时候可以交流一下。
结
该系列不断更新,主要是介绍一下一些异步编程高级部分(不是指内容多高级而是指上层应用),内容偏设计方面,实战例子会在后面的开源中体现。
c# 异步进阶————channel [一]的更多相关文章
- 异步Async
1.c#异步介绍 异步必须基于委托,有委托才有异步 新建一个window Form程序MyAsync,添加一个按钮,(name)=btnAsync 后台代码如下: using System;using ...
- Dotnet Core下的Channel, 你用了吗?
今天给大家分享一个微软官方的好东西:Channel. 前言 今天给大家分享一个微软官方的生产者/消费者方案的特性解决:Channel. Channel在System.Threading.Chann ...
- nio简介
上一篇 Java I/O演进与Linux网络I/O模型 一.传统BIO java传统bio编程概念: http://www.cnblogs.com/carl10086/p/6034563.html# ...
- netty(三) 组件介绍
netty各组件说明:channel ----- SocketEventLoop -------控制流,多线程处理,并发channelFuture ------- 异步通知 channel:主要是实现 ...
- Netty5服务端源码解析
Netty5源码解析 今天让我来总结下netty5的服务端代码. 服务端(ServerBootstrap) 示例代码如下: import io.netty.bootstrap.ServerBootst ...
- Java NIO系列教程(八)JDK AIO编程
目录: Reactor(反应堆)和Proactor(前摄器) <I/O模型之三:两种高性能 I/O 设计模式 Reactor 和 Proactor> <[转]第8章 前摄器(Proa ...
- RabbitMQ事物模式
Rabbit的消息确认机制(事务+confirm)在rabbmitmq中我们可以通过持久化数据解决rabbitmq服务器异常的数据丢失问题问题:生产者将消息发送出去之后消息到底有没有到达rabbitm ...
- Netty实战 - 1. 基本概念
1. Netty简介 Netty是由JBOSS提供的一个java开源框架.它提供异步的.事件驱动的网络应用程序框架和工具,用以快速开发高性能.高可靠性的网络服务器和客户端程序.Netty是一个基于NI ...
- RabbitMQ消息发布时的权衡
在进行本篇文章的学习之前,你需要先阅读 https://www.cnblogs.com/duanjt/p/10057330.html.以便对Java访问RabbitMQ的基础用法有所了解. 一.失败通 ...
随机推荐
- C#中的枚举器
更新记录 本文迁移自Panda666原博客,原发布时间:2021年6月28日. 一.先从可枚举类型讲起 1.1 什么是可枚举类型? 可枚举类型,可以简单的理解为: 有一个类,类中有挺多的数据,用一种统 ...
- Java开发学习(五)----bean的生命周期
一.什么是生命周期 首先理解下什么是生命周期? 从创建到消亡的完整过程,例如人从出生到死亡的整个过程就是一个生命周期. bean生命周期是什么? bean对象从创建到销毁的整体过程. bean生命周期 ...
- supervisor的安装与使用
Ubuntu安装使用supervisor 进程管理工具 安装 apt-get install supervisor 查看是否安装成功 pgrep supervisord # 返回进程号则成功 改配置文 ...
- SAP JSON 格式化及解析。
一.首选:/ui2/cl_json {'key':'value'} /ui2/cl_json=>deserialize( EXPORTING json = json CHANGING d ...
- js烧脑面试题大赏
本文精选了20多道具有一定迷惑性的js题,主要考察的是类型判断.作用域.this指向.原型.事件循环等知识点,每道题都配有笔者详细傻瓜式的解析,偏向于初学者,大佬请随意. 第1题 let a = 1 ...
- 工具箱之 IKVM.NET 项目新进展
在各种群里经常讨论的一个事情是.NET 如何调用 Java 的实现,最常见的场景之一就是在加解密方面Java提供的密钥,C#无法解密, C#中byte范围是[0,255],而Java中的byte范围是 ...
- IDEA快速创建maven项目
遇到问题不要急,不要怕. 一. 二. 三. 四.Finish进来之后,项目会加载一会,之后会是下面这样子. 五.继续往下面配置,建立java和resorces文件夹 六.下面配置tomcat服 ...
- 【ArcGIS教程】专题图制作-人口密度分布图——人口密度分析
本篇以湖北省为例,制作人口密度分布图:这里所使用的为湖北省的省.市.县三个级别的行政区划矢量数据,以及居民点数据,进而进行密度分析. 示例数据来源于地理遥感生态网,网站地址www.gisrs.c ...
- python单元测试框架笔记
目录 单元测试概述 什么是单元测试 单元测试什么进行? 单元测试由谁负责? 单元测试需要注意 单元测试覆盖类型 python 单元测试框架 unittest pytest 测试框架 单元测试概述 什么 ...
- Tapdata Cloud 版本上新!新增ClickHouse,ADB MySQL等5个数据源支持
Tapdata Cloud cloud.tapdata.net Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持Oracle.MySQL.PG.SQL Server.Mongo ...