c# 异步进阶————channel [一]
前言
该系列为异步编程的进阶篇,其实也不能这么讲。世界上本没有进阶篇,只能说是高级篇(高级篇不能说多高级,是对底层的封装的意思),只要是加深理解都是进阶。
本章先介绍一下channel。
正文
下面没什么好说的,把文档贴一下。
https://docs.microsoft.com/zh-cn/dotnet/api/system.threading.channels?view=net-6.0
Channels 是做什么的呢?
提供用于在生成者和使用者之间以异步方式传递数据的一组同步数据结构。
这里面有同步又有异步,到底该怎么理解呢?
首先这里面有生成者和使用者两个概念。
那么怎么理解同步数据呢? 就是说使用者是按照生成者的生成数据顺序进行使用的。
然后这个异步方式传递数据是怎么回事呢? 那就是说比如生成者生产了一条消息,然后使用者使用了,然后生产者才能继续生成,那么就是同步,反之就是异步。
为什么用同步来举例,然后反之就是异步呢? 因为异步的情况太多了。
那么这里就解释完了。
然后这里要说明一点的就是有些初学者难理解这里说的channel 是一种数据结构,里面不是有方法吗?
先说下数据结构的含义:
A data structure is a storage that is used to store and organize data. It is a way of arranging data on a computer so that it can be accessed and updated efficiently.
数据结构是一种用来存储和组织数据的存储器。然后一种编排数据的方法用来访问和更新数据。
所以数据结构不仅仅是用来存储的,里面还有组织数据的能力。
比如我们的数组、集合啊,都是数据结构。 其实就两个特征,一个是存储,另外一个是组织。
然后里面有上面这些类哈。
来看下第一个类:
BoundedChannelOptions 继承自channelOptions。
那么还是先看channelOptions。
这里面除了AllowSynchronousContinuations,其他含义很清楚了,就不看了。这个AllowSynchronousContinuations 又很绕,等下实践的时候再看下。
BoundedChannelOptions 从表面意思是有边界的配置, 比 channeloptions 多了两个东西。
里面就是限制管道中的最大消息数,另一个就是如果到达消息数后,怎么处理的问题。
处理方式有很多种:
然后思考一个问题,那就是为什么要限制里面的消息数。
这里面和缓存一个道理,比如说不断的往里面加入消息数,且消费者无法消费完,然后内存就会不断的升高,因为我们的内存有限,不然做到无限缓存。
而且还有一个问题,那就是如果消费不完,然后不断往里面增加数据还会增加io成本,所以说应该考虑自己的消费情况,来设置最大消息数。
channel 提供了有边界选项,同样也提供了无边界的UnboundedChannelOptions 。
这里有人就会问了, 为啥要无边界的,上面不是说要设置有边界的,无边界不是会有问题吗?
是的,无边界的确会有问题。
这个无边界的选择意思是让你自己控制生产速度。
举个例子,比如说你需要进行对流量控制,每条消息的大小都不一样,那么这个时候你对消息数进行限制,就是达不到效果的。
这里要说明的无边界不是真的让你放飞自我。如果你肯定消费者一定能达到预期的消费,那么你也可以不限制,但是最好不要这么做。
因为channel 毕竟是单台机器的使用, 不像kafka这种集群模式的,具备很大的存储能力。仅个人建议,如有不同想法可以交流一下。
channel 这个类,就是一个构造器,创建有边界的channel 和无边界的。
创建出来的channel 有 读取器和写入器:
至于例子,在网上找了一个例子:
using System.Threading.Channels;
var channel = Channel.CreateUnbounded<int>();
Task.Run(async () =>
{
for (int i = 0; i < 10; i++)
{
await Task.Delay(TimeSpan.FromMilliseconds(200));
await channel.Writer.WriteAsync(i);// 生产者写入消息
if (i > 5)
{
channel.Writer.Complete(); //生产者也可以明确告知消费者不会发送任何消息了
}
}
});
Task.Run(async () =>
{
await foreach (var item in channel.Reader.ReadAllAsync())//async stream,在没有被生产者明确Complete的情况下,这里会一致阻塞下去
{
Console.WriteLine(item);
}
Console.WriteLine("done");
});
Console.ReadKey();
这个例子比较简单,后面会编写一个kafka 批量消费的库,里面用到了这个channel,到时候可以交流一下。
结
该系列不断更新,主要是介绍一下一些异步编程高级部分(不是指内容多高级而是指上层应用),内容偏设计方面,实战例子会在后面的开源中体现。
c# 异步进阶————channel [一]的更多相关文章
- 异步Async
1.c#异步介绍 异步必须基于委托,有委托才有异步 新建一个window Form程序MyAsync,添加一个按钮,(name)=btnAsync 后台代码如下: using System;using ...
- Dotnet Core下的Channel, 你用了吗?
今天给大家分享一个微软官方的好东西:Channel. 前言 今天给大家分享一个微软官方的生产者/消费者方案的特性解决:Channel. Channel在System.Threading.Chann ...
- nio简介
上一篇 Java I/O演进与Linux网络I/O模型 一.传统BIO java传统bio编程概念: http://www.cnblogs.com/carl10086/p/6034563.html# ...
- netty(三) 组件介绍
netty各组件说明:channel ----- SocketEventLoop -------控制流,多线程处理,并发channelFuture ------- 异步通知 channel:主要是实现 ...
- Netty5服务端源码解析
Netty5源码解析 今天让我来总结下netty5的服务端代码. 服务端(ServerBootstrap) 示例代码如下: import io.netty.bootstrap.ServerBootst ...
- Java NIO系列教程(八)JDK AIO编程
目录: Reactor(反应堆)和Proactor(前摄器) <I/O模型之三:两种高性能 I/O 设计模式 Reactor 和 Proactor> <[转]第8章 前摄器(Proa ...
- RabbitMQ事物模式
Rabbit的消息确认机制(事务+confirm)在rabbmitmq中我们可以通过持久化数据解决rabbitmq服务器异常的数据丢失问题问题:生产者将消息发送出去之后消息到底有没有到达rabbitm ...
- Netty实战 - 1. 基本概念
1. Netty简介 Netty是由JBOSS提供的一个java开源框架.它提供异步的.事件驱动的网络应用程序框架和工具,用以快速开发高性能.高可靠性的网络服务器和客户端程序.Netty是一个基于NI ...
- RabbitMQ消息发布时的权衡
在进行本篇文章的学习之前,你需要先阅读 https://www.cnblogs.com/duanjt/p/10057330.html.以便对Java访问RabbitMQ的基础用法有所了解. 一.失败通 ...
随机推荐
- 分享一个网上搜不到的「Redis」实现「聊天回合制」的方案
前言 为什么说网上搜不到,因为关于聊天回合制的方案作者本人快把百度搜秃噜了也没找到,好在最终是公司一个关系不错的大佬帮提供了点思路,最终作者将其完整实现了出来. 分享出来大家可以收藏,万一你哪天也碰到 ...
- Redis之时间轮机制(五)
一.什么是时间轮 时间轮这个技术其实出来很久了,在kafka.zookeeper等技术中都有时间轮使用的方式. 时间轮是一种高效利用线程资源进行批量化调度的一种调度模型.把大批量的调度任务全部绑定到同 ...
- VisionPro · C# · 加载与保存视觉工具包
当项目程序被启动或更换程序产品型号时,我们需要提前加载对应的VisionPro的程序VPP文件,以提高程序调用效率. 加载代码: 1 using System; 2 using System.Wind ...
- adb工具
ADB:全称为Android Debug Bridge,它是 Android 开发/测试人员不可替代的强大工具. 首先,下载ADB工具并安装: 下载:百度就有.下载后是个压缩包,将其拷贝到cm ...
- Min_25 筛与杜教筛
杜教筛 \(\) 是 \(\) 的前缀和,\(\), \(\) 同理. 假设 \( × = ℎ\) ,并且 \(, \) 易求出,\(\) 难求出. 那么 \[H () = \sum_{ \cdot ...
- Solution -「CF645F」Cowslip Collections
设 \(f(i)\) 表示大小为 \(k\),\(\gcd\) 为 \(i\) 的方案数.\(F(i)\) 表示大小为 \(k\),\(\gcd\) 为 \(i\) 的倍数的方案数. 不难看出:\(F ...
- 【做题笔记】CF Edu Round 132
1. 前言 本人第一次把 Div2. D 切了,开心. C 不会,寄. 后来在场外想到一种奇怪做法 AC 了. 2. 正文(A-D) CF 比赛链接 A. Three Doors 签到题.循环查找手中 ...
- java的访问权限protected和default
protected和default的区别 第一点:在同一个包中,protected和default表现一致,即,当main方法所在的类和使用了protected与default修饰属性.方法的类在同一 ...
- 吐泡泡_via牛客网
题目 链接:https://ac.nowcoder.com/acm/contest/28537/E 来源:牛客网 时间限制:C/C++ 1秒,其他语言2秒 空间限制:C/C++ 32768K,其他语言 ...
- Golang 盲注脚本
Golang 盲注脚本 payload部分 其中脚本最重要的环节就是payload部分了,需要如何去闭合,如何构造SQL语句来达到判断的效果.(还有如何绕过waf等等...) bool盲注 下面是最基 ...