分享一个自己封装且一直在维护的依赖.net4.5的http异步组包工具类(支持get,post( 表单 ,json, 包含图片等文件的流提交) ,cookie管理,自动跳转,代理IP,https的支持,高并发的配置等等
1.)Nuget安装:
搜索 ConfigLab.Comp, 安装最新版即可.
2.)组包示例.
2.1)模拟post表单提交并包含普通参数和一个图片文件(基于HttpFileUploadAssisterAsync这个核心类).
private async Task<string> GetPostResultForFile_Async()
{
string sRspResult = "";
IWebProxy eWebProxy = this.getWebProxy();//代理IP的设置
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Accept-Encoding"] = "gzip, deflate";
dictHeader["Accept-Language"] = "zh-CN,zh;q=0.9";
dictHeader["Upgrade-Insecure-Requests"] = "1";
dictHeader["Cache-Control"] = "max-age=0";
dictHeader["Origin"] = "null";
Dictionary<string, string> dictImg = new Dictionary<string, string>();//待和参数一起提交的文件信息, key=FullFileName, value=Post内容中的参数Name名的字典
if (this.tbxImgUrl.Text.IndexOf(":") > -1 && this.tbxImgName.Text.Trim().Length > 0)
{
dictImg[this.tbxImgUrl.Text] = this.tbxImgName.Text.Trim();
}
else
{
if (this.tbxImgName.Text.Trim().Length > 0)
{
dictImg[""] = this.tbxImgName.Text.Trim();
}
}
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
string sFile_ContentType = "image/jpeg";
ResponseResult result = new ResponseResult();
string sUrl = this.tbxUrl.Text.Trim();//输入的请求地址
string sPostData = this.tbxPostData.Text.Trim();//同步提交的文本参数 : u=1&a=2这种格式
string sAccess = "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3";
//异步模式
HttpFileUploadAssisterAsync htool = new HttpFileUploadAssisterAsync();//关键的类
Task<ResponseResult> tsk_rrs = htool.SendRequest(new RequestParamsWithFile()
{
URL = sUrl,
Method = "POST",
Timeout = 10,
PostData = sPostData,
DictFileName2PostName = dictImg,//可同时传递多个文件
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//是否自动维护cookie
DictRequestHeaderKeyValues = dictHeader,//自定义包头
Accept = sAccess,
UserAgent = sUserAgent,
KeepAlive = true,
EnableExpect100Continue = false,
File_ContentType = sFile_ContentType,//传输的文件类型
WebProxy = eWebProxy//代理IP
});
await tsk_rrs;
ResponseResult rrs_rspData = tsk_rrs.Result;
sRspResult = rrs_rspData.ResponseData;
return sRspResult;
}
2.2)模拟post表单提交并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> GetPostResult_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Content-Type"] = "application/x-www-form-urlencoded";
dictHeader["Accept-Language"] = "zh-cn";
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Task<ResponseResult> tsk_result = htool.SendRequest(new RequestParams() {
URL = this.tbxUrl.Text.Trim(),
Method = "POST",
Timeout = 30, //单位秒
PostData = this.tbxPostData.Text,//表单数据,u=1&p=2这种
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//是否自动管理cookie
DictRequestHeaderKeyValues = dictHeader, //自定义的包头信息
Accept = "*/*",
UserAgent = sUserAgent,
KeepAlive = false,
EnableP3P = false,
AllowRedrect=false,//是否允许自动跳转
EnableExpect100Continue=true,
WebProxy = eProxy //代理IP
});
await tsk_result;
ResponseResult result = tsk_result.Result;
return string.Format("optime={0}\r\nhttpstatucode={1}\r\nerror={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
}
2.3)模拟post提交一个json数据并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> getResultForPostJson_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Content-Type"] = "application/json;charset=UTF-8";//重点!!!!
dictHeader["Accept-Language"] = "zh-cn";
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Task<ResponseResult> tsk_result = htool.SendRequest(new RequestParams()
{
URL = this.tbxUrl.Text.Trim(),
Method = "POST",
Timeout = 30,
PostData = this.tbxPostData.Text,//Json数据
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//自动管理cookie
DictRequestHeaderKeyValues = dictHeader,//自定义包头
Accept = "*/*",
UserAgent = sUserAgent,
KeepAlive = false,
EnableP3P = false,
AllowRedrect = false,
EnableExpect100Continue = true,
WebProxy = eProxy
});
await tsk_result;
ResponseResult result = tsk_result.Result;
string sResult = string.Format("optime={0}\r\nhttpstatucode={1}\r\nerrors={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
return sResult;
}
2.4)模拟get提交一个数据并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> GetGetResult_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Encoding eEncode = this.GetEncoding();
dictHeader["Accept-Language"] = "zh-CN,zh;q=0.8";
dictHeader["Cache-Control"] = "max-age=0";
string sAccess = "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8";
Task<ResponseResult> tsk_rsp = htool.SendRequest(new RequestParams() {
URL=this.tbxUrl.Text,
Method="GET", //在这里设置Get
Timeout=30,
PostData= this.tbxPostData.Text,
WriteEnc=Encoding.Default,
ReaderEnc=eEncode,
WithCookie = this.btnWithCookie.Checked,
DictRequestHeaderKeyValues=dictHeader,
Accept=sAccess,
UserAgent=sUserAgent,
KeepAlive=false,
EnableP3P=false,
AllowRedrect=false,
WebProxy=eProxy
});
await tsk_rsp;
ResponseResult result = tsk_rsp.Result;
return string.Format("optime={0}\r\nhttpstatucode={1}\r\nerror={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
}
分享一个自己封装且一直在维护的依赖.net4.5的http异步组包工具类(支持get,post( 表单 ,json, 包含图片等文件的流提交) ,cookie管理,自动跳转,代理IP,https的支持,高并发的配置等等的更多相关文章
- 什么是请求参数、表单参数、url参数、header参数、Cookie参数?一文讲懂
最近在工作中对 http 的请求参数解析有了进一步的认识,写个小短文记录一下. 回顾下自己的情况,大概就是:有点点网络及编程基础,只需要加深一点点对 HTTP 协议的理解就能弄明白了. 先分享一个小故 ...
- 黄聪:Pjax无刷新跳转页面实现,支持超链接与表单提交
什么是pjax? 当你点击一个站内的链接的时候,不是做页面跳转,而是只是站内页面刷新.这样的用户体验,比起整个页面都闪一下来说, 好很多. 其中有一个很重要的组成部分, 这些网站的ajax刷新是支持浏 ...
- Pjax无刷新跳转页面实现,支持超链接与表单提交
什么是pjax? 当你点击一个站内的链接的时候,不是做页面跳转,而是只是站内页面刷新.这样的用户体验,比起整个页面都闪一下来说, 好很多. 其中有一个很重要的组成部分, 这些网站的ajax刷新是支持浏 ...
- 自动爬取代理IP例子
import time import json import datetime import threading import requests from lxml import etree from ...
- 一个表单里,如果有<button>标签存在,它会自动提交表单
可以用button代替input type=”submit”吗? 在ie下,<button>标记恐怕还存在几个不大不小的问题. 在一个表单里,如果有一个以上"submit&quo ...
- 【C#】对异步请求处理程序IHttpAsyncHandler的理解和分享一个易用性封装
在asp.net项目中,添加一个[一般处理程序]来处理请求是很自然的事,这样会得到一个实现自IHttpHandler的类,然后只需在ProcessRequest方法中写上处理逻辑就行了.但是这样的一个 ...
- 项目经验分享——Java常用工具类集合 转
http://blog.csdn.net/xyw591238/article/details/51678525 写在前面 本文涉及的工具类部分是自己编写,另一部分是在项目里收集的.工具类涉及数 ...
- Python网络爬虫之cookie处理、验证码识别、代理ip、基于线程池的数据爬去
本文概要 session处理cookie proxies参数设置请求代理ip 基于线程池的数据爬取 引入 有些时候,我们在使用爬虫程序去爬取一些用户相关信息的数据(爬取张三“人人网”个人主页数据)时, ...
- Go/Python/Erlang编程语言对比分析及示例 基于RabbitMQ.Client组件实现RabbitMQ可复用的 ConnectionPool(连接池) 封装一个基于NLog+NLog.Mongo的日志记录工具类LogUtil 分享基于MemoryCache(内存缓存)的缓存工具类,C# B/S 、C/S项目均可以使用!
Go/Python/Erlang编程语言对比分析及示例 本文主要是介绍Go,从语言对比分析的角度切入.之所以选择与Python.Erlang对比,是因为做为高级语言,它们语言特性上有较大的相似性, ...
- Charles 抓包发现自动跳转为https 问题梳理
今天遇到个有点意思的问题.特此记录. 业务场景: 做了一个页面,但是对外是挂载在京东主站上.如:www.jd.com/yifu/123456.html. 现场情况: 在本地/测试环境/预发环境中,每次 ...
随机推荐
- 我用canvas带你看一场流星雨
前言 最近总是梦见一些小时候的故事,印象最深刻的就是夏天坐在屋顶上,看着满天的繁星,一颗,两颗,三颗...不由自主地开始了数星星的过程.不经意间,一颗流星划过夜间,虽然只是转瞬即逝,但它似乎比夜空中的 ...
- html点击a标签弹窗QQ聊天界面
以为很难.以为要第三方.谁知道不用.一句话的事情. 1 <a hfer="tencent://message/?uin=12345&Site=&Menu-=yes&qu ...
- golang单元测试一(简单函数测试)
0.1.索引 https://blog.waterflow.link/articles/1663688140724 1.简介 单元测试是测试代码.组件和模块的单元函数.单元测试的目的是清除代码中的错误 ...
- Sprint产品待办列表的优先级要怎么排?
在梳理产品待办事项列表的过程中,产品负责人需要先做优先级排列,保证我们 在一定的时间盒内能够交付需要优先级最高.最具价值的用户故事. 那这个用户故事的优先级要怎么排列,我们怎样选择用户故事的实现顺序? ...
- 部署redis集群
1.redis部署 redis单实例部署参考:https://www.cnblogs.com/silgen/p/16537299.html 版本:6.2.7 集群:6个节点(redis集群至少3个节点 ...
- docker搭建ddns
ddns 容器 https://hub.docker.com/r/chen... https://github.com/honwen/ali... docker pull chenhw2/aliyun ...
- Centos7 mysql网络源安装范例(其他系统也可参考)
1. 以下是一个通配的el7系列的yum源,可适应aarch64,x86_64,i386内核,但是可能会慢一点 # cat > /etc/yum.repos.d/mysql-community. ...
- c++小练习——黑白棋
没什么好发的,发给黑白棋水一水,如果有人能发现问题就更好了. /* Othello.cpp 黑白棋,实现随时结束并判断胜负的功能 成功运行于Visual Studio 2013 */ #include ...
- Devexpress 图表显示数据标签
dev的图标功能非常强大其中有一些设置可以更好的展现出数据 设置Series的标签 series.LabelsVisibility = DevExpress.Utils.DefaultBoolean. ...
- Duplicate property mapping of xxx found in xx 嵌套异常,重复的属性在映射中发现。
该异常的原意是因为在映射文件中出现了两个一样的属性名: <property name="相同的属性名出现了两次以上" > <property name=" ...