小白学标准库之 http
1. 前言
标准库是工具,是手段,是拿来用的。一味的学标准库就忽视了语言的内核,关键。语言层面的特性,内存管理,垃圾回收。数据结构,设计模式。这些是程序的内核,要熟练,乃至精通它们,而不是精通标准库。
标准库是需要掌握的,了解的。可以通过标准库深挖语言的特性,但不能只学标准库,学所谓的表面的东西。
基于这个目的,这里不会深入介绍 http 标准库,因为它内容太广,想深亦难。当然不是说不要,是要的,部分内容留作后续研究。
2. net/http 介绍
http 是超文本传输协议,是基于 TCP/IP 协议之上的应用层协议。HTTP 协议入门 清晰的介绍了 HTTP 协议。
Go 中实现 http 协议的包是 net/http。实现 http 协议需要 HTTP request 请求和 HTTP response 响应,请求和响应分别对应 Request 和 Response 结构体,如下:
type Request struct {
Method string
URL *url.URL
Proto string // "HTTP/1.0"
ProtoMajor int // 1
ProtoMinor int // 0
Header Header
...
}
type Response struct {
Status string // e.g. "200 OK"
StatusCode int // e.g. 200
Proto string // e.g. "HTTP/1.0"
ProtoMajor int // e.g. 1
ProtoMinor int // e.g. 0
Header Header
Body io.ReadCloser
...
}
抓住了结构体就抓住了实例对应的属性和方法。
这里构造 server 端实现 http response 响应:
package main
import (
"io"
"log"
"net/http"
)
func main() {
helloHandler := func(w http.ResponseWriter, req *http.Request) {
sr := "hello, world with request " + req.Method
io.WriteString(w, sr)
}
http.HandleFunc("/hello", helloHandler)
log.Fatal(http.ListenAndServe(":8082", nil))
}
其中:
ListenAndServe 调用 net 包的 Listen 方法实现 tcp 地址 (ip + port) 的侦听,Go 标准库 net 介绍了 net 包相关内容。
http.ResponseWriter 是接口,它实现了 Header,Write,WriteHeader 方法向响应添加 header 和 body 内容。如定义当调用 /hello api 时返回 404 状态码,可调用 WriterHeader 方法如下:
w.WriteHeader(404)
sr := "hello, world with request " + req.Method
io.WriteString(w, sr)
注意状态码不能重复写,如将 WriteHeader(404) 置于 WriteString 后会报错
http: superfluous response.WriteHeader call from。http.Request 是客户端发来的请求,在 Handler 中可使用该请求组合生成响应信息。这里将返回字符和请求方法结合作为响应发给客户端。
继续构造客户端实现 HTTP request 请求:
func main() {
response, err := http.Get("http://127.0.0.1:8082/hello")
if err != nil {
fmt.Println(err)
os.Exit(1)
}
defer response.Body.Close()
body, _ := ioutil.ReadAll(response.Body)
fmt.Println(string(body))
fmt.Println(response)
fmt.Println(*response.Request)
}
运行 server 和 client:
// run server
[chunqiu@test http]$ go run server/server.go
// run client
[chunqiu@test http]$ go run main.go
hello, world with request GET
&{404 Not Found 404 HTTP/1.1 1 1 map[Content-Length:[29] Content-Type:[text/plain; charset=utf-8] Date:[Mon, 06 Dec 2021 02:18:11 GMT]] 0xc00009c040 29 [] false false map[] 0xc000140000 <nil>}
{GET http://127.0.0.1:8082/hello HTTP/1.1 1 1 map[] <nil> <nil> 0 [] false 127.0.0.1:8082 map[] map[] <nil> map[] <nil> <nil> <nil> 0xc0000160a0}
从打印返回值可以看到:
- server response 为前面写入的状态码 404;server 和 client 通信使用的 HTTP 协议为 HTTP/1.1;response 的 Header 头信息包括 Content-Length,Content-Type 和 Date 信息,其中 Content-Length 表示文本,或其它类型的“长度”,如对于 zip 类型,返回的 Content-Length 是 zip 的大小:
Length: 3116622545 (2.9G) [application/zip]。 - server 的 response 也包括了 request 的信息,request 是 response 的属性,可通过 response.Request 调用 Request 信息。
不仅是返回值头信息,在 Request 也可以定义头信息,如 Content-Type 定义接收类型,Accept 定义接收数据格式等。
3. 程序示例
看一段代码:
req, err := http.NewRequest(method, url, data)
if err != nil {
return nil, false, err
}
req.Header.Add("Content-Type", "application/json; charset=utf-8")
resp, err := client.Do(req)
if err != nil {
return nil, false, err
}
defer resp.Body.Close()
out, err := ioutil.ReadAll(resp.Body)
if err != nil {
return nil, false, err
}
这里使用了 NewRequest 函数创建 req 实例,通过 client 调用 req 的 url 和相应的方法,并且在 req 的头信息添加 Content-Type 声明请求的 body 信息。有一点需要注意的是 ioutil 包的 ReadAll 方法,它的函数原型为:
// ReadAll reads from r until an error or EOF and returns the data it read.
// A successful call returns err == nil, not err == EOF. Because ReadAll is
// defined to read from src until EOF, it does not treat an EOF from Read
// as an error to be reported.
//
// As of Go 1.16, this function simply calls io.ReadAll.
func ReadAll(r io.Reader) ([]byte, error)
相关的描述信息见源代码注释。其中 ReadAll 函数参数为 io.Reader,它是一个实现了 Read 方法的接口。而 resp.Body 是 io.ReadCloser 接口的实例,io.ReadCloser 实现了 Reader 和 Closer 方法。看到了吗,这里发生了接口的赋值,关于接口设计与实现及接口赋值部分留作后续研究。
还有一部分内容有待后续研究的是:http 是基于 TCP/IP 之上的应用层协议,它的实现不需要关心底层 TCP/IP 的实现,这是好处又是不好的地方,底层做了什么, TCP/IP 怎么处理 http 包,从 client 到 server 经过了什么,具体流程是什么样的。这部分是不明确的,如果不掌握这部分内容 http 传输出现问题很难 debug。
小白学标准库之 http的更多相关文章
- 小白学 Python 爬虫(21):解析库 Beautiful Soup(上)
小白学 Python 爬虫(21):解析库 Beautiful Soup(上) 人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前 ...
- 小白学 Python 爬虫(22):解析库 Beautiful Soup(下)
人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前置准备(一)基本类库的安装 小白学 Python 爬虫(3):前置准备(二)Li ...
- 小白学 Python 爬虫(23):解析库 pyquery 入门
人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前置准备(一)基本类库的安装 小白学 Python 爬虫(3):前置准备(二)Li ...
- 小白学 Python 爬虫(32):异步请求库 AIOHTTP 基础入门
人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前置准备(一)基本类库的安装 小白学 Python 爬虫(3):前置准备(二)Li ...
- 什么是 C 和 C ++ 标准库?学编程的你应该知道这些知识!
简要介绍编写C/C ++应用程序的领域,标准库的作用以及它是如何在各种操作系统中实现的. 我已经接触C++一段时间了,一开始就让我感到疑惑的是其内部结构:我所使用的内核函数和类从何而来? 谁发明了它们 ...
- 【循序渐进学Python】11.常用标准库
安装完Python之后,我们也同时获得了强大的Python标准库,通过使用这些标准库可以为我们节省大量的时间.这里是一些常用标准库的简单说明.更多的标准库的说明,可以参考Python文档 sys 模块 ...
- 小白学 Python 爬虫(18):Requests 进阶操作
人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前置准备(一)基本类库的安装 小白学 Python 爬虫(3):前置准备(二)Li ...
- 小白学 Python 爬虫(25):爬取股票信息
人生苦短,我用 Python 前文传送门: 小白学 Python 爬虫(1):开篇 小白学 Python 爬虫(2):前置准备(一)基本类库的安装 小白学 Python 爬虫(3):前置准备(二)Li ...
- 小白学Java:I/O流
目录 小白学Java:I/O流 基本分类 发展史 文件字符流 输出的基本结构 流中的异常处理 异常处理新方式 读取的基本结构 运用输入与输出 文件字节流 缓冲流 字符缓冲流 装饰设计模式 转换流(适配 ...
- 小白学 Python 数据分析(11):Pandas (十)数据分组
人生苦短,我用 Python 前文传送门: 小白学 Python 数据分析(1):数据分析基础 小白学 Python 数据分析(2):Pandas (一)概述 小白学 Python 数据分析(3):P ...
随机推荐
- SpringBoot整个RabbitMQ详细~
搭建环境 1.安装RabbitMQ,我是用的是Docker方式安装的,大家根据个人习惯自行安装哈 docker run -d -p 5672:5672 -p 15672:15672 --name ra ...
- Diffusion Model扩散模型
1.扩散模型基本原理: 扩散模型包括两个步骤: 固定的(或预设的)前向扩散过程q:该过程会逐渐将高斯噪声添加到图像中,直到最终得到纯噪声. 2.可训练的反向去噪扩散过程pθ:训练一个神经网络,从纯噪音 ...
- 2021AI量化投资训练营重磅升级,自带编程的优势显而易见
量化交易规模突破万亿大关 国内量化交易规模快速发展,今年量化基金已突破万亿大关,并且量化私募的整体业绩十分亮眼,过去5年一线量化私募的超额收益基本在20%~30%,量化交易的占比已达到20%-30%( ...
- Nginx服务器常用参数设置
Nginx作为一个高性能的Web服务器和反向代理,它的性能可以通过调整底层操作系统的参数来进一步优化.以下是一些常见的操作系统级别的调整,通常针对Linux系统: File Descriptors L ...
- 太牛叉了!国产 AI 智能体惊艳问世,全面致敬 FastGPT!
太震撼了!太厉害了!昆仑万维正式发布了「天工 SkyAgents」平台,助力大模型走入千家万户.你听听,这个名字一听就有一种巧夺天工的感觉,技艺那是相当的高超. 这个平台基于昆仑万维「天工大模型」打造 ...
- 【开源项目推荐】OpenMetadata——基于开放元数据的一体化数据治理平台
大家好,我是独孤风. 这几年数据治理爆火,但迟迟没有一个优秀的开源数据治理平台的出现.很多公司选择元数据管理平台作为基础,再构建数据质量,数据血缘等工具. 今天为大家推荐的开源项目,是一个一体化的数据 ...
- Windows Server 2016 Standard RemoteApp应用发布配置举例
RemoteApp 应用发布介绍 RemoteApp 是微软在Windows Server 2008 之后,在其系统中集成的一项服务功能,用户可以通过远程桌面访问远端服务器的桌面与程序,客户端本机在无 ...
- WPF通用权限平台系统,正在研发中(基本于:VS2019 WPF+Devexpress21.2)
WPF通用权限平台系统,正在研发中(基本于:VS2019 WPF+Devexpress21.2) 开发工具:VS2019 C# WPF 第三方工具:Devexpress21.2 数据库:SQLServ ...
- Spring IOC 解析
Bean 容器的创建 ApplicationContext 的类结构: 通过上图可以看到,具体的 ApplicationContext 有 AnnotationConfigApplicationCon ...
- Boost程序库完全开发指南:1.1-C++基础知识点梳理
主要整理了N多年前(2010年)学习C++的时候开始总结的知识点,好长时间不写C++代码了,现在LLM量化和推理需要重新学习C++编程,看来出来混迟早要还的. 1.shared_ptr 解析:sh ...