Http1.1中 使用 chunked 编码传送时 没有CONTENT_LENGTH,下载之前无法确定要下载的大小.
Wininet中已经内嵌该传输协议,要查看chunked块的大小只能socket底层编写获取报文.
Wininet能不能直接访问原报文需走旁路.

// socket_http.cpp : Defines the entry point for the console application.
//

#include "stdafx.h"
#include
#include

#pragma warning(disable:4996)
#pragma warning(disable:4267)
#pragma comment(lib, "WS2_32.lib")

void logFile(char *p,int len);
char fname[100];

int main()
{
WORD wVersionRequested;
WSADATA wsaData;
int bytesRecv;

//Initialize Winsock
wVersionRequested = MAKEWORD(2,2);
bytesRecv = WSAStartup(wVersionRequested,&wsaData);

if(bytesRecv != 0)
{
printf("WSAStartup failed: %d\n", bytesRecv);
return 1;

}

if(LOBYTE(wsaData.wVersion) != 2 || HIBYTE(wsaData.wVersion) != 2)
{
WSACleanup();
return 1;
}
strcpy(fname,"index.html");
_unlink(fname);

char host[] = {"www.baidu.com"};
hostent * ht = gethostbyname(host);
struct in_addr ip_addr;
memcpy(&ip_addr,ht->h_addr_list[0],4);

SOCKET sockClient = socket(AF_INET,SOCK_STREAM,0);
SOCKADDR_IN addrSrv;
addrSrv.sin_addr = ip_addr;
addrSrv.sin_family = AF_INET;
addrSrv.sin_port = htons(80);

char ip[20];
sprintf(ip,"%d.%d.%d.%d",
addrSrv.sin_addr.S_un.S_un_b.s_b1,
addrSrv.sin_addr.S_un.S_un_b.s_b2,
addrSrv.sin_addr.S_un.S_un_b.s_b3,
addrSrv.sin_addr.S_un.S_un_b.s_b4);
printf("host:%s ip:%s\r\n",host,ip);

bytesRecv = connect(sockClient,(SOCKADDR*)&addrSrv,sizeof(SOCKADDR));
if( bytesRecv == SOCKET_ERROR)
{
WSACleanup();
return 1;
}

char recvBuf[1024];
char* protocolHead= "GET / HTTP/1.1\n"
"Host:www.baidu.com\n"
"Accept:*/*\n"
"User-Agent:Mozilla/4.0 (compatible; MSIE 5.00; Windows 98)\n"
"Connection:close\n\n";

bytesRecv = send(sockClient,protocolHead,strlen(protocolHead)+1,0);
printf("request headers:\r\n%s\r\n",protocolHead);
int ic=0;
while( bytesRecv != SOCKET_ERROR )
{
memset(recvBuf,0,1024);
bytesRecv = recv(sockClient,recvBuf,1024,0);
if(ic==0)
printf("response headers[%ld]:\r\n%s\r\n",bytesRecv,recvBuf);
if(ic==1)
printf("body [%ld]:\r\n%s",bytesRecv,recvBuf);
ic++;
if ( bytesRecv == 0 || bytesRecv == WSAECONNRESET ) {
printf( "Connection Closed.\n");
break;
}
logFile(recvBuf,bytesRecv);
}
closesocket(sockClient);
WSACleanup();

return 0;
}

void logFile(char *p,int len)
{
FILE *fp = fopen(fname,"a+");
if(!fp) return;
fwrite(p,1,len,fp);
fclose(fp);
}

----------------------------------------------------------------------
运行结果
host:www.baidu.com ip:119.75.218.77

request headers:
GET / HTTP/1.1
Host:www.baidu.com
Accept:*/*
User-Agent:Mozilla/4.0 (compatible; MSIE 5.00; Windows 98)
Connection:close

response headers[633]:
HTTP/1.1 200 OK
Date: Sun, 13 Apr 2014 18:24:51 GMT
Content-Type: text/html; charset=utf-8
Transfer-Encoding: chunked
Connection: Close
Vary: Accept-Encoding
Set-Cookie: BAIDUID=10AA88D7B6D34E65F9FF8A384BE63FE9:FG=1; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: BDSVRTM=0; path=/
Set-Cookie: H_PS_PSSID=5778_5991_1421_5225_5848_4760_6017_5856_5918; path=/; domain=.baidu.com
P3P: CP=" OTI DSP COR IVA OUR IND COM "
Cache-Control: private
Expires: Sun, 13 Apr 2014 18:24:20 GMT
X-Powered-By: HPHP
Server: BWS/1.1
BDPAGETYPE: 1
BDQID: 0x875baba2004f0570
BDUSERID: 0

body [1024]:
d27b

Transfer-Encoding: chunked的更多相关文章

  1. HTTP 2.0的那些事

    转自:http://www.admin10000.com/document/9310.html 在我们所处的互联网世界中,HTTP协议算得上是使用最广泛的网络协议.最近http2.0的诞生使得它再次互 ...

  2. HTTP2.0那些事

    1. HTTP2.0的前世 http2.0的前世是http1.0和http1.1这两兄弟.虽然之前仅仅只有两个版本,但这两个版本所包含的协议规范之庞大,足以让任何一个有经验的工程师为之头疼.http1 ...

  3. Http 1.x弊端与Http 2.0比较

    HTTP2.0作为新版协议,改动细节必然很多,不过对应用开发者和服务提供商来说,影响较大的就几点. 新的二进制格式(Binary Format) http1.x诞生的时候是明文协议,其格式由三部分组成 ...

  4. 再谈HTTP2性能提升之背后原理—HTTP2历史解剖

    即使千辛万苦,还是把网站升级到http2了,遇坑如<phpcms v9站http升级到https加http2遇到到坑>. 因为理论相比于 HTTP 1.x ,在同时兼容 HTTP/1.1 ...

  5. Android 网络请求框架Retrofit

    Retrofit是Square公司开发的一款针对Android网络请求的框架,Retrofit2底层基于OkHttp实现的,OkHttp现在已经得到Google官方认可,大量的app都采用OkHttp ...

  6. 也谈HTTP协议

    HTTP(HyperText Transfer Protocol,超文转移协议,超文本传输协议的译法并不严谨.) 一.网络基础 TCP/IP 1.1 TCP/IP 协议族 TCP/IP 协议族是互联网 ...

  7. PLAY2.6-SCALA(七) Streaming HTTP response

    1.从HTTP1.1开始,服务端为了在single connection下对HTTP请求及响应提供服务,需要在response中提供响应的Content-Length. 默认情况下,不需要显示的指明C ...

  8. Python爬虫连载8-JS加密(一)

    一.JS加密 1.有的反爬虫策略采用js对需要传输的数据进行加密处理. 2.经过加密,传输的就是密文 3.加密函数或者过程一定是在浏览器完成,也就是一定会把代码(js代码)暴露给使用者 4.通多阅读加 ...

  9. 分块编码(Transfer-Encoding: chunked)

    参考链接: HTTP 协议中的 Transfer-Encoding 分块传输编码 一.背景: 持续连接的问题:对于非持续连接,浏览器可以通过连接是否关闭来界定请求或响应实体的边界:而对于持续连接,这种 ...

  10. HTTP协议扫盲(八 )响应报文之 Transfer-Encoding=chunked方式

    一.什么是chunked编码? 分块传输编码(Chunked transfer encoding)是只在HTTP协议1.1版本(HTTP/1.1)中提供的一种数据传送机制.以往HTTP的应答中数据是整 ...

随机推荐

  1. collections_python

    代码 import collections#counter继承字典的方法,items(),keys(),vavle() obj = collections.Counter('acbdafcbad') ...

  2. Java编程思想学习(十二) 数组和容器

    一.数组 1).数组的多种初始化方式 下面总结了初始化数组的多种方式,以及如何对指向数组的引用赋值,使其指向另一个数组对象.值得注意的是:对象数组和普通数组的各种操作基本上都是一样的:要说有什么不同的 ...

  3. Spring监听器配置

    使用spring框架时如果同时使用org.springframework.web.util.Log4jConfigListener监听器,那么在web.xml中的监听器的注册顺序为org.spring ...

  4. 【Beta阶段】发布说明

    在经历Beta阶段紧张的开发后,本次Beta阶段取得的成果虽然不如Alpha阶段多,但是也算是做到了稳中求进,一共预想了三个feature,最终做出了预想的两个feature. 新功能说明 新的主页: ...

  5. SpringMVC 2.5.6 noMapping

    <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.sp ...

  6. boost库(条件变量)

    1相关理念 (1)类名 条件变量和互斥变量都是boost库中被封装的类. (2)条件变量 条件变量是thread库提供的一种等待线程同步的机制,可实现线程间的通信,它必须与互斥量配合使用,等待另一个线 ...

  7. 升级centos6.5系统的gcc为4.8.5的简易步骤

    Centos6.5_64位升级gcc为4.8.2的简易步骤 一.安装依赖包 yum install texinfo-tex flex zip mpfr-devel libgcc.i686 glibc- ...

  8. 离线渲染中的不规则光源(Meshlight)

    之前一直在考虑这样一个问题,在实际生活中的光源都是有体积的,但是图形学中,很多时候我们用简单的点光源,面光源,或者方向光来模拟实际生活中这些光源,势必会产生一些误差,同时导致很多效果不好做.那么在离线 ...

  9. Config The Image URL Solution

    During the project, in order to make a unified management for the image URL , at present we make use ...

  10. Java Base64、AES、SHA1、MD5加密算法

    package com.example.decript; import java.io.UnsupportedEncodingException; import java.security.Inval ...