linux网络编程之断点传输文件
以下载链接“http://www.boa.org/boa-0.94.13.tar.gz”为例:
断点续传实验大概步骤:
=====================
1,使用gethostbyname()获取站点“www.boa.org”的IP地址
2,以“boa-0.94.13.tar.gz”为例,构建HTTP请求报文首部:
char *httpreq = "GET /boa-0.94.13.tar.gz HTTP/1.1\r\n"
"Range: bytes=%d-%d\r\n"
"Host: %s\r\n\r\n"
begin, end, host);
注意:
A) 以上字符串httpreq就是发送给远程主机www.boa.org的HTTP请求报文,通过TCP发送
B) Range字段是要求主机发送申请文件的部分内容,begin和end分别是文件的开始和结束
B.1 如果写成 "Range: bytes=0-\r\n",代表要求主机发送全文
B.2 如果写成 "Range: bytes=-1000\r\n",代表要求主机发送前1000个字节
B.3 如果写成 "Range: bytes=0-200\r\n",代表要求主机发送前200个字节
C) 正常情况下,HTTP服务器会对这个请求报文返回206,并给出实际返回的字节数和范围:
C.1 "Content-Length: 1000" 这个字段代表本次HTTP发来的数据大小为1000个字节(不含HTTP首部)
C.2 "Content-Range: bytes 2000-2999/9999" 代表本次传送的数据范围是第2000-2999个字节(共1000个字节),而所请求的文件总大小是9999个字节。
3,将收到的报文的HTTP首部去掉(HTTP首部是指从开头到\r\n\r\n结尾的部分),剩下的就是下载的文件内容
4,将文件内容以非缓冲方式保存下来。
5,如果发生下载时网络断线,或者人为终止了下载进程,那么在下一次下载时先获取当前已下载部分的大小,并作为Range参数告知远端HTTP服务器,要求发送部分文件,实现断点续传,节约网络流量节约时间。
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include <sys/stat.h>
#include <netdb.h>
#include <arpa/inet.h>
#include <netinet/in.h>
#include <sys/socket.h>
#include <string.h>
#include <strings.h>
#include <sys/types.h>
#include <fcntl.h>
#include <assert.h>
#include <stdbool.h>
#include "common.h"
#define RWRWRW (S_IRUSR|S_IWUSR|S_IRGRP|S_IWGRP|S_IROTH|S_IWOTH)
#define SERV_PORT 80
#define FILENAME "boa-0.94.13.tar.gz"
typedef struct sockaddr SA;
void http_request(char *buf, int size, const char *filename
, const int begin, const char *host);
int main(void)
{
int sockfd;
struct sockaddr_in servaddr;
struct hostent *hptr = NULL;
struct in_addr **pptr = NULL;
if ((sockfd = socket(AF_INET, SOCK_STREAM, 0)) < 0) {
err_quit("socket error");
}
char *hostname = "www.boa.org";
if ((hptr = gethostbyname(hostname)) == NULL) {
err_quit("gethostbyname error for host: %s: %s",
hostname, hstrerror(h_errno));
}
pptr = (struct in_addr**)hptr->h_addr_list;
bzero(&servaddr, sizeof(servaddr));
servaddr.sin_family = AF_INET;
servaddr.sin_port = htons(SERV_PORT);
memcpy(&servaddr.sin_addr, *pptr, sizeof(struct in_addr));
if (connect(sockfd, (SA *)&servaddr, sizeof(servaddr)) < 0) {
err_quit("connect error");
}
int fd;
int file_size;
struct stat statbuf;
if (access(FILENAME, F_OK)) {
if ((fd = open(FILENAME, O_WRONLY|O_CREAT, RWRWRW)) < 0) {
err_sys("create %s failure", FILENAME);
}
file_size = 0;
} else {
if ((fd = open(FILENAME, O_APPEND|O_WRONLY, RWRWRW)) < 0) {
err_sys("open %s failure", FILENAME);
}
if (stat(FILENAME, &statbuf) < 0) {
err_sys("stat error");
}
file_size = statbuf.st_size;
}
#ifdef DEBUG
printf(" host:\t%s\n", hostname);
printf(" filename:\t%s\n", FILENAME);
printf("start size:\t%d\n", file_size);
printf("------------------------------------------------\n\n");
#endif
char request[MAXLINE];
http_request(request, sizeof(request), FILENAME, file_size, hostname);
if (write(sockfd, request, strlen(request)) != strlen(request)) {
err_quit("request failure");
}
char recvbuf[4096];
int nread;
bool flage = true;
char tar[] = "\r\n\r\n";
char *begin = NULL;
while (1) {
bzero(recvbuf, sizeof(recvbuf));
if ((nread = read(sockfd, recvbuf, sizeof(recvbuf))) <= 0) {
if (0 == nread) {
break;
} else {
err_sys("read error");
}
}
if (flage) {
if ((begin = strstr(recvbuf, tar)) == NULL) {
continue;
} else {
write(fd, begin+strlen(tar), nread-(begin-recvbuf)-strlen(tar));
flage = false;
}
}
if (!flage) {
if (write(fd, recvbuf, nread) != nread) {
err_quit("write error");
}
}
#ifdef DEBUG
printf("******");
fflush(stdout);
#endif
}
/*
if (stat(FILENAME, &statbuf) < 0) {
err_quit("stat failure");
} else {
if (statbuf.st_size == full_size) {
printf("---success!---\n");
}
}
*/
printf("---success!---\n");
return EXIT_SUCCESS;
}
void http_request(char *buf, int size, const char *filename, const int begin, const char *host)
{
assert(buf);
assert(filename);
assert(host);
bzero(buf, size);
snprintf(buf, size, "GET /%s "
"HTTP/1.1\r\n"
"Range: bytes=%d-\r\n"
"Host: %s\r\n\r\n", filename, begin, host);
}
linux网络编程之断点传输文件的更多相关文章
- Android网络编程只局域网传输文件
Android网络编程之局域网传输文件: 首先创建一个socket管理类,该类是传输文件的核心类,主要用来发送文件和接收文件 具体代码如下: package com.jiao.filesend; im ...
- Java 学习笔记 网络编程 使用Socket传输文件 CS模式
Socket的简单认识 Socket是一种面向连接的通信协议,Socket应用程序是一种C/S(Client端/Server端)结构的应用程序 Socket是两台机器间通信的端点. Socket是连接 ...
- Linux网络编程系列-TCP传输控制
滑动窗口(sliding window) 滑动窗口是用于流量控制的,发送端根据接收端的处理能力发送数据,不至于造成过多的丢包. 是发送方和接收方间的协调,对方的接收窗口大小就是自己的发送窗口大小. 在 ...
- linux网络编程-(socket套接字编程UDP传输)
今天我们来介绍一下在linux网络环境下使用socket套接字实现两个进程下文件的上传,下载,和退出操作! 在socket套接字编程中,我们当然可以基于TCP的传输协议来进行传输,但是在文件的传输中, ...
- 【linux草鞋应用编程系列】_5_ Linux网络编程
一.网络通信简介 第一部分内容,暂时没法描述,内容实在太多,待后续专门的系列文章. 二.linux网络通信 在linux中继承了Unix下“一切皆文件”的思想, 在linux中要实现网 ...
- Linux网络编程入门 (转载)
(一)Linux网络编程--网络知识介绍 Linux网络编程--网络知识介绍客户端和服务端 网络程序和普通的程序有一个最大的区别是网络程序是由两个部分组成的--客户端和服务器端. 客户 ...
- [转] - Linux网络编程 -- 网络知识介绍
(一)Linux网络编程--网络知识介绍 Linux网络编程--网络知识介绍客户端和服务端 网络程序和普通的程序有一个最大的区别是网络程序是由两个部分组成的--客户端和服务器端. 客户 ...
- Linux C 程序 Linux网络编程(21)
Linux网络编程网络编程必备的理论基础网络模型,地址,端口,TCP/IP协议 TCP/IP协议是目前世界上使用最广泛的网络通信协议日常中的大部分应用使用该系列协议(浏览网页,收发电子邮件,QQ聊天等 ...
- 【转】Linux网络编程入门
(一)Linux网络编程--网络知识介绍 Linux网络编程--网络知识介绍客户端和服务端 网络程序和普通的程序有一个最大的区别是网络程序是由两个部分组成的--客户端和服务器端. 客户 ...
随机推荐
- Duff and Meat(贪心)
Duff is addicted to meat! Malek wants to keep her happy for n days. In order to be happy in i-th day ...
- 1017 A除以B (20 分)
本题要求计算 /,其中 A 是不超过 1000 位的正整数,B 是 1 位正整数.你需要输出商数 Q 和余数 R,使得 A=B×Q+R成立. 输入格式: 输入在一行中依次给出 A 和 B,中间以 1 ...
- python大战机器学习——集成学习
集成学习是通过构建并结合多个学习器来完成学习任务.其工作流程为: 1)先产生一组“个体学习器”.在分类问题中,个体学习器也称为基类分类器 2)再使用某种策略将它们结合起来. 通常使用一种或者多种已有的 ...
- Hive MetaStore Upgrade
# cd $HIVE_HOME/scripts/metastore/upgrade/mysql [Dev root @ sd-9c1f-2eac /usr/local/src/apache-hive- ...
- Scala_Load csv data to hive via spark2.1
code: package com.liupu import org.apache.spark.{ SparkContext, SparkConf } import org.apache.spark. ...
- 迅雷笔试题 (JAVA多线程)启动三个线程,分别打印A B C,现在写一个程序 循环打印ABCABCABC
题目:http://wenku.baidu.com/view/d66187aad1f34693daef3e8a.html 启动三个线程,分别打印A B C,现在写一个程序 循环打印ABCABCABC. ...
- 车牌号校验js
var regExp = /(^[\u4E00-\u9FA5]{1}[A-Z0-9]{6}$)|(^[A-Z]{2}[A-Z0-9]{2}[A-Z0-9\u4E00-\u9FA5]{1}[A-Z0-9 ...
- Hadoop 3节点集群无法成功启动zookeeper
今天在集群上跑程序的时候遇到了zookeeper无法成功启动的问题,先分别启动了主节点和从节点的zookeeper进程,并且通过jps也看到zookeeper进程已经启动了,但通过指令查看进程状态的时 ...
- .net 向新页面跳转的语句
1. href='##' onclick=\"window.open('../DataSplit/DrugInfo_ManualVersionViewNew.aspx?id=" + ...
- iOS开发ReactiveCocoa学习笔记(四)
ReactiveCocoa常见操作方法介绍: demo地址:https://github.com/SummerHH/ReactiveCocoa.git 1.1 ReactiveCocoa操作须知 所有 ...