curl 下载文件

  • -o:将文件保存为命令行中指定的文件名的文件中
  • -O:使用URL中默认的文件名保存文件到本地
  • --limit-rate:限速
  • -C:对大文件使用断点续传功能
  • --silent:不显示进度信息
# 当文件在下载完成之前结束该进程
[root@ ~]# curl -O http://www.gnu.org/software/gettext/manual/gettext.html
###### ######## 20.1% # 通过添加-C选项继续对该文件进行下载,已经下载过的文件不会被重新下载
[root@ ~]# curl -C - -O http://www.gnu.org/software/gettext/manual/gettext.html
###### ######### 21.1%

认证授权

在访问需要授权的页面时,可通过-u选项提供用户名和密码进行授权

[root@ ~]# curl -u username:password URL
通常的做法是在命令行只输入用户名,之后会提示输入密码,这样可以保证在查看历史记录时不会将密码泄露
[root@ ~]# curl -u username URL

传递请求数据

默认curl使用GET方式请求数据,可以通过 --data/-d 方式指定使用POST方式传递数据

# GET
[root@ ~]#curl -u username https://XXXXXXXXXX # POST
[root@ ~]# curl -u username --data "param1=value1&param2=value" https://XXXXXXXXXX # 也可以指定一个文件,将该文件中的内容当作数据传递给服务器端
[root@ ~]# curl --data @filename https://XXXXXXXXXX 注:默认情况下,通过POST方式传递过去的数据中若有特殊字符,首先需要将特殊字符转义在传递给服务器端,如value值中包含有空格,则需要先将空格转换成%20,如:
[root@ ~]# curl -d "value%201" http://hostname.com 在新版本的CURL中,提供了新的选项 --data-urlencode,通过该选项提供的参数会自动转义特殊字符。
[root@ ~]# curl --data-urlencode "value 1" https://XXXXXXXXXX 除了使用GET和POST协议外,还可以通过 -X 选项指定其它协议,如:
[root@ ~]# curl -I -X DELETE https://XXXXXXXXXX 上传文件
[root@ ~]# curl --form "fileupload=@filename.txt" https://XXXXXXXXXX

curl 查看响应时间

[root@ ~]# curl -o /dev/null -s -w "time_namelookup: "%{time_namelookup}"\ntime_connect: "%{time_connect}"\ntime_appconnect: "%{time_appconnect}"\ntime_pretransfer: "%{time_pretransfer}"\ntime_starttransfer: "%{time_starttransfer}"\ntime_total: "%{time_total}"\n" "https://www.google.com"  

time_namelookup: 0.005
time_connect: 0.016
time_appconnect: 0.162
time_pretransfer: 0.162
time_starttransfer: 0.217
time_total: 0.261
其中几个参数
  • -o:把curl 返回的html、js 写到垃圾回收站[ /dev/null]
  • -s:掉所有状态信息
  • -w, --write-out FORMAT What to output after completion
时间变量
  • time_total:总时间。
  • time_namelookup:DNS解析时间,从请求开始到DNS解析完毕所用时间。
  • time_connect:连接时间,从开始到建立TCP连接完成所用时间,包括前边DNS解析时间,如果需要单纯的得到连接时间,用这个time_connect时间减去前边time_namelookup时间。
  • time_appconnect:连接建立完成时间,如SSL/SSH等建立连接或者完成三次握手时间。
  • time_pretransfer:从开始到准备传输的时间。
  • time_redirect:重定向时间,包括到最后一次传输前的几次重定向的DNS解析,连接,预传输,传输时间。
  • time_starttransfer:开始传输时间。在client发出请求之后,Web 服务器返回数据的第一个字节所用的时间。

在客户端发出请求之后,服务器处理请求并开始发回数据所用的时间是:time_starttransfer – time_connec = 0.201 秒

客户端从服务器下载数据所用的时间是 time_total –time_starttransfer = 0.044 秒.

其他变量:
  • url_effective:The URL that was fetched last. This is most meaningful if you've told curl to follow location: headers.
  • filename_effective: The ultimate filename that curl writes out to. This is only meaningful if curl is told to write to a file with the --remote-name or --output option. It's most useful in combination with the --remote-header-name option.
  • http_code: http状态码,如200成功,301转向,404未找到,500服务器错误等。
  • http_connect :The numerical code that was found in the last response (from a proxy) to a curl CONNECT request. (Added in 7.12.4)
  • size_download :下载大小
  • size_upload :上传大小
  • size_header:下载的header的大小
  • size_request:请求的大小
  • speed_download:下载速度,单位-byte/s
  • speed_upload:上传速度,单位-byte/s
  • content_type:content-Type
  • num_connects:Number of new connects made in the recent transfer.
  • num_redirects:Number of redirects that were followed in the request.
  • redirect_url: When a HTTP request was made without -L to follow redirects, this variable will show the actual URL a redirect would take you to.
  • ftp_entry_path:The initial path libcurl ended up in when logging on to the remote FTP server.
  • ssl_verify_resul:ssl认证结果,返回0表示认证成功。

curl命令基本使用小总结的更多相关文章

  1. Linux curl命令使用代理、以及代理种类介绍(转)

    Linux curl命令使用代理.以及代理种类介绍   本文转自http://aiezu.com/article/linux_curl_proxy_http_socks.html,感谢作者 有时出于个 ...

  2. Linux curl 命令详解

    命令概要 该命令设计用于在没有用户交互的情况下工作. curl 是一个工具,用于传输来自服务器或者到服务器的数据.「向服务器传输数据或者获取来自服务器的数据」 可支持的协议有(DICT.FILE.FT ...

  3. 在Linux上利用curl 命令模拟 HTTP GET/POST 请求

    本文系转载,原文地址:https://www.cnblogs.com/alfred0311/p/7988648.html 序言 在 Linux 操作系统上对后端程序进行测试的时候,需要进行模拟连接或者 ...

  4. curl命令使用

    curl命令可以用来构造http请求.参数有很多,常用的参数如下: 通用语法:curl [option] [URL...]在处理URL时其支持类型于SHELL的名称扩展功能,如http://www.j ...

  5. curl命令行使用

    curl 命令使用   原文地址:http://blog.sina.com.cn/s/blog_4b9eab320100slyw.html 可以看作命令行浏览器 1.开启gzip请求curl -I h ...

  6. CURL命令报错:dyld: lazy symbol binding failed: Symbol not found: _SSL_load_error_strings解决办法

    Mac OS X 10.11.6, curl 命令报错,错误如下: dyld: lazy symbol binding failed: Symbol not found: _SSL_load_erro ...

  7. CURL命令详解

    curl命令是一个强大的网络工具,它能通过http,ftp等方式下载.上传文件.其中curl远不止这些功能,大家可以通过阅读手册获取更多的信息,类似的工具还有wget. curl命令使用了libcur ...

  8. limux curl命令

    linux curl命令很强大: http://blog.chinaunix.net/uid-14735472-id-3413867.html curl是一种命令行工具,作用是发出网络请求,然后得到和 ...

  9. linux curl 命令详解,以及实例

    linux curl是一个利用URL规则在命令行下工作的文件传输工具.它支持文件的上传和下载,所以是综合传输工具,但按传统,习惯称url为下载工具. 一,curl命令参数,有好多我没有用过,也不知道翻 ...

随机推荐

  1. 数据分析与挖掘 - R语言:贝叶斯分类算法(案例二)

    接着案例一,我们再使用另一种方法实例一个案例 直接上代码: #!/usr/bin/Rscript library(plyr) library(reshape2) #1.根据训练集创建朴素贝叶斯分类器 ...

  2. CentOS下samba配置心得(smb和nmb都要启动)

    印象中以前多次配置成功过,重新配置就把以前的资料找出来: yum安装 samba samba-client samba-swat,然后配置参见:http://www.cnblogs.com/mchin ...

  3. 正则表达式识别js跳转的链接

    用Webclient访问链接后返回了跳转页面,页面代码如下,需要把 http://kd.szty56.com:8086/xms/client/order_online!print.action?use ...

  4. xcode如何支持8.0以下

    1. shell打开 open  /Applications/Xcode.app/Contents/Developer/Platforms/iPhoneOS.platform/DeviceSuppor ...

  5. 6.短信验证码60s倒计时

    短信验证码60s倒计时 html: <input type="button"  class="btn btn-primary" value="免 ...

  6. node.js连接MongoDB数据库,db.collection is not a function完美解决

    解决方法一. mongodb数据库版本回退: 这个错误是出在mongodb的库中,在nodejs里的写法和命令行中的写法不一样,3.0的api已经更新和以前的版本不不一样,我们在npm中没指定版本号的 ...

  7. 使用spring的特殊bean完成分散配置

    1.在使用分散配置时,spring的配置文件applicationContext.xml中写法如下: <!-- 引入db.properties文件, --> <context:pro ...

  8. 源码解读 Laravel PHP artisan config:cache

    来源 https://laravel-china.org/articles/5101/source-code-reading-laravel-php-artisan-configcache 源码在哪 ...

  9. would you please...could you please...两句区别是什么?

    Could you please 是can you please 更为礼貌.委婉的说法,并不是过去式,是“能否麻烦你……”.“请你……”的意思,更侧重“能否”及客观情况:回答时要注意,eg:A:“Co ...

  10. 139. Word Break(动态规划)

    Given a non-empty string s and a dictionary wordDict containing a list of non-empty words, determine ...