Linux curl命令简介-白红宇

Linux curl命令简介

阅读量：5974 次

发布时间：2019-06-19

本文共 7237 字，大约阅读时间需要 24 分钟。

在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，支持的协议包括 (DICT, FILE, FTP, FTPS, GOPHER, HTTP, HTTPS, IMAP, IMAPS, LDAP, LDAPS, POP3, POP3S, RTMP, RTSP, SCP, SFTP, SMTP, SMTPS, TELNET and TFTP)，curl设计为无用户交互下完成工作；

　　curl提供了一大堆非常有用的功能，包括代理访问、用户认证、ftp上传下载、HTTP POST、SSL连接、cookie支持、断点续传...

语法：curl [option] [url]

常见参数：

[root@localhost src]# curl www.baidu.com|iconv -fgb2312

执行后，www.baidu.com 的html就会显示在屏幕上了,这个用法经常用于测试一台服务器是否可以到达一个网站,如发现乱码，可以使用iconv转码

-I/--head 仅返回头部信息，使用HEAD请求:curl -I http://www.baidu.com

保存访问的网页

-o：将文件保存为命令行中指定的文件名的文件中

-O：使用URL中默认的文件名保存文件到本地,这里后面的url要具体到某个文件，不然抓不下来

[root@localhost src]# curl www.baidu.com >> baidu.com  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current                                 Dload  Upload   Total   Spent    Left  Speed100  2381  100  2381    0     0   100k      0 --:--:-- --:--:-- --:--:--  105k[root@localhost src]# curl -o baidu.com www.baidu.com  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current                                 Dload  Upload   Total   Spent    Left  Speed100  2381  100  2381    0     0  81602      0 --:--:-- --:--:-- --:--:-- 82103[root@localhost src]# curl -O www.baidu.comcurl: Remote file name has no length!curl: try 'curl --help' or 'curl --manual' for more information[root@localhost src]# curl -O www.baidu.com/index.html  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current                                 Dload  Upload   Total   Spent    Left  Speed100  2381  100  2381    0     0   102k      0 --:--:-- --:--:-- --:--:--  105k[root@localhost src]#

测试网页返回值

-s/--silent 静音模式。不输出任何东西

-w/--write-out [format] 什么输出完成后

[root@localhost src]# curl -o /dev/null -s -w "%{http_code}" www.baidu.com200[root@localhost src]# curl -o /dev/null -s -w "%{http_code}\n" www.baidu.com200[root@localhost src]# curl -o /dev/null -s -w "time_total: %{time_total}\n" "http://www.baidu.com"time_total: 0.024[root@localhost src]#

在脚本中，这是很常见的测试网站是否正常的用法

指定proxy服务器以及其端口

-x/--proxy <host[:port]> 在给定的端口上使用HTTP代理

[root@localhost src]# curl -x 192.168.100.198:8888 http://www.baidu.com

cookie

-c/--cookie-jar <file> 把cookie写入到这个文件中

[root@Super ~]# curl -d"name=123&password=456" http://192.168.100.182/index.php -v -c ./cookie

使用用户名和密码登录系统，并将cookie信息存储在当前目录的cookie文件中

-D/--dump-header <file> 把header信息写入到该文件中

-b/--cookie <name=string/file> cookie字符串或文件读取位置

[root@Super ~]# curl http://192.168.100.182/index.php -v -b ./cookie

‘-cookie’直接指定cookie

[root@Super ~]# curl --cookie "name=123" http://192.168.100.182/index.php -v

模仿浏览器

-A/--user-agent <string> 设置用户代理发送给服务器

[root@localhost src]# curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" http://www.baidu.com

服务器端就会认为是使用IE8.0去访问的

伪造referer（盗链）

-e/--referer 来源网址

很多服务器会检查http访问的referer从而来控制访问。比如：你是先访问首页，然后再访问首页中的邮箱页面，这里访问邮箱的referer地址就是访问首页成功后的页面地址，如果服务器发现对邮箱页面访问的referer地址不是首页的地址，就断定那是个盗连了

[root@localhost src]# curl -e "www.baidu.com" http://image.baiud.com

这样就会让服务器其以为你是从www.baidu.com点击某个链接访问image.baidu.com的

下载文件

[root@localhost src]# curl -o 51.png https://s1.51cto.com/wyfs02/M00/8D/49/wKioL1iV9-6wk8YsAACLSADynaw310.png[root@localhost src]# curl -O https://s1.51cto.com/wyfs02/M00/8D/49/wKioL1iV9-6wk8YsAACLSADynaw310.png

循环下载

[root@localhost src]# curl -O http://www.51cto.com/justin[1-5].png

justin1.png-justin5.png全部下载下来

下载重命名

[root@localhost src]# curl -O http://www.51cto.com/{justin,peng}/justin[1-5].png[root@localhost src]# curl -o #1_#2.png http://www.51cto.com/{justin,peng}/justin[1-5].png

第一条命令会先去下载justin下的justin1-justin5.png文件，然后再下载peng下的justin1-justin5.png文件，这样就会把之前下载的文件覆盖，

第二条命令下载时候重命名成justin_justin1.png justin_justin2.png的形式

分块下载

-r/--range <range> 检索来自HTTP/1.1或FTP服务器字节范围

有时候下载的东西会比较大，这个时候我们可以分段下载

[root@localhost src]# curl -r 0-100 -o justin_part1.png http://www.51cto.com/justin.png [root@localhost src]# curl -r 1000-200 -o justin_part2.png http://www.51cto.com/justin.png [root@localhost src]# curl -r 200- -o justin_part3.png http://www.51cto.com/justin.png [root@localhost src]# cat justin_part* > justin.png

通过ftp下载文件

-u/--user <user[:password]> 设置服务器的用户和密码

-E 采用证书认证

[root@localhost src]# curl -O -u justin:peng ftp://www.51cto.com/justin.png[root@localhost src]# curl -O ftp://justin:peng@www.51cto.com/justin.png[root@localhost src]# curl -E cert.pem https://www.51cto.com/justin.png

下载进度条

-#/--progress-bar 进度条显示当前的传送状态

[root@localhost src]# curl -# -O http://www.baidu.com/justin.png

-s 不会显示下载进度信息

[root@localhost src]# curl -s -O http://www.baidu.com/justin.png

断点续传

-C/--continue-at <offset> 断点续转

[root@localhost src]# curl -C -O http://www.baidu.com/justin.png

上传文件

-T/--upload-file <file> 上传文件

[root@localhost src]# curl -T justin.png -u justin:peng ftp://www.baidu.com/img/

显示抓取错误

-f/--fail 连接失败时不显示http错误

[root@localhost src]# curl -f http://www.baidu.com/error

-F表单提交操作

-F命令以Content-Type:multipart/form-data的形式向serverpost数据，该命令允许提交二进制文件等。

可以使用@前缀来制定提交的内容为一个文件，也可以使用<符号来提交文件中的内容

curl -F prefile=@portrait.jpg https://example.com/upload.cgi

向服务器上传一个图片，图片的表单域名为profile，内容为protrait.jpg的二进制

-B/--use-ascii 使用ASCII文本传输

-X 指定请求方式

在浏览器输入一个网址访问网站都是GET请求，在FORM表单中，可以通过设置Method指定提交方式为GET或者POST提交方式，默认为GET提交方式。

HTTP定义了与服务器交互的不同方法，其中最基本的四种：GET，POST，PUT，DELETE，HEAD

GET和HEAD被称为安全方法，因为使用GET和HEAD的HTTP请求不会产生什么动作。不会产生动作意味着GET和HEAD的HTTP请求不会在服务器上产生任何结果。但是安全方法并不是什么动作都不产生，这里的安全方法仅仅指不会修改信息。

GET请求，请求的数据会附加在URL之后，以?分割URL和传输数据，多个参数用&连接。URL的编码格式采用的是ASCII编码，而不是uniclde，即是说所有的非ASCII字符都要编码之后再传输。

POST请求会把请求的数据放置在HTTP请求包的包体中

POST请求

-d/--data <data> HTTP POST方式传送数据,

[root@Super ~]# curl -X POST -d"name=123&password=456" http://192.168.100.182/index.php -v

-d选项为使用POST方式向server发送数据，因此在使用-d的时候，可以省略-X POST。使用-d时，将使用Content-type:application/x-www-form-urlencoded方式发送数据。使用JSON形式post数据，可以使用-H指定头部类型:

[root@Super ~]# curl -X POST -H "Content-Type:application/json" -d '{"data":"123","key":"456"}' http://192.168.100.182/index.php -v

当提交的参数值中有特殊字符就需要先转义,如空格时，就需要转义成%20;--data-urlencode可以自动转义特殊字符，无需人工事先转义

[root@Super ~]# curl --data-urlencode "value 1" http://192.168.100.182/index.php -v

--data-urlencode参数会自动转义特殊字符，如上面的空格

请求的时候带上Cookie:

[root@Super ~]# curl -X POST -H "Cookie:username=123"  http://192.168.100.182/index.php -v

--data-ascii <data> 以ascii的方式post数据

--data-binary <data> 以二进制的方式post数据

--connect-timeout <seconds> 设置最大请求时间

--create-dirs 建立本地目录的目录层次结构

GET请求

-G/--get 以get的方式来发送数据

[root@Super ~]# /usr/bin/curl -G -d "username=justin&pwd=123456" "[root@Super ~]# curl -X GET http://www.baidu.com

在访问需要授权的页面时，可通过-u选项提供用户名和密码进行授权;curl -u username:password URL

[root@Super ~]# curl -u ywbz http://192.168.100.127Enter host password for user 'ywbz':

DELETE请求

[root@Super ~]# curl -I -X DELETE http://192.168.100.182/index.php -v

--interface <interface> 使用指定网络接口/地址

-l/--list-only 列出ftp目录下的文件名称

--limit-rate <rate> 设置传输速度

curl --limit-rate 1000B -O http://192.168.100.182/index.php

--retry <num> 传输出现问题时，重试的次数

--retry-delay <seconds> 传输出现问题时，设置重试间隔时间

--retry-max-time <seconds> 传输出现问题时，设置最大重试时间

-S/--show-error 显示错误

-y/--speed-time 放弃限速所要的时间。默认为30

-Y/--speed-limit 停止传输速度的限制，速度时间'秒

-z/--time-cond 传送时间设置

curl -z 11-Oct-18 http://192.168.100.182/index.php

若文件index.php在2018-10-11之后游过更新才会下载

-0/--http1.0 使用HTTP 1.0

-1/--tlsv1 使用TLSv1（SSL）

-2/--sslv2 使用SSLv2的（SSL）

-3/--sslv3 使用的SSLv3（SSL）

转载于:https://blog.51cto.com/ityunwei2017/1977513

你可能感兴趣的文章

JS·基础（一）

查看>>

# 学习笔记-协议# OSI七层模型与 TCP/IP五层协议

查看>>

Callbacks, Promises and Async/Await

查看>>

华为程序员：加6天班！加班费1.4万元！网友：我能加到它破产

查看>>

解读 JavaScript 之引擎、运行时和堆栈调用

查看>>

不得不懂系列(1)-Go语言protobuf快速上手

查看>>

版本控制系统git

查看>>

从月薪5k到5w的过来人给大学生程序员们的一点建议

ecshop ajax无刷新登陆_无需整理

Linux入门基础之grep命令详解及正则表达式

crysis2 video&cryengine3 editor show

查看>>

数据挖掘 numpy之数组定义

查看>>