Linux curl命令参数详解

柔光的暖阳◎ 2022-07-12 04:24 258阅读 0赞

##### 一、Linux curl用法举例： #####

###### 1. linux curl抓取网页： ######

抓取百度：

如发现乱码，可以使用[iconv][]转码：

iconv的用法请参阅：[在Linux/Unix系统下用iconv命令处理文本文件中文乱码问题][Linux_Unix_iconv]

###### 2. Linux curl使用[代理][Link 1]： ######

linux curl使用http[代理][Link 1]抓取页面：

<table style="margin-bottom: 10px; border-collapse: collapse; color: rgb(0, 0, 0); font-family: sans-serif; font-size: 16px;"> 
 <tbody> 
 <tr style="padding: 0px !important; border: none !important; vertical-align: top !important; margin: 0px !important; background: 0px center;"> 
 <td style="padding: 0px !important; border: 0px; vertical-align: top !important; margin: 0px !important; color: rgb(84, 153, 222) !important; background: rgb(223, 239, 255) !important;">12</td> 
 <td style="padding: 0px !important; border: 0px; vertical-align: top !important; margin: 0px !important; background: 0px center;">curl&nbsp;-x&nbsp;111.95.243.36:80&nbsp;http://iframe.ip138.com/ic.asp|iconv -fgb2312curl&nbsp;-x&nbsp;111.95.243.36:80&nbsp;-U&nbsp;aiezu:password&nbsp;http://www.baidu.com</td> 
 </tr> 
 </tbody> 
</table>

使用socks代理抓取页面：

<table style="margin-bottom:10px; border-collapse:collapse; color:rgb(0,0,0); font-family:sans-serif; font-size:16px"> 
 <tbody> 
 <tr style="padding:0px!important; border:none!important; vertical-align:top!important; margin:0px!important; background:0px center"> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; color:rgb(84,153,222)!important; background:rgb(223,239,255)!important"> 1 2 </td> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; background:0px center"> curl&nbsp;--socks4&nbsp;202.113.65.229:443&nbsp;http://iframe.ip138.com/ic.asp|iconv -fgb2312 curl&nbsp;--socks5&nbsp;202.113.65.229:443&nbsp;http://iframe.ip138.com/ic.asp|iconv -fgb2312 </td> 
 </tr> 
 </tbody> 
</table>

代理服务器地址可以从[爬虫代理][Link 2]上获取。

###### **3. linux curl处理[cookies][]** ######

接收cookies:

发送cookies:

<table style="margin-bottom:10px; border-collapse:collapse; color:rgb(0,0,0); font-family:sans-serif; font-size:16px"> 
 <tbody> 
 <tr style="padding:0px!important; border:none!important; vertical-align:top!important; margin:0px!important; background:0px center"> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; color:rgb(84,153,222)!important; background:rgb(223,239,255)!important"> 1 2 </td> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; background:0px center"> curl&nbsp;-b&nbsp;"key1=val1;key2=val2;"&nbsp;http://www.baidu.com #发送cookies文本 curl&nbsp;-b&nbsp;/tmp/cookies&nbsp;http://www.baidu.com #从文件中读取cookies </td> 
 </tr> 
 </tbody> 
</table>

###### **4. linux curl发送数据：** ######

linux curl [get][]方式提交数据：

linux curl [post][]方式提交数据：

<table style="margin-bottom:10px; border-collapse:collapse; color:rgb(0,0,0); font-family:sans-serif; font-size:16px"> 
 <tbody> 
 <tr style="padding:0px!important; border:none!important; vertical-align:top!important; margin:0px!important; background:0px center"> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; color:rgb(84,153,222)!important; background:rgb(223,239,255)!important"> 1 2 </td> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; background:0px center"> curl&nbsp;-d&nbsp;"name=value&amp;name2=value2"&nbsp;http://www.baidu.com #post数据 curl&nbsp;-d&nbsp;a=b&amp;c=d&amp;txt@/tmp/txt&nbsp;http://www.baidu.com&nbsp;&nbsp;#post文件 </td> 
 </tr> 
 </tbody> 
</table>

以表单的方式上传文件：

相当于设置form表单的method="POST"和enctype='multipart/form-data'两个属性。

###### 5. linux curl http header处理： ######

设置http请求头信息：

<table style="margin-bottom:10px; border-collapse:collapse; color:rgb(0,0,0); font-family:sans-serif; font-size:16px"> 
 <tbody> 
 <tr style="padding:0px!important; border:none!important; vertical-align:top!important; margin:0px!important; background:0px center"> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; color:rgb(84,153,222)!important; background:rgb(223,239,255)!important"> 1 2 3 </td> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; background:0px center"> curl&nbsp;-A&nbsp;"Mozilla/5.0 Firefox/21.0"&nbsp;http://www.baidu.com #设置http请求头User-Agent curl&nbsp;-e&nbsp;"http://pachong.org/"&nbsp;http://www.baidu.com #设置http请求头Referer curl&nbsp;-H&nbsp;"Connection:keep-alive \n User-Agent: Mozilla/5.0"&nbsp;http://www.aiezu.com </td> 
 </tr> 
 </tbody> 
</table>

设置http响应头处理：

<table style="margin-bottom: 10px; border-collapse: collapse; color: rgb(0, 0, 0); font-family: sans-serif; font-size: 16px;"> 
 <tbody> 
 <tr style="padding: 0px !important; border: none !important; vertical-align: top !important; margin: 0px !important; background: 0px center;"> 
 <td style="padding: 0px !important; border: 0px; vertical-align: top !important; margin: 0px !important; color: rgb(84, 153, 222) !important; background: rgb(223, 239, 255) !important;">12</td> 
 <td style="padding: 0px !important; border: 0px; vertical-align: top !important; margin: 0px !important; background: 0px center;">curl&nbsp;-I&nbsp;http://www.aiezu.com #仅仅返回headercurl&nbsp;-D&nbsp;/tmp/header&nbsp;http://www.aiezu.com #将http header保存到/tmp/header文件</td> 
 </tr> 
 </tbody> 
</table>

**6. linux curl认证：**

<table style="margin-bottom:10px; border-collapse:collapse; color:rgb(0,0,0); font-family:sans-serif; font-size:16px"> 
 <tbody> 
 <tr style="padding:0px!important; border:none!important; vertical-align:top!important; margin:0px!important; background:0px center"> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; color:rgb(84,153,222)!important; background:rgb(223,239,255)!important"> 1 2 </td> 
 <td style="padding:0px!important; border:0px; vertical-align:top!important; margin:0px!important; background:0px center"> curl&nbsp;-u&nbsp;aiezu:password&nbsp;http://www.aiezu.com #用户名密码认证 curl&nbsp;-E&nbsp;mycert.pem&nbsp;https://www.baidu.com #采用证书认证 </td> 
 </tr> 
 </tbody> 
</table>

###### 6. 其他： ######

一、查看网页源码

**直接在curl命令后加上网址，就可以看到网页源码**。我们以网址www.sina.com为例（选择该网址，主要因为它的网页代码较短）

curl www.baidu.com

如果要把这个网页保存下来，可以使用-o参数，这就相当于使用wget命令了。

curl -o [文件名] www.baidu.com

二、自动跳转 有的网址是自动跳转的。**使用-L参数，curl就会跳转到新的网址**。

curl -L http://item.taobao.com/item.htm?id=25823396605 键入上面的命令，结果就自动跳转为http://detail.tmall.com/item.htm?id=25823396605

三、显示头信息 -i 参数可以显示http response的头信息，连同网页代码一起。

（-I 参数则是只显示http response的头信息。）

curl -i www.baidu.com

![复制代码][copycode.gif]

HTTP/1.1 200 OK
 Date: Fri, 28 Feb 2014 05:39:57 GMT
 Content-Type: text/html
 Transfer-Encoding: chunked
 Connection: Keep-Alive
 Vary: Accept-Encoding
 Set-Cookie: BAIDUID=0F251A658E427EBB7CBEB0C3F4A70FAE:FG=1; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; d
 omain=.baidu.com
 Set-Cookie: BDSVRTM=0; path=/Set-Cookie: H_PS_PSSID=4104_5231_1445_5139_5225_5378_5368_4261_4760_5400; path=/; domain=.baidu.com
 P3P: CP=" OTI DSP COR IVA OUR IND COM "Expires: Fri, 28 Feb 2014 05:39:45 GMT
 Cache-Control: privateServer: BWS/1.1BDPAGETYPE: 1BDQID: 0xc3b306dca955703dBDUSERID: 0<!DOCTYPE html>.....

![复制代码][copycode.gif]

四、显示通信过程 \-v 参数可以显示一次http通信的整个过程，包括端口连接和http request头信息。

命令：curl -v www.baidu.com

\* About to connect() to www.baidu.com port 80

\*   Trying 115.239.210.26... connected

\* Connected to www.baidu.com (115.239.210.26) port 80

> GET / HTTP/1.1

> User-Agent: curl/7.15.5 (x86\_64-redhat-linux-gnu) libcurl/7.15.5 OpenSSL/0.9.8b zlib/1.2.3 libidn/0.6.5

> Host: www.baidu.com

> Accept: \*/\*

< HTTP/1.1 200 OK

< Date: Fri, 28 Feb 2014 05:42:37 GMT

< Content-Type: text/html

< Transfer-Encoding: chunked

< Connection: Keep-Alive

< Vary: Accept-Encoding

< Set-Cookie: BAIDUID=442AD49501EF253AE71F2BAF3E0181FB:FG=1; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com

< Set-Cookie: BDSVRTM=0; path=/

< Set-Cookie: H\_PS\_PSSID=5228\_1461\_5187\_5138\_5225\_5379\_5368\_4261\_4760\_5401\_5286; path=/; domain=.baidu.com

< P3P: CP=" OTI DSP COR IVA OUR IND COM "

< Expires: Fri, 28 Feb 2014 05:41:43 GMT

< Cache-Control: private

< Server: BWS/1.1

< BDPAGETYPE: 1

< BDQID: 0x906950d16fb1e95d

< BDUSERID: 0

% Total    % Received % Xferd  Average Speed   Time    Time     Time  Current

Dload  Upload   Total   Spent    Left  Spee<!DOCTYPE html><html><head><meta http-equiv="content-type" content="text/html;charset=utf-8"><meta http-equiv

="X-UA-Compatible" content="IE=Edge"><link rel="dns-

如果你觉得上面的信息还不够，那么下面的命令可以查看更详细的通信过程:

curl --trace output.txt www.baidu.com 或者

curl --trace-ascii output.txt www.baidu.com 运行后，请打开output.txt文件查看。

当然也有更狠的，查看页面跳转过程：

curl -L -I --trace log http://item.taobao.com/item.htm?id=25823396605

HTTP/1.1 301 Moved Permanently

Server: Tengine

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html;charset=GBK

Content-Length: 0

Connection: close

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Content-Language: zh-CN

Accept-Ranges: bytes

X-Varnish: 1206961665

Via: 1.1 varnish

location: http://detail.tmall.com/item.htm?id=25823396605&

X-Cache: MISS

Cache-Control: max-age=3

HTTP/1.1 302 Found

Server: Tengine

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: keep-alive

at\_bucketid: sbucket\_-1

X-Bucket-Id: -1

Location: http://jump.taobao.com/jump?target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d1

Cache-Control:

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

Set-Cookie: \_tb\_token\_=ktbzEwzFR6qy;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: cookie2=6c6bc65b9e9a5159cff5b3d0cae4dfd9;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: t=d768c73859b40e10ef81f7abd0824704;domain=.taobao.com;Expires=Thu, 29-May-2014 06:16:01 GMT;Path=/

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Location: http://pass.tmall.com/add?\_tb\_token\_=ktbzEwzFR6qy&cookie2=6c6bc65b9e9a5159cff5b3d0cae4dfd9&t=d768c73859b40e10ef81f7abd0824704&target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d1&pacc=A\_12nKe89qHIcAyauBtovg==&opi=110.75.118.230&tmsc=1393568161483632

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Set-Cookie: \_tb\_token\_=ktbzEwzFR6qy;domain=.tmall.com;Path=/

Set-Cookie: cookie2=6c6bc65b9e9a5159cff5b3d0cae4dfd9;domain=.tmall.com;Path=/

Set-Cookie: t=d768c73859b40e10ef81f7abd0824704;domain=.tmall.com;Path=/

Location: http://detail.tmall.com/item.htm?id=25823396605&&tbpm=1

HTTP/1.1 302 Found

Server: Tengine

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: keep-alive

at\_bucketid: sbucket\_-1

X-Bucket-Id: -1

Location: http://jump.taobao.com/jump?target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d2

Cache-Control:

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

Set-Cookie: \_tb\_token\_=GgU93fEjKGT4;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: cookie2=ef3c440d74ff391de6b560da4ef8a5c9;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: t=187a71d8df58caac2c4e08d40245c31f;domain=.taobao.com;Expires=Thu, 29-May-2014 06:16:01 GMT;Path=/

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Location: http://pass.tmall.com/add?\_tb\_token\_=GgU93fEjKGT4&cookie2=ef3c440d74ff391de6b560da4ef8a5c9&t=187a71d8df58caac2c4e08d40245c31f&target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d2&pacc=Vo8f-VlYEYPJ6WE3iTX96Q==&opi=110.75.118.230&tmsc=1393568161501736

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Set-Cookie: \_tb\_token\_=GgU93fEjKGT4;domain=.tmall.com;Path=/

Set-Cookie: cookie2=ef3c440d74ff391de6b560da4ef8a5c9;domain=.tmall.com;Path=/

Set-Cookie: t=187a71d8df58caac2c4e08d40245c31f;domain=.tmall.com;Path=/

Location: http://detail.tmall.com/item.htm?id=25823396605&&tbpm=2

HTTP/1.1 302 Found

Server: Tengine

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: keep-alive

at\_bucketid: sbucket\_-1

X-Bucket-Id: -1

Location: http://jump.taobao.com/jump?target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d3

Cache-Control:

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

Set-Cookie: \_tb\_token\_=Uta86PoG6cWC;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: cookie2=cd06dba05f2bf1124200861d0b8a151b;domain=.taobao.com;Path=/;HttpOnly

Set-Cookie: t=618388c77aff03aec08309747a82f440;domain=.taobao.com;Expires=Thu, 29-May-2014 06:16:01 GMT;Path=/

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Location: http://pass.tmall.com/add?\_tb\_token\_=Uta86PoG6cWC&cookie2=cd06dba05f2bf1124200861d0b8a151b&t=618388c77aff03aec08309747a82f440&target=http%3a%2f%2fdetail.tmall.com%2fitem.htm%3fid%3d25823396605%26%26tbpm%3d3&pacc=RptvnJCXDG4WtvFa0JIqoQ==&opi=110.75.118.230&tmsc=1393568161510003

HTTP/1.1 302 Found

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html

Content-Length: 260

Connection: close

P3P: CP='CURa ADMa DEVa PSAo PSDo OUR BUS UNI PUR INT DEM STA PRE COM NAV OTC NOI DSP COR'

Set-Cookie: \_tb\_token\_=Uta86PoG6cWC;domain=.tmall.com;Path=/

Set-Cookie: cookie2=cd06dba05f2bf1124200861d0b8a151b;domain=.tmall.com;Path=/

Set-Cookie: t=618388c77aff03aec08309747a82f440;domain=.tmall.com;Path=/

Location: http://detail.tmall.com/item.htm?id=25823396605&&tbpm=3

HTTP/1.1 200 OK

Server: Tengine

Date: Fri, 28 Feb 2014 06:16:01 GMT

Content-Type: text/html;charset=GBK

Connection: keep-alive

Vary: Accept-Encoding

at\_bucketid: sbucket\_-1

X-Bucket-Id: -1

Cache-Control: max-age=1

At\_Autype: 4\_103979994

At\_Cat: item\_50018599

X-Category: /cat/50008090

At\_Nick: %E8%B6%8A%E5%BA%A6%E6%95%B0%E7%A0%81%E4%B8%93%E8%90%A5%E5%BA%97

At\_Itemid: 25823396605

At\_Isb: 1

At\_Pgty: 2

At\_Cat: 50018599

At\_Brid: 272676782

At\_Prid: 221236332

At\_Autype: 0\_103979994

At\_Auid: 25823396605

Content-Language: zh-CN

X-Cache: MISS TCP\_MISS dirn:-2:-2

Via: wagbridge010207087016.cm3:8888

五、发送表单信息 发送表单信息有GET和POST两种方法。

GET方法相对简单，只要把数据附在网址后面就行:

curl baidu.com/form.cgi?data=xxx

POST方法必须把数据和网址分开，例如：

curl -d "method=searchone&module=seller&user\_name=wb-liqiu&nickname=dd" -H"Host:fmp.view.lz.taobao.com" "10.235.160.141:8082/api.php"

六、文件上传 假定文件上传的表单你可以用curl这样上传文件，命令：

curl --form upload=@localfilename --form press=OK http://www.baidu.com

七、Referer字段 有时你需要在http request头信息中，提供一个referer字段，表示你是从哪里跳转过来的:

curl --referer http://www.baidu.com http://www.baidu.com

八、User Agent字段 这个字段是用来表示客户端的设备信息。服务器有时会根据这个字段，针对不同设备，返回不同格式的网页，比如手机版和桌面版。 iPhone4的User Agent是: “Mozilla/5.0 (iPhone; U; CPU iPhone OS 4\_0 like Mac OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko) Version/4.0.5 Mobile/8A293 Safari/6531.22.7”。curl可以这样模拟： curl --user-agent "\[User Agent\]" \[URL\]

九、cookie 使用--cookie参数，可以让curl发送cookie。

curl --cookie "name=xxx" www.baidu.com 至于具体的cookie的值，可以从http response头信息的Set-Cookie字段中得到。也可以例如：

curl -c ./cookie.txt http://www.baidu.com

十、增加头信息 有时需要在http request之中，自行增加一个头信息。--header参数就可以起到这个作用。

curl --header "xxx: xxxxxx" http://baidu.com

十一、HTTP认证 有些网域需要HTTP认证，这时curl需要用到--user参数：

curl --user name:password baidu.com

十二、设置代理缓存 \-x<ip:port>

curl -L -x127.0.0.1:13128 http://detail.tmall.com/item.htm?id=25823396605

下载单个文件，默认将输出打印到标准输出中(STDOUT)中

curl [http://www.centos.org][http_www.centos.org]

**通过-o/-O选项保存下载的文件到指定的文件中：**

\-o：将文件保存为命令行中指定的文件名的文件中

\-O：使用URL中默认的文件名保存文件到本地

\# 将文件下载到本地并命名为mygettext.html

curl -o mygettext.html http://www.gnu.org/software/gettext/manual/gettext.html

\# 将文件保存到本地并命名为gettext.html

curl -O [http://www.gnu.org/software/gettext/manual/gettext.html][http_www.gnu.org_software_gettext_manual_gettext.html]

同样可以使用转向字符">"对输出进行转向输出

同时获取多个文件

curl -O URL1 -O URL2

若同时从同一站点下载多个文件时，curl会尝试重用链接(connection)。

通过**-L选项**进行重定向

默认情况下CURL不会发送HTTP Location headers(重定向).

当一个被请求页面移动到另一个站点时，会发送一个HTTP Loaction

header作为请求，然后将请求重定向到新的地址上。

例如：访问google.com时，会自动将地址重定向到google.com.hk上。

curl http://www.google.com

<HTML>

<HEAD>

<TITLE> Moved</TITLE>

</HEAD>

<BODY>

<H> Moved</H>

The document has moved

<A HREF="http://www.google.com.hk/url?sa=p&hl=zh-CN&pref=hkredirect&pval=yes&q=http://www.google.com.hk/&ust=amp;usg=AFQjCNFoumfjyJpNDPuFKTibavEaA">here</A>.

</BODY>

</HTML>

这是可以通过使用-L选项进行强制重定向

1 \# 让curl使用地址重定向，此时会查询google.com.hk站点

2 **curl -L **[**http://www.google.com**][http_www.google.com]

**断点续传**

通过使用**-C选项**可对大文件使用断点续传功能，如：

\# 当文件在下载完成之前结束该进程

$ curl -O http://www.gnu.org/software/gettext/manual/gettext.html

\#\#\#\#\#\#\#\#\#\#\#\#\#\#       .%

\# 通过添加-C选项继续对该文件进行下载，已经下载过的文件不会被重新下载

curl -C - -O http://www.gnu.org/software/gettext/manual/gettext.html

\#\#\#\#\#\#\#\#\#\#\#\#\#\#\#      .

**对CURL使用网络限速**

通过**--limit-rate选项**对CURL的最大网络使用进行限制

\# 下载速度最大不会超过1000B/second   
curl --limit-rate 1000B -O [http://www.gnu.org/software/gettext/manual/gettext.html][http_www.gnu.org_software_gettext_manual_gettext.html]  
下载指定时间内修改过的文件

当下载一个文件时，可对该文件的最后修改日期进行判断，如果该文件在指定日期内修改过，就进行下载，否则不下载。  
该功能可通过使用**-z选项**来实现：

\# 若yy.html文件在2011/12/21之后有过更新才会进行下载  
 curl -z 21-Dec-11 [http://www.example.com/yy.html][http_www.example.com_yy.html]

**CURL授权**

在访问需要授权的页面时，可通过**-u选项**提供用户名和密码进行授权

curl -u username:password URL  
 \# 通常的做法是在命令行只输入用户名，之后会提示输入密码，这样可以保证在查看历史记录时不会将密码泄露  
4 curl -u username URL

**从FTP服务器下载文件**

CURL同样支持FTP下载，若在url中指定的是某个文件路径而非具体的某个要下载的文件名，CURL则会列出该目录下的所有文件名而并非下载该目录下的所有文件

\# 列出public\_html下的所有文件夹和文件  
 curl -u ftpuser:ftppass -O [ftp://ftp\_server/public\_html/][ftp_ftp_server_public_html]  
 \# 下载xss.php文件  
 curl -u ftpuser:ftppass -O [ftp://ftp\_server/public\_html/xss.php][ftp_ftp_server_public_html_xss.php]  
上传文件到FTP服务器

通过 **-T 选项**可将指定的本地文件上传到FTP服务器上

\# 将myfile.txt文件上传到服务器

curl -u ftpuser:ftppass **-T myfile.txt** ftp://ftp.testserver.com

\# 同时上传多个文件

curl -u ftpuser:ftppass **-T "\{file1,file2\}"** ftp://ftp.testserver.com

\# 从标准输入获取内容保存到服务器指定的文件中

curl -u ftpuser:ftppass **-T -** [ftp://ftp.testserver.com/myfile\_1.txt][ftp_ftp.testserver.com_myfile_1.txt]

**获取更多信息**

通过使用 -v 和 -trace获取更多的链接信息

**保存与使用网站cookie信息**

\# 将网站的cookies信息保存到sugarcookies文件中  
curl **-D** sugarcookies [http://localhost/sugarcrm/index.php][http_localhost_sugarcrm_index.php]   
\# 使用上次保存的cookie信息  
 curl **-b** sugarcookies [http://localhost/sugarcrm/index.php][http_localhost_sugarcrm_index.php]  
传递请求数据

**默认curl使用GET方式请求数据**，这种方式下直接通过URL传递数据

可以通过** --data/-d 方式指定使用POST方式传递数据**

\# GET  
 curl -u username [https://api.github.com/user?access\_token=XXXXXXXXXX][https_api.github.com_user_access_token_XXXXXXXXXX]

\# POST  
 curl -u username \--data "param=value¶m=value" [https://api.github.com][https_api.github.com]

\# 也可以指定一个文件，将该文件中的内容当作数据传递给服务器端

curl \--data @filename [https://github.api.com/authorizations][https_github.api.com_authorizations]

注：**默认情况下，通过POST方式传递过去的数据中若有特殊字符，首先需要将特殊字符转义再传递给服务器端，如value值中包含有空格，则需要先将空格转换成%20，如：**

curl \-d "value%201" [http://hostname.com][http_hostname.com]

在新版本的CURL中，提供了新的选项 **--data-urlencode，通过该选项提供的参数会自动转义特殊字符**。

curl \--data-urlencode "value 1" [http://hostname.com][http_hostname.com]

除了使用GET和POST协议外，还可以通过** -X 选项指定其它协议**，如：

curl -I -X DELETE [https://api.github.cim][https_api.github.cim]

上传文件

curl --form "[fileupload=@filename.txt][fileupload_filename.txt]" [http://hostname/resource][http_hostname_resource]

1、抓取cokkie信息到一个文件中

curl \-c cookie0.txt \-d "username=\*\*\*\*&password=\*\*\*" http://www.kuaipan.cn/accounts/login/

2、get方法获取信息

curl \-G -I -o xsrf.txt \-b cookie1.txt \-c cookie2.txt

显示下载进度条  
\# curl -\# -O [http://www.linux.com/dodo1.JPG][http_www.linux.com_dodo1.JPG]

7：不会显示下载进度信息

\# curl \-s -O http://www.linux.com/dodo1.JPG

[iconv]: http://www.aiezu.com/tag/iconv
[Linux_Unix_iconv]: http://www.aiezu.com/system/linux/linux_iconv_code.html
[Link 1]: http://www.aiezu.com/tag/%e4%bb%a3%e7%90%86
[Link 2]: http://pachong.org/
[cookies]: http://www.aiezu.com/tag/cookies
[get]: http://www.aiezu.com/tag/get
[post]: http://www.aiezu.com/tag/post
[copycode.gif]: /images/20220711/0225948454694d3fb8594b8269c4d438.png
[http_www.centos.org]: http://www.centos.org/
[http_www.gnu.org_software_gettext_manual_gettext.html]: http://www.gnu.org/software/gettext/manual/gettext.html
[http_www.google.com]: http://www.google.com/
[http_www.example.com_yy.html]: http://www.example.com/yy.html
[ftp_ftp_server_public_html]: ftp://ftp_server/public_html/
[ftp_ftp_server_public_html_xss.php]: ftp://ftp_server/public_html/xss.php
[ftp_ftp.testserver.com_myfile_1.txt]: http://ftp//ftp.testserver.com/myfile_1.txt
[http_localhost_sugarcrm_index.php]: http://localhost/sugarcrm/index.php
[https_api.github.com_user_access_token_XXXXXXXXXX]: https://api.github.com/user?access_token=XXXXXXXXXX
[https_api.github.com]: https://api.github.com/
[https_github.api.com_authorizations]: https://github.api.com/authorizations
[http_hostname.com]: http://hostname.com/
[https_api.github.cim]: https://api.github.cim/
[fileupload_filename.txt]: mailto:fileupload=@filename.txt
[http_hostname_resource]: http://hostname/resource
[http_www.linux.com_dodo1.JPG]: http://www.linux.com/dodo1.JPG