curl 是 Linux 下一個很強大的 http 命令列工具

curl -I 的參數說明

-I/--head
(HTTP/FTP/FILE) Fetch the HTTP-header only! HTTP-servers feature the command HEAD which this uses to get nothing but the  header of a document. When used on a FTP or FILE file, curl displays the file size and last modification time only.

範例

curl -I http://example.com
curl -I example.com
curl -I bit.ly/Q8f9o # 縮短網址, 可以看到 HTTP/1.1 301 Moved.

[email protected]:~# curl -I tonyhack.asuscomm.com

HTTP/1.1 200 OK
Server: nginx/1.1.19
Date: Mon, 16 Sep 2013 10:44:26 GMT
Content-Type: text/html; charset=utf-8,gbk,big5
Content-Length: 763
Last-Modified: Wed, 20 Feb 2013 15:42:44 GMT
Connection: keep-alive
Accept-Ranges: bytes

取得網頁內容,螢幕輸出

$ curl http://www.linuxidc.com

取得網頁內容,檔案輸出

$ curl -o page.html http://www.linuxidc.com

指定 http 使用的 proxy

$ curl -x 123.45.67.89:1080 -o page.html http://www.linuxidc.com

把 http response 裡面的 cookie 資訊另存新檔

$ curl -x 123.45.67.89:1080 -o page.html -D cookie0001.txt http://www.linuxidc.com

把 cookie 資訊加到 http request 裡

$ curl -x 123.45.67.89:1080 -o page1.html -D cookie0002.txt -b cookie0001.txt http://www.linuxidc.com

設定瀏覽器資訊

#Windows 2000上的 IE6.0

$ curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" -x 123.45.67.89:1080 -o page.html -D cookie0001.txt http://www.linuxidc.com

# Linux Netscape 4.73

$ curl -A "Mozilla/4.73 [en] (X11; U; Linux 2.2; 15 i686" -x 123.45.67.89:1080 -o page.html -D cookie0001.txt http://www.linuxidc.com

設定 referrer

另外一個伺服器端常用的限制方法,就是檢查 http 訪問的 referer。比如你先訪問首頁,再訪問裡面所指定的下載頁,這第二次訪問的 referer 位址就是第一次訪問成功後的頁面位址。這樣,伺服器端只要發現對下載頁面某次訪問的 referer 位址不是首頁的位址,就可以斷定那是個盜連了

$ curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" -x 123.45.67.89:1080 -e "mail.linuxidc.com" -o page.html -D cookie0001.txt http://www.linuxidc.com

使用伺服器上的檔案名,存在本地

$ curl -O http://cgi2.tky.3web.ne.jp/~zzh/screen1.JPG

可使用 Regular Expression 抓取所有 match 的檔案,指定 match 的群組內容為新檔名

$ curl -O http://cgi2.tky.3web.ne.jp/~zzh/screen[1-10].JPG

$ curl -o #2-#1.jpg http://cgi2.tky.3web.ne.jp/~{zzh,nick}/[001-201].JPG

原來: ~zzh/001.JPG -> 下載後:001-zzh.JPG

原來: ~nick/001.JPG -> 下載後:001-nick.JPG

續傳 (只能用在原本是 curl 傳輸的檔案)

$ curl -c -O http://cgi2.tky.3wb.ne.jp/~zzh/screen1.JPG

分塊下載

$ curl -r 0-10240 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\
$ curl -r 10241-20480 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\
$ curl -r 20481-40960 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\
$ curl -r 40961- -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3

Linux用 cat zhao.part* > zhao.mp3合併

Windows用copy /b 合併

指定 FTP 帳號密碼

$ curl -u name:passwd ftp://ip:port/path/file
$ curl ftp://name:[email protected]:port/path/file

上傳檔案

$ curl -T localfile -u name:passwd ftp://upload_site:port/path/
$ curl -T localfile http://cgi2.tky.3web.ne.jp/~zzh/abc.cgi

(注意這時候使用的協定是 HTTP 的 PUT method)

Http GET 與 POST 模式
GET 模式什麼 option 都不用,只需要把變數寫在 url 裡面就可以了比如:

$ curl http://www.linuxidc.com/login.cgi?user=nickwolfe&password=12345

而 POST 模式的 option 則是 -d

$ curl -d "user=nickwolfe&password=12345" http://www.linuxidc.com/login.cgi

到底該用 GET 模式還是 POST 模式,要看對面伺服器的程式設定。比如 POST 模式下的文件上傳

<form action="http://cgi2.tky.3web.ne.jp/~zzh/up_file.cgi" enctype="multipar/form-data" method="POST">
<input name="upload" type="file"/>
<input name="nick" type="submit" value="go"/></form>

這樣一個 HTTP 表單,我們要用 curl 進行模擬,就該是這樣的語法:

$ curl -F [email protected] -F nick=go http://cgi2.tky.3web.ne.jp/~zzh/up_file.cgi

https 使用本地認證

$ curl -E localcert.pem https://remote_server

通過 dict 協定去查字典

$ curl dict://dict.org/d:computer

點閱: 368

By tony

自由軟體愛好者~喜歡不斷的思考各種問題,有新的事物都會想去學習嘗試 做實驗並熱衷研究 沒有所謂頂天的技術 只有謙虛及不斷的學習 精進專業,本站主要以分享系統及網路相關知識、資源而建立。 Github http://stnet253.github.io

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。

這個網站採用 Akismet 服務減少垃圾留言。進一步了解 Akismet 如何處理網站訪客的留言資料