2019獨(dú)角獸企業(yè)重金招聘Python工程師標(biāo)準(zhǔn)>>>

1 wget

wget是linux最常用的下載命令, 一般的使用方法是: wget + 空格 + 要下載文件的url路徑

例如: # wget http://www.linuxsense.org/xxxx/xxx.tar.gz

簡(jiǎn)單說(shuō)一下-c參數(shù), 這個(gè)也非常常見(jiàn), 可以斷點(diǎn)續(xù)傳, 如果不小心終止了, 可以繼續(xù)使用命令接著下載

例如: # wget -c http://www.linuxsense.org/xxxx/xxx.tar.gz

下面詳細(xì)闡述wget的用法:

wget是一個(gè)從網(wǎng)絡(luò)上自動(dòng)下載文件的自由工具。它支持HTTP，HTTPS和FTP協(xié)議，可以使用HTTP代理.

所謂的自動(dòng)下載是指，wget可以在用戶退出系統(tǒng)的之后在后臺(tái)執(zhí)行。這意味這你可以登錄系統(tǒng)，啟動(dòng)一個(gè)wget下載任務(wù)，然后退出系統(tǒng)，wget將在后臺(tái)執(zhí)行直到任務(wù)完成，相對(duì)于其它大部分瀏覽器在下載大量數(shù)據(jù)時(shí)需要用戶一直的參與，這省去了極大的麻煩。

wget可以跟蹤HTML頁(yè)面上的鏈接依次下載來(lái)創(chuàng)建遠(yuǎn)程服務(wù)器的本地版本，完全重建原始站點(diǎn)的目錄結(jié)構(gòu)。這又常被稱作”遞歸下載”。在遞歸下載的 時(shí)候，wget遵循Robot Exclusion標(biāo)準(zhǔn)(/robots.txt). wget可以在下載的同時(shí)，將鏈接轉(zhuǎn)換成指向本地文件，以方便離線瀏覽。

wget非常穩(wěn)定,它在帶寬很窄的情況下和不穩(wěn)定網(wǎng)絡(luò)中有很強(qiáng)的適應(yīng)性.如果是由于網(wǎng)絡(luò)的原因下載失敗，wget會(huì)不斷的嘗試，直到整個(gè)文件下載完 畢。如果是服務(wù)器打斷下載過(guò)程，它會(huì)再次聯(lián)到服務(wù)器上從停止的地方繼續(xù)下載。這對(duì)從那些限定了鏈接時(shí)間的服務(wù)器上下載大文件非常有用。

wget的常見(jiàn)用法

wget的使用格式

Usage: wget [OPTION]… [URL]…

* 用wget做站點(diǎn)鏡像:

wget -r -p -np -k http://dsec.pku.edu.cn/~usr_name/

# 或者

wget -m http://www.tldp.org/LDP/abs/html/

* 在不穩(wěn)定的網(wǎng)絡(luò)上下載一個(gè)部分下載的文件，以及在空閑時(shí)段下載

wget -t 0 -w 31 -c http://dsec.pku.edu.cn/BBC.avi -o down.log &

# 或者從filelist讀入要下載的文件列表

wget -t 0 -w 31 -c -B ftp://dsec.pku.edu.cn/linuxsoft -i filelist.txt -o down.log &

上面的代碼還可以用來(lái)在網(wǎng)絡(luò)比較空閑的時(shí)段進(jìn)行下載。我的用法是:在mozilla中將不方便當(dāng)時(shí)下載的URL鏈接拷貝到內(nèi)存中然后粘貼到文件filelist.txt中，在晚上要出去系統(tǒng)前執(zhí)行上面代碼的第二條。

* 使用代理下載

wget -Y on -p -k https://sourceforge.net/projects/wvware/

代理可以在環(huán)境變量或wgetrc文件中設(shè)定

# 在環(huán)境變量中設(shè)定代理

export PROXY=http://211.90.168.94:8080/

# 在~/.wgetrc中設(shè)定代理

http_proxy = http://proxy.yoyodyne.com:18023/

ftp_proxy = http://proxy.yoyodyne.com:18023/

wget各種選項(xiàng)分類列表

* 啟動(dòng)

-V, –version?????????? 顯示wget的版本后退出

-h, –help????????????? 打印語(yǔ)法幫助

-b, –background??????? 啟動(dòng)后轉(zhuǎn)入后臺(tái)執(zhí)行

-e, –execute=COMMAND?? 執(zhí)行`.wgetrc’格式的命令，wgetrc格式參見(jiàn)/etc/wgetrc或~/.wgetrc

* 記錄和輸入文件

-o, –output-file=FILE???? 把記錄寫到FILE文件中

-a, –append-output=FILE?? 把記錄追加到FILE文件中

-d, –debug??????????????? 打印調(diào)試輸出

-q, –quiet??????????????? 安靜模式(沒(méi)有輸出)

http://www.itqun.net/content-detail/511328.html
http://www.guanwei.org/post/LINUXnotes/05/Linux-Wget-download-method.html

LINUX命令行下以HTTP方式下載文件的方法
Post by mrchen, 2010-5-23, Views:101
原創(chuàng)文章如轉(zhuǎn)載，請(qǐng)注明：轉(zhuǎn)載自冠威博客 [ http://www.guanwei.org/ ]
本文鏈接地址：http://www.guanwei.org/post/LINUXnotes/05/Linux-Wget-download-method.html

順便提一下。如果下載ftp服務(wù)器上的文件，可以用ftp命令。然后用get命令下載文件

對(duì)于喜歡命令行操作及追求高效率、高速度下載的朋友，推薦使用命令行下載工具。命令行工具不但使用方便，而且大多具有很高的下載速度及下載效率，尤其適合于大批量下載文件。下面就為大家詳細(xì)介紹一下這些工具。

Wget

Wget是一個(gè)十分常用命令行下載工具，多數(shù)Linux發(fā)行版本都默認(rèn)包含這個(gè)工具。如果沒(méi)有安裝可在http://www.gnu.org/software/wget/wget.html下載最新版本，并使用如下命令編譯安裝：

??? #tar zxvf wget-1.9.1.tar.gz
??? #cd wget-1.9.1 #./configure
??? #make #make install

它的用法很簡(jiǎn)單，Wget使用格式如下： #wget [選項(xiàng)] [下載地址]

1.Wget常用參數(shù)

◆-b：后臺(tái)下載，Wget默認(rèn)的是把文件下載到當(dāng)前目錄。

◆-O：將文件下載到指定的目錄中。

◆-P：保存文件之前先創(chuàng)建指定名稱的目錄。

◆-t：嘗試連接次數(shù)，當(dāng)Wget無(wú)法與服務(wù)器建立連接時(shí)，嘗試連接多少次。

◆-c：斷點(diǎn)續(xù)傳，如果下載中斷，那么連接恢復(fù)時(shí)會(huì)從上次斷點(diǎn)開(kāi)始下載。

◆-r：使用遞歸下載

除了上述常用功能，Wget還支持HTTP和FTP代理功能，編輯其配置文件“/etc/wgetrc”即可。具體方法是使用VI編輯器打開(kāi)上述文 件，將 “http_proxy”和“ftp_proxoy”前的#去掉，然后在這兩項(xiàng)后輸入相應(yīng)的代理服務(wù)器的地址，保存退出即可。此外，Wget還可下載整個(gè) 網(wǎng)站，如下載整個(gè)Man手冊(cè)中心。只需輸入如下命令即可： #wget -r -p -np -k http://man.chinaunix.net

其中-r參數(shù)是指使用遞歸下載，-p是指下載所有顯示完整網(wǎng)頁(yè)所以需要的文件，如圖片等，-np是指不搜索上層目錄，-k則是指將絕對(duì)鏈接轉(zhuǎn)換為相對(duì)鏈接。

2 Prozilla

Prozilla也是一個(gè)十分流行的命令行下載工具，支持多線程下載和斷點(diǎn)續(xù)傳功能。可到http://prozilla.genesys.ro/下載最新的1.3.7.4安裝包，下載安裝包后使用如下命令進(jìn)行安裝：

??? #tar zxvf prozilla-1.3.7.4.tar.gz
??? #cd prozilla-1.3.7.4
??? #./configure #make
??? #make install

Prozilla命令格式如下： #proz [參數(shù)] [下載地址] 常用的選項(xiàng)有：

◆-k=n ：設(shè)置n個(gè)線程下載。不加此參數(shù)指定線程數(shù)，Prozilla默認(rèn)為4線程下載。

◆-P, --directory-prefix=DIR：指定將下載的文件保存在DIR/目錄。

◆-r, --resume：繼續(xù)下載未完成的文件。如果要指定線程數(shù)下載可用如下命令： #proz -k=5 http://64.12.204.21/pub/mozilla.org/firefox/releases/1.0/linux-i686/zh-CN/firefox-1.0.installer.tar.gz 這樣便以5線程進(jìn)行文件的下載，并將文件保存到當(dāng)前目錄。和Wget一樣，Prozilla也提供了續(xù)傳功能，下載中斷后，重新輸入上述命令，就會(huì)出現(xiàn)提 示續(xù)傳，按R鍵就可繼續(xù)下載了。

3 Myget

MyGet目標(biāo)設(shè)計(jì)成一個(gè)可擴(kuò)展的，擁有豐富界面的多線程下載工具，它支持HTTP、FTP、HTTPS、MMS、RTSP等協(xié)議。在 http://myget.sourceforge.net/release/myget-0.1.0.tar.bz2下載其最新版本0.1.0，下載后 使用如下命令安裝：

??? #tar jxvf myget-0.1.0.tar.bz2
??? #cd myget-0.1.0 #./configure
??? #make
??? #make install

MyGet命令格式如下： #mytget [選項(xiàng)] [下載地址] 常用的選項(xiàng)：

◆-d [目錄](méi)：指定下載到的文件在本地存放的位置，默認(rèn)當(dāng)前目錄。

◆-f [文件]：指定下載文件名稱。

◆-h：幫助選項(xiàng)。

◆-n [線程數(shù)]：下載線程數(shù)量，默認(rèn)為4個(gè)。

◆-x [代理服務(wù)器地址]：設(shè)置代理服務(wù)器地址，如“-x http://user:password@host :port”。 MyGet常用的形式如下： #mytget －d /root/ -n 10 http://lumaqq.linuxsir.org/download/patch/lumaqq_2004t_patch_2005.07.21.00.00.zip

4 Linuxdown

Linuxdown是一個(gè)命令行多線程下載工具，最多可支持30線程的下載。在https://gro.clinux.org/frs /download.php/1015/linuxdown-1.0.0.tar.gz下載最新的1.1.0版本。然后使用如下命令進(jìn)行編譯安裝：

??? #tar zxvf linuxdown-1.1.0.tar.gz
??? #cd dandelion/
??? #make
??? #make install

Linuxdown格式為： #linuxdown [下載地址] [選項(xiàng)] [線程數(shù)] 需要注意的是下載地址和選項(xiàng)都需要西文引號(hào)括起來(lái)，線程數(shù)不可超過(guò)30個(gè)。一個(gè)典型的下載如下： #linuxdown "http://lumaqq.linuxsir.org/download/patch/lumaqq_2004t_patch_2005.07.21.00.

5 Curl

Curl也是Linux下不錯(cuò)的命令行下載工具，小巧、高速，唯一的缺點(diǎn)是不支持多線程下載。在http://curl.haxx.se/download/curl-7.14.0.tar.gz下載最新版本。下載后便可使用如下命令編譯安裝：

??? #tar zxvf curl-7.14.0.tar.gz
??? #cd curl-7.14.0/
??? #./configure
??? #make
??? #make test
??? #make install

Curl使用格式如下： #curl [選項(xiàng)][下載地址] Curl典型下載如下： #curl -O http://10.1.27.10/~kennycx/tools/lumaqq_2004-linux_gtk2_x86_with_jre.tar.gz 使用Curl下載一個(gè)文件并保存到當(dāng)前目錄。此外，Curl雖然不支持多線程下載，但它可同時(shí)下載多個(gè)文件或下載文件的某一部分，可使用如下命令實(shí)現(xiàn)： #curl -r 0-199 http://www.netscape.com/ 獲得文件的前200 bytes。對(duì)于常用的代理下載Curl也可輕松實(shí)現(xiàn)，具體操作如下： #curl -x 10.1.27.10:1022 ftp://ftp.funet.fi/README 使用代理地址為10.1.27.10端口為1022的代理服務(wù)器下載一個(gè)文件。 #curl -U user:passwd -x 10.1.27.10:1022 ftp://ftp.funet.fi/README 如果代理服務(wù)器需要特別的驗(yàn)證，則需要在user:passwd處輸入合法的帳

6 Axel

Axel是命令行下的多線程下載工具，支持?jǐn)帱c(diǎn)續(xù)傳，速度通常情況下是Wget的幾倍。可在http://www.linuxfans.org /nuke/modules.php?name=Site_Downloads&op=mydown&did=1697下載。下載后使用 如下命令編譯安裝：

??? #tar zxvf axel-1.0a.tar.gz
??? #cd axel-1.0a/
??? #./configure
??? #make
??? #make install

基本的用法如下： #axel [選項(xiàng)] [下載目錄](méi) [下載地址] 一個(gè)典型下載如下： #alex -n 10 -o /home/kennycx/ http://10.1.27.10/~kennycx/tools/lumaqq_2004-linux_gtk2_x86_with_jre.tar.gz 用10線程將指定路徑的文件下載到/home/kennycx/這個(gè)目錄下。

本文詳細(xì)介紹了Linux中常用的下載工具，這些下載工具功能上各有千秋，使用上都比較簡(jiǎn)單，所以無(wú)論是初學(xué)者還是Linux高手總有一款適合你。

Linux下用命令行也可以下載HTTP網(wǎng)站的文件。順便提一下，如果是ftp網(wǎng)站可以用ftp命令然后get XXX。

轉(zhuǎn)載于:https://my.oschina.net/tongzhe/blog/213579

總結(jié)

以上是生活随笔為你收集整理的linux中下载文件的命令的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。