資源下載--使用Proxy SwitchyOmega+postman下載資源

• 1 介紹
• 2 使用方法
• • 2.1 安裝配置 Proxy SwitchyOmega
  • 2.2 配置postman
  • 2.3 測(cè)試
• 3 說明

1 介紹

很多時(shí)候我們需要在網(wǎng)絡(luò)上下載資源，但是本機(jī)網(wǎng)絡(luò)由于各種限制，速度極慢，此時(shí)需要獲取下載信息，到特定服務(wù)器下載數(shù)據(jù)。

第一種情況：
大部分資源直接是資源的具體地址，該地址直接包含文件名，如https://www2.spsc.tugraz.at/databases/PTDB-TUG/SPEECH_DATA_ZIPPED.zip
，此時(shí)直接點(diǎn)擊該鏈接 就可以下載，也可以復(fù)制該路徑，到指定服務(wù)器上通過wget 來(lái)下載(通常用aws或者gcp來(lái)下載海外資源);

此處直接通過文件絕對(duì)路徑下載，使用 --limit-rate=10m 限制下載速度最高為10m/s： wget -c --limit-rate=10m https://www2.spsc.tugraz.at/databases/PTDB-TUG/SPEECH_DATA_ZIPPED.zip

第二種情況：
資源包含了下載鏈接，但該鏈接不是資源的絕對(duì)地址，直接通過wget在服務(wù)器是無(wú)發(fā)下載的；或者該文件需要登陸賬號(hào)認(rèn)證，直接獲取下載地址后，在服務(wù)器上也無(wú)法通過wget等命令直接使用的；
此時(shí)我們需要通過某種方式獲取資源下載時(shí)候的url、完整headers、認(rèn)證信息；具體方法可以結(jié)合代理插件和postman獲取相關(guān)下載命令，下文將對(duì)該方法進(jìn)行詳細(xì)介紹。

2 使用方法

2.1 安裝配置 Proxy SwitchyOmega

在google web store 搜索Proxy SwitchyOmega，并下載安裝插件；

設(shè)置使用proxy功能，并配置http和https端口
此處配置http 和 http 代理端口都為5555，該端口后續(xù)要在postman中使用；
配置server 為127.0.0.1，即本機(jī)；
配置好打開proxy功能；

2.2 配置postman

下載并安裝postman

配置proxy
如圖，在Capture -》 Requests -》Source-》選擇Proxy，設(shè)置Capture Requests為on，設(shè)置端口為5555；
該配置設(shè)置成功后，在goole上訪問的http和https都會(huì)被5555端口捕獲到，進(jìn)一步根據(jù)破獲的內(nèi)容獲取其下載命令；

2.3 測(cè)試

下載數(shù)據(jù)集 [M2VoC MST and TSV data.zip](M2VoC MST and TSV data.zip)
https://fft.cloud.iqiyi.com/s/bYT2m6t?direct=1&access=3uTJiz
很明顯，該數(shù)據(jù)可以在瀏覽器下載，但是直接copy該地址是無(wú)法在服務(wù)器上下載的，此時(shí)postman就可以派上用場(chǎng)了；

在瀏覽器上點(diǎn)擊該網(wǎng)址 生成訪問記錄，在postman中找到具體訪問信息
如下圖捕獲到訪問記錄了，單機(jī)Save 右下角的Code就可以看到各種下載信息了；

此處直接獲取wget命令即可，將這些命令完整copy上，即可在對(duì)應(yīng)的服務(wù)器上下載了；

wget --no-check-certificate --quiet \--method GET \--timeout=0 \--header 'accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9' \--header 'accept-encoding: gzip, deflate, br' \--header 'accept-language: en-US,en;q=0.9' \--header 'connection: keep-alive' \--header 'cookie: session=MTYwODAwMzI1OXxEdi1CQkFFQ180SUFBUkFCRUFBQVRmLUNBQUlHYzNSeWFXNW5EQW9BQ0hOb1lYSmxYMmxrQm5OMGNtbHVad3dKQUFkaVdWUXliVFowQm5OMGNtbHVad3dKQUFkaGRYUm9YMmxrQm5OMGNtbHVad3dKQUFkaVdWUXliVFowfLbcN1QnSNX6ke5LnPoVr5-lrB3Hs1aqQUpnB5T3rLLE' \--header 'host: fft.cloud.iqiyi.com' \--header 'sec-fetch-dest: document' \--header 'sec-fetch-mode: navigate' \--header 'sec-fetch-site: cross-site' \--header 'sec-fetch-user: ?1' \--header 'upgrade-insecure-requests: 1' \--header 'user-agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 11_0_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36' \ 'https://fft.cloud.iqiyi.com/s/bYT2m6t?direct=1&access=3uTJiz'

3 說明

postman 官網(wǎng)下載postman app
webstore 下載SwitchyOmega

總結(jié)

以上是生活随笔為你收集整理的资源下载--使用Proxy SwitchyOmega+postman下载资源的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。