日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程语言 > python >内容正文

python

python+IDM实现快速批量化下载 (解决IDM批量化下载文件类型出现Error问题)

發布時間:2023/12/15 python 29 豆豆
生活随笔 收集整理的這篇文章主要介紹了 python+IDM实现快速批量化下载 (解决IDM批量化下载文件类型出现Error问题) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

曲線救國:解決IDM批量化下載時文件類型出現Error問題。

前言:本人在利用IDM進行“NASA全球”中相關數據下載時出現無法批量化進行,特此記錄解決方案。
“1.利用IDM進行“NASA全球”下載數據步驟原帖”

一、問題

當利用IDM進行 大批量下載出現 文件類型顯示Error錯誤,如下圖所示:
于是嘗試小批量下載,發現最多只能同時下載5個鏈接的數據,如下圖所示:
嗚嗚嗚~~~總不能每次只復制5個進行下載吶,得下載到什么時候,鬧心。
于是通過查詢資料進行試驗,最終找到解決辦法。

二、解決方案

總述:利用python + IDM 實現快速批量化自動下載。
前提:已經獲得需要下載的鏈接列表(此處我存放在了txt文件中),如下圖所示(其中每一行代表一個下載鏈接):
原理:利用python讀取到每一個鏈接str,然后調用IDM進行下載,具體代碼如下:
備注:此處下載的時候,為了命名文件方便,故批量鏈接里均長相相似(即刪除了上圖鏈接中的前倆條),具體如下圖所示:

from subprocess import call import os from os.path import join from os import listdirdef idmDownloader(task_url, folder_path, file_name):"""IDM下載器:param task_url: 下載任務地址:param folder_path: 存放文件夾:param file_name: 文件名:return:"""# IDM安裝目錄idm_engine = "H:\\IDM\\IDMan.exe"# 將任務添加至隊列call([idm_engine, '/d', task_url, '/p', folder_path, '/f', file_name, '/a'])# 開始任務隊列call([idm_engine, '/s'])if __name__ == '__main__':result = []with open('H:\\data\\subset_GPM_3IMERGHH_06_20221107_060058.txt', encoding='utf-8') as f:for line in f:result.append(line.strip('\n').split(',')[0]) for i in range(len(result)):url = result[i] # 取出每次要下載的鏈接path = 'H:\\data\\' # 存放下載后數據的文件夾filename = result[i][98:142] # 文件名,此處我截取的下載鏈接的部分字符串,具體如下黑色圖所示idmDownloader(url, path, filename) # 添加進IDM中下載print(filename + "----save")

代碼運行結果:打印保存好的文件名。
下載好的文件如下圖所示:(最終實現了解放雙手, 很奈斯)

總結

以上是生活随笔為你收集整理的python+IDM实现快速批量化下载 (解决IDM批量化下载文件类型出现Error问题)的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。