Python 工具類實現(xiàn)大文件斷點續(xù)傳功能詳解
依賴
os、sys、requests
工具代碼
廢話不多說,上代碼。
#!/usr/bin/env python3 # -*- coding: utf-8 -*- """ Created on Sat Oct 23 13:54:39 2021 @author: huyi """ import os import sys import requests def download(url, file_path): # 重試計數(shù) count = 0 # 第一次請求是為了得到文件總大小 r1 = requests.get(url, stream=True, verify=False) total_size = int(r1.headers['Content-Length']) # 判斷本地文件是否存在,存在則讀取文件數(shù)據(jù)大小 if os.path.exists(file_path): temp_size = os.path.getsize(file_path) # 本地已經(jīng)下載的文件大小 else: temp_size = 0 # 對比一下,是不是還沒下完 print(temp_size) print(total_size) # 開始下載 while count < 10: if count != 0: temp_size = os.path.getsize(file_path) # 文件大小一致,跳出循環(huán) if temp_size >= total_size: break count += 1 print( "第[{}]次下載文件,已經(jīng)下載數(shù)據(jù)大小:[{}],應(yīng)下載數(shù)據(jù)大小:[{}]".format( count, temp_size, total_size)) # 重新請求網(wǎng)址,加入新的請求頭的 # 核心部分,這個是請求下載時,從本地文件已經(jīng)下載過的后面下載 headers = {"Range": f"bytes={temp_size}-{total_size}"} # r = requests.get(url, stream=True, verify=False) r = requests.get(url, stream=True, verify=False, headers=headers) # "ab"表示追加形式寫入文件 with open(file_path, "ab") as f: if count != 1: f.seek(temp_size) for chunk in r.iter_content(chunk_size=1024 * 64): if chunk: temp_size += len(chunk) f.write(chunk) f.flush() ###這是下載實現(xiàn)進度顯示#### done = int(50 * temp_size / total_size) sys.stdout.write("\r[%s%s] %d%%" % ('█' * done, ' ' * (50 - done), 100 * temp_size / total_size)) sys.stdout.flush() print("\n") return file_path
代碼說明:
1、重試次數(shù)可以自己修改,按照需求來,我這邊是10次。
2、增加了進度條的打印,別問,好看就完了。
驗證一下,我們準備個文件下載服務(wù)。上文件服務(wù)代碼。代碼對flask、gevent有依賴。
#!/usr/bin/env python3 # -*- coding: utf-8 -*- """ Created on Sat Oct 23 19:53:18 2021 @author: huyi """ from flask import Flask, request, make_response, send_from_directory from gevent.pywsgi import WSGIServer from gevent import monkey # 將python標準的io方法,都替換成gevent中的同名方法,遇到io阻塞gevent自動進行協(xié)程切換 monkey.patch_all() app = Flask(__name__) @app.route("/download", methods=['GET']) def download_file(): get_data = request.args.to_dict() file_path = get_data.get('fileName') response = make_response( send_from_directory('/Users/huyi/Movies/Videos',file_path,as_attachment=True)) response.headers["Content-Disposition"] = "attachment; filename={}".format( file_path.encode().decode('latin-1')) return response if __name__ == '__main__': WSGIServer(('0.0.0.0', 8080), app).serve_forever()
啟動文件下載服務(wù),測試下載代碼
download('http://localhost:8080/download?fileName=test.mp4', '/Users/huyi/Downloads/test.mp4')
首先我們下載一部分,然后關(guān)閉,模擬下載一半的情況。
重新執(zhí)行一下,把剩下的執(zhí)行
OK,驗證通過。
總結(jié)
斷點續(xù)傳的這部分代碼,你可以好好理解一下原理,其實不復雜。還是不明白可以私信我。
如果本文對你有幫助,請點個贊支持一下吧。
到此這篇關(guān)于Python 工具類實現(xiàn)大文件斷點續(xù)傳功能詳解的文章就介紹到這了,更多相關(guān)Python 文件下載內(nèi)容請搜索本站以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持本站!
版權(quán)聲明:本站文章來源標注為YINGSOO的內(nèi)容版權(quán)均為本站所有,歡迎引用、轉(zhuǎn)載,請保持原文完整并注明來源及原文鏈接。禁止復制或仿造本網(wǎng)站,禁止在非www.sddonglingsh.com所屬的服務(wù)器上建立鏡像,否則將依法追究法律責任。本站部分內(nèi)容來源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來,僅供學習參考,不代表本站立場,如有內(nèi)容涉嫌侵權(quán),請聯(lián)系alex-e#qq.com處理。