最近想備份網(wǎng)站,但是php下載文件的大小是有大小限制的,而我也懶得裝ftp再下載了,就想著暫時(shí)弄個(gè)二級域名站,然后用python(python3)的requests庫直接下載網(wǎng)站根目錄下的所有文件以及文件夾。(0-0就是這么任性)
1.安裝requests庫
pip install requests
2.下載文件夾下所有文件及文件夾
這里需要處理的地方主要是文件夾,這里我們判斷出該鏈接是文件夾時(shí),自動創(chuàng)建文件夾,并遞歸繼續(xù)進(jìn)行操作,否則判斷該鏈接是文件,直接使用requests get方法下載,話不多說,看代碼
####春江暮客 www.bobobk.com import requests import re import os import sys def help(script): text = 'python3 %s https://www.bobobk.com ./' % script print(text) def get_file(url,path):##文件下載函數(shù) content = requests.get(url) print("write %s in %s" % (url,path)) filew = open(path+url.split("/")[-1],'wb') for chunk in content.iter_content(chunk_size=512 * 1024): if chunk: # filter out keep-alive new chunks filew.write(chunk) filew.close() def get_dir(url,path): #文件夾處理邏輯 content = requests.get(url).text if "
至此,就在本地目錄完全還原下載原網(wǎng)站的路徑和文件了。
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯(lián)系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長非常感激您!手機(jī)微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
