从URL下载返回的Zip文件

如果我有一个URL，当在Web浏览器中提交该URL时，会弹出一个对话框来保存一个zip文件，我将如何在Python中捕获并下载该zip文件？

大多数人建议使用requests它，如果有的话，requests 文档建议这样做以从URL下载和保存原始数据：

import requests 

def download_url(url, save_path, chunk_size=128):
    r = requests.get(url, stream=True)
    with open(save_path, 'wb') as fd:
        for chunk in r.iter_content(chunk_size=chunk_size):
            fd.write(chunk)

由于答案询问有关下载和保存zip文件的问题，因此我没有介绍有关阅读zip文件的详细信息。有关可能性，请参见下面的众多答案之一。

如果由于某种原因您无权访问requests，则可以urllib.request改用。它可能没有上述功能那么强大。

import urllib.request

def download_url(url, save_path):
    with urllib.request.urlopen(url) as dl_file:
        with open(save_path, 'wb') as out_file:
            out_file.write(dl_file.read())

最后，如果您仍在使用Python 2，则可以使用urllib2.urlopen。

from contextlib import closing

def download_url(url, save_path):
    with closing(urllib2.urlopen(url)) as dl_file:
        with open(save_path, 'wb') as out_file:
            out_file.write(dl_file.read())

据我所知，正确的方法是：

import requests, zipfile, StringIO
r = requests.get(zip_file_url, stream=True)
z = zipfile.ZipFile(StringIO.StringIO(r.content))
z.extractall()

当然，您需要检查GET是否成功r.ok。

对于Python 3+，子StringIO模块是与IO模块和使用BytesIO代替StringIO的：这里是这项变更的发行说明。

import requests, zipfile, io
r = requests.get(zip_file_url)
z = zipfile.ZipFile(io.BytesIO(r.content))
z.extractall("/path/to/destination_directory")

在这篇博客文章的帮助下，我已经使它与Just一起工作requests。奇怪stream的是，这样我们就不需要调用content大型请求了，这将要求立即处理所有请求，从而阻塞内存。在stream通过一次通过数据一个块迭代避免这一点。

url = 'https://www2.census.gov/geo/tiger/GENZ2017/shp/cb_2017_02_tract_500k.zip'
target_path = 'alaska.zip'

response = requests.get(url, stream=True)
handle = open(target_path, "wb")
for chunk in response.iter_content(chunk_size=512):
    if chunk:  # filter out keep-alive new chunks
        handle.write(chunk)
handle.close()

这是我要在Python 3中工作的内容：

import zipfile, urllib.request, shutil

url = 'http://www....myzipfile.zip'
file_name = 'myzip.zip'

with urllib.request.urlopen(url) as response, open(file_name, 'wb') as out_file:
    shutil.copyfileobj(response, out_file)
    with zipfile.ZipFile(file_name) as zf:
        zf.extractall()

您可以使用urllib2.urlopen，也可以尝试使用出色的Requests模块，避免urllib2的麻烦：

import requests
results = requests.get('url')
#pass results.content onto secondary processing...

我是来这里搜索如何保存.bzip2文件的。让我为可能会寻找此代码的其他人粘贴代码。

url = "http://api.mywebsite.com"
filename = "swateek.tar.gz"

response = requests.get(url, headers=headers, auth=('myusername', 'mypassword'), timeout=50)
if response.status_code == 200:
with open(filename, 'wb') as f:
   f.write(response.content)

我只是想按原样保存文件。

感谢@yoavram提供上述解决方案，我的url路径链接到一个压缩文件夹，并遇到BADZipfile错误（文件不是zip文件），如果尝试多次检索URL并将其全部解压缩，这很奇怪突然之间，所以我对解决方案进行了一点修改。按照此处使用is_zipfile方法

r = requests.get(url, stream =True)
check = zipfile.is_zipfile(io.BytesIO(r.content))
while not check:
    r = requests.get(url, stream =True)
    check = zipfile.is_zipfile(io.BytesIO(r.content))
else:
    z = zipfile.ZipFile(io.BytesIO(r.content))
    z.extractall()