urllib，urllib2，urllib3和请求模块之间有什么区别？

在Python，有什么之间的差异urllib，urllib2，urllib3和requests模块？为什么有三个？他们似乎在做同样的事情...

我知道已经有人说过了，但我强烈建议您使用requestsPython软件包。

如果您使用的是python以外的语言，则可能是在考虑urllib并且urllib2易于使用，代码不多且功能强大，这就是我以前的想法。但是该requests程序包是如此有用且太短，以至于每个人都应该使用它。

首先，它支持完全宁静的API，并且非常简单：

import requests

resp = requests.get('http://www.mywebsite.com/user')
resp = requests.post('http://www.mywebsite.com/user')
resp = requests.put('http://www.mywebsite.com/user/put')
resp = requests.delete('http://www.mywebsite.com/user/delete')

无论是GET / POST，您都无需再次对参数进行编码，只需将字典作为参数即可。

userdata = {"firstname": "John", "lastname": "Doe", "password": "jdoe123"}
resp = requests.post('http://www.mywebsite.com/user', data=userdata)

加上它甚至还具有内置的JSON解码器（再次，我知道json.loads()编写的内容并不多，但这肯定很方便）：

resp.json()

或者，如果您的响应数据只是文本，请使用：

resp.text

这只是冰山一角。这是请求站点中的功能列表：

• 国际域名和URL
• 保持活动和连接池
• Cookie持久性会话
• 浏览器式SSL验证
• 基本/摘要身份验证
• 优雅的键/值Cookie
• 自动减压
• Unicode响应机构
• 分段文件上传
• 连接超时
• .netrc支持
• 项目清单
• python 2.6—3.4
• 线程安全的。

urllib2提供了一些额外的功能，即该urlopen()函数可以允许您指定标头（通常您以前必须使用httplib，这要冗长得多。）不过，更重要的是，urllib2提供了Request该类，该类可以提供更多功能。声明式处理请求：

r = Request(url='http://www.mysite.com')
r.add_header('User-Agent', 'awesome fetcher')
r.add_data(urllib.urlencode({'foo': 'bar'})
response = urlopen(r)

请注意，urlencode()仅在urllib中，而不在urllib2中。

还有一些处理程序，用于在urllib2中实现更高级的URL支持。简短的答案是，除非使用旧代码，否则可能要使用urllib2中的URL打开程序，但是对于某些实用程序功能，仍然需要导入urllib。

奖励答案 使用Google App Engine，您可以使用httplib，urllib或urllib2中的任何一个，但它们都只是Google URL Fetch API的包装。也就是说，您仍然受到端口，协议和允许的响应时间之类的相同限制。不过，您可以像期望的那样使用库的核心来获取HTTP URL。

urllib和urllib2都是Python模块，它们执行URL请求相关的内容，但提供不同的功能。

1）urllib2可以接受Request对象来设置URL请求的标头，而urllib仅接受URL。

2）urllib提供了urlencode方法，该方法用于生成GET查询字符串，而urllib2没有此功能。这是urllib与urllib2经常一起使用的原因之一。

Requests -Requests是一个使用Python编写的简单易用的HTTP库。

1）Python请求自动对参数进行编码，因此您只需将它们作为简单的参数传递，就与urllib不同，在urllib中，需要在传递参数之前使用urllib.encode（）方法对参数进行编码。

2）它自动将响应解码为Unicode。

3）Requests还具有更方便的错误处理方式。如果您的身份验证失败，则urllib2将引发urllib2.URLError，而Requests将返回正常的响应对象。您需要通过boolean response.ok查看所有请求是否成功

将Python2移植到Python3是一个相当大的区别。urllib2对于python3不存在，其方法已移植到urllib。因此，您正在大量使用它，并希望将来迁移到Python3，请考虑使用urllib。但是2to3工具将自动为您完成大部分工作。

仅添加到现有答案中，我看不到有人提到python请求不是本机库。如果可以添加依赖项，那么请求就可以了。但是，如果您试图避免添加依赖项，则urllib是一个本机python库，已经可供您使用。

我喜欢此urllib.urlencode功能，并且似乎不存在urllib2。

>>> urllib.urlencode({'abc':'d f', 'def': '-!2'})
'abc=d+f&def=-%212'

要获取网址的内容：

try: # Try importing requests first.
    import requests
except ImportError: 
    try: # Try importing Python3 urllib
        import urllib.request
    except AttributeError: # Now importing Python2 urllib
        import urllib


def get_content(url):
    try:  # Using requests.
        return requests.get(url).content # Returns requests.models.Response.
    except NameError:  
        try: # Using Python3 urllib.
            with urllib.request.urlopen(index_url) as response:
                return response.read() # Returns http.client.HTTPResponse.
        except AttributeError: # Using Python3 urllib.
            return urllib.urlopen(url).read() # Returns an instance.

很难request为响应编写Python2和Python3以及依赖项代码，因为它们的urlopen()功能和requests.get()函数返回不同的类型：

• Python2 urllib.request.urlopen()返回一个http.client.HTTPResponse
• Python3 urllib.urlopen(url)返回一个instance
• 请求request.get(url)返回一个requests.models.Response

通常应该使用urllib2，因为通过接受Request对象有时会使事情变得容易一些，并且还会在协议错误时引发URLException。但是，借助Google App Engine，您将无法使用任何一种。您必须使用Google在其沙盒Python环境中提供的URL Fetch API。

我发现上述答案中缺少的一个关键点是urllib返回类型为object的对象，<class http.client.HTTPResponse>而requests返回return <class 'requests.models.Response'>。

因此，read（）方法可以与一起使用，urllib但不能与一起使用requests。

PS：requests已经有很多方法，几乎​​不需要read()；>