Python中的CURL替代


114

我在PHP中使用了一个cURL调用:

curl -i -H'接受:应用程序/ xml'-u登录名:密钥“ https://app.streamsend.com/emails

我需要一种在Python中执行相同操作的方法。在Python中是否可以使用cURL替代。我知道urllib,但我是Python菜鸟,也不知道如何使用它。


2
您可以尝试pycurl
ghostdog74'4

2
urllib2是用于此类工作的广泛使用的软件包。
索拉夫


3
上面是一个很棒的库的链接,该库可以requests在python中执行简单的http (可通过easy_install或PyPi中的pip安装)。名称/ URL有点令人困惑-起初我几乎认为这是一个愿望清单,要求一个更好的urllib2,而是requests一个非常直观易用的pythonic库sudo easy_install requestssudo pip install requests
jimbob博士2012年

Answers:


68
import urllib2

manager = urllib2.HTTPPasswordMgrWithDefaultRealm()
manager.add_password(None, 'https://app.streamsend.com/emails', 'login', 'key')
handler = urllib2.HTTPBasicAuthHandler(manager)

director = urllib2.OpenerDirector()
director.add_handler(handler)

req = urllib2.Request('https://app.streamsend.com/emails', headers = {'Accept' : 'application/xml'})

result = director.open(req)
# result.read() will contain the data
# result.info() will contain the HTTP headers

# To get say the content-length header
length = result.info()['Content-Length']

您的cURL调用使用urllib2代替。完全未经测试。


4
很高兴将此与下面的答案进行比较,看看Python在过去四年中取得了多大进步
Razi Shaban 2015年

133

您可以使用“ 请求:人类的HTTP”用户指南中描述的HTTP请求。


2
要求是最新的,也是最大的!它抽烟并燃烧笨拙的urllib2,我希望请求成为python传入3.x版本的标准HTTP客户端
Phyo Arkar Lwin

1
当我切换为使用请求时,我再也没有回头直接使用urllib2了。内置的JSON解码也很方便。如果设置了适当的内容类型,则无需使用json手动加载正文。
Thomas Farvour 2013年

请求是如此简单。我什至可以在几分钟内创建自定义身份验证方案。urllib2非常烦人。
道格

35

这是一个使用urllib2的简单示例,该示例针对GitHub的API进行了基本身份验证。

import urllib2

u='username'
p='userpass'
url='https://api.github.com/users/username'

# simple wrapper function to encode the username & pass
def encodeUserData(user, password):
    return "Basic " + (user + ":" + password).encode("base64").rstrip()

# create the request object and set some headers
req = urllib2.Request(url)
req.add_header('Accept', 'application/json')
req.add_header("Content-type", "application/x-www-form-urlencoded")
req.add_header('Authorization', encodeUserData(u, p))
# make the request and print the results
res = urllib2.urlopen(req)
print res.read()

此外,如果将其包装在脚本中并从终端运行,则可以将响应字符串传递到“ mjson.tool”以启用漂亮的打印。

>> basicAuth.py | python -mjson.tool

最后要注意的一点是,urllib2仅支持GET&POST请求。
如果您需要使用其他HTTP动词(例如DELETE,PUT等),则可能需要看一下PYCURL


为什么这被否决了?也许是因为您写的是PYCURL而不是PycURL:D
Bhargav Rao

20

如果您使用的是这样的命令来调用curl,则可以使用来在Python中执行相同的操作subprocess。例:

subprocess.call(['curl', '-i', '-H', '"Accept: application/xml"', '-u', 'login:key', '"https://app.streamsend.com/emails"'])

或者,如果您想将其作为像PHP一样具有更结构化的api,可以尝试PycURL


不可以。cURL调用是程序的一部分。如果可以在上面的curl调用中发布执行完全相同的操作的代码,那将很棒。
Gaurav Sharma 2010年

添加了一个示例,该示例说明了根据您的问题使用子流程的含义,但我猜您正在寻找更像PycURL的东西。
unholysampler 2010年

我知道它比较老,但是在我看来,对于大多数cURL用法,PycURL都是相当低的级别。甚至cURL的PHP​​实现也相当低级。
Thomas Farvour 2013年

我从cmd调用“ python”后收到“名称错误,名称子进程未定义”,因此出现在python env中。
Timo 2014年

@Timo是import subprocess吗?python repl环境就像一个python文件一样,您必须导入其他模块。
unholysampler 2014年

13
import requests

url = 'https://example.tld/'
auth = ('username', 'password')

r = requests.get(url, auth=auth)
print r.content

这是我所能获得的最简单的方法。


这是最简单的答案!urllib2太复杂了。
not2qubit

7

例如,如何使用urllib以及一些糖语法。我知道请求和其他库,但是urllib是python的标准库,不需要单独安装任何东西。

兼容Python 2/3。

import sys
if sys.version_info.major == 3:
  from urllib.request import HTTPPasswordMgrWithDefaultRealm, HTTPBasicAuthHandler, Request, build_opener
  from urllib.parse import urlencode
else:
  from urllib2 import HTTPPasswordMgrWithDefaultRealm, HTTPBasicAuthHandler, Request, build_opener
  from urllib import urlencode


def curl(url, params=None, auth=None, req_type="GET", data=None, headers=None):
  post_req = ["POST", "PUT"]
  get_req = ["GET", "DELETE"]

  if params is not None:
    url += "?" + urlencode(params)

  if req_type not in post_req + get_req:
    raise IOError("Wrong request type \"%s\" passed" % req_type)

  _headers = {}
  handler_chain = []

  if auth is not None:
    manager = HTTPPasswordMgrWithDefaultRealm()
    manager.add_password(None, url, auth["user"], auth["pass"])
    handler_chain.append(HTTPBasicAuthHandler(manager))

  if req_type in post_req and data is not None:
    _headers["Content-Length"] = len(data)

  if headers is not None:
    _headers.update(headers)

  director = build_opener(*handler_chain)

  if req_type in post_req:
    if sys.version_info.major == 3:
      _data = bytes(data, encoding='utf8')
    else:
      _data = bytes(data)

    req = Request(url, headers=_headers, data=_data)
  else:
    req = Request(url, headers=_headers)

  req.get_method = lambda: req_type
  result = director.open(req)

  return {
    "httpcode": result.code,
    "headers": result.info(),
    "content": result.read()
  }


"""
Usage example:
"""

Post data:
  curl("http://127.0.0.1/", req_type="POST", data='cascac')

Pass arguments (http://127.0.0.1/?q=show):
  curl("http://127.0.0.1/", params={'q': 'show'}, req_type="POST", data='cascac')

HTTP Authorization:
  curl("http://127.0.0.1/secure_data.txt", auth={"user": "username", "pass": "password"})

功能不完整,可能不理想,但显示了基本的表示形式和要使用的概念。可以根据口味添加或更改其他内容。

12/08更新

是GitHub实时更新源的链接。目前支持:

  • 授权

  • 兼容CRUD

  • 自动字符集检测

  • 自动编码(压缩)检测


4

如果它正在从您要查找的命令行运行以上所有内容,那么我建议您使用HTTPie。这是一个奇妙的卷曲替代品,超级容易方便,以使用(和定制)。

这是来自GitHub的(简洁而准确的)描述;

HTTPie(发音为aych-tee-tee-pie)是命令行HTTP客户端。其目标是使CLI与Web服务的交互尽可能对人类友好。

它提供了一个简单的http命令,该命令允许使用简单自然的语法发送任意HTTP请求,并显示彩色输出。HTTPie可用于测试,调试和通常与HTTP服务器交互。


有关身份验证的文档应为您提供足够的指针来解决您的问题。当然,以上所有答案也是准确的,并且提供了完成同一任务的不同方法。


只是为了您不必离开Stack Overflow,这是它简而言之的功能。

Basic auth:

$ http -a username:password example.org
Digest auth:

$ http --auth-type=digest -a username:password example.org
With password prompt:

$ http -a username example.org


也许我一无所获,但这是一个Python模块吗?我猜它是一个shell / CLI工具,但我感到很失望:'(它似乎很容易使用
Alex

@Alex-这是一个Python模块。Github上的自述文件(github.com/jkbrzt/httpie)包含您需要的一切。
stuxnetting
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.