在python中，发送http请求主要使用requests库。1）使用requests.get()发送get请求；2）使用requests.post()发送post请求；3）处理响应状态码；4）解析json数据；5）处理异常；6）设置请求头；7）处理认证；8）使用会话提高效率；9）设置超时时间；10）记录日志；11）设置代理。通过这些方法和最佳实践，可以高效地与api交互。
在python中发送HTTP请求是一项常见且强大的功能，它让我们能够与互联网上的各种服务进行交互。无论你是想要从某个API获取数据，还是需要向某个服务器发送数据，Python都提供了多种方法来实现这一目标。今天，我就来详细聊聊如何用Python发送HTTP请求，以及在这一过程中需要注意的各种细节和最佳实践。
在Python中，最常用的库来发送HTTP请求是requests。这个库以其简洁和易用性著称，深受开发者的喜爱。不过，Python标准库中也提供了http.client模块，虽然它不如requests那样直观，但对于某些特定的需求，它也是一个不错的选择。
让我们先来看一个简单的例子，使用requests库发送一个GET请求：
立即学习“Python免费学习笔记（深入）”；
import requests response = requests.get('https://api.github.com') print(response.status_code) print(response.text)
这个代码片段向github的API发送了一个GET请求，并打印出响应的状态码和内容。requests库的美妙之处在于，它将复杂的HTTP协议细节隐藏起来，让我们可以专注于业务逻辑。
当然，HTTP请求不仅仅是GET请求，POST、PUT、delete等方法也是常用的。让我们看一个POST请求的例子：
import requests data = {'key': 'value'} response = requests.post('https://httpbin.org/post', data=data) print(response.status_code) print(response.json())
在这个例子中，我们向httpbin.org发送了一个POST请求，并传递了一些数据。httpbin.org是一个非常有用的测试网站，它会返回我们发送的数据，让我们可以验证请求是否成功。
在使用HTTP请求时，有几个关键点需要注意：
- 处理响应状态码：每个HTTP请求都会返回一个状态码，200表示请求成功，404表示资源未找到，500表示服务器错误等。我们需要根据状态码来处理不同的情况。比如：
import requests response = requests.get('https://api.github.com/invalid') if response.status_code == 200: print('请求成功:', response.json()) elif response.status_code == 404: print('资源未找到') else: print('其他错误:', response.status_code)
- 处理JSON数据：很多API会返回JSON格式的数据，requests库提供了方便的方法来解析JSON：
import requests response = requests.get('https://api.github.com') if response.status_code == 200: data = response.json() print('用户数量:', data['total_users'])
- 处理异常：网络请求可能会失败，我们需要处理这些异常情况：
import requests try: response = requests.get('https://api.github.com', timeout=5) response.raise_for_status() print('请求成功:', response.json()) except requests.exceptions.RequestException as e: print('请求失败:', e)
- 设置请求头：有时候我们需要设置请求头，比如设置User-Agent来模拟浏览器：
import requests headers = { 'User-Agent': 'Mozilla/5.0 (windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3' } response = requests.get('https://httpbin.org/headers', headers=headers) print(response.json())
- 处理认证：有些API需要认证，我们可以使用requests库的认证功能：
import requests from requests.auth import HTTPBasicAuth response = requests.get('https://api.github.com/user', auth=HTTPBasicAuth('username', 'password')) print(response.json())
在实际应用中，使用HTTP请求时还需要注意一些最佳实践：
- 使用会话：如果需要发送多个请求到同一个服务器，使用requests.Session()可以提高效率，因为它会保持连接状态：
import requests with requests.Session() as session: response1 = session.get('https://httpbin.org/cookies/set/sessioncookie/123456789') response2 = session.get('https://httpbin.org/cookies') print(response2.json())
- 超时设置：设置超时时间可以防止程序因为等待响应时间过长而卡死：
import requests response = requests.get('https://api.github.com', timeout=10) print(response.status_code)
- 日志记录：记录请求和响应日志有助于调试和监控：
import requests import logging logging.basicConfig(level=logging.DEBUG) response = requests.get('https://api.github.com')
- 代理设置：在某些网络环境下，需要通过代理访问互联网：
import requests proxies = { 'http': 'http://10.10.1.10:3128', 'https': 'http://10.10.1.10:1080', } response = requests.get('https://api.github.com', proxies=proxies) print(response.status_code)
总的来说，使用Python发送HTTP请求是一个非常灵活且强大的工具。通过requests库，我们可以轻松地与各种API进行交互，获取和发送数据。在实际应用中，注意处理各种异常情况，优化请求性能，以及遵循最佳实践，可以让我们的代码更加健壮和高效。
希望这篇文章能帮助你更好地理解和使用Python发送HTTP请求。如果你在实践中遇到任何问题，欢迎随时讨论和分享经验！
