温馨提示×

Python爬虫user agent如何更换

小樊
83
2024-12-05 16:15:42
栏目: 编程语言

在Python中,你可以使用requests库来发送HTTP请求,并通过设置User-Agent头来更换User Agent。以下是一个简单的示例:

首先,确保你已经安装了requests库。如果没有安装,可以使用以下命令安装:

pip install requests

然后,你可以使用以下代码来发送带有不同User Agent的请求:

import requests

url = 'https://www.example.com'

# 定义不同的User Agent
user_agents = [
    'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3',
    'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:54.0) Gecko/20100101 Firefox/54.0',
    'Mozilla/5.0 (Windows NT 6.1; Trident/7.0; AS; rv:11.0) like Gecko',
]

# 遍历User Agent列表并发送请求
for user_agent in user_agents:
    headers = {'User-Agent': user_agent}
    response = requests.get(url, headers=headers)
    print(f'User Agent: {user_agent}\nResponse Status Code: {response.status_code}\n')

在这个示例中,我们定义了一个包含不同User Agent的列表,然后遍历这个列表,为每个User Agent发送一个HTTP GET请求。requests.get()函数的headers参数允许你设置请求头,包括User Agent。

0