温馨提示×

python爬虫request怎样设置请求频率

小樊
96
2024-12-07 15:23:41
栏目: 编程语言
Python开发者专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

在Python的requests库中,可以使用time.sleep()函数来设置请求频率。以下是一个简单的示例:

import requests
import time

url = "https://example.com"  # 替换为你想要爬取的URL

for i in range(10):  # 爬取10
    response = requests.get(url)
    print(response.text)
    
    # 设置请求频率,例如:每次请求之间间隔2
    time.sleep(2)

在这个示例中,我们使用time.sleep(2)来设置每次请求之间的间隔为2秒。你可以根据需要调整这个值来控制请求频率。

亿速云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

推荐阅读:python request爬虫如何进行请求头设置

0