温馨提示×

怎么用python抓取网页内容并保存

小亿
177
2023-12-05 02:57:26
栏目: 编程语言

要使用Python抓取网页内容并保存,可以使用requests库来发送HTTP请求获取网页内容,然后使用open()函数将内容保存到本地文件。

下面是一个简单的示例代码,可以用来抓取网页内容并保存到文件中:

import requests

url = "https://example.com"  # 要抓取的网页地址

# 发送GET请求获取网页内容
response = requests.get(url)
content = response.text

# 将内容保存到文件
with open("output.html", "w", encoding="utf-8") as file:
    file.write(content)

print("内容已保存到output.html文件中。")

在上面的代码中,首先使用requests.get()函数发送GET请求获取网页内容,然后使用response.text获取内容的文本形式。接着,使用open()函数以写入模式打开一个文件,并将内容写入文件中。最后,通过print()函数输出保存成功的提示信息。

请注意,上述代码中的文件名是"output.html",你可以根据需要修改为自己想要保存的文件名。另外,还可以根据实际需要对获取的内容进行解析和处理。

0