温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Python中怎么使用requests获取网页

发布时间:2021-07-05 16:13:42 来源:亿速云 阅读:313 作者:Leah 栏目:云计算

今天就跟大家聊聊有关Python中怎么使用requests获取网页,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。

1、使用pycharm新建项目,新建的时候记得勾选“Inherit global site-packages”否则可能找不到requests类库

2、编写代码,我们看到网页上的数据量是101行,如下所示:

Python中怎么使用requests获取网页

代码如下:

项目结构(不重要):

Python中怎么使用requests获取网页

程序代码:

首先我们要分析网页的源码,在浏览器按F12可以查看到源码,把源码全选复制到一个pycharm新建的HTML文档,可以看到对应的树形结构。

Python中怎么使用requests获取网页

我们可以看到,在左边的编辑框这里,凡是有“-”号的,都是在树形结构内的。由此我们可以知道,如果想要获取到td,则完整的树形结构是:

html-body-div-table-tr-td

但是tr是多个的,并且第一个是表头,所以第一个不是我们想要的,所以我们要对第一个的表头抛弃掉。

另外td也是多个的,并且我们只需要每个tr里面的第二个td,所以我们可以采用下标的方式来获取。

最终完整的树形结构是:/html/body/div/table/tr[postion()>1]/td[2]

所以,代码如下:

Python中怎么使用requests获取网页

最后,运行结果:

Python中怎么使用requests获取网页

看完上述内容,你们对Python中怎么使用requests获取网页有进一步的了解吗?如果还想了解更多知识或者相关内容,请关注亿速云行业资讯频道,感谢大家的支持。

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI