Python爬虫中Selenium的示例分析

这篇文章主要为大家展示了“Python爬虫中Selenium的示例分析”，内容简而易懂，条理清晰，希望能够帮助大家解决疑惑，下面让小编带领大家一起研究并学习一下“Python爬虫中Selenium的示例分析”这篇文章吧。

同时需要设置chromium的环境变量

mv chromedriver /usr/local/bin

验证chromium安装是否正确

$ chromedriverStarting ChromeDriver 2.42.591059 (a3d9684d10d61aa0c45f6723b327283be1ebaad8) on port 9515Only local connections are allowed.

##模拟访问页面

from selenium import webdriverbrowser = webdriver.Chrome()browser.get('http://www.baidu.com')print(browser.page_source)browser.close()

查找节点

from selenium import webdriverbrowser = webdriver.Chrome()browser.get('http://www.taobao.com')search_first = browser.find_element_by_id('q')search_two = browser.find_element_by_name('q')search_three = browser.find_element_by_xpath("//input[@id='q']")search_four = browser.find_element_by_css_selector('#q')print(search_first)print(search_two)print(search_three)print(search_four)browser.close()

##节点交互

##ip代理

##Cookies

##等待
####隐式等待
调用driver.implicitly_wait。那么在获取不可用的元素之前，会先等待xx秒中的时间

####显式等待：
显示等待是表明某个条件成立后才执行获取元素的操作。也可以在等待的时候指定一个最大的时间，如果超过这个时间那么就抛出一个异常。显示等待应该使用selenium.webdriver.support.excepted_conditions期望的条件和selenium.webdriver.support.ui.WebDriverWait来配合完成。

以上是“Python爬虫中Selenium的示例分析”这篇文章的所有内容，感谢各位的阅读！相信大家都有了一定的了解，希望分享的内容对大家有所帮助，如果还想学习更多知识，欢迎关注亿速云行业资讯频道！