python中selenium库的基本使用详解

  • 开发
  • 33

什么是selenium

selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。selenium 是一套完整的web应用程序测试系统，包含了测试的录制（selenium IDE）,编写及运行（Selenium Remote Control）和测试的并行处理（Selenium Grid）。
Selenium的核心Selenium Core基于JsUnit，完全由JavaScript编写，因此可以用于任何支持JavaScript的浏览器上。

selenium可以模拟真实浏览器，自动化测试工具，支持多种浏览器，爬虫中主要用来解决JavaScript渲染问题。

这里要说一下比较重要的PhantomJS,PhantomJS是一个而基于WebKit的服务端JavaScript API,支持Web而不需要浏览器支持，其快速、原生支持各种Web标准：Dom处理，CSS选择器，JSON等等。PhantomJS可以用用于页面自动化、网络监测、网页截屏，以及无界面测试

selenium的基本用法

声明浏览器对象

上面我们知道了selenium支持很多的浏览器:

但是如果想要声明并调用浏览器则需要：

1

2

3

4

from selenium import webdriver

browser = webdriver.Chrome()

browser = webdriver.Firefox()

这里只写了两个例子，当然了其他的支持的浏览器都可以通过这种方式调用

访问页面

1

2

3

4

5

6

from selenium import webdriver#导入库

browser = webdriver.Chrome()#声明浏览器

url = 'https:www.baidu.com'

browser.get(url)#打开浏览器预设网址

print(browser.page_source)#打印网页源代码

browser.close()#关闭浏览器

上述代码运行后，会自动打开Chrome浏览器，并登陆百度打印百度首页的源代码，然后关闭浏览器

查找元素

单个元素查找

1

2

3

4

5

6

7

8

from selenium import webdriver#导入库

browser = webdriver.Chrome()#声明浏览器

url = 'https:www.taobao.com'

browser.get(url)#打开浏览器预设网址

input_first = browser.find_element_by_id('q')

input_two = browser.find_element_by_css_selector('#q')

print(input_first)

print(input_two)

这里我们通过2种不同的方式去获取响应的元素，第一种是通过id的方式，第二个中是CSS选择器，结果都是相同的。
输出如下：

1

2

<selenium.webdriver.remote.webelement.WebElement (session="9aaa01da6545ba2013cc432bcb9abfda", element="0.5325244323105505-1")>

<selenium.webdriver.remote.webelement.WebElement (session="9aaa01da6545ba2013cc432bcb9abfda", element="0.5325244323105505-1")>

这里列举一下常用的查找元素方法：

  • find_element_by_name
  • find_element_by_id
  • find_element_by_xpath
  • find_element_by_link_text
  • find_element_by_partial_link_text
  • find_element_by_tag_name
  • find_element_by_class_name
  • find_element_by_css_selector

下面这种方式是比较通用的一种方式：这里需要记住By模块所以需要导入

1

2

3

4

5

6

7

8

9

10

from selenium.webdriver.common.by import By

from selenium import webdriver

from selenium.webdriver.common.by import By

browser = webdriver.Chrome()

url = 'https://www.taobao.com'

browser.get(url)

input_1 = browser.find_element(By.ID, 'q')

print(input_1)

当然这种方法和上述的方式是通用的，browser.find_element(By.ID,"q")这里By.ID中的ID可以替换为其他几个
我个人比较倾向于css

多个元素查找

其实多个元素和单个元素的区别，举个例子：find_elements,单个元素是find_element,其他使用上没什么区别，通过其中的一个例子演示：

1

2

3

4

5

6

7

8

from selenium import webdriver

browser = webdriver.Chrome()

url = 'https://www.taobao.com'

browser.get(url)

input = browser.find_elements_by_css_selector('.service-bd li')

print(input)

browser.close()

输出为一个列表形式：

[<selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-1")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-2")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-3")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-4")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-5")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-6")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-7")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-8")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-9")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-10")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-11")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-12")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-13")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-14")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-15")>, <selenium.webdriver.remote.webelement.WebElement (session="42d192ca36f75170ab489e4839df0980", element="0.73211490098068-16")>]

当然上面的方式也是可以通过导入from selenium.webdriver.common.by import By 这种方式实现
lis = browser.find_elements(By.CSS_SELECTOR,'.service-bd li')
同样的在单个元素中查找的方法在多个元素查找中同样存在：

  • find_elements_by_name
  • find_elements_by_id
  • find_elements_by_xpath
  • find_elements_by_link_text
  • find_elements_by_partial_link_text
  • find_elements_by_tag_name
  • find_elements_by_class_name
  • find_elements_by_css_selector

元素交互操作

对于获取的元素调用交互方法

1

2

3

4

5

6

7

8

9

10

11

12

13

14

from selenium import webdriver

import time

browser = webdriver.Chrome()

browser.get(url='https://www.baidu.com')

time.sleep(2)

input = browser.find_element_by_css_selector('#kw')

input.send_keys('韩国女团')

time.sleep(2)

input.clear()

input.send_keys('后背摇')

button = browser.find_element_by_css_selector('#su')

button.click()

time.sleep(10)

browser.close()

运行的结果可以看出程序会自动打开Chrome浏览器并打开百度页面输入韩国女团,然后删除，重新输入后背摇，并点击搜索
Selenium所有的api文档：7. WebDriver API — Selenium Python Bindings 2 documentation

交互动作

将动作附加到动作链中串行执行

1

2

3

4

5

6

7

8

9

10

11

12

13

from selenium import webdriver

from selenium.webdriver import ActionChains

browser = webdriver.Chrome()

url = "http://www.runoob.com/try/try.php?filename=jqueryui-api-droppable"

browser.get(url)

browser.switch_to.frame('iframeResult')

source = browser.find_element_by_css_selector('#draggable')

target = browser.find_element_by_css_selector('#droppable')

actions = ActionChains(browser)

actions.drag_and_drop(source, target)

actions.perform()

更多操作参考：7. WebDriver API — Selenium Python Bindings 2 documentation

执行JavaScript

这是一个非常有用的方法，这里就可以直接调用js方法来实现一些操作，
下面的例子是通过登录知乎然后通过js翻到页面底部，并弹框提示

1

2

3

4

5

from selenium import webdriver

browser = webdriver.Chrome()

browser.get("http://www.zhihu.com/explore")

browser.execute_script('window.scrollTo(0,document.body.scrollHeight)')

browser.execute_script('alert("To Bottom")')

获取元素属性

1

2

3

4

5

6

7

8

9

10

11

get_attribute('class')

from selenium import webdriver

import time

browser = webdriver.Chrome()

browser.get("http://www.zhihu.com/explore")

logo = browser.find_element_by_css_selector('.zu-top-link-logo')

print(logo)

print(logo.get_attribute('class'))

print(logo.get_attribute('id'))

time.sleep(2)

browser.quit()

输出如下：

<selenium.webdriver.remote.webelement.WebElement (session="b72dbd6906debbca7d0b49ab6e064d92", element="0.511689875475734-1")>
zu-top-link-logo
zh-top-link-logo

获取文本值

text

1

2

3

4

5

6

from selenium import webdriver

browser = webdriver.Chrome()

browser.get("http://www.zhihu.com/explore")

logo = browser.find_element_by_css_selector('.zu-top-link-logo')

print(logo)

print(logo.text)

输出如下：

<selenium.webdriver.remote.webelement.WebElement (session="ce8814d69f8e1291c88ce6f76b6050a2", element="0.9868611170776878-1")>
知乎

获取ID，位置，标签名

id
location
tag_name
size

1

2

3

4

5

6

7

8

9

10

from selenium import webdriver

browser = webdriver.Chrome()

url = 'https://www.zhihu.com/explore'

browser.get(url)

input = browser.find_element_by_css_selector('.zu-top-add-question')

print(input.id)

print(input.location)

print(input.tag_name)

print(input.size)

输出如下：

0.022998219885927318-1
{'x': 759, 'y': 7}
button
{'height': 32, 'width': 66}

​现在我也找了很多测试的朋友，做了一个分享技术的交流群，共享了很多我们收集的技术文档和视频教程。
如果你不想再体验自学时找不到资源，没人解答问题，坚持几天便放弃的感受
可以加入我们一起交流。而且还有很多在自动化，性能，安全，测试开发等等方面有一定建树的技术大牛
分享他们的经验，还会分享很多直播讲座和技术沙龙
可以免费学习！划重点！开源的！！！
qq群号：485187702【暗号：csdn11】

最后感谢每一个认真阅读我文章的人，看着粉丝一路的上涨和关注，礼尚往来总是要有的，虽然不是什么很值钱的东西，如果你用得到的话可以直接拿走！ 希望能帮助到你！【100%无套路免费领取】

阅读全部

相关推荐

  5. Selenium的基本使用

    2024-01-09 14:50:04       11 阅读

  9. Python的Selenium库中的模块、类和异常的汇总

    2024-01-09 14:50:04       19 阅读

  10. 爬虫基本库的使用(urllib库的详细解析)

    2024-01-09 14:50:04       27 阅读

最近更新

  4. TCP协议是安全的吗?

    2024-01-09 14:50:04       16 阅读

  12. 阿里云服务器执行yum，一直下载docker-ce-stable失败

    2024-01-09 14:50:04       16 阅读

  13. 【Python教程】压缩PDF文件大小

    2024-01-09 14:50:04       15 阅读

  18. 通过文章id递归查询所有评论（xml）

    2024-01-09 14:50:04       18 阅读

热门阅读

  1. Linux磁盘空间与文件大小查看命令详解

    2024-01-09 14:50:04       31 阅读

  3. 亚马逊API：如何高效获取全球商品详情的指南！

    2024-01-09 14:50:04       43 阅读

  5. eureka工作原理

    2024-01-09 14:50:04       31 阅读

  7. 【深入理解 ByteBuf 之二】对象池设计模式概述

    2024-01-09 14:50:04       36 阅读

  12. 让车辆做到“耳听八方”，毫米波雷达芯片与系统设计

    2024-01-09 14:50:04       37 阅读

  15. 第五讲_css元素显示模式

    2024-01-09 14:50:04       35 阅读

  26. 2024.1.5力扣每日一题——队列中可以看到的人数

    2024-01-09 14:50:04       39 阅读