百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

点击鼠标,轻松驾驭网页:Python Selenium 自动化入门指南

wptr33 2024-12-03 03:57 19 浏览

Python 的 Selenium 库是一个强大的工具,可以用来实现自动化网页操作。以下是入门到应用的完整教程,包含常用功能和代码示例。


1. 安装 Selenium

运行以下命令安装 Selenium:

pip install selenium


2. 下载 WebDriver

Selenium 需要与浏览器的 WebDriver 配合使用。以下是常用浏览器的驱动下载地址:

  • Chrome: ChromeDriver
  • Edge: EdgeDriver
  • Firefox: Geckodriver

将下载的驱动程序放在系统 PATH 或项目文件夹中。


3. 基本用法

启动浏览器并打开网页

from selenium import webdriver

from selenium.webdriver.common.by import By



# 启动浏览器

driver = webdriver.Chrome() # 确保 chromedriver PATH

driver.get("https://www.google.com") # 打开目标网页



# 打印网页标题

print("网页标题:", driver.title)



# 关闭浏览器

driver.quit()


4. 常用操作

定位元素

Selenium 支持多种方式定位页面元素:

  • By.ID: 使用元素的 id
  • By.NAME: 使用 name
  • By.XPATH: 使用 XPath 表达式
  • By.CSS_SELECTOR: 使用 CSS 选择器

示例:

# 输入框操作示例

search_box = driver.find_element(By.NAME, "q") # Google 搜索框

search_box.send_keys("Python Selenium") # 输入搜索内容

search_box.submit() # 提交表单

点击按钮

# 定位并点击按钮

button = driver.find_element(By.XPATH, "//button[@type='submit']")

button.click()

获取文本内容

# 获取指定元素的文本内容

element = driver.find_element(By.CLASS_NAME, "example-class")

print("元素文本内容:", element.text)

处理下拉菜单

from selenium.webdriver.support.ui import Select



# 定位下拉菜单并选择选项

dropdown = Select(driver.find_element(By.ID, "dropdown-id"))

dropdown.select_by_visible_text("Option 1") # 根据可见文本选择

dropdown.select_by_value("1") # 根据值选择


5. 高级操作

等待元素加载

使用 WebDriverWait 显式等待元素加载,避免脚本因加载延迟而失败。

from selenium.webdriver.common.by import By

from selenium.webdriver.support.ui import WebDriverWait

from selenium.webdriver.support import expected_conditions as EC



# 显式等待,直到元素可点击

element = WebDriverWait(driver, 10).until(

EC.element_to_be_clickable((By.ID, "clickable-element-id"))

)

element.click()

处理弹窗

# 切换到弹窗并操作

alert = driver.switch_to.alert

print("弹窗内容:", alert.text)

alert.accept() # 点击“确定”

# alert.dismiss() # 点击“取消”

处理 iframe

# 切换到 iframe

driver.switch_to.frame("iframe-id")



# 退出 iframe

driver.switch_to.default_content()


6. 实用脚本:自动登录

以下是一个自动登录网站的示例:

from selenium import webdriver

from selenium.webdriver.common.by import By

from selenium.webdriver.common.keys import Keys



# 初始化浏览器

driver = webdriver.Chrome()

driver.get("https://example.com/login")



# 输入用户名和密码

driver.find_element(By.ID, "username").send_keys("your_username")

driver.find_element(By.ID, "password").send_keys("your_password")



# 提交登录表单

driver.find_element(By.ID, "login-button").click()



# 检查登录是否成功

try:

success_message = driver.find_element(By.ID, "welcome-message").text

print("登录成功:", success_message)

except:

print("登录失败!")



# 关闭浏览器

driver.quit()


7. 常见问题与注意事项

  • 浏览器与驱动版本需匹配: 确保浏览器版本与 WebDriver 对应,通常可以在浏览器“关于”页面查看版本号。

  • 页面动态加载: 动态加载的元素可能需要显式等待(WebDriverWait)或滚动页面以触发加载。

  • 无头浏览器模式: 如果不需要打开浏览器窗口,可使用无头模式运行:

from selenium.webdriver.chrome.options import Options



options = Options()

options.add_argument("--headless") # 开启无头模式

driver = webdriver.Chrome(options=options)





相关推荐

F103C8T6移植FATFS文件系统 版本R0.15

STM32F103C8T6芯片在W25Q64上移植FATFS(版本R0.15)实现过程:1、首先完成USART初始化和调试,用于传输信息到串口调试软件。2、完成SPI相关参数配置及调试,用于单片机和存...

stm32使用MPU6050或ADXL345控制的车辆减速灯

本实验例程采用MPU6050六轴运动处理组件...

STM32F103串口输出prtinf覆盖(stm32printf函数的串口输出)

采用正点原子的板子,有如下坑,记录如下:(1)main中应用头文件#include"stdio.h"(2)采用hal进行fputc和fgetc覆盖,如下intfputc(intc...

STM32 学习8 USART串口通讯与printf重定向

一、串口通信介绍STM32F103ZET6包含多个UART、USART串口。...

教你如何使用SEGGER RTT优雅的实现日志系统

今天开始了BMS系统的软件代码部分的搭建,计划是分成三层:硬件驱动,AFE层和系统应用层。第一步肯定是先把底层的IIC通信调通,CG861xx的IIC通信和TI的BQ769X0...

终极调试利器,各种Link通吃(link4a调制方式)

今天继续更新一期KEIL调试方法。事实上,关于调试方法,鱼鹰写了一个系列,汇总文为《佛祖保佑,永无BUG,永不修改|KEIL调试系列总结篇》,对于KEIL方法感兴趣的可以看看。这个调试...

在 STM32 中使用 printf() 函数,别漏掉这几行代码!

问:在STM32上轻松使用printf函数除了点亮LED外,向串行控制台发送打印信息可能是调试嵌入式项目时最简单、最直接且最常用的技术。虽然大多数平台都拥有可以在UART总线上传输数据的API,但它们...

高性能异步io机制:io_uring(异步io select)

io_uring是linux内核5.10引入的异步io接口。相比起用户态的DPDK、SPDK,io_uring作为内核的一部分,通过mmap的方式实现用户和内核共享内存,并基于m...

精品博文ARM中打印函数print 的几种实现方法

1利用C库函数printf步骤:1)首先需要包含头文件stdio.h。2)然后定义文件句柄。实际上就是一个int型变量封装在结构体中。struct__FILE{inthandle;};3)定...

C语言char的详解(c语言(char))

在C语言中,char是一种基础数据类型,用于表示字符或小整数值。对char的理解和处理非常重要,尤其是在字符串操作、文件读写或其他需要直接控制内存的应用场景中。下面从基本定义、存储方式、常见用法...

C语言之文件操作(c语言文件操作实验总结)

文件操作是C语言中非常重要的功能,用于读取和写入文件中的数据。C语言提供了一组标准库函数(如fopen、fclose、fread、fwrite等)来实现文件操作。以下是针对C语言初学者的详细讲解。...

STM32-ADC如何把采集的数据转换为小数

编辑一、代码原理解析这段代码围绕“STM32中ADC数据采集、整数与小数计算及串口输出”展开,核心是数据类型的使用(unsignedint/signedint/float)、ADC数...

循环队列原理及在单片机串口通讯中的应用(二)

前言书接上回,前文主要介绍了环形队列的实现原理以及C语言实现及测试过程,本文将回归到嵌入式平台的应用中,话不多说,淦,上干货!...

STM32编程中printf函数重定向背后的原理

  在C语言中,printf是一个非常好用的函数,尤其是在程序调试阶段,我们可以通printf打印变量的值来帮助查错。在学习C语言的时候我们的开发环境和运行环境都是PC机,printf函数打印到PC机...

MySQL 避坑指南之隐式数据类型转换

...