手记

回到首页 个人中心 反馈问题 注册登录
下载APP
首页 课程 实战 体系课 手记 专栏 慕课教程
继续浏览精彩内容
慕课网APP
程序员的梦工厂
打开
继续
感谢您的支持，我会继续努力的
赞赏金额会直接到老师账户
将二维码发送给自己后长按识别
微信支付
支付宝支付

初学者必备：chromedriver学习入门指南

HUWWW 2024-10-24 14:16:59 浏览 409
HUWWW
关注TA
已关注
手记 285
粉丝 37
获赞 133
概述

本文详细介绍了Chromedriver学习的相关内容，包括Chromedriver的基本概念、安装步骤、使用方法以及常用操作示例。文章不仅讲解了启动和关闭浏览器、操作浏览器窗口、定位页面元素等实用技巧，还提供了Python环境配置和编写第一个Chromedriver脚本的步骤，涵盖了基础操作和进阶技巧，以及常见问题的解决方法。

Chromedriver简介

什么是Chromedriver

Chromedriver是由Chromium项目团队开发的工具，用于控制Chrome浏览器的Web自动化操作。Chromedriver是一个独立的可执行文件，能够与Chrome浏览器进行通信，实现页面的自动化操作。Chromedriver遵循WebDriver协议，是一种HTTP协议，通过命令控制浏览器的行为并获取浏览器的状态信息。Chromedriver通过HTTP请求与客户端脚本进行通信，接收客户端发送的指令并执行相应的操作。

Chromedriver的作用和应用场景

Chromedriver的主要作用是通过编程语言控制浏览器，执行各种自动化操作。它能够模拟用户的行为，如输入文本、点击按钮、填写表单等。常用的应用场景包括：

  1. Web自动化测试：执行自动化测试脚本，验证Web应用的功能和性能。
  2. 页面爬取：模拟用户操作，抓取动态生成的内容，如AJAX加载的数据。
  3. 自动表单提交：模拟用户行为，自动填写并提交表单。
  4. UI自动化测试：用于UI测试，模拟用户交互，验证页面元素的显示和功能。
  5. 实时数据抓取：实时抓取网页上的数据，如股票价格、天气信息等。

Chromedriver的安装步骤

安装Chromedriver的步骤如下：

  1. 下载Chromedriver：
  2. 确认Chrome浏览器版本：
    • 打开Chrome浏览器，输入chrome://version，查看浏览器版本。
    • 确保下载的Chromedriver版本与Chrome浏览器版本相匹配。
  3. 下载对应版本的Chromedriver：
    • 比如下载Windows x64版本的Chromedriver，选择chromedriver-win64-x.y.z.zip。
    • 将下载的压缩包解压到本地目录，例如D:\chromedriver。
  4. 配置环境变量：
    • 将Chromedriver的目录路径添加到系统的环境变量PATH中。
    • 在Windows上，可以通过系统设置，将D:\chromedriver添加到环境变量PATH中。
    • 在Linux或macOS上，可以通过编辑~/.bashrc或~/.zshrc文件，添加以下内容： 
      export PATH=$PATH:/path/to/chromedriver

      然后执行source ~/.bashrc或source ~/.zshrc使环境变量生效。

  5. 验证安装：
    • 打开命令行工具，输入chromedriver --version，查看安装的Chromedriver版本。
    • 如果输出版本号，说明安装成功。

示例：

chromedriver --version

输出：

ChromeDriver 114.0.5735.199 (3124ec6a9c20e68aafe400993bf3904b0f96b7a7-refs/branch-heads/5735@{#137})
Chromedriver基本使用方法

如何启动和关闭浏览器

启动和关闭浏览器是使用Chromedriver的基本操作。以下是以Python为主要编程语言的示例：

启动浏览器实例

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

# 创建一个Chrome浏览器实例
service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

# 打开一个网页
driver.get("https://www.example.com")

关闭浏览器实例

# 关闭浏览器
driver.quit()

如何操作浏览器窗口

Chromedriver可以通过Selenium进行浏览器窗口的操作。以下是一些常用的方法：

设置浏览器窗口大小

# 设置浏览器窗口大小
driver.set_window_size(800, 600)

获取当前窗口大小

# 获取当前窗口大小
width = driver.execute_script("return window.innerWidth;")
height = driver.execute_script("return window.innerHeight;")
print(f"窗口宽度: {width}, 高度: {height}")

新增标签页或窗口

# 新增标签页
driver.execute_script("window.open('https://www.anotherpage.com');")

切换标签页或窗口

# 切换到第二个标签页
driver.switch_to.window(driver.window_handles[1])

如何定位页面元素

定位页面元素是执行元素操作的前提。Selenium提供了多种定位方法，包括ID、name、class name、tag name、link text、partial link text、CSS selector和XPath等。以下是一些常见的定位方式：

通过ID定位元素

# 元素定位示例
element = driver.find_element(By.ID, "example_id")

通过name定位元素

# 元素定位示例
element = driver.find_element(By.NAME, "example_name")

通过class name定位元素

# 元素定位示例
element = driver.find_element(By.CLASS_NAME, "example_class_name")

通过CSS selector定位元素

# 元素定位示例
element = driver.find_element(By.CSS_SELECTOR, ".example_class_name")

通过XPath定位元素

# 元素定位示例
element = driver.find_element(By.XPATH, "//div[@class='example_class_name']")

示例代码：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service= emergency=service, options=options)
driver.get("https://www.example.com")

# 定位页面元素
element = driver.find_element(By.ID, "example_element_id")
element.click()
Chromedriver脚本编写基础

Python环境配置

编写Chromedriver脚本的前提是安装Python和相应的库。以下是Python环境的配置步骤：

  1. 安装Python：
  2. 安装Selenium库：
    • 打开命令行工具，输入以下命令安装Selenium库： 
      pip install selenium

示例：

pip install selenium

编写第一个Chromedriver脚本

编写第一个Chromedriver脚本，打开一个网页并输出页面标题。以下是一个简单的示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

# 创建一个Chrome浏览器实例
service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

# 打开百度网站
driver.get("https://www.baidu.com")

# 输出网页标题
print("当前页面的标题是:", driver.title)

# 关闭浏览器
driver.quit()

脚本运行与调试

脚本的运行与调试包括以下几个步骤：

  1. 运行脚本：
    • 在命令行工具中输入以下命令运行脚本： 
      python script_name.py
  2. 设置断点调试：
    • 使用Python IDE如PyCharm或VS Code进行调试。
    • 在代码中设置断点，例如在driver.get("https://www.baidu.com")这一行设置断点，然后运行调试模式。
  3. 打印日志和变量值：
    • 在关键步骤处打印变量值，例如： 
      print("当前页面的URL是:", driver.current_url)

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")
print("当前页面的URL是:", driver.current_url)

driver.quit()
Chromedriver常用操作示例

页面元素的输入与点击

页面元素的输入与点击是自动化测试中最常见的操作。

输入文本到输入框

# 输入框定位
input_element = driver.find_element(By.ID, "input_id")

# 输入文本
input_element.send_keys("Hello Selenium")

点击按钮

# 按钮定位
button_element = driver.find_element(By.ID, "submit_button")

# 点击按钮
button_element.click()

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

# 输入框定位并输入文本
input_element = driver.find_element(By.ID, "input_id")
input_element.send_keys("Hello Selenium")

# 按钮定位并点击
button_element = driver.find_element(By.ID, "submit_button")
button_element.click()

driver.quit()

窗口大小调整

调整浏览器窗口大小也是常用的操作之一。

设置窗口大小

driver.set_window_size(1200, 800)

获取当前窗口大小

width = driver.execute_script("return window.innerWidth;")
height = driver.execute_script("return window.innerHeight;")
print(f"窗口宽度: {width}, 高度: {height}")

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

driver.set_window_size(1200, 800)
width = driver.execute_script("return window.innerWidth;")
height = driver.execute_script("return window.innerHeight;")
print(f"窗口宽度: {width}, 高度: {height}")

driver.quit()

页面跳转与刷新

页面跳转与刷新是完成更复杂操作的基础。

页面跳转

driver.get("https://www.anotherpage.com")

页面刷新

driver.refresh()

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

driver.get("https://www.anotherpage.com")
driver.refresh()

driver.quit()
Chromedriver进阶技巧

解决网页加载速度慢的方法

网页加载速度慢会导致操作超时或失败，以下是一些解决方法：

  1. 设置超时时间：

    • 使用implicitly_wait设置全局等待时间，等待元素加载完成。 
      driver.implicitly_wait(10)

  2. 显式等待：

    • 使用WebDriverWait和expected_conditions实现更灵活的等待。

      from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

wait = WebDriverWait(driver, 10)
element = wait.until(EC.presence_of_element_located((By.ID, "element_id")))

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

driver.implicitly_wait(10)
wait = WebDriverWait(driver, 10)
element = wait.until(EC.presence_of_element_located((By.ID, "element_id")))

driver.quit()

处理弹窗和警告框

处理弹窗和警告框是执行脚本中的常见操作。

  1. 处理警告框：

    • 使用switch_to.alert方法切换到警告框。 
      alert = driver.switch_to.alert
alert.accept()  # 点击警告框的确认按钮
  2. 处理弹窗：
    • 对于JavaScript弹窗，可以使用execute_script方法关闭弹窗。 
      driver.execute_script("window.alert = function(message) {};")

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

driver.execute_script("window.alert = function(message) {};")
alert = driver.switch_to.alert
alert.accept()

driver.quit()

使用Cookies和LocalStorage

网页存储包括Cookies和LocalStorage，它们在网页数据获取和操作中起到重要作用。

  1. 获取Cookies：

    • 使用get_cookies方法获取当前页面的Cookies。 
      cookies = driver.get_cookies()

  2. 设置Cookies：

    • 使用add_cookie方法添加新的Cookies。 
      driver.add_cookie({
 'name': 'test_cookie',
 'value': 'test_value',
 'domain': '.example.com',
 'path': '/'
})

  3. 清除Cookies：

    • 使用delete_all_cookies方法清除所有Cookies。 
      driver.delete_all_cookies()

  4. 获取LocalStorage：

    • 使用execute_script方法获取LocalStorage中的数据。 
      local_storage = driver.execute_script("return window.localStorage;")
  5. 设置LocalStorage：
    • 使用execute_script方法设置LocalStorage中的数据。 
      driver.execute_script("window.localStorage.setItem('key', 'value');")

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

# 获取Cookies
cookies = driver.get_cookies()
print("当前Cookies:", cookies)

# 设置Cookies
driver.add_cookie({
    'name': 'test_cookie',
    'value': 'test_value',
    'domain': '.example.com',
    'path': '/'
})

# 清除Cookies
driver.delete_all_cookies()

# 获取LocalStorage
local_storage = driver.execute_script("return window.localStorage;")
print("当前LocalStorage:", local_storage)

# 设置LocalStorage
driver.execute_script("window.localStorage.setItem('key', 'value');")

driver.quit()
Chromedriver常见问题及解决方法

常见错误代码及其含义

Chromedriver在执行过程中可能会遇到一些错误代码，以下是常见的错误代码及其含义：

  1. WebDriverException：
    • 表示WebDriver相关的错误。
    • 通常是因为Chromedriver或浏览器版本不匹配。
  2. NoSuchElementException：
    • 表示找不到指定的元素。
    • 通常是因为元素未加载完成或定位方式错误。
  3. ElementNotInteractableException：
    • 表示元素不可交互。
    • 通常是因为元素被其他元素遮挡或不可见。
  4. TimeoutException：
    • 表示等待超时。
    • 通常是因为等待时间设置过短或元素加载时间过长。

示例：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.common.exceptions import NoSuchElementException

try:
    driver.get("https://www.example.com")
    element = driver.find_element(By.ID, "element_id")
except NoSuchElementException:
    print("元素不存在")
finally:
    driver.quit()

Chromedriver版本兼容性问题

Chromedriver版本与Chrome浏览器版本的兼容性是常见的问题之一。以下是一些解决方法：

  1. 检查版本兼容性：
    • 确保Chromedriver版本与Chrome浏览器版本相匹配。
  2. 更新Chromedriver：
    • 更新Chromedriver到最新版本，或者降级到与Chrome浏览器兼容的版本。
  3. 检查Chromedriver安装路径：
    • 确认Chromedriver在环境变量中配置正确。

示例：

# 下载最新版Chromedriver
wget https://chromedriver.storage.googleapis.com/114.0.5735.199/chromedriver-linux64.zip
unzip chromedriver-linux64.zip
mv chromedriver /usr/local/bin/

如何解决元素定位失败的问题

元素定位失败通常是因为定位方式不正确或元素未加载完成。以下是一些解决方法：

  1. 使用显式等待：

    • 使用WebDriverWait和expected_conditions等待元素加载完成。

      from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

wait = WebDriverWait(driver, 10)
element = wait.until(EC.presence_of_element_located((By.ID, "element_id")))

  2. 检查元素是否存在：

    • 使用find_elements方法检查元素是否存在。 
      elements = driver.find_elements(By.ID, "element_id")
if elements:
 print("元素存在")
else:
 print("元素不存在")
  3. 使用其他定位方式：
    • 如果一种定位方式失败，可以尝试使用其他定位方式，如CSS selector或XPath。 
      element = driver.find_element(By.CSS_SELECTOR, "#element_id")

示例：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

service = Service("path/to/chromedriver")
options = webdriver.ChromeOptions()
driver = webdriver.Chrome(service=service, options=options)

driver.get("https://www.example.com")

# 使用显式等待等待元素加载
wait = WebDriverWait(driver, 10)
element = wait.until(EC.presence_of_element_located((By.ID, "element_id")))

# 检查元素是否存在
elements = driver.find_elements(By.ID, "element_id")
if elements:
    print("元素存在")
else:
    print("元素不存在")

driver.quit()
打开App，阅读手记
相关标签
Python
自动化测试
爬虫
0人推荐
发表评论
随时随地看视频慕课网APP

相关课程

Python3.8系统入门+进阶 (程序员必备第二语言)

¥366 初级 14460

Python3入门机器学习 经典算法与应用  

¥499 中级 5850

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

¥388 中级 5793

Python3 入门教程（新版）

免费 入门 155024

初识机器学习-理论篇

免费 入门 136332