当前位置: 首页 > news >正文

DrissionPage:一款让网页自动化更简单的 Python 库

在网页自动化领域,Selenium 和 Playwright 早已是开发者耳熟能详的工具。但今天要给大家介绍一款更轻量、更易用的 Python 库 ——DrissionPage。它以 "融合 selenium 和 requests 优势" 为核心设计理念,既能像 requests 一样高效处理静态网页,又能像 selenium 一样操控动态页面,让网页爬取和自动化测试变得前所未有的简单。

一、DrissionPage 是什么?

DrissionPage 是由国内开发者开发的一款网页自动化工具,它的核心特点是 **"一体化"**:将 "静态请求" 与 "动态渲染" 两种操作模式无缝结合,无需在 requests 和 selenium 之间切换,就能轻松应对各种网页场景。

二、为什么选择 DrissionPage?

相比传统工具,DrissionPage 的优势非常明显:

  1. 极简 API:告别 Selenium 繁琐的初始化配置,一行代码即可启动浏览器或发送请求。
  2. 兼顾效率与交互:静态页面用 requests 模式快速爬取,动态页面切换到浏览器模式处理,避免 "杀鸡用牛刀"。
  3. 强大的元素定位:支持 CSS 选择器、XPath、文本、属性等多种定位方式,且语法更简洁。
  4. 内置反反爬机制:自动处理部分反爬策略(如 User-Agent 随机化、Cookie 持久化)。
  5. 完整的文档支持:中文文档详尽,对国内开发者友好,入门门槛低。

三、快速上手:DrissionPage 基础用法

1. 安装库

bash

pip install DrissionPage

2. 静态模式:爬取静态网页

适用于无需交互的静态页面(如新闻详情页、博客文章):

代码:

from DrissionPage import SessionPage# 创建静态页面对象(基于requests)page = SessionPage()# 发送请求page.get("https://www.baidu.com")# 获取页面标题print("页面标题:", page.title)# 获取页面源码html = page.html# 用CSS选择器提取元素search_input = page.ele("#kw")  # 定位百度搜索框print("搜索框默认值:", search_input.attr("value"))

3. 动态模式:操控浏览器

适用于需要交互的动态页面(如登录、表单提交、JavaScript 渲染内容):

代码:

from DrissionPage import ChromiumPage
# 创建浏览器页面对象(默认启动Chrome)
page = ChromiumPage()
# 打开网页
page.get("https://www.baidu.com")
# 定位并输入搜索关键词
page.ele("#kw").input("DrissionPage")
# 点击搜索按钮
page.ele("#su").click()
# 等待页面加载完成
page.wait.load_start()
# 提取搜索结果
results = page.eles(".result a")  # 获取所有结果链接
for i, result in enumerate(results[:5], 1):print(f"结果{i}:{result.text},链接:{result.attr('href')}")# 关闭浏览器
page.close()

4. 多开浏览器

使用ChromiumOptions对象的atuo_port()方法,可指定程序自动创建全新的浏览器,多个浏览器互不干扰。

代码:

from DrissionPage import ChromiumPage
# 创建浏览器页面对象(默认启动Chrome)
page = ChromiumPage()
# 打开网页
page.get("https://www.baidu.com")
# 定位并输入搜索关键词
page.ele("#kw").input("DrissionPage")
# 点击搜索按钮
page.ele("#su").click()
# 等待页面加载完成
page.wait.load_start()
# 提取搜索结果
results = page.eles(".result a")  # 获取所有结果链接
for i, result in enumerate(results[:5], 1):print(f"结果{i}:{result.text},链接:{result.attr('href')}")# 关闭浏览器
page.close()

四、进阶技巧:让自动化更高效

1. 元素定位:多种方式灵活选择

DrissionPage 的元素定位语法非常灵活,支持多种方式:

代码:

# 1. CSS选择器(推荐)page.ele("#username")  # ID选择器page.ele(".password")  # 类选择器page.ele("input[name='email']")  # 属性选择器# 2. XPathpage.ele("//div[@class='content']")# 3. 文本内容(精确匹配)page.ele("text=提交订单")# 4. 部分文本匹配(模糊定位)page.ele("text:包含('登录')")# 5. 标签名page.ele("tag:select")

2. 处理 iframe 和弹窗

无需切换上下文,直接定位嵌套元素:

代码:

# 定位iframe中的元素(自动切换到iframe上下文)iframe_ele = page.ele("#iframe1").ele("#username")# 处理alert弹窗alert = page.alert  # 获取弹窗对象print(alert.text)  # 打印弹窗内容alert.accept()  # 确认弹窗

3. 配置浏览器参数

自定义浏览器启动参数(如无头模式、代理):

代码:

from DrissionPage import ChromiumOptions, ChromiumPage# 创建配置对象co = ChromiumOptions()co.set_headless(True)  # 无头模式(不显示浏览器窗口)co.set_proxy("http://127.0.0.1:8888")  # 设置代理co.add_argument("--disable-images")  # 禁用图片加载# 应用配置启动浏览器page = ChromiumPage(co)

五、DrissionPage vs 其他工具

工具

优势

劣势

DrissionPage

静态 / 动态无缝切换,API 简洁,学习成本低

生态相对较小,复杂场景案例较少

Selenium

生态成熟,支持多浏览器

API 繁琐,配置复杂,速度较慢

Playwright

跨浏览器支持好,异步性能强

语法较新,与 requests 配合需额外处理 Cookie

requests

速度快,轻量

无法处理 JavaScript 动态内容

官方文档链接:https://www.drissionpage.cn/

http://www.dtcms.com/a/283410.html

相关文章:

  • 使用defineExpose暴露子组件的属性和方法、页面生命周期onLoad和onReady的使用
  • 【AI论文】可追溯证据增强的视觉基础推理:评估与方法论
  • OSS文件上传解析失败,错误:文件下载失败的排查与解决
  • 61.第二阶段x64游戏实战-抓取Lua分析本地和跨图寻路
  • Harbor 和 Helm
  • 陆面、生态、水文模拟与多源遥感数据同化的实践技术应用
  • ACL实验(思科设备)
  • 游戏开发中防止“范围蔓延”
  • Oracle 数据库常见等待事件参数详解
  • YOLO算法原理
  • 2025年中国品牌全球化发展分析:中国品牌在社交渠道、电商平台及官网流量方面显著增长
  • 测试开发工作日常用的提示词分享
  • 探秘京东外卖幕后:地图轨迹技术探寻
  • Java+Ollama 本地部署 DeepSeek-R1 对话机器人:从 0 到 1 实战指南
  • 动态规划的无后效性与马尔可夫性质相似关系的说明
  • [Java安全】JDK 动态代理
  • 3D TOF 安全防护传感器
  • 低精度定时器 (timer_list) 和 高精度定时器 (hrtimer)
  • 切比雪夫距离
  • Python高级编程技巧探讨:装饰器、Patch与语法糖详解
  • 二叉树思想草稿
  • 关于SaaS业务模式及其系统架构构建的详细解析
  • RICE-YOLO:基于改进YOLOv5的无人机稻穗检测新方法
  • 【C语言网络编程】HTTP 客户端请求(发送请求报文过程)
  • 在UE中如何操作视图的大小,方位,移动
  • 16路串口光纤通信FPGA项目实现指南 - 第二部分(上)
  • 【LeetCode刷题指南特别篇】--移除链表元素,调试技巧,链表分割
  • pyJianYingDraft 在 import_srt 字幕添加花字效果
  • 鸿蒙系统账号与签名内容整理
  • CG--资料分析1