- 关闭图片加载 from selenium import webdriver options = webdriver.ChromeOptions() options.add_experimental_option('prefs', {'profile.managed_default_content_settings.images': 2}) browser = web... 关闭图片加载 from selenium import webdriver options = webdriver.ChromeOptions() options.add_experimental_option('prefs', {'profile.managed_default_content_settings.images': 2}) browser = web...
- 背景 之前一直在研究scrapy下数据抓取，在研究ajax数据抓取时碰巧研究了一下selenium，确实很实用，不过只做scrapy下的数据抓取，不怎么合适 一是性能的损耗，一直需要开一个浏览器 二是对于爬虫来说，分析ajax的请求才是正事 好吧，说远了，今天来扯一下我对于自动化测试一些见解。 python下的自动化测试库实在之多，selenium是浏览器测试的大杀器，关... 背景 之前一直在研究scrapy下数据抓取，在研究ajax数据抓取时碰巧研究了一下selenium，确实很实用，不过只做scrapy下的数据抓取，不怎么合适 一是性能的损耗，一直需要开一个浏览器 二是对于爬虫来说，分析ajax的请求才是正事 好吧，说远了，今天来扯一下我对于自动化测试一些见解。 python下的自动化测试库实在之多，selenium是浏览器测试的大杀器，关...
- 源起 还是爬虫里面的某个场景需要重度使用selenium场景 ，所以需要起这样一个集群 对比 单机 docker docker-compose 分布式集群 我们在使用selenium 的时候，我们一般就使用以上的环境和模式,单机怎么操作呢，下载相应的webdriver 单机 对于小型的使用环境，比如单线程操作，我们直接下载好相应版本的driver ，直接安装 sele... 源起 还是爬虫里面的某个场景需要重度使用selenium场景 ，所以需要起这样一个集群 对比 单机 docker docker-compose 分布式集群 我们在使用selenium 的时候，我们一般就使用以上的环境和模式,单机怎么操作呢，下载相应的webdriver 单机 对于小型的使用环境，比如单线程操作，我们直接下载好相应版本的driver ，直接安装 sele...
- 背景 在新创建python环境之后，总是免不了要去找selenium-driver 二进制文件，然后安装相应的python selenium包，实在是太麻烦了，下面介绍一种省时省力的方法 pip install webdriver-manager 12 pip install webdriver-manager 使用以上命令安... 背景 在新创建python环境之后，总是免不了要去找selenium-driver 二进制文件，然后安装相应的python selenium包，实在是太麻烦了，下面介绍一种省时省力的方法 pip install webdriver-manager 12 pip install webdriver-manager 使用以上命令安...
- 今天是持续写作的第 31 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章主要承接的是 《用 Selenium 搞定自动化测试项目，途牛搜机票。》 ，本文将对其代码进行优化与重构。 文章目录 封装元素定位函数提炼函数到单独的文件中Selenium 代码异常补充知识点 `implicitly_wait()` 方... 今天是持续写作的第 31 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章主要承接的是 《用 Selenium 搞定自动化测试项目，途牛搜机票。》 ，本文将对其代码进行优化与重构。 文章目录 封装元素定位函数提炼函数到单独的文件中Selenium 代码异常补充知识点 `implicitly_wait()` 方...
- Selenium 是一个自动化测试工具，利用它我们可以驱动浏览器执行特定的动作，如点击、下拉等操作。对于一些 JavaScript 渲染的页面来说，这种抓取方式非常有效。下面我们来看看 Selenium 的安装过程。 1. 相关链接 官方网站：http://www.seleniumhq.org GitHub：https://github.com/SeleniumHQ/se... Selenium 是一个自动化测试工具，利用它我们可以驱动浏览器执行特定的动作，如点击、下拉等操作。对于一些 JavaScript 渲染的页面来说，这种抓取方式非常有效。下面我们来看看 Selenium 的安装过程。 1. 相关链接 官方网站：http://www.seleniumhq.org GitHub：https://github.com/SeleniumHQ/se...
- 更新 其实本文的初衷是为了获取淘宝的非匿名旺旺，在淘宝详情页的最下方有相关评论，含有非匿名旺旺号，快一年了淘宝都没有修复这个。 可就在今天，淘宝把所有的账号设置成了匿名显示，SO，获取非匿名旺旺号已经不可能了。那本节就带大家抓取匿名旺旺号熟悉一下 Selenium 吧。 2016/7/1 前言 嗯，淘宝，它一直是个难搞的家伙。 而且买家在买宝贝的时候大多数都是匿名评论的，大... 更新 其实本文的初衷是为了获取淘宝的非匿名旺旺，在淘宝详情页的最下方有相关评论，含有非匿名旺旺号，快一年了淘宝都没有修复这个。 可就在今天，淘宝把所有的账号设置成了匿名显示，SO，获取非匿名旺旺号已经不可能了。那本节就带大家抓取匿名旺旺号熟悉一下 Selenium 吧。 2016/7/1 前言 嗯，淘宝，它一直是个难搞的家伙。 而且买家在买宝贝的时候大多数都是匿名评论的，大...
- 任务要求： 网址为https://www.jianshu.com/u/9104ebf5e177，爬取内容为简书用户的最新评论中的评论题目、评论内容及评论时间，爬取5页，用selenium爬取，将这些评论存入Excel文件中，文件后缀为.xls。将ipynb文件和后缀为.xls的文件压缩打包。 通过博客对selenium的简单介绍，现在开始实战啦... 任务要求： 网址为https://www.jianshu.com/u/9104ebf5e177，爬取内容为简书用户的最新评论中的评论题目、评论内容及评论时间，爬取5页，用selenium爬取，将这些评论存入Excel文件中，文件后缀为.xls。将ipynb文件和后缀为.xls的文件压缩打包。 通过博客对selenium的简单介绍，现在开始实战啦...
- selenium提取数据 文章目录 selenium提取数据知识点： 1. driver对象的常用属性和方法知识点：了解 driver对象的常用属性和方法 2. driver对象定位标签元素获取标签对象的方法知识点：掌握 driver对象定位标签元素获取标签对象的方法 3. 标签对象提取文本内容和属性值 推荐阅读： 使用xpath... selenium提取数据 文章目录 selenium提取数据知识点： 1. driver对象的常用属性和方法知识点：了解 driver对象的常用属性和方法 2. driver对象定位标签元素获取标签对象的方法知识点：掌握 driver对象定位标签元素获取标签对象的方法 3. 标签对象提取文本内容和属性值 推荐阅读： 使用xpath...
- selenium提取数据总结附思维导图 1. driver对象的常用属性和方法 在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方法 driver.page_source 当前标签页浏览器渲染之后的网页源代码driver.current_url 当前标签页的urldriver.close() 关闭当前标签页，... selenium提取数据总结附思维导图 1. driver对象的常用属性和方法 在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方法 driver.page_source 当前标签页浏览器渲染之后的网页源代码driver.current_url 当前标签页的urldriver.close() 关闭当前标签页，...
- 今天是持续写作的第 27 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 Selenium 除了对网页的基本操作以外，还有一些进阶技巧，接下来的将通过两篇文章为你说明。 缓解一下视疲劳 ## Selenium 滑块操作 滑块验证是验证码的一种进化，在 2020 年已经不经常见到了，大多数都已经被滑动拼图验证码给替代了... 今天是持续写作的第 27 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 Selenium 除了对网页的基本操作以外，还有一些进阶技巧，接下来的将通过两篇文章为你说明。 缓解一下视疲劳 ## Selenium 滑块操作 滑块验证是验证码的一种进化，在 2020 年已经不经常见到了，大多数都已经被滑动拼图验证码给替代了...
- 今天是持续写作的第 31 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章主要承接的是 《用 Selenium 搞定自动化测试项目，途牛搜机票。》 ，本文将对其代码进行优化与重构。 文章目录 封装元素定位函数提炼函数到单独的文件中Selenium 代码异常补充知识点 `implicitly_wait()` 方... 今天是持续写作的第 31 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 本篇文章主要承接的是 《用 Selenium 搞定自动化测试项目，途牛搜机票。》 ，本文将对其代码进行优化与重构。 文章目录 封装元素定位函数提炼函数到单独的文件中Selenium 代码异常补充知识点 `implicitly_wait()` 方...
- 今天是持续写作的第 29 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 学习编程就是为了解决问题，接下来本系列的文章都将以项目的形式展现，为你打开项目之门。 做测试项目之前的准备工作 项目需求分析制定项目计划制定测试用例开始测试 上述的前 3 个步骤，咱们一概不讲，直接从第 4 步开始走起。 自动化测试之途牛搜机票 ... 今天是持续写作的第 29 / 100 天。 如果你有想要交流的想法、技术，欢迎在评论区留言。 学习编程就是为了解决问题，接下来本系列的文章都将以项目的形式展现，为你打开项目之门。 做测试项目之前的准备工作 项目需求分析制定项目计划制定测试用例开始测试 上述的前 3 个步骤，咱们一概不讲，直接从第 4 步开始走起。 自动化测试之途牛搜机票 ...
- 又到了每周三的送书时刻啦！今天给大家带来的是《从零开始学Selenium自动化测试》！ （文末查看送书规则） 简介 本书基于Python语言，系统地介绍Selenium 3自动化测试的相关知识体系及应用。书中的大部分知识点都匹配了相应的案例，便于读者进行实践。本书各章案例清晰易懂，并可独立运行，便于不同需求的读者学习。另外，作者专门为本书录... 又到了每周三的送书时刻啦！今天给大家带来的是《从零开始学Selenium自动化测试》！ （文末查看送书规则） 简介 本书基于Python语言，系统地介绍Selenium 3自动化测试的相关知识体系及应用。书中的大部分知识点都匹配了相应的案例，便于读者进行实践。本书各章案例清晰易懂，并可独立运行，便于不同需求的读者学习。另外，作者专门为本书录...
- “ 阅读本文大概需要 10 分钟。 ” 如果大家对 Python 爬虫有所了解的话，想必你应该听说过 Selenium 这个库，这实际上是一个自动化测试工具，现在已经被广泛用于网络爬虫中来应对 JavaScript 渲染的页面的抓取。 但 Selenium 用的时候有个麻烦事，就是环境的相关配置，得安装好相关浏览器，比如 Chrome、Firef... “ 阅读本文大概需要 10 分钟。 ” 如果大家对 Python 爬虫有所了解的话，想必你应该听说过 Selenium 这个库，这实际上是一个自动化测试工具，现在已经被广泛用于网络爬虫中来应对 JavaScript 渲染的页面的抓取。 但 Selenium 用的时候有个麻烦事，就是环境的相关配置，得安装好相关浏览器，比如 Chrome、Firef...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签