抽屉selenium cnblogs scrapy

scrapy框架之自定义URL去重

scrapy默认使用 scrapy.dupefilter.RFPDupeFilter 进行去重,相关配有: 1 DUPEFILTER_CLASS = 'scrapy.dupefilter.RFPDupeFilter' #一般更改此参数 2 DUPEFILTER_DEBUG = False 3 JOB ......
框架 scrapy URL

scrapy框架之格式化&持久化

格式化处理 在parse方法中直接处理是简单的处理方式,不太建议,如果对于想要获取更多的数据处理,则可以利用Scrapy的items将数据格式化,然后统一交由pipelines来处理 以爬取校花网校花图片相关信息为例: 1 import scrapy 2 from scrapy.selector i ......
框架 格式 scrapy amp

java+selenium+testNG自动化测试实践

java+selenium+testNG自动化测试实践 第一步,本地搭建web服务 我使用开源JPRESS项目在本地搭建web服务,用于测试。关于JPress网上搜一下就可以下载源码,根据指导文档搭建web服务即可。 第二步 注册云码,用于打码解析Jpress后台登录界面验证码解析,扫微信即可享受5 ......
selenium testNG java

selenium.common.exceptions.SessionNotCreatedException: Message: session not created: This version of ChromeDriver only supports Chrome version 103 Current browser version is 106.0.5239.0

pyhon 调selenium报: selenium.common.exceptions.SessionNotCreatedException: Message: session not created: This version of ChromeDriver only supports Chro ......

Selenium自动化测试

Selenium自动化测试 简单介绍 selenium selenium是一个用于测试web网页的自动化测试工具,它直接运行在浏览器中,模拟用户的操作。 支持多浏览器:ie、Firefox、Chrome、edge、Safari等 跨平台:windows、Linux、mac等 支持多语言:python ......
Selenium

测试python+selenium的笔记

打开新的页签 # 获取当前所有的窗口句柄 window_handles = driver.window_handles # 切换到新的标签页 driver.switch_to.window(window_handles[1]) 关闭svg弹窗 WebDriverWait(driver, 20).un ......
selenium 笔记 python

22、Scaffold属性 抽屉菜单Drawer

在Scaffold组件里面传入drawer参数可以定义左侧边栏,传入endDrawer可以定义右侧边栏。侧边栏默 认是隐藏的,我们可以通过手指滑动显示侧边栏,也可以通过点击按钮显示侧边栏。 class MyFlutterApp extends StatelessWidget { const MyFl ......
抽屉 Scaffold 属性 菜单 Drawer

一篇文章带你掌握Web自动化测试工具——Selenium

一篇文章带你掌握Web自动化测试工具——Selenium 在这篇文章中我们将会介绍Web自动化测试工具Selenium 如果我们需要学习相关内容,我们需要掌握Python,PyTest以及部分前端知识即可 下面我们将会从以下角度进行介绍: Web自动化入门 Selenium-API介绍 Web自动化 ......
测试工具 Selenium 篇文章 工具 Web

scrapy 框架的安装及流程-01

一、简介 scrapy的优势: 1、为了更利于我们将精力集中在请求与解析上 2、企业级的要求,效率高 二、模块安装 scrapy支持Python2.7和python3.4以上版本 1.在https://www.lfd.uci.edu/~gohlke/pythonlibs/ 下载对应的Twisted的 ......
框架 流程 scrapy 01

scrapy爬取数据并保存中文

通过前面的学习拿到数据问题不大,本帖是记录如何保存到文件以及保存成中文的操作。 1,bqb.py爬虫文件实例代码 ''' # @Date: 2023-10-25 16:39:05 # @Author: Devin # @Last Modified: 2023-11-27 16:26:06 ''' i ......
数据 scrapy

selenium之三种等待,强制等待、隐式等待和显式等待

显式等待 presence_of_element_locatedpresence_of_all_elements_locatedvisibility_of_any_elements_located 判断页面至少有一个元素可见 visible, 传入locator,一旦定位就返回 the list o ......
selenium

selenium之内联框架和多窗口切换

内联框架frame frame是一种内联框架,用于在html里面内部嵌入子页面(完整的html),对于这种元素,内部子页面的内容selenium无法直接控制,必须通过 switch_to跳转到对应的frame,才能进行操作,注意,操作之后一定要跳出该frame 多窗口切换 handle 句柄:用来指 ......
框架 selenium

selenium之鼠标键盘操作

鼠标操作 1.引入ActionChains类 2.定位相关元素 3.在ActionChains().调用相关鼠标操作方法 from selenium.webdriver.common.action_chains import ActionChains 双击操作: ActionChains(drive ......
selenium 键盘 鼠标

selenium之下拉菜单列表定位

下拉菜单列表定位>>使用Select类定位 from selenium.webdriver.support.ui import Select #导入Select类 select=Select(driver.find_element_by_css_selector('[name="baseinfopr ......
selenium 菜单

selenium之元素定位

安装、卸载、查看 安装:pip install selenium==xxxx 卸载:pip uninstall selenium 查看版本号:pip show selenium 定位方式使用规则 有id,直接用有name,如果界面上只有一个表单,直接用。(最好检查以下唯一性)class_name,注 ......
selenium 元素

第一周-cnblog

第一周笔记 一.SMC: 1.什么是SMC SMC(Software-Based Memory Encryption)是一种局部代码加密技术,它可以将一个可执行文件的指定区段进行加密,使得黑客无法直接分析区段内的代码,从而增加恶意代码分析难度和降低恶意攻击成功的可能性。 SMC的基本原理是在编译可执 ......
cnblog

selenium 模拟登录环境

尽量windows环境 1.安装python 3.11.5 2、安装selenium pip install selenium -i https://pypi.tuna.tsinghua.edu.cn/simple 3 、验证码识别库 pip install ddddocr -i https://p ......
selenium 环境

scrapy的入门

0,scapy的安装 pip install scrapy 注意安装的过程可能会有一些错误,需要尝试多次解决 1,创建工程项目 scrapy startproject demo demo是项目的名称 2,创建爬虫 cd bqb 项目根目录下执行如下命令 scrapy genspider bqb ww ......
scrapy

自动化测试工具 —— selenium介绍及基本使用方法

Selenium是一个开源、免费、简单、灵活,对Web浏览器支持良好的自动化测试工具,在UI自动化、爬虫等场景下是十分实用的,能够熟练掌握并使用Selenium工具可以大大的提高效率。 Selenium简介 Selenium支持多平台、多浏览器、多语言去实现自动化测试,是一个开源和可移植的Web测试 ......

selenium+pytest进行自动化测试(项目:白羽黑月SMS)

最近在学习selenium和pytest,刚好找到一个合适的项目学习,根据bysms给出来的测试用例进行自动化测试编写 首先先写了登录的测试用例,因为后续测试都是在登陆的基础上测试的,所以把这单独写出来 创建一个login_success.py文件 from selenium.webdriver.c ......
selenium 项目 pytest SMS

cnblog_fastapi 中的 schemas 和 models 的区别 - python 后端实战经验分享 - SegmentFault 思否

python fastapi schema和model的区别 To avoid confusion between the SQLAlchemy models and the Pydantic models, we will have the file model...... 来自 fastapi ......

通过api登录接口获得cookie,给selenium使用,绕开登录页面

1、通过接口登录获得cookie def get_token_cookie(): test = SSO_EXAMPLE() token = test.get_session.json()['token'] cookie = test.get_session.cookies return token, ......
selenium 接口 页面 cookie api

Selenium4+python被单独定义<div>的动态输入框和二级下拉框要怎么定位?

今天在做练习题的时候,发现几个问题捣鼓了好久,写下这篇来记录 问题一: 有层级的复选框无法定位到二级目录 对于这种拥有二级框的选项无法定位,也不是<select>属性. 我们查看下HTML,发现它是被单独封装在body内拥有动态属性的独立<div>,当窗口点击的时候才会触发. 解决: driver. ......
Selenium4 Selenium 动态 python div

selenium用js删除元素后,在进行定位

一个自动化项目,里面有200多个相同元素,着200多个元素,就文本不同。我就想着用文本定位就好了,但是Xpath没有办法定位到下面的元素。这是下面所遇到的问题: 我就用了 //*[contains(text(),'金湾分公司')] 去定位,但这么写没办法定位到,因为前面有注解<! >(但我当时一直不 ......
selenium 元素

Selenium 3.0 + Python自动化测试框架

文档说明 Selenium是一个用于Web应用程序自动化测试的工具。Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。 Selenium测试的主要功能包括: 测试与浏览器的兼容性:测试应用程序是否能很好的工作在不同的浏览器和操作系统之上。 测试系统功能:创建回归测试,检验软件功能和用 ......
框架 Selenium Python 3.0

爬虫-Scrapy框架(一)-工具

Scrapy框架 一、前言 1、介绍 前面我们学习了基础的爬虫实现方法和selenium以及数据库,那么接下来会我们学习一个上场率非常高的爬虫框架:scrapy 2、内容 scrapy的基础概念和工作流程 scrapy入门使用 二、scrapy的概念和流程 学习目标: 了解 scrapy的概念 掌握 ......
爬虫 框架 工具 Scrapy

scrapy解析数据、配置文件、整站爬取cnblogs=》爬取详情=》数据传递、持久化、爬虫中间件和下载中间件、scrapy继承selenium、源码去重规则(布隆过滤器)、分布式爬虫

scrapy解析数据 ##### 运行爬虫 scrapy crawl cnblogs ##### 可以项目目录下写个main.py from scrapy.cmdline import execute execute(['scrapy','crawl','cnblogs','--nolog']) # ......
爬虫 中间件 数据 scrapy 分布式

selenium实现UI自动化

selenium实现UI自动化 Selenium是一个用于自动化Web浏览器操作的开源工具,广泛用于测试Web应用程序、执行自动化任务和进行Web数据抓取。以下是Selenium的一些基础知识: Selenium组件: Selenium WebDriver:用于模拟用户与Web页面的交互,支持多种浏 ......
selenium

selenium报错result.webdriverValue.value

1. 示例代码 from selenium import webdriver driver = webdriver.Chrome() driver.get('http://124.223.30.31:xxx/forum.php') driver.find_element('id','ls_usern ......
webdriverValue selenium result value

Python selenium Chrome正在受到自动软件的控制 disable-infobars无效 的解决方法

问题解决 前两天更新了google浏览器版本,今天运行以前的脚本,发现options一个参数的配置不生效了。 运行了几次都发现该参数没有生效,也检查了自己的代码参数,没有写错,于是就有了这一波“网中寻求答案”的操作。 苦寻不易,还真就找到了答案,详细可参见该地址的答案:https://help.ap ......