selenium python web

Selenium基础:下拉框操作 06

*使用select方法 方法一:from selenium.webdriver.support.ui import Select 方法二:from selenium.webdriver.support.select import Select 选择项的选择,有3种方法: select_by_inde ......
Selenium 基础 06

Python爬虫高并发爬取数据

高效爬虫可以在较短的时间内获取更多的数据,提高数据的采集速度。这对于需要大量数据支撑的数据分析、机器学习、人工智能等任务非常重要。高效爬虫可以获取更多的原始数据,并允许更精准的数据清洗和处理。这样可以提高数据的质量和关联性,使得后续的分析和挖掘工作更加准确和有价值。 高效的爬虫在数据采集和信息获取的 ......
爬虫 数据 Python

python31 面向对象

面向过程 支持面向对象的语言中,都有两大范式: 1. 面向过程 2. 面向对象 这两大范式不是新的技术,而是一种编程思想 面向过程:核心就是过程二字,首先,然后,最后的一种固定思维方式 代码案列: 已注册为例 首先接受代码 做逻辑处理,然后验证参数 把数据写进文件里 面向过程优点:复杂问题简单化,进 ......
对象 python 31

Selenium基础:鼠标操作 05

*需要导入ActionChains类 from selenium.webdriver.common.action_chains import ActionChains 1、鼠标右击 context_click(element)方法 from selenium import webdriver #导入 ......
Selenium 鼠标 基础 05

Python工程化守则及常用的工程化工具

现代化Python项目管理 pdm 1. 安装 pip install pdm 2.初始化 pdm init 3、常用命令 pdm add requests pytest pmd remove requests pdm list black 代码格式巡检工具 1、安装 pip install bla ......
工程 守则 常用 工具 Python

用node-webkit把web应用打包成桌面应用

1.下载node-webkit:https://github.com/nwjs/nw.js =>下载完成后是个压缩包。解压即可。 =>看到nw.exe文件,双击运行一下,看是否正常 =>exe文件的图标可以用Resource Hacker,nw-builder和node-winresourcer之类 ......
node-webkit 桌面 webkit node web

《最新出炉》系列初窥篇-Python+Playwright自动化测试-4-playwright等待浅析

1.简介 在介绍selenium的时候,宏哥也介绍过等待,是因为在某些元素出现后,才可以进行操作。有时候我们自己忘记添加等待时间后,查了半天代码确定就是没有问题,奇怪的就是获取不到元素。然后搞了好久,或者经过别人的提示才恍然大悟没有添加等待时间。而playwright为了避免我们犯这么low的错误, ......
Playwright playwright Python

python操作rabbitmq

rabbitmq安装部署 RabbitMq生产者消费者模型 生产者(producter) 队列消息的产生者,复制生产消息,并将消息传入队列生产者代码: import pika import json credentials = pika.PlainCredentials('admin','admin ......
rabbitmq python

5 - Web APIs

1.1. 元素偏移量 offset 系列 1.1.1 offset 概述 offset 翻译过来就是偏移量, 我们使用 offset系列相关属性可以动态的得到该元素的位置(偏移)、大小等。 获得元素距离带有定位父元素的位置 获得元素自身的大小(宽度高度) 注意:返回的数值都不带单位 1.1.2 of ......
APIs Web

6 - Web APIs

1.1. 动画函数封装 1.1.1 缓动效果原理 缓动动画就是让元素运动速度有所变化,最常见的是让速度慢慢停下来 思路: 让盒子每次移动的距离慢慢变小,速度就会慢慢落下来。 核心算法: (目标值 - 现在的位置) / 10 做为每次移动的距离步长 停止的条件是: 让当前盒子位置等于目标位置就停止定时 ......
APIs Web

7 - Web APIs

1.1. 触屏事件 1.1.1 触屏事件概述 移动端浏览器兼容性较好,我们不需要考虑以前 JS 的兼容性问题,可以放心的使用原生 JS 书写效果,但是移动端也有自己独特的地方。比如触屏事件 touch(也称触摸事件),Android 和 IOS 都有。touch 对象代表一个触摸点。触摸点可能是一根 ......
APIs Web

Python爬虫之数据解析技术

Python爬虫需要数据解析的原因是,爬取到的网页内容通常是包含大量标签和结构的HTML或XML文档。这些文档中包含所需数据的信息,但是需要通过解析才能提取出来,以便后续的处理和分析。 以下是一些使用数据解析的原因: 数据提取:网页内容通常包含大量的无关信息和嵌套结构,数据解析可以帮助我们从中提取出 ......
爬虫 数据 Python 技术

2 - Web APIs

day02 - Web APIs 1.1. 排他操作 1.1.1 排他思想 如果有同一组元素,我们想要某一个元素实现某种样式, 需要用到循环的排他思想算法: 所有元素全部清除样式(干掉其他人) 给当前元素设置样式 (留下我自己) 注意顺序不能颠倒,首先干掉其他人,再设置自己 <button>按钮1< ......
APIs Web

3 - Web APIs

1.1. 节点操作 1.1.1 删除节点 node.removeChild() 方法从 node节点中删除一个子节点,返回删除的节点。 <button>删除</button> <ul> <li>熊大</li> <li>熊二</li> <li>光头强</li> </ul> <script> // 1. ......
APIs Web

4 - Web APIs

day04 - Web APIs 1.1. 常用的键盘事件 1.1.1 键盘事件 <script> // 常用的键盘事件 //1. keyup 按键弹起的时候触发 document.addEventListener('keyup', function() { console.log('我弹起了'); ......
APIs Web

python 大根堆

python默认的都是小根堆,实现数字的大根堆,可在堆化前把数字 乘以 -1 ,输出时 再 乘以 -1 变回原值。 比如: [5, 20, 6],堆化前用列表推导式把列表转为: [-5, -20, -6] import heapq import random data = list(range(1, ......
python

成为python爬虫工程师需要哪些知识?

爬虫(Web crawler)是一种自动化程序,用于从互联网上抓取、解析和提取网页数据。它模拟浏览器行为,通过发送HTTP请求获取网页内容,并通过解析网页源代码或DOM结构,提取所需的信息。以python爬虫为例,作为一名合格的工程师需要具备那些专业技能? Python爬虫的难度可以因个人经验和项目 ......
爬虫 工程师 知识 python 工程

pytest + yaml 框架 -41.postman 和 python代码也能录制成用例

# 前言 python代码 和postman 写的接口也能通过录制功能自动生成yaml格式用例了。 # python 代码运行后自动录制 环境准备参考前面一篇[https://www.cnblogs.com/yoyoketang/p/17495374.html](https://www.cnblog ......
框架 postman 代码 pytest python

基于k6和python进行自动化性能测试

摘要:在性能测试中,达到相应的性能指标对于一个软件来说十分重要,在本文中,将介绍一种现代化性能测试工具k6。 本文分享自华为云社区《基于k6和python进行自动化性能测试》,作者: 风做了云的梦。 当我们开发完成一个应用程序时,往往需要对其进行性能测试,以帮助我们更好的优化程序以及发现程序中的一些 ......
性能 python

Python生成简短的唯一ID

GUID生成的ID太长, 不方便使用, 我想生成一个短的, 最好不要有特殊字符, 另外, 只在本机使用, 不跨网络, 所以我使用当前时间作为生成的ID, 为了使生成的ID更短一些, 对它进行重新编码; 另外, 为防止短时间内有重复的ID, 记录上次生成的ID并进行重复判断. 代码如下: ```pyt ......
Python

python测试

import os import shutil def check_dir_exist(dir) : # 如果目标路径不存在原文件夹的话就创建 if not os.path.exists(dir): os.makedirs(dir) def remove_dir(dir) : # 如果目标路径存在原 ......
python

深入Python网络编程:从基础到实践

**Python,作为一种被广泛使用的高级编程语言,拥有许多优势,其中之一就是它的网络编程能力。Python的强大网络库如socket, requests, urllib, asyncio,等等,让它在网络编程中表现优秀。本文将深入探讨Python在网络编程中的应用,包括了基础的socket编程,到 ......
网络编程 基础 Python 网络

Python的异步

# Simple Demo ## 错误示范 code: ~~~ import asyncio async def test(id): print(id,"开始执行") await asyncio.sleep(5) print(id,"执行结束") asyncio.run(test(1)) async ......
Python

Python3 configparser读取含有中文配置config.ini(Windows)显示乱码的解决方法

最近在配置文件config.ini有中文输出时,python 3 打印出来显示乱码。初步判断是由于编码问题。在 Python 3 中虽有encoding 参数,但是对于有BOM(如Windows下用记事本指定为utf-8)的文件,需要使用 utf-8-sig, 使用utf-8没办法。 配置文件 co ......
乱码 configparser Python3 Windows 方法

笔记本输入python无提示、也无报错(不提示“不是内部或外部命令,也不是可运行的程序”)

最近在安装 Python 的时候发生了很奇怪的现象(安装前):从命令行执行 python 并不会输出python版本信息,似乎也没有其他反应,也无报错(不提示“不是内部或外部命令,也不是可运行的程序”),再次输入命令 where python显示C:\Users\quxw\AppData\Local ......
命令 笔记本 笔记 程序 python

requests Python中最好用的网络请求工具 基础速记+最佳实践

requests 模块是写python脚本使用频率最高的模块之一。很多人写python第一个使用的模块就是requests,因为它可以做网络爬虫。不仅写爬虫方便,在日常的开发中更是少不了requests的使用。如调用后端接口,上传文件,查询数据库等。本篇详细介绍requests的使用。 ......
requests 最好 基础 工具 Python

Python 定义分数类实现其基本运算

今天测试了一下分数类,并实现了基本运算,参考如下 class fraction(): def __init__(self, num, den): ''' 初始化一个分数 :param num: 分子 :param den: 分母 ''' try: self.num = int(str(num)) s ......
分数 Python

【爬虫案例】用Python爬大麦网任意城市的近期演出活动!

[toc] # 一、爬取目标 大家好,我是[@马哥python说](https://www.zhihu.com/people/13273183132) ,一枚10年程序猿。 今天分享一期python爬虫案例,爬取目标是大麦网近期演出活动:[- 大麦搜索](https://search.damai.c ......
爬虫 大麦 案例 Python 城市

安装python虚拟环境与适用

在Python中,虚拟环境能解决不同的项目,需要的python环境不同的问题。 可以解决包管理问题。 下面介绍了一种创建虚拟环境的方法: 一:使用python自带的方法创建虚拟环境。 首先在C或D盘根目录下创建一个文件夹: c:\ruanjian\envpython_person 然后在创建的文件夹 ......
环境 python

python永久更新配置镜像源

1、永久更新镜像源,将国内镜像源添加入pip.ini 【一般加阿里云源就可以了】 添加阿里云源 pip config set global.index-url https://mirrors.aliyun.com/pypi/simple 清华源: pip config set global.inde ......
镜像 python