笔记python

Python爬虫之数据写入

Python爬虫实现爬取网站是如何进行数据写入保存的?今天我将利用我所学的知识把写入数据的一些代码教程供大家参考。 Python爬虫之数据写入 #写入到Excel import xlsxwriter #创建文件,并添加一个工作表 workbook=xlsxwriter.Workbook('demo. ......
爬虫 数据 Python

opencv-python 4.9.3. 轮廓属性

1. Aspect Ratio(长宽比) 它是对象的边界矩形的宽度与高度的比。 $$ Aspect\ Ratio= \frac{Width}{Height} $$ x,y,w,h = cv.boundingRect(cnt) aspect_ratio = float(w)/h 2. Extent(大 ......
opencv-python 轮廓 属性 opencv python

python+playwright 学习-44 过登录页面的滑块拼图验证码

前言 有些登录页面经常会遇到滑块验证码,滑块的操作思路基本都差不多,先确定缺口的位置,再滑动过去。 一般在滑动过去的时候,会有人机识别机制,有时候你准确的滑动位置了,但不一定会解锁成功。 滑块示例 以下滑块为例 需先计算出滑块的缺口位置,也就是我们需要滑动的距离 计算缺口位置 计算缺口位置的方法,网 ......
playwright 页面 python 44

css笔记

3.CSS样式 css,专门用来“美化”标签。 基础CSS,写简单页面 & 看懂 & 改。 模块,调整和修改。 3.1 快速了解 <img src="..." style="height:100px" /> <div style="color:red;">中国联通</div> 3.2 CSS应用方式 ......
笔记 css

html笔记

1.1 编码(head) <meta charset="UTF-8"> 1.2 title(head) <head> <meta charset="UTF-8"> <title>我的联通</title> </head> 1.3 标题 <!DOCTYPE html> <html lang="en"> ......
笔记 html

Python定时执行网站爬虫

今天我们将通过使用Python,SQLite数据库与crontab工具将爬虫程序部署到专用的服务器上并且实现定时爬取存储的一些数据。 编写爬虫代码 编写一个爬虫程序,使用requests与beautifulsoup4包爬取和解析相关的资料,再利用pandas包将解析后的展示出来。 import da ......
爬虫 Python 网站

Notepad++运行Python

按下F5或运行->运行,输入命令 cmd /k python "$(FULL_CURRENT_PATH)" & PAUSE & EXIT pythonw -m idlelib -r $(FULL_CURRENT_PATH) 保存,设置快捷键。 之后每一次需要运行python脚本的时候,只需要按下所设 ......
Notepad Python

笔记本电脑usb口不断的中断又连接

@HP-ZBook-15u-G5 Distributor ID: Ubuntu Description: Ubuntu 20.04.6 LTS Release: 20.04 Codename: focal 这台电脑有两个usb口,左侧的插入手机或者U盘,会频繁的自动断开然后重连。感觉不是接触的问题, ......
不断 笔记本 笔记 电脑 usb

python生成随机四位数和AttributeError: module 'random' has no attribute 'sample'

python生成随机四位数和AttributeError: module 'random' has no attribute 'sample' ## AttributeError: module 'random' has no attribute 'sample' ##解决方法:##原来是因为命名. ......
39 位数 AttributeError attribute python

python实现基于RPC协议的接口自动化测试

每天进步一点点,关注我们哦,每天分享测试技术文章 本文章出自【码同学软件测试】 码同学公众号:自动化软件测试,领取资料可加:Matongxue_10 码同学抖音号:小码哥聊软件测试 01什么是RPC RPC(Remote Procedure Call)远程过程调用协议是一个用于建立适当框架的协议。从 ......
接口 python RPC

读SQL进阶教程笔记06_外连接

1. SQL的弱点 1.1. SQL语句的执行结果转换为想要的格式 1.1.1. 格式转换 1.1.2. SQL语言本来就不是为了这个目的而出现的 1.1.3. SQL终究也只是主要用于查询数据的语言而已 1.2. 生成报表的功能 1.2.1. 窗口函数 1.3. SQL不是用来生成报表的语言,所以 ......
进阶教程 笔记 教程 SQL 06

如何使用Python爬取数据

步骤 1、安装相关库 requests和bs4这两个包需要我们去把他们下载下来: 2、获取爬虫所需的header和cookie 可以随便打开一个网页,然后按下F12,进入js的语言设计部分,然后点击里面的网络(也就是NetWork部分),之后按下Ctrl+C,进行刷新; 若是刷新之后,出现文件信息, ......
数据 Python

深入理解 python 虚拟机:令人拍案叫绝的字节码设计

在本篇文章当中主要给大家介绍 cpython 虚拟机对于字节码的设计以及在调试过程当中一个比较重要的字段 co_lnotab 的设计原理! ......
拍案叫绝 字节 python

python数据分析与挖掘实战第十一章

# 在浏览1次的前提下, 得到的网页被浏览的总次数 fullURL_count = pd.DataFrame(real_one.groupby("fullURL")["fullURL"].count()) fullURL_count.columns = ["count"] fullURL_count ......
数据分析 实战 数据 python

《最后的礼物》——读书笔记

2023.3.28🌥️ 摘要: 一天 摘抄: ①人性的百态,只需浅尝辄止地揣摩一下也就足够了,真的足够了 ②她担心自己一旦敞开心扉,只会引来一阵排山倒海般空洞的同情 P1-P72 2023.3.29——4.1🌞 摘要: 搬家 逃跑 摘抄: ①他们是无根的浮萍,应付不了这个世界,于是孤独地在一起 ......
礼物 笔记

Python配置文件管理之ini和yaml文件读取

当我们设计软件时,我们通常会花费大量精力来编写高质量的代码。但这往往还不够,一个好的软件还应该考虑其整个系统,如测试、部署、网络等。其中最重要的一个方面是配置管理。 良好的配置管理应允许在任何环境中执行软件而不更改代码。最常见的配置包括数据库认证配置、部署服务器的主机名、动态参数等。在本文中,我想与 ......
文件 Python yaml ini

20230402-Python学习里程碑-day1

Python基础-变量与数据类型 4月2 安装python 注意: 1、勾选 ADD python to path (可以避免手动添加Path路径) 2、选择安装路径 (可以避免后续使用Pycharm时,配置解析器路径) 安装Pycharm 选择解析器: 默认安装完后,创建一个工程项目,创建xxx. ......
里程碑 20230402 Python day1 day

Python面试题究极篇01

Python面试题第一章 深浅拷贝是什么 浅拷贝和深拷贝: 浅拷贝是在内存创建一块新的内存地址,创建一个新的对象,但是里面的元素是原对象中各个子对象的引用 深拷贝是在内存创建一块新的内存地址,创建一个新的对象,并将原对象中的元素,以递归的方式,通过创建新的子对象拷贝到新对象中。 因此,新对象和老对象 ......
Python

python电子商务网站用户行为分析

1 import os 2 import pandas as pd 3 4 5 # 修改工作路径到指定文件夹 6 os.chdir("C:\Users\86184\Desktop\文件集\data") 7 8 # 第一种连接方式 9 #from sqlalchemy import create_en ......

Python ORM Pony 常用操作(增删改查)

Pony是一个高级的对象关系映射器ORM框架。Pony它能够使用Python生成器表达式和lambdas向数据库编写查询。Pony分析表达式的抽象语法树,并将其转换为SQL查询。支持SQLite, MySQL, PostgreSQL和Oracle等数据库,本文主要介绍Python ORM Pony中 ......
常用 Python Pony ORM

C#复习笔记-委托

委托是一种引用类型,委托定义了了一类可以被委托实例调用的方法。它定义了方法的返回值类型和参数类型。定义了一个名为FeedBack的委托,返回一个int类型的值,带有一个int类型的参数。可以将任何类型或者结构中与委托类型匹配的方法传递给委托,可以是静态方法也可以是实例方法。如下: FeedBack ......
笔记

python - 邮件发送

因为公网ip是动态的,想做一个在ip发生改变后邮件提醒 1. 首先需要开启smtp服务 开启后复制授权密码 2. 邮件发送 import smtplib from email.mime.text import MIMEText From = 'ZZZZZZZZZZZZZZZZ@163.com' # ......
邮件 python

Django笔记十四之统计总数、最新纪录和空值判断等功能

本篇笔记将介绍一些 Django 查询中统计总数、最新纪录和空值判断等功能。 count in_bulk latest、earliest first、last exists contains、icontains gt、gte、lt、lte startswith、istartswith isnull ......
总数 纪录 功能 笔记 Django

stm32定时器笔记

参考资料: STM32-定时器详解 STM32F103C8T6的学习(5)——定时器 TM32定时器之预分频器详解 stm32之TIM-基本定时器应用实例(详细) STM32 TIM 定时时间的计算 《STM32单片机应用基础与项目实践》 单片机具有一些外设,即外围功能模块。这些外设可以通过IO,S ......
定时器 笔记 stm 32

C++学习笔记

char和string的区别 字符串string:C++ string详解,C++字符串详解 (biancheng.net) string是字符串类型,是在C的基础上对字符数组做封装,是一个类,有自己的函数,存的是一个完整的字符串,确实是由字符组成的,但不能认为里面是一个个char数据类型组成的。因 ......
笔记

Java学习笔记14

1.Arrays类 ​ Arrays类包含用于操作数组的各种方法(如排序和搜索)。该类没有构造函数,直接使用类名.方法名()的方法调用需要的方法。 常用方法 | 方法 | 作用 | | | | | public static String toString(数组) | 把数组拼接成一个字符串 | | ......
笔记 Java

【Python】函数传参的方式

学习笔记//20230402 edit 1.传参类型 值传递 引用传递 就像C++的参数传递: 值传递时值把实参的值传递给function, function 内对形参的修改不会影响实参; 引用传递时,实参实际上传入了其地址。function内对形参的修改直接影响实参; 但是Python 跟C++ ......
函数 方式 Python

Python

1.python3中格式化字符串的写法 在3.6以前的版本中, 可以这样用, 也就是利用百分号 print ("我叫 %s 今年 %d 岁!" % ('小明', 10)) 2.在3.6之后的版本中, 可以利用f-string name = "123123" print(f'hello {name}' ......
Python

在Android应用中通过Chaquopy使用Python

在Android应用中通过Chaquopy使用Python [译] 通过Python脚本和包为Android应用带来更多的功能 翻译自https://proandroiddev.com/chaquopy-using-python-in-android-apps-dd5177c9ab6b 欢迎通过我的 ......
Chaquopy Android Python

Day 21 21.2 数据库之Python操作redis

Python操作redis (1)连接redis # 方式1 import redis r = redis.Redis(host='127.0.0.1', port=6379) r.set('foo', 'Bar') print(r.get('foo')) # 方式2 import redis po ......
数据库 数据 Python redis 21