headers消息python
python 在windows下open打开文件默认编码
open(self.data_path):python在用open打开文件时，如果默认不指定编码 encoding="UTF-8" 则会用windows默认的编码，一般为GBK，有的开源代码并未指定编码，但是UTF8的文件，全局修改一下，设置windows环境变量：PYTHONUTF8=1，参考：h ......
python计算气象干旱综合指数MCI
前面各指标的算法在我的博客中已经有介绍，下面开始计算各指标的求和情况 原始数据： #!usr/bin/env python # -*- coding:utf-8 -*- """ @author: Suyue @file: calculateMCI.py @time: 2023/08/24 @desc ......
Visual Studio Code 修改终端执行python脚本路径的办法
正常安装完VS Code执行python都是默认在python的安装目录。 修改terminal执行的路径在当前文件夹路径； 搜索 python.terminal.executeInFileDir 勾选即可。 ......
Python数据结构：哈希表
哈希 散列（哈希）是电脑科学中一种对资料的处理方法，通过某种特定的函数/算法（称为散列函数/算法）将要检索的项与用来检索的索引（称为散列，或者散列值）关联起来，生成一种便于搜索的数据结构（称为散列表）。 哈希表是什么 哈希表（散列表）是根据键（Key）直接访问内存存储位置的数据结构。根据键（Key） ......
python中将Windows路径转换为Linux路径
背景：项目中由于互相调用或迁移，不方便将文件路径写死，所以采用os模块灵活获取，但是Windows环境通过os模块获取的绝对路径斜杠是反的，代码执行会报错，因此，需要将格式转换一下。 需要用到的模块：os模块，pathlib模块 示例： import os from pathlib import P ......
python 自动邮件发送 报错smtplib.SMTPServerDisconnected: Connection unexpectedly closed
import smtplib from email.mime.text import MIMEText from email.message import EmailMessage #email = EmailMessage() ## Creating a object for EmailMessa ......
Windows安装Python
官网地址 一、安装 进入官网后，点击Downloads下的Windows 然后选择合适自己的版本，这里以Python3.11.4为例，下载Windows install(64-bit)的下载器 然后勾选Add Python.exe to PATH 然后点击Customize installation ......
【Python】pandas操作, 取最大值, 最小值, 平均值, 生成 空值, 多个 series合并, 替换 缺失值, 数据保留2位小数
#### 1. 取最大值, 最小值, 平均值 ```python df.max() df.iloc[:, 1:].max() df.min() df.mean() # 输出 index value ``` #### 2. 生成 空值, 带index的 series ```python pd.Seri ......
【Python爬虫】使用代理ip进行网站爬取
使用代理IP进行网站爬取可以有效地隐藏你的真实IP地址，让网站难以追踪你的访问行为。本文将介绍Python如何使用代理IP进行网站爬取的实现，包括代理IP的获取、代理IP的验证、以及如何把代理IP应用到爬虫代码中。本文大约5000字。 1. 使用代理IP的好处 在进行网站爬取时，大部分的爬虫程序都是 ......
Python——pip安装weditor失败
# 前言 python_version: 3.11.4 # 内容 ``` git clone git@github.com:alibaba/web-editor.git pip install -e web-editor ``` : with open(filepath, 'r') as file: string = file.read() string_list = string.split(" ") return len(st ......
python - H4sIA密文解密
最近再抓包时发现返回值为一个奇怪的字符串，都是由H4sIAAAA开头，例如： H4sIAAAAAAAACqtWKkotLs0pUbKqViouSSwpLVayMtBRKi3IyU9McUxJAcoCRfJKc3JAgimJJak++ekwgcy8ktSissSckMzcVLC2stSi4sz8PL9 ......
盘点一个Python自动化办公的问题——批量实现文件重命名（方法一）
大家好，我是皮皮。 ### 一、前言 前几天在Python最强王者群【维哥】问了一个`Python`自动化办公处理的问题，一起来看看吧。 大佬们，请教一个Python自动化办公的问题，我有一个名为data的文件夹，下面有这4个Excel文件。然后还有一个原始数据.xlsx表格，里边有A、B两列，其中 ......
python3+RobotFramework验证码登录
面试了下自动化测试讲师，也面过了，就是感觉自己还没到能教学生的成都，毕竟长时间不用RobotFramework，自己也还没搞明白，也不想误人子弟，所以就没去。昨天闲着无聊正好测试环境搭建好了，就跑个流程试试。 一、验证码识别 之前做图片验证码识别有用Sikuli库，百度了下，Sikuli好像不更新了 ......
用Python制作一个PDF转Word工具(V2.1)
用Python制作一个PDF转Word工具工具：Python3.9.13，VSCode1.73.1，pdf2docx0.5.6，tkinter，Win10HomePDF文件不易编辑，想要编辑需要转成Word，但网上的工具很多要充VIP，所以今天我们就来做个PDF转Word工具。首先先安装第三方库： ......
Python高速下载 、git高速下载、PyCharm高速下载
git https://pc.qq.com/detail/13/detail_22693.html https://webcdn.m.qq.com/spcmgr/download/Git-2.42.0-64-bit.exe PyCharm https://pc.qq.com/detail/12/de ......
Python基础
Python是解释型语言 ### 数据类型和变量 ~~~ 整数 浮点数 字符串 布尔值 一个布尔值只有True、False两种值 布尔值可以用and、or和not运算 （=java中的& || !） 空值是Python里一个特殊的值，用None表示 列表、字典等多种数据类型，还允许创建自定义数据类型 ......
消息队列 & RabbitMQ
消息队列 & RabbitMQ 使用总结 1.消息队列 定义：message queue 是消息传递过程中一种存储数据的结构。 2.特点：先进先出，可以设置优先级用于大客户优先发货，持久化，消息确认，延时队列用于订单30分钟未支付取消。 3.作用：应用解耦，肖峰填谷，异步提高响应速度 4.Rabbi ......
centos 7上，如何升级python到最新的版本？
在centos 7上yum安装出来的，python版本是3.6.8 [root@centos7 ~]# python3 --version Python 3.6.8 想要升级到最新的版本，如何操作？ 本文介绍通过源码的方式，升级python到最新的版本。 1、下载python最新的源码包 登录下面的 ......
Python相关
#### python-内置函数 内置函数是python预先定义的函数，这些函数可以提高我们的编码效率。常用的比如map，他可以传两个参数，分别是函数和指定的序列，会根据你提供的函数对指定的序列做映射，还比如zip，我们也叫拉链，就是把两个可迭代的对象打包成一个个元组。还有像hash，是获取一个对象 ......
Python-PyMySQL的一些使用注意事项
一、关于group by的使用 在部分mysql版本（5.7.xx及以上）中，若select的列中，包含了未被group by的字段，会报以下错误： ```sql [Err] 1055 - Expression #1 of ORDER BY clause is not in GROUP BY cla ......
Python-闭包函数及深入
# 一、闭包函数 ## （一）什么是闭包函数 python的装饰器是依靠闭包函数实现的。 以下为维基百科的定义： > 在一些语言中，在函数中可以（嵌套）定义另一个函数时，如果内部的函数引用了外部的函数的变量，则可能产生闭包。闭包可以用来在一个函数与一组“私有”变量之间创建关联关系。在给定函数被多次调 ......
Python-保存request请求为各种文件
文件下载相关工具 ```python import json import requests class CustomFileTools(object): def download_json_file(self, json_url, save_path): """ 下载json文件并保存 """ j ......
Python-Flask配置https证书
# 零、问题 错误：SSL Version 2 and 3 Protocol Detection # 一、说明 1、通过使用flask 框架配置https证书进行HTTPs证书配置后会被扫描到漏洞， 漏洞描述如下： ```python 远程服务接受使用SSL2.0和/或SSL3.0加密的连接。这些版 ......
python中的 “__name__”属性
在python中，每个脚本文件都会有自己的__name__属性。在单独运行一个脚本时，name属性会被赋值为 __main__，这并不是说当前脚本名字叫main，这个值表示当前脚本是主函数。 如果现在有一个test1脚本和test2脚本。单独运行test1脚本时，这个属性就会被赋值为__main__ ......
python eval函数应用
def calculator(): while True: try: expression = input("请输入表达式（输入'exit'退出）：") if expression.lower() == 'exit': break result = eval(expression) print("结 ......
python pandas多列筛选
# -*- coding: utf-8 -*- #from dao.updateMongo import * #from dao.insertMongo import * #from dao.selectMongo import * import pandas as pd #df = selectD ......
Python-大文件上传requests-toolbelt
# 一、简介 requests.post发送文件的方式是把所有文件读取内存中，再构建请求发送出去。当发送大文件时候（好几个G）就会导致内存不足OOM 默认使用的requests.post较难做到分段文件发送（大概思路：先计算原文件md5，再切分文件发送，到接收端组合再计算md5，较麻烦不推荐，可参考 ......
《流畅的python》— 列表推导与生成器表达式
列表推导是构建列表（list）的快捷方式，而生成器表达式则可以用来创建其他任何类型的序列。如果你的代码里并不经常使用它们，那么很可能你错过了许多写出可读性更好且更高效的代码的机会。 > 很多Python 程序员都把列表推导（list comprehension）简称为listcomps，生成器表达式 ......
kafka发送超大消息
kafka发送超大消息设置 最近开发一cdc框架，为了测试极端情况，需要kafka传递100万条数据过去，1个G左右，由于其他环节限制，不便进行拆包（注：测下来，大包走kafka不一定性能更好，甚至可能更低）。 测试百万以上的变更数据时，报消息超过kafka broker允许的最大值，因此需要修改如 ......