requests性能session python

Python多协程异步爬取北京市政信件

采用单线程+多协程的方式爬取 import asyncio import json import re import aiofiles import requests from letter import Letter from bs4 import BeautifulSoup import os ......
信件 市政 Python

【教程】AWD中如何通过Python批量快速管理服务器?

# 前言 很多同学都知道,我们常见的CTF赛事除了解题赛之外,还有一种赛制叫AWD赛制。在这种赛制下,我们战队会拿到一个或多个服务器。服务器的连接方式通常是SSH链接,并且可能一个战队可能会同时有多个服务器。 本期文章,我们来详细讲述一下如何使用Python绝地反击、逆风翻盘。 # 万能的Pytho ......
服务器 教程 Python AWD

python fitz模块报错RuntimeError: Directory ‘static/’ does not exist 解决方案

报错 fitz模块报错RuntimeError: Directory ‘static/’ does not exist 原因 使用Python处理PDF文档时,需要使用fitz模块。由于Python 3.8以上版本与fitz有兼容问题,会出现以下错误信息:RuntimeError: Director ......

Python全局变量

关于Python跨文件全局变量作用域的问题 可以定义一个Global_var.py将所有的全局变量放进去,在其他模块导入; 重点:在其他模块中使用import Global_var导入时,在函数内部使用Global_var. 变量名即可直接修改全局变量,无需global修饰; 但是使用from Gl ......
全局 变量 Python

CTFer成长记录——CTF之Web专题·攻防世界-Web_python_template_injection

一、题目链接 https://adworld.xctf.org.cn/challenges/list 二、解法步骤 python的flask模板注入的题思路比较固定,Jinja2模板引擎中,{{}}是变量包裹标识符。{{}}并不仅仅可以传递变量,还可以执行一些简单的表达式。 1.猜测是否存在注入:直 ......

python中的exec()、eval()以及complie()

### 1.eval函数 函数的作用: 计算指定表达式的值。也就是说它要执行的python代码只能是单个表达式(注意eval不支持任何形式的赋值操作),而不能是复杂的代码逻辑。 ```python eval(source, globals=None, locals=None, /) ``` 参数说明 ......
complie python exec eval

python多进程编程常用到的方法

python中的多线程其实并不是真正的多线程,如果想要充分地使用多核CPU资源,在python中大部分情况需要使用多进程。 python提供了非常好用的多进程包Multiprocessing,只需要定义一个函数,python会完成其它所有事情。借助这个包,可以轻松完成从单进程到并发执行的转换。 mu ......
进程 方法 python

高性能API设计

来源: https://cloud.tencent.com/developer/article/2307690 背景 设计出一个高性能的API,需要综合网络、业务、数据库的优化。一下是我在实际的开发过程中总结的优化思想和一些效率提升的技巧。 批量思想 很多的数据库操作都含有batch或者bulk的a ......
高性能 API

Python数据的深浅拷贝

一、怎么理解深浅拷贝 二、本人之前的错误理解(写到最后我会进行提示,以防某些同学跟着我之前的思路走,导致理解混乱, 怕自己理解混乱的同学可以不看这部分。) 一、深浅拷贝主要的区别是在于数据进行拷贝的时候,发生的变化 浅拷贝:创建一个新对象,然后将原始对象中的元素复制到新对象中。但是,浅拷贝只复制了元 ......
深浅 拷贝 数据 Python

猴子补丁;python中反射;http和https区别

# 猴子补丁;python中反射;http和https区别 ## 什么是猴子补丁,有什么用途 ```python - 猴子补丁(Monkey Patching)是一种在运行时动态地修改或扩展已有代码的技术。是在不修改源代码的情况下,改变代码的执行方式或增加功能。 - Python的类是可变的(mut ......
猴子 补丁 python https http

使用Locust进行接口性能测试:安装、命令参数解析与示例解读(一)

**“** Locust是一款开源的Python性能测试工具,它可以模拟大量并发用户对网站或者其他接口进行压力测试**”** 一、Locust简介与安装 1\. 使用pip安装Locust: ``` pip3 install locust ``` 2\. 通过GitHub克隆项目并安装(推荐Pyth ......
示例 接口 命令 性能 参数

使用Locust进行接口性能测试:Locust and TaskSet类详细分析(二)

**“** Locust是一款开源的Python性能测试工具,它可以模拟大量并发用户对网站或者其他接口进行压力测试**”** 一、Locust类详细说明 在Locust中,Locust类是整个负载测试工具的核心。它用于创建并发用户场景,模拟用户行为。示例: ``` from locust impor ......
Locust 接口 性能 TaskSet and

如何在python中执行另一个py文件

使用命令:os.system(‘python file_name.py’) 解释:os.system是执行当前的系统命令 1、拿windows系统举例: # 由于ipconfig/all在windows中是查看ip地址 # 所以将此命令运行在os.system中,即可查看系统的ip地址等信息 imp ......
文件 python

蓝图,flask-session,数据库连接池

## 1 蓝图 ```python # blueprint :蓝图,flask都写在一个文件中,项目这样肯定不行,分目录,分包,使用蓝图划分目录 # 不用蓝图,划分目录 -一直使用app对象,会出现循环导入问题 -项目名 static templates order_detail.html view ......

用 Python 自动创建 Markdown 表格 - 每天5分钟玩转 GPT 编程系列(4)

[TOC] ## 1. 他们居然问我要 Prompts 早几天我用 GPT-4 写了一个 Golang Worker Pool 程序,测试了一把居然性能爆表,然后“他们”就问我要完整的 prompts,想看下到底是 GPT-4 写出来的 [GoPool](https://github.com/dev ......
表格 Markdown Python GPT

python有哪几种循环语句

在Python中,常用的循环语句有以下几种: 1. for循环:用于遍历给定的序列(如列表、字符串等)或可迭代对象的元素。循环会重复执行固定次数,或者依次遍历序列中的每个元素。 示例: ```python for element in sequence: # 在这里执行循环体代码 ``` 2. wh ......
语句 python

python基础教程之python-pyppeteer模块使用汇总

一.简单代码示例 import asyncio from pyppeteer import launch async def main(): browser = await launch() page = await browser.newPage() #打开一个新页面 await page.got ......

浅谈-HttpSession session = request.getSession(false)

当使用 `request.getSession(false)` 方法时,如果当前请求没有关联的会话,则不会创建新的会话,而是返回 `null`。这意味着,如果当前客户端没有携带有效的会话标识符(如 JSESSIONID),或者会话已过期或被销毁,则 `request.getSession(false ......
HttpSession getSession session request false

Python爬虫——爬虫时如何知道是否代理ip伪装成功?

在进行爬虫时,我们可能需要使用代理IP来伪装自己的身份,以避免被网站封禁。如何判断代理IP是否伪装成功呢?本篇文章将围绕这个问题展开讲解,同时提供Python代码示例。 1. 确认代理IP地址 首先,我们需要确认代理IP地址是否正确。我们可以使用一些免费的代理IP池网站,如:站大爷、碟鸟ip、开心代 ......
爬虫 Python

在同一个ubunu系统上安装和配置两套python3.6和python3.8环境

在一个系统中使用两套python3+环境的基本要求是两者不能相互冲突,所以,我选择用系统自带的update-alternatives命令行来控制。但只控制python显然是不行的,与其配套的pip也需要管理起来才行。 我的系统自带的python版本是3.8.9,先从python官网下载一个pytho ......
python3 python 环境 系统 ubunu

什么是猴子补丁,有什么用途,什么是反射,python中如何使用反射,http和https的区别

1 什么是猴子补丁,有什么用途 ```python 猴子补丁:动态修改或扩展代码的技术,通在不修改源代码的情况下,改变代码的执行方式或增加功能 -Monkey Patching是在 运行时(run time) 动态替换属性(attributes)或方法 -Python的类是可变的(mutable), ......
猴子 补丁 用途 python https

python实现linux自动巡检及形成Excel表格

shell脚本形成.txt文件 ######################################################### #!/bin/bash 2 #获取主机名 system_hostname=$(hostname | awk '{print $1}') #获取服务器IP ......
表格 python linux Excel

【Python】numpy_科学计算的基础库

简介 Numpy中的数组的存储效率和输入输出性能均优于Python中等价的基本数据结构 Numpy是一个开源的Python的科学计算库,用于快速处理任意维度的数组。 Numpy支持常见的数组及矩阵的操作,对于同样的计算任务有着比Python更简洁的指令和更高效的算法。 Numpy使用nadarray ......
基础 科学 Python numpy

python 鼠标键盘消息

python操作鼠标键盘 使用pyautogui 或pynput 1.禁用键盘鼠标(测试未禁用笔记本触摸区域) 1 from ctypes import * 2 #禁用鼠标键盘 3 windll.user32.BlockInput(1) 4 5 #接禁鼠标键盘 6 windll.user32.Blo ......
键盘 鼠标 消息 python

一文搞懂Python读取yaml

首先看一下yaml和json文件的对比 接着看一下Python读取yaml的代码示例 import yaml data = yaml.safe_load(open("../testdata/data.yaml", encoding="utf8")) print(data) print("hero:" ......
Python yaml

Python Web UI自动化报错 :ResourceWarning: Enable tracemalloc to get the object allocation traceback

ResourceWarning资源警告解决方案 原因:在执行线性脚本完毕时,没有及时释放相应资源,导致内存堆积,从而造成内存溢出(如关闭浏览器等操作),此时,Python将会做出提醒; 在百度吸取 网络老师们的经验后实践,总结如下: 1.在进行测试前准备工作时,忽略警告信息 import warni ......

JetBrains PyCharm 2023.2 (macOS, Linux, Windows) 发布 - 面向专业开发者的 Python IDE

JetBrains PyCharm 2023.2 (macOS, Linux, Windows) 发布 - 面向专业开发者的 Python IDE 请访问原文链接:/,查看最新版。原创作品,转载请保留出处。 作者主页:[sysin.org](https://sysin.org) JetBrains ......
开发者 JetBrains PyCharm Windows 2023.2

Flask快速搭建接口-python库

Flask 是一个基于 Python 的轻量级 Web 框架,用于构建 Web 应用程序和 RESTful API。它被设计为简单、易用、灵活,并且具有良好的扩展性。Flask 是一个微型框架,提供了一些基本功能,但也允许开发者根据需要选择并添加扩展。 Flask 构成 路由(Routing):Fl ......
接口 python Flask

python爬虫学习小记——lxml板块

python爬虫学习小记——lxml板块 lxml是python的一个解析库,支持HTML和XML的解析,支持XPath解析方式,而且解析效率非常高。 XPath,全称XML Path Language,即XML路径语言,它是一门在XML文档中查找信息的语言,它最初是用来搜寻XML文档的,但是它同样 ......
爬虫 小记 板块 python lxml

Python如何开发桌面应用程序?Python基础教程,第十三讲,图形界面

当使用桌面应用程序的时候,有没有那么一瞬间,想学习一下桌面应用程序开发?行业内专业的桌面应用程序开发一般是C++,C#来做,Java开发的也有,但是比较少。本节课会介绍Python的GUI(图形用户界面)编程,用Python也可以写出漂亮的桌面程序,建议此次课程大家稍作了解不要浪费太多时间,因为没有 ......
Python 三讲 应用程序 图形 界面