requests性能session python
nginx的keepalive和keepalive_requests(性能测试TPS波动)
当使用nginx作为反向代理时，为了支持长连接，需要做到两点： 从client到nginx的连接是长连接 从nginx到server的连接是长连接 保持和client的长连接： http { keepalive_timeout 120s 120s; keepalive_requests 10000; ......
python字典的setdefault（）方法——不存在则增加键值对，存在则不变化
setdefault() 方法是Python字典（dict）类提供的一个方法，用于获取指定键的值，如果键不存在，则插入指定的默认值，并返回该值。以下是对 setdefault() 方法的详细说明： 语法： dict.setdefault(key, default) 参数说明： key：要查找和插入的 ......
python操作redis集群、redis主从+哨兵
# 主从+哨兵 ```Python from redis.sentinel import Sentinel if __name__ == '__main__': # 哨兵监听的别名，这个就是你redis配置中的名字 server_name = "mymaster" # 设置哨兵组的IP和PORT s ......
python操作elasticsearch-全文检索、拼写纠错、补全提示
1、首先安装elasticsearch包 pip install elasticsearch (一般会包含新旧版本，如果想要特定的版本，比如5.x 可以在后面加5数字) ```Python """ 1、首先安装elasticsearch包 pip install elasticsearch (一般会 ......
iis7中session丢失的解决方法小结
Windows Server 2008 +IIS +ASP.net +SQLServer2008搭建的内部WEB系统。 用户Session总是丢失，可能是IIS的不稳定性将导致Session频繁丢失。 用的是Session=SQLSEVER，即把Session保存到数据库。 解决方法： 1，在命令行 ......
python实现跨域代理服务器
- 准备环境 1. python3.7+ 2. 依赖：aiohttp - 代码实现（代理服务器，返回响应体和进行跨域处理后的headers） ``` python3.7 import aiohttp from functools import wraps from aiohttp import we ......
python包报错ImportError: urllib3 v2.0 only supports OpenSSL 1.1.1+, currently the 'ssl' module is compiled with 'OpenSSL 1.0.2k-fips 26 Jan 2017'
报错：ImportError: urllib3 v2.0 only supports OpenSSL 1.1.1+, currently the ‘ssl’ module is compiled with OpenSSL 1.1.0h 27 Mar 2018. 解决办法：Terminal窗口执行：p ......
python爬取之url管理器
class UrlManager(): #url管理器 def __init__():#设置新老url数组，分别为未爬取和已爬取 self.new_urls = set() self.old_urls = set() def add_new_url(self,url):#添加单个url if url ......
常用网站--Python
模块 - 廖雪峰的官方网站 (liaoxuefeng.com) 廖老师文档 Python3 教程 | 菜鸟教程 (runoob.com) 菜鸟教程文档 内置函数 — Python 3.11.4 文档 官方文档 Python 速查手册 - 知乎 (zhihu.com) 速查手册 中国大学MOOC(慕课 ......
python列表数据处理方法小技巧
一、列表去重 比较简单的方法就是用集合set的属性：集合中不能出现重复的元素 例如: a = [1,2,3,4,5,4,3]，例如 a1 =list(set(a)) ,则 a1 = [1,2,3,4,5] 如果同时还有个 ：b = ['a','b','c','d','e','f','g'] 和 a ......
python连接Mysql 1-01
一，下载对应python环境的 MySQL连接包 我的是python3 所以下载的是这个 (cmd)pip3 install PyMySQL二,创建py文件 编写 import pymysql # 打开数据库连接 db = pymysql.connect(host='localhost', user ......
requests
```python import requests import re url = 'https://www.baidu.com' # get 方法是发送一个 get 请求，url 是关键字参数，表示请求的地址 # response 是一个响应对象，包含了服务器返回的所有信息 headers = { ......
python：python解析器和pycharm编译器安装
python解析器下载地址：https://www.python.org/getit/ 注意事项： 1. 建议下载3.6以以上的版本， 2. 官网下载比较慢，可以自行寻找其它网站下载， 3. 建议使用.exe安装包方式下载安装 下载完成后双击运行 验证是否安装成功： pycharm编译器下载地址：h ......
python学习_循环结构(while循环和for循环)
一、什么叫循环结构？ 反复做同一件事情的情况，就要循环 python中的循环结构主要有两种: 1）while 2）for-in 二、while循环 只要条件成立，其包含的某条语句或某个语句块就会一直被执行，while循环与if语句的区别就是if语句是判断一次，条件为True就执行一次执行体，whil ......
python操作mongodb实现读写分离
## 读写分离 默认情况下，MongoClient 实例将查询发送到副本集的主要成员。 要使用副节点作为查询，以实现读写分离，我们必须更改读取首选项： 读取首选项在模块`pymongo.ReadPreference`下： - PRIMARY： 从主节点中读取（默认） - PRIMARY_PREFER ......
python操作mongodb副本集（mongodb高可用）
[https://pymongo.readthedocs.io/en/stable/examples/high_availability.html#](https://pymongo.readthedocs.io/en/stable/examples/high_availability.html#) ......
python操作mongodb基本使用
使用pymongo，具体可以参考官方文档： 语法上基本和原生mongodb是一样的，所以非常容易入手... [https://pymongo.readthedocs.io/en/stable/tutorial.html](https://pymongo.readthedocs.io/en/stabl ......
python知识点
anoldcat 博客园 首页 新随笔 联系 订阅 管理 随笔 - 66 文章 - 61 评论 - 7 阅读 - 14万 Python 知识点大全（转载） 转载自：https://github.com/kenwoodjw/python_interview_question 大佬总结得很好，本来我也想 ......
【笔记整理】requests使用代理
使用proxies参数传递代理信息 ```Python import requests if __name__ == '__main__': proxies = { # 这个字典的key不可以乱写，必须是http和https # 如果你的只有http那就只写http代理，htpps也是相同的道理。 ......
【笔记整理】使用Session会话保持
```Python import requests if __name__ == '__main__': # Session对象实现了客户端和服务器端的每次会话保持功能。 session = requests.Session() resp = session.get("http://www.baid ......
requests.exceptions.ProxyError问题解决方法
出现这个问题是因为你系统上在使用代理，然后你的代理又是规则匹配的。 [https://stackoverflow.com/questions/36906985/switch-off-proxy-in-requests-library](https://stackoverflow.com/questi ......
AnaConda 打包 python 程序为 exe
1. 打开 Anaconda Prompt 2. 查看环境并激活 conda env list ## 查看所有环境 activate env_name ## 激活对应环境 3. 进入程序所在对应windows目录 4. 打包主程序 pyinstaller -F xxxx.py ##打包程序 -F 覆 ......
【笔记整理】request模块基本使用
# 基本使用 # 发送get请求、获取响应各种请求、响应信息 ```python def fun1(): url = "http://www.baidu.com" resp = requests.get(url) print(resp) # 打印时会发现乱码 # 因为resp默认是自动推算编码的，经 ......
python使用ctypes调用gcc编译的dll之下载mingw
1、打开下载mingw的下载链接 https://sourceforge.net/projects/mingw-w64/files/或者使用镜像网站下载 http://files.1f0.de/mingw/ 2、根据自己电脑系统的版本下载相应64位或32位的mingw，红框中的包下载解压之后配置环境 ......
《最新出炉》系列入门篇-Python+Playwright自动化测试-8-上下文（Context）
1.简介 其实前边的文章中也提到过Context，只不过是 一笔带过，但是宏哥觉得在playwright中挺重要的，所以宏哥今天单独将其拎出来讲解和分享一下，希望对您有所帮助或者参考。 2.前言 Playwright为每个测试创建一个浏览器上下文，即BrowserContext，浏览器上下文相当于一 ......
centos上安装python3.8+完整依赖
1.拉取基础镜像centos7 docker pull centos:7 2.创建容器 docker run -it centos:7 /bin/bash 3.安装基础环境 yum update 1. 查看当前python版本 [root@iZwz99sau950q2nhb3pn0aZ ~]# py ......
IOS开发-实现图片缓存优化性能
在Objective-C中,可以这么实现图片的本地缓存: 1. 创建一个用于存储图片的缓存文件夹； 2. 根据图片URL构建缓存文件名； 3. 检查缓存路径是否存在,如果存在直接读取缓存图片； 4. 不存在则从网络下载图片； 5. 保存图片到缓存,以名称cacheFilename； 6. 以后再加载 ......
解决php中通过exec调用python脚本报ModuleNotFoundError错误
# 背景 出于某些原因，我们有时会在PHP中通过exec来调用Python代码，有可能是某些功能只能用Python实现（或用Python实现比较方便），有可能是出于性能考虑（Python可以执行耗时任务）。 但我们有时会发现，在控制台用命令行的方式运行python脚本一切正常，在 php 中用 `e ......
python怎么读取txt文件
##1.简单的将文件读取到字符串中 ``` f = open("data.txt","r") #设置文件对象 str = f.read() #将txt文件的所有内容读入到字符串str中 f.close() #将文件关闭 ``` ##2.按行读取整个文件 ###第一种方法 ``` f = open(" ......