数据 爬虫 二手房python
python自动化之unittest
一、官方文档： https://docs.python.org/zh-cn/3/library/unittest.html 二、unittest使用 unittest 使用规范 需要导入unittest包 测试类必须继承unittest.TestCase类 测试方法必须要以test开头 测试用例名称 ......
node_exporter是怎么获得数据的
exporter分为两类：独立 和 集成到应用，集成到应用的方式侵犯业务逻辑代码 独立式数据流： [目标系统] ->(采集监控数据、规范数据格式) [exporter] ->(http轮询获取数据) [Prometheus] 常见的exporter数据采集方式： 1）文件方式：例如node expo ......
图数据库驱动的基础设施运维实操
本文系图技术在大型、复杂基础设施之中 SRE/DevOps 的实践参考，并以 OpenStack 系统之上的图数据库增强的运维案例为例，揭示图数据库、图算法在智能运维上的应用。 ......
Python自动化框架之unittest
一、官方文档： https://docs.python.org/zh-cn/3/library/unittest.html 二、unittest使用 unittest 使用规范 需要导入unittest包 测试类必须继承unittest.TestCase类 测试方法必须要以test开头 测试用例名称 ......
mall--订单模块数据库表解析
本文主要对购物车功能相关表进行解析，介绍从商品加入购物车到下单的整个流程，涉及购物车优惠计算流程、确认单生成流程、下单流程及取消订单流程。 购物车表 用于存储购物车中每个商品信息，可用于计算商品优惠金额。 create table oms_cart_item ( id bigint not null ......
python一招完美搞定Chromedriver的自动更新问题
from webdriver_manager.core.utils import get_browser_version_from_os from webdriver_manager.chrome import ChromeDriverManager import requests, re, tim ......
python flashtext字符串快速替换，自然语言处理加速
在自然语言处理当中，经常对数据集进行一些数据字符的替换，表情的替换，以便在tokenizer的时候不被识别成[unk],造成信息的缺失 常规方法使用python自带的replace方法实现，但数据量很大时，效率显得低了 比如下面的代码，处理60000条数据需要3+小时 from tqdm.noteb ......
pymysql操作数据库入门
1. python操作数据库 pymysql PyMSQL是一个纯的python的MySQL客户端。 pip install PyMySQL 使用步骤 创建连接(修高速公路) 创建游标(运输车) 执行sql(提货单) 获取结果(卸货) 关闭游标(车退掉) 关闭连接(路也断掉) import pymy ......
爬虫问题报错总结
报错 selenium.common.exceptions.ElementNotInteractableException: Message: element not interactable 可能是代码中没有全屏，元素没有加载全 baiduweb = webdriver.Chrome(servic ......
Python常见面试题017: Python中是否可以获取类的所有实例
017. Python中是否可以获取类的所有实例 转载请注明出处，https://www.cnblogs.com/wuxianfeng023 出处 https://docs.python.org/zh-cn/3.9/faq/programming.html#faq-multidimensional- ......
python 1970年以前 字符串转换时间戳
代码1 from datetime import datetime result = '1970-01-01 07:00:00' time_1 = '1966-07-17 06:03:00' if time_1 > result: array = time.strptime(time_1, "%Y- ......
python关于*args所能接收的参数、关于**kwargs所接收的参数详解
1 #!/usr/bin/env python 2 # -*- coding:utf8 -*- 3 # python-day32-20170110: 4 5 6 # 关于*args所能接收的参数 7 8 # 这种接收的是位置参数，可变长 9 def func1(*args): 10 print(ar ......
搭建rabbix监控Redis数据库
服务端节点：192.168.30.100 客户端节点：192.168.30.110 部署 zabbix 服务端 systemctl disable --now firewalldsetenforce 0hostnamectl set-hostname zbx-server //获取 zabbix 的 ......
kali linux 下安装vim插件完成python代码tab补全和代码高亮
使用git命令下载代码高亮插件 git clone https://github.com/vim-python/python-syntax.git -c http.proxy=http://127.0.0.1:7890注：http.proxy=http://127.0.0.1:port 为终端代理 ......
ubuntu 使用xshell5连接跳板机，出现问题： “服务器发送了一个意外的数据包”received:3,expected:20
xshell5访问报错，“服务器发送了一个意外的数据包。received:3,expected:20” 1、排除了网络、防火墙等因素 2、查看sshd服务状态： 3、在/etc/ssh/sshd_config配置文件最后面添加下面一行： KexAlgorithms curve25519-sha256 ......
python get请求抓取网页
import requests url = 'https://www.douban.com/search?' # req = requests.get(url) headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) ......
PyQuery数据解析
PyQuery数据解析 1、导入 from pyquery import PyQuery 2、创建PyQuery对象 p = PyQuery("页面源代码") 3、定位 # 用法 a = p("css选择器") a = p("a") # 选择a标签 a = p("li")("a") # 选择li下的 ......
用 Windows 自带刻录软件刻录数据到光盘
1、工具 刻录光驱 空白光盘 2、在电脑上连接光驱并将空白光盘放入光驱 3、在“此电脑”下找到“DVD RW 驱动器”，右键“打开” 4、选择“用于 CD/DVD 播放机”，然后下一步 5、将需要刻录的数据拖拽到“DVD RW 驱动器” 6、右键选择“刻录到光盘”，然后下一步开始刻录数据，刻录完成后 ......
Python 环境迁移
平时用python环境会装一堆依赖，也包括自己的模块，要迁移到陌生环境，得好好处理才行。 下面介绍个方法，实践过还可以： 总结下步骤： miniconda或conda安装一个python环境，python版本最好和后面新环境一样。 conda create -n sz python=3.6.8 在该 ......
python+运维+gpt
python+运维+gpt python的基础语言系统偏简单 较为复杂的代码大多来自第三方库impot的使用，短期内是可以熟悉并可以编写一些较为简单的基础性短篇代码、脚本：excel表格，日志收集脚本，定时任务启动的脚本等等 加上pycharm，vscode等的代码编写器的调试运行，可以通过借鉴等等 ......
Sql Server 连接读取access数据库
IF EXISTS (SELECT srv.name FROM sys.servers srv WHERE srv.server_id != 0 AND srv.name = N'ACCESSTEST') exec sp_dropserver 'ACCESSTEST', 'droplogins'Go ......
C#请求访问HTTP+JSON数据的解析
一、前言最近工作客户需要一个HTTP的Mes需求，所以自己去学习了C#请求HTTP的方法以及JSON数据的解析方法，总结出了点经验，以便后续自己找起来方便一点，故在此写一篇文章。 二、准备工作下面我用一个聚合数据提供的天气预报API接口来阐述请求HTTP和JSON数据解析的功能； 先看API文档这么 ......
python yeah 邮箱发邮件
设置 先理一下常见的电子邮件协议： SMTP、POP、IMAP 都遵循TCP/IP协议规范。至于Exchange是邮件服务器，不是收邮件和发邮件的协议，不要混淆概念，一般情况下不用，因为它是微软的产品。 SMTP：即简单邮件传输协议,它是一组用于由源地址到目的地址传送邮件的规则，由它来控制信件的中转 ......
python3 **解包
>>> d1 = {'name': 'apple'} >>> d2 = {'price': 10} # d1、d2 原始值不会受影响 >>> {**d1, **d2} {'name': 'apple', 'price': 10} >>> [1, 2, *range（3）] [1, 2, 0, 1, ......
开发手记-前端发送请求返回数据为空
问题描述 发送请求获取到数据并传递给组件，但是组件第一次获取到的数据为空导致报错 猜测可能的原因 react有一个机制会导致两次渲染 axios异步请求，在没有去的结果前就返回 解决组件首次渲染时，数据还未到达，导致错误的情况 这边又分两种情况 组件自己发送请求获取数据 可以在组件中使用 useSt ......
Visual Studio C盘数据迁移，解决C盘空间不足的问题
迁移原理： 将Visual Studio比较占用磁盘空间的 “C:\Program Files (x86)\Microsoft SDKs\” 目录和 “C:\Program Files (x86)\Windows Kits\” 目录移动到D盘， 然后通过mklink命令建立C盘和D盘的软连接 然后在 ......
linux下使用pyinstaller打包python脚本
最近给运维写一个系统维护的python脚本，但是被告知生产环境有很多服务器没有安装python解释器，于是在网上搜索多pyinstaller解决方案，本文简单记录之。 下载pyinstaller。 最新的pyinstaller版本为2.0版本，官方网站http://www.pyinstaller.o ......
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图 1、前言 我们之前定义视图，数据源都是来源于数据库，从数据库中获取数据，然后序列化。那么，如果数据源不来自于数据库，而是来自于其他途径，比如requests请求，这时候，序列化类就用不上ModelSeri ......
APISIX 是怎么保护用户的敏感数据不被泄露的？
本文以 APISIX 作为例子，为大家介绍了如何借助 Global Data Encryption 功能来保护敏感数据，确保不会有任何敏感数据进行明文存储，这样即使 etcd 中所有存储的数据都被盗取，也不会造成敏感数据泄露，从而有效提升了 APISIX 的安全性。 作者刘维，API7.ai 技术工 ......