数据 爬虫 二手房python
使用Excel来整理数据
日常工作中经常会遇到“导数据”的需求，大多数时候，丢过来的Excel数据都是不符合数据库要求的，没办法直接通过程序去导入，即使是按照程序要求的模板，导入过程也可能因为各种格式问题导入失败，而往往失败后的调试跟踪要花大量时间和精力。而导入这项工作很多时候又恰恰只需要做一次就够了，如何能让“导数据”尽可 ......
python+playwright 学习-59 设置默认允许麦克风和摄像头等权限
前言 有些场景在使用的时候，会弹出一些权限框，比如麦克风和摄像头等，通过监听alert 是没法捕获的。 正确做法是给浏览器设置默认允许麦克风和摄像头等权限，不让弹窗出来。 权限框 弹窗示例 这种弹窗是权限窗，不是alert 解决办法 context 有个 grant_permissions 方法可以 ......
在线设计Tkinter界面，生成Python代码
设计地址：https://www.pytk.net/tkinter-helper/? 运行演示 教程地址：https://www.pytk.net/tkinter.html 常用演示 """ 本代码由[Tkinter布局助手]生成 当前版本:3.2.4 官网:https://www.pytk.net ......
关于sap-hana-数据库-在pacemaker集群中迁移主控节点-master节点
环境介绍，hana数据库的两个节点：azphxxxdb01 azphxxxdb02 目前master位于azphxxxdb02，现在需要切换回azphxxxdb01 需要确保 Pacemaker 没有任何失败的操作（通过 pcs 状态检查）、没有任何意外的位置约束（例如迁移测试的遗留内容）， 并且 ......
数据库_duckdb_本地访问远程数据_ aws s3
Extensions 扩展 Full Text Search HTTPFS JSON Postgres Scanner SQLite Scanner python3 -c "import duckdb; duckdb.query('INSTALL httpfs;');" Loading an ext ......
Python-集合的基本操作（set）
1. 前言 python中的集合和数学里的类似也是用于存放不重复的元素，它有可变集合（set）和不可变集合（feozenset）两种，集合的所有元素都放在一对大括号"{}"里（列表是[]、元组是()、字典是{}），集合最好的应用就是去重，因为集合中的每一个元素都是唯一的。 2. 集合的创建 2.1. ......
python 连接数据库
使用pymysql连接数据库 import pymysql conn = pymysql.connect( host="10.00.0.00", port=31379, user="root", password="123456", database="acc_test" ) # 模拟从数据库获取单 ......
python-docx设置docx文档表格样式
使用python-docx，设置docx文档第4行表格第3行第2列单元格的字体对齐方式、加粗 from docx import Document from docx.enum.text import WD_ALIGN_PARAGRAPH # 加载Word文档 doc = Document('exam ......
Linux-Centos 用crontab定时运行python脚本详细步骤
服务器总是要定时运行某个程序，而我在解决这个问题的时候遇到很多困难， 特此记录下来。 1.编辑crontab配置 crontab -e 服务器一般会安装好crontab，若没有安装请按命令安装 yum install crontabs 2.编写配置文件 当打开配置文件的时候，我们可以看到类似的配置代 ......
jmeter使用之请求体包含多个数据
在使用jmeter做压测时，除了增加并发数，还可能在请求体中增加多个字段相同的list。如图： 如果是几百条可以复制粘贴，但是几千上万条复制粘贴就比较费时费力了。另外可能这些数据并不是完全相同，可能还需要并发执行。 一.数据容器 当请求体是由多个字段相同的list组成时，可以把这些list存放在tx ......
Python-字典的基本操作
1．字典的创建 1.1、直接赋值创建字典 语法格式：变量名={键1：值1，键2：值2,...} info={'第一个':0,"第二个":1,"第三个":2} print(info) 1.2、使用内置函数dict()创建字典 内置函数dict()可通过其他字典、“（键，值）”对的序列或关键字参数来创建 ......
数据结构之图
图 定义 无向图、有向图 子图、入度、出度 连通图、强连通图 总结： 连通无向图的最小生成树中，顶点数 = 边数 + 1 强连通有向图的 边数 至少等于 顶点数。 AOV网 AOV网（顶点表示活动的网）顶点表示活动,弧表示活动发生优先关系的有向图。在AOV网中,通过进行拓扑排序可以得到一个有序序列或 ......
如何恢复回收站清除的数据
打开注册表，按下Win+R，输入regedit 打开之后，一次打开如下注册表内的文件夹 HEKEY——LOCAL——MACHIME/SOFTWARE/microsoft/WINDOWS/ CURRENTVERSION/EXPLORER/DESKTOP/NAMESPACE 进入这个位置后，在左边空白处 ......
Python MatplotlibDeprecationWarning Matplotlib 3.6 and will be removed two minor releases later
在Pycharm中使用Matplotlib中的pyplot时，运行代码报错： MatplotlibDeprecationWarning: Support for FigureCanvases without a required_interactive_framework attribute was ......
【Python】socket_实现本地服务器及客户端交互
一、Http Server ： 命令行 http服务器 cmd 窗口命令 python -m http.server 端口号 # Python3 默认8000，可指定（如8080） python -m SimpleHTTPServer 端口号 # Python2 默认8000，可指定（如8080） ......
Python的OS模块分析文件路径层次信息——获取文件路径、全名（文件名+尾缀）
Code: import os FilePath = "/a/bb/ccc/dddd.png" FolderPath, FullFileName = os.path.split(FilePath) Name, Suffix = os.path.splitext(FullFileName) print ......
R语言中数据框除以向量
R语言中数据框除以向量，规则是数据框中的元素按照列依次递增，除数向量循环递增。 001、 a <- c(20, 10, 6, 8) b <- c(2, 4, 12, 8) c <- c(6, 8, 14, 14) dat <- data.frame(a, b, c) dat idx <- c(2, ......
Python中的运算符与优先级
算术运算符 这里仅列出与c++语法不一致的内容。 | 指数 | a**b | | : : | : : | |取模 | a%%b | | 整除 | a//b | 比较运算符 与c++语法完全相同，用于判断两个变量、常量或者表达式之间的大小，比较运算的结果是布尔类型。 逻辑运算符 与c++语法完全相同， ......
为什么FIFO 第一轮读出数据正确，第二轮读出数据的时候读出的是x？FIFO 读出数据有误
仿真如下所示，第一轮写入1 2 3 4 5 6 7 8 读出来都是对的， 后来写9 10 11...等， 读出来就是x了， 这是为什么呢？ 这说明指针在指到FIFO 尽头以后出了什么问题。。。。。 最后发现是这里指针的位宽是3 ，结果定义为了4位，这样的话，当你指针累计到111的时候并没有返回到00 ......
电商API接口的发展，淘宝API商品详情数据
淘宝商品详情接口，京东商品详情接口，1688商品详情接口，拼多多商品详情接口，虾皮商品详情接口，lazada商品详情接口 ......
DataX-在Windows上实现postgresql同步数据到mysql
场景 DataX-阿里开源离线同步工具在Windows上实现Sqlserver到Mysql全量同步和增量同步: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/130330353 在上面实现sqlserver到mysql的数据同步之 ......
轻松存储千亿级数据，知乎基于Doris的DMP系统架构实践
1）提升查询效率
自动探测 SQL 复杂查询条件预先合并成一个派生特征的 bitmap，预测和圈人时对复杂条件 SQL 重写为派生特征。
2）提升导入速度
Spark 直接写 Doris Tablet 文件，并挂载到 FE。
针对大导入场景与 Doris 团队共建，提升写入效... ......
Python数据类型
Python语言中有6个标准数据类型。 不可变数据（3 个）：Number（数字）、String（字符串）、Tuple（元组）； 可变数据（3 个）：List（列表）、Dictionary（字典）、Set（集合）。 有序数据：元组，列表 无序数据：集合，字典 数字number 整型int 正或负整数 ......
基于chatGPT的问答机器人开发-qdrant向量数据库的集合功能封装
之前一直再开发基于GPT的问答知识库机器人，主要是靠qdrant的向量搜索，搜索出相关的条目，然后发送给GPT回答 qdrant向量数据库有集合的概念，相当于表，每个集合里面可以创建多个向量数据。 那么针对集合的操作就是下面这样的，集合列表，创建集合，删除集合 集合列表接口： http://127. ......
Linux安装配置达梦数据库教程
1.安装规范：为方便之后统一运维管理，现规定以下信息： 安装包和密钥存放目录：/boban 安装目录：/home/dmdba/dmdbms 数据目录：/dbdata/dmdata 挂载目录：/mnt 2.数据安装工作： 数据库安装准备工作： 创建组：[root@localhost /]# group ......
Python-字符串format方法指定参数
一、字符串的format方法有几种指定参数的方式：（1）默认方式—传入的参数与{}一一对应（2）命名参数（3）未知参数{2} 二、详细描述字符串的format方法如何格式化字符串： 第一种方法： s1 = 'Today is {},the temperature is {} degrees.' pr ......
语义分割数据标注
1，首先安装标注软件。在命令行窗口中输入。 pip install labelme 2，输入labelme。 进入标注软件。 3，点击Open Dir选择图片文件路径 4，点击Create Polygons对图片进行标注 我们需要==标注的对象是船舱口及抓斗==。如下图是我标注好的一张图片。对于船舱 ......
数据结构——并查集
并查集的作用： 可以在近乎O(1)的时间内完成以下两个操作 1、将两个集合合并 2、询问两个元素是否在一个集合中 基本原理： 用“树”的形式来维护每一个集合，树根的编号就是整个集合的编号，每个结点存储它的父结点（如：p[x]表示x的父结点） 问题1：如何判断树根？ A：if(p[x]==x)，当前x ......
龙龙自己MYSQL data 旧数据库 迁移到新数据库的成功经历
龙龙 2023年4月27日 mysql 我为了迁移mydata 里的数据库 采用直接复制 数据库的方法 1.安装mysql 数据库 2.mysqld -instal mysqld --initialize 3. 这个时候数据库安装好了 ，如果采用把旧库里的 直接拷贝过来 启动起来 会认不到表 接下来 ......