数据 爬虫 二手房python
python split()截取一部分的字符串及按照指定字符或者长度 截取字符串
str = 'https://www.baidu.com/pdf/abcdefg.pdf' # 输出字符串,>>>https://www.baidu.com/pdf/abcdefg.pdf print(str) # 做为一个整体截取,>>>['https://www.baidu.com/pdf/ab ......
flask蓝图/G对象/连接数据库/
蓝图使用 中大型项目推进使用蓝图来构建文件目录 1.导入蓝图类 from flask import Blueprint 2.实例化得到蓝图对象 order_bp = Blueprint('order', name) 3.在app中注册蓝图 app.register_blueprint(order_b ......
Linux、Windows后台运行Python脚本
Linux:python或nohup命令 python命令: python test.py & python -u test.py >> test.log & 参数u,时时输出内容到文件。 python -u test.py >>test.log 2>&1 & python -u test.py > ......
利用人工智能和大数据,宠物app为宠物提供更全面的健康管理
人们对宠物的关注和重视程度不断提高,越来越多的人开始选择养宠物。然而,宠物的健康管理一直是宠物主人们关注的重点。如何更好地管理宠物的健康,让宠物生活更加健康和幸福,成为了宠物主人们需要思考的问题。近年来,随着人工智能和大数据技术的迅速发展,宠物app已经成为了宠物健康管理的新选择。 一、人工智能技术 ......
宠物app如何借助大数据分析提供更贴心的宠物养护
宠物越来越成为了人们生活中不可或缺的一部分。越来越多的人开始养宠物,而宠物的养护也变得越来越重要。为了更好地照顾宠物,宠物app应运而生。但是,如何利用大数据分析来提供更贴心的宠物养护呢? 一、宠物健康监测 宠物健康监测是宠物app的一个重要功能。通过在app中记录宠物的体重、食欲、精神状态等信息, ......
在Linux部署Redis代理Twemproxy实现数据分片
前言 本文主要讲述 Redis 代理 Twemproxy 安装过程。 Twemproxy 是推特开源用于 Memcached 和 Redis 的轻量级代理。这里以0.5.0版本为例。 我们可以通过取模、随机、一致性哈希等算法将数据分散在多个 Redis 服务来实现水平扩展。但是客户端直连就需要跟每个 ......
python 报错AssertionError: process has already started
python 报错AssertionError: process has already started 现象 原因 在Python中设置守护进程daemon,一定要放在start方法上面才会有效 解决方法 ......
在Linux部署Redis代理Predixy实现数据分片
前言 本文以predixy-1.0.5为例,讲述 Redis 代理 Predixy 安装过程。 Predixy 是一款高性能全特征 Redis 代理,支持 Redis-sentinel 和 Redis-cluster。作者拿其它常用代理做了 性能测评,Predixy 在各个维度性能都是最优的,与其他 ......
使用python读取指定目录下的指定类型文件
准备工作:设置指定的路径,使用os.listdir() 方法获取路径下所有的文件 import os path = "d:\\data" # 设置路径 dirs = os.listdir(path) # 获取指定路径下的文件 循环判断:使用os.path.splitext()方法筛选出指定类型的文件 ......
MYSQL大批量数据插入的性能问题
批处理 rewriteBatchedStatements=true 项目原来使用的大批量数据插入方法是Mybatis的foreach拼接SQL的方法。 我发现不管改成Mybatis Batch提交或者原生JDBC Batch的方法都不起作用,实际上在插入的时候仍然是一条条记录的插,速度远不如原来My ......
python 修改EXCEL另存
from openpyxl import load_workbook wb=load_workbook('anju.xlsx') sheet=wb.active for uu in range(1,100): sheet.cell(row=uu,column=6).value=zuijin(av1, ......
yolov5训练自己的数据
前一篇文章写了如何的安装yolo5。基于上面的一章,记录下用yolo5来训练自己的数据。 split_train_val.py import os import random trainval_percent = 0.1 train_percent = 0.9 xmlfilepath = '/Use ......
442.数组中重复的数据
数组中重复的数据 给你一个长度为 n 的整数数组 nums ,其中 nums 的所有整数都在范围 [1, n] 内,且每个整数出现 一次 或 两次 。请你找出所有出现 两次 的整数,并以数组形式返回。 你必须设计并实现一个时间复杂度为 O(n) 且仅使用常量额外空间的算法解决此问题。 示例 1: 输 ......
labelme制coco数据集(新)
1. labelme标注完的json Labelme标注工具的JSON文件包含了标注信息、图片路径、以及图片的高度和宽度等信息, 2. coco的json COCO数据集格式包含了多个JSON文件,包括标注信息、图片信息、类别信息、图片与类别的关联信息等 3.怎么转换 有两种方式 使用 Labelm ......
01:python基础
正文 # 打印内容print() 输入内容input() print("helloWorld!") # 1:注释:输入内容 # name = input("请输入你的名字:") # print("hello,", name, "您好") print("1024 * 768 = ", 1024*768 ......
python flask 框架后端如何获取前端的表单数据 文本 单选框 多选框
文本 pyhon 后端用request.values.get("name") 去获取 if request.method == "POST": username = request.values.get("username") sex = request.values.get("sex") 二、多选 ......
一些常用的Python调试工具
pdb:Python自带的调试工具,可以在代码中添加断点并逐步执行代码,以便逐步检查代码执行的过程。 ipdb:基于pdb的增强版,支持更多的交互式调试功能。 PyCharm:一个常用的Python集成开发环境,可以通过图形化界面来调试程序。 Visual Studio Code:另一个常用的Pyt ......
INFS3200 先进数据库系统
INFS3200 Advanced Database SystemsPrac 2: Data Warehousing (5%)Semester 1, 2023Due time: 4:00pm, Friday, 21 April 2023 (Week 8)Submission: Submit your ......
由数据范围反推算法复杂度以及算法内容
由数据范围反推算法复杂度以及算法内容 1、一般ACM或者笔试题的时间限制是1秒或2秒。 C++里面如果题目的时间限制是1s的话,这个1s是指每一个测试数据都有1s的时间限制,如果一个题有十几个测试数据,每一个测试数据都有1s的实现,正常比赛的话,比如蓝桥杯比赛的话,如果有10个测试数据,时间限制是1 ......
Linux安装mysql数据库
1. 下载 路径:https://dev.mysql.com/downloads/ 2. 上传解压 # tar -xvf MySQL-5.6.26-1.linux_glibc2.5.x86_64.rpm-bundle.tar 3. 安装 # rpm -ivh MySQL-server-5.6.26- ......
关于python中使用json.loads()将字符串数据转换成字典
在json模块中,我们可以经常会用到 load()与loads(),其中两者的区别如下 json.load()从json文件中读取数据转抱为dict类型 json.loads()将str类型的数据转换为dict类型 这里笔者主要说明json.loads()的用法,将字符串转转换成字典,如下str2d ......
python 浅拷贝和深拷贝,赋值的例子
一、浅拷贝copy.copy() 数据半独立,看下面例子 1、一层列表,能够完全拷贝,和深拷贝一样的效果 import copyalist=[1,2,3] #id;2281268077504 blist=copy.copy(alist) # id: 2281267497216 alist.appen ......
Mybatis链接数据库
参考:https://blog.csdn.net/Javascript_tsj/article/details/126324531 提前说明:本人电脑已经安装好mybatis插件的情况 第一步:添加maven依赖(mybatis、数据库驱动) <dependency> <groupId>org.my ......
Redis 数据库的哨兵模式
1. 哨兵模式 1.1 哨兵模式的结构和作用 哨兵(Sentinel)是 Redis 官方提供的一种高可用方案,它可以监控多个 Redis 服务实例的运行情况。本质上,Sentinel 也是一个运行在特殊模式下的 Redis 服务器。主从复制模式下,一般会配置多个 Sentinel 节点,通过互相协 ......
自学Python爬虫笔记(day2)
环境python3.9版本及以上,开发工具pycharm 浏览器工具推荐使用Chrome,其他浏览器均有一定程度的阉割。 主要是熟练使用后端界面进行爬取数据。 http协议:超文本传输协议 把一条消息分为三大块内容: 请求: 1.请求行 --> 请求方式(get/post) 请求URL地址 协议 2 ......
Redis 数据库的主从复制
1. 主从复制 1.1 什么是主从复制 主从复制,是将多台数据库服务器分为主节点(master)和从节点(slaver),主节点数据更新后会根据配置和策略,自动同步到从节点上,从而保证主从节点中存有相同的数据。 1.2 主从复制的作用 有了主从复制,数据可以有多份副本,这就带来了很多好处: (1)提 ......
Docker 下 Redis 数据库的持久化
1、Docker 容器的数据卷 Docker 是将系统与运行的环境打包成容器来运行,当容器删除后,容器里的系统自然也就没有了。但是,在实际的项目中,希望 Docker 容器产生的数据能够持久化,同时容器之间也能够共享数据。Docker 提供了数据卷技术来实现这些需求。 数据卷就是目录或文件,存在于一 ......
Springboot 系列 (29) - Springboot+HBase 大数据存储(七)| Springboot 项目通过 Phoenix 组件使用 JDBC 访问 HBase
Phoenix 是 HBase 的开源 SQL 皮肤,通过 Phoenix 可以使用标准 JDBC API 代替 HBase 客户端 API 来创建表,插入数据和查询 HBase 数据。Phoenix 会把 SQL 编译成一系列的 Hbase 的 scan 操作,然后把 scan 结果生成标准的 J ......