python pgsql mysql amp
Mysql数据同步至Elasticsearch
方案对比 鉴于Canal是一个基于MySQL二进制日志的高性能数据同步系统， go-mysql-elasticsearch 是一个第三方插件的，虽然都可以同步mysql数据到es，由于es官方文档推荐使用canal工具来同步数据，因此主要将Canal的使用方式提供给用户。 核心概念 名词 解释 my ......
【Python基础】dict（字典）
简介介绍 dictionary（字典） 是 除列表以外 Python 之中 最灵活 的数据类型 字典同样可以用来 存储多个数据 通常用于存储 描述一个 物体 的相关信息 和列表的区别 列表 是 有序 的对象集合 字典 是 无序 的对象集合 字典用 {} 定义 字典特性 * 字典使用 键值对 存储数据 ......
Windows Server 环境下 Mysql-8.0.32-winx64 升级至 Mysql-8.2.0-winx64版本
Mysql-8.0.32-winx64 升级至 Mysql-8.2.0-winx64版本 摘要： 环境：Windows Server 2019 Datacenter Mysql 8.0.32 升级至 Mysql 8.2.0 操作记录，跨域服务器访问； 准备工作：升级新版本、备份旧版本数据 zip压缩 ......
在Python中利用内置SQLite3模块进行数据库操作的完整指南
在Python中，使用SQLite非常方便，Python内置了 SQLite3 模块，无需额外安装。SQLite 是一个轻量级的嵌入式数据库，适用于小型项目和单用户应用。以下是一个简单的示例，演示如何在 Python 中使用 SQLite，并提供了常见的查询、增加、修改和删除功能。 首先，确保你的 ......
【python可视化大屏】使用python实现可拖拽数据可视化大屏
介绍： 我在前几期分享了关于爬取weibo评论的爬虫，同时也分享了如何去进行数据可视化的操作。但是之前的可视化都是单独的，没有办法在一个界面上展示的。这样一来呢，大家在看的时候其实是很不方便的，就是没有办法一目了然的看到数据的规律。为了解决这个问题我使用pyecharts实现了一个可视化的大屏。接下 ......
Mysql 和 Redis 数据一致性问题
Mysql 和 Redis 数据一致性问题 https://www.cnblogs.com/scottyzh/p/17944675 https://juejin.cn/post/7302249560033853480 ......
在线重建mysql从库
一、背景 1、当集群的mysql主从同步异常，使用xtrabackup工具从主库中备份的数据来恢复从库，使主从同步恢复正常 2、docker 部署mysql主从 3、systemd管理 4、启动文件 二、实操 在mysql slave节点操作 1、停止mysql服务 systemctl stop m ......
Python 架构模式：附录 A 到 E
附录 A：摘要图和表 原文：Appendix A: Summary Diagram and Table 译者：飞龙 协议：CC BY-NC-SA 4.0 这是我们在书的最后看到的架构： 表 A-1 总结了每个模式及其功能。 表 A-1. 我们的架构组件及其功能 层 组件 描述 领域 定义业务逻辑。 ......
Python 架构模式：第十章到结语
第十章：命令和命令处理程序 原文：10: Commands and Command Handler 译者：飞龙 协议：CC BY-NC-SA 4.0 在上一章中，我们谈到使用事件作为表示系统输入的一种方式，并将我们的应用程序转变为一个消息处理机器。 为了实现这一点，我们将所有的用例函数转换为事件处理 ......
Python 架构模式：第五章到第九章
第五章：高档和低档的 TDD 原文：5: TDD in High Gear and Low Gear 译者：飞龙 协议：CC BY-NC-SA 4.0 我们引入了服务层来捕获我们从工作应用程序中需要的一些额外的编排责任。服务层帮助我们清晰地定义我们的用例以及每个用例的工作流程：我们需要从我们的存储库 ......
Python 架构模式：引言到第四章
引言 原文：Introduction 译者：飞龙 协议：CC BY-NC-SA 4.0 为什么我们的设计会出错？ 当你听到混乱这个词时，你会想到什么？也许你会想到喧闹的股票交易所，或者早上的厨房——一切都混乱不堪。当你想到秩序这个词时，也许你会想到一个空旷的房间，宁静而平静。然而，对于科学家来说，混 ......
python虚拟环境系列（五）：pycharm中快速切换环境
本系列汇总，请查看这里：https://www.cnblogs.com/uncleyong/p/17947601 pycharm版本选择 说明，pycharm中快速切换环境这个功能在比较新的版本中才有 我目前版本比较老 所以卸载了： 官网下载最新社区版本：https://www.jetbrains. ......
变量命名风格转换(Python)
开发过程中对接接口经常遇到命名风格的问题，不同系统的风格，想要保持自身代码风格统一，不可避免的需要转换命名风格 代码 import re class NameStyleConve: """ 变量命名风格转换，要求处理的是字符串不是字典，使用 json.dumps(data_dict) """ _sn ......
盘点一个AI都无法解决的Python基础题目（下篇）
大家好，我是皮皮。 一、前言 前几天在Python白银交流群【大侠】问了一个Pandas实战的问题，一起来看看吧。上一篇文章说到，看上去AI给的答案，似乎让【大侠】不满意，遂来白银交流群问问大佬们。这一篇文章，我们一起来看看其他大佬给的代码。 二、实现过程 前面的文章中，我们看到了【瑜亮老师】和【东 ......
Python面向对象之面向对象编程
面向对象编程 【一】编程的两大编程思想 【1】面向过程编程 面向过程编程：首先分析出解决问题所需要的步骤（即“第一步做什么，第二步做什么，第三步做什么”），然后用函数实现各个步骤，再依次调用。 【1.1】面向过程特点 优点 : 复杂的问题简单化，进而流程化 缺点 : 扩展性差，牵一发而动全身 应用场 ......
python项目依赖管理之poetry
poetry，是一个强大的Python项目依赖管理工具，旨在简化和优化项目的依赖管理过程。它提供了一种简单且一致的方式来定义、安装和管理项目所需的依赖项。本文将详细介绍poetry库的安装方法、使用方法、优缺点、应用场景和总结。 安装 在开始使用poetry库之前，您需要进行一些安装准备。以下是安装 ......
React jsx 语法解析 & 转换原理
jsx介绍 jsx是一种JavaScript的语法扩展（eXtension），也在很多地方称之为JavaScript XML，因为看起就是一段XML语法，用于描述UI界面，并且可以和JavaScript代码结合使用。 比起vue中的模板语法，更加灵活，且不需要学习模板语法中的特定标签，比如：v-if ......
mysql的查询缓存
最后更新时间：2024-01-09 开启缓存： mysql> set global query_cache_size = 600000; --设置缓存内存大小 ysql> set global query_cache_type = ON; --开启查询缓存 关闭缓存 mysql> set globa ......
python最新的画图神器seaborn
1、 安装：主页：http://seaborn.pydata.org/ pip3 install seaborn， 官方建议：python 3.8+，三个依赖：numpy，pandas，matplotlib ； 三个补充：statsmodels，scipy，fastcluster 2、例子：test ......
MySQL-11.数据处理之增删改
1.插入数据(INSERT语句) 1.1 问题引入 向departments表中，新增一条数据。 解决方式，使用insert语句向表中插入数据。 1.2 方式1：values的方式添加 情况1：为表的所有字段按默认顺序插入数据 INSERT INTO 表名 VALUES (value1,value2 ......
MySQL隐式转换造成索引失效
MySQL隐式转换造成索引失效 CREATE TABLE `test1` ( `id` int(11) NOT NULL, `num1` int(11) NOT NULL DEFAULT '0', `num2` varchar(11) NOT NULL DEFAULT '', `type1` int ......
作业8 流计算&Flink
一. 多选题（共5题，62.5分） 1. (多选题)典型的事件驱动型应用包括： A. 异常检测 B. 基于规则的报警 C. 反欺诈 D. 业务流程监控 我的答案: ABCD:异常检测; 基于规则的报警; 反欺诈; 业务流程监控;正确答案: ABCD:异常检测; 基于规则的报警; 反欺诈; 业务流程监 ......
【转】MySQL慢查询优化、索引优化、以及表等优化总结
MySQL优化概述 MySQL数据库常见的两个瓶颈是：CPU和I/O的瓶颈。 CPU在饱和的时候一般发生在数据装入内存或从磁盘上读取数据时候。 磁盘I/O瓶颈发生在装入数据远大于内存容量的时候，如果应用分布在网络上，那么查询量相当大的时候那么平瓶颈就会出现在网络上。 我们可以用mpstat, ios ......
MySQL日期类型选择建议
MySQL日期类型选择建议 1. 不要用字符串存储日期 字符串占用的空间更大 字符串存储的日期效率比较低（逐个字符进行比对），无法用日期相关的 API 进行计算和比较 2. Datetime 和 Timestamp 之间的抉择 2.1 时区信息 DateTime 类型是没有时区信息的（时区无关） T ......
sqlsugar在使用mysql时，Dbfirst and Codefirst requires system table permissions
昨天在使用sqlsugar时，复制粘贴了一段代码 ` SqlSugarClient Db= new SqlSugarClient(new ConnectionConfig(){ ConnectionString = "Database=scm;Data Source=127.0.0.1;User I ......
Python 实现自动复制文件_V1.1.5
Python 实现自动复制文件_V1.1.5 一：需求 从某目录索引其所有文件夹文件，若包含某特定字符串的文件。拷贝至指定文件 可以每次设置多个源目录，及对应的目标目录和指定字符串 筛选日期，设置除符合特定字符串外，文件创建日期小于某数值，比如3天 复制源目录文件夹结构至目标目录 二：事前准备 Py ......
python 3.10 安装ssl报错问题
1.python 3.10 安装ssl报错问题 由于python3.10之后版本不在支持libressl使用ssl，需要使用openssl安装来解决编译安装 python时候遇到的ssl模块导入失败的问题，这里需要用的openssl1.1.1版本或者更高版本 2.opensll安装 https:// ......
Docker安装mysql5.7
Docker安装MySQL5.7 docker pull mysql:5.7 docker run Note： 报错： docker: Error response from daemon: failed to create shim task: OCI runtime create failed: ......
MySQL CPU使用彪高，如何快速找到源头【转】
通常在MySQL的日常运维中，会突然发现cpu使用彪高，如何快速找到罪魁祸首呢？通常我们只需要执行show processlist 进行查看，一般执行时间最长的SQL八九不离十就是罪魁祸首，但当show processlist的输出有近千条，那么很难第一眼就发现有问题的SQL，那么如何快速找到呢？其 ......
Python模块之logging模块
logging模块 【一】概要 logging 模块是 Python 中用于记录日志的标准模块。它提供了一种灵活的方式来配置不同级别的日志消息，可以将日志消息输出到不同的地方，如控制台、文件、网络等。使用 logging 模块可以帮助开发者更好地理解程序的运行状态、诊断问题以及记录关键信息。 【二】 ......