storage innodb engine mysql

MYSQL内外连接查询实践

自身连接查询 自身连接,就是将表本身和表进行笛卡尔积计算,得到结果,但是由于表名相同,因此要先起一个别名: SELECT * FROM 表名 别名1, 表名 别名2 自身连接查询的连接对象变成自己和自己了。 例如1:student 表自身连接查询 # 自身连接查询,笛卡尔积:81 条数据 selec ......
MYSQL

Python使用pymysql和xlrd2将Excel数据导入MySQL数据库

在数据处理和管理中,有时候需要将Excel文件中的数据导入到MySQL数据库中进行进一步的分析和操作。本文将介绍如何使用Python编程语言实现这个过程。 导入所需库 import xlrd2 # 导入xlrd2库,用于读取Excel文件 import pymysql # 导入pymysql库,用于 ......
数据 pymysql 数据库 Python Excel

万字长文 | 业内 MySQL 线程池主流方案详解 - MariaDB/Percona/AliSQL/TXSQL/MySQL企业版

作者:卢文双 资深数据库内核研发 本文首发于 2023-05-04 22:07:40 http://dbkernel.com/2023/05/04/mysql-threadpool-main-solutions-details/# 本文主要从功能层面对比 percona-server、mariadb ......
长文 MySQL 线程 业内 主流

Mysql--存储过程

Mysql--存储过程 介绍 存储过程是事先经过编译并存储在数据库中的一段SQL语句的集合,调用存储过程可以简化应用开发人员的很多工作,减少数据在数据 库和应用服务器之间的传输,对于提高数据处理的效率是有好处的。 存储过程思想上很简单,就是数据库SQL语言层面的代码封装与重用。 特点 封装,复用 可 ......
过程 Mysql

mysql主从复制

主从复制中涉及的文件 主库:binlog 从库:relaylog 中继日志 master.info 主库信息文件 relaylog.info relaylog应用的的信息 主从复制工作过程 1、从库执行change master to 命令(主库的连接信息+复制的起点) 2、从库会将以上信息,记录到 ......
主从 mysql

面试题:MySQL事务的ACID如何实现?

大家好,我是【码老思】,事务是一个数据库绕不开的话题,今天和大家一起聊聊。 事务是什么? 事务(Transaction)是并发控制的基本单位。所谓的事务呢,它是一个操作序列,这些操作要么都执行,要么都不执行,它是一个不可分割的工作单位。 在介绍事务的特性之前,我们先看下MySQL的逻辑架构, 如上图 ......
事务 MySQL ACID

从Mysql架构看一条查询sql的执行过程

1. 通信协议 我们的程序或者工具要操作数据库,第一步要做什么事情? 跟数据库建立连接。 首先,MySQL必须要运行一个服务,监听默认的3306端口。在我们开发系统跟第三方对接的时候,必须要弄清楚的有两件事。 第一个就是通信协议,比如我们是用HTTP还是WebService还是TCP? 第二个是消息 ......
架构 过程 Mysql sql

oracle中concat函数与在mysql中的使用

在Oracle中使用concat函数来做拼接: 我们想要得到的效果: 对应的sql语句如下: MySQL的中使用: 我们直接使用concat()函数就行 ......
函数 oracle concat mysql

mysql大批量删除数据,工作记录

在10万记录的三张关系表中删除相对应的数据,三张表为层级嵌套关系 优化查询 目的:减少mysql数据库慢查询导致的长时间占据锁的情况出现 优化方向:将慢sql改为多次执行的快sql,避免长时间占用mysql资源情况出现 多表查询会用到的几种方式 连表查询 SELECT event_data.id F ......
大批量 数据 mysql

[mysql][maxwell] maxwell无法连接mysql8.x,报错信息“Access Denied”

前提 使用mysql-maxwell-kafka进行增量同步的时候,kafka消费组没有得到任何消息。一个个排到最后才发现最核心的问题是mysql,麻了真的是。 kafka没问题 查进程,有两台机子的kafka未启动 打开日志,报错 org.apache.zookeeper.KeeperExcept ......
maxwell mysql Access Denied mysql8

CentOS 安装 MySQL8,超详细!

CentOS 安装 MySQL8,超详细! 一、离线安装MySQL 1. 检查是否已安装mysql rpm -qa | grep mysql 2. 卸载已安装的mysql rpm -ev mysql80-community-release-el7-7.noarch rpm -ev mysql-com ......
CentOS MySQL8 MySQL

读高性能MySQL(第4版)笔记21_读后总结与感想兼导读

1. 基本信息 高性能MySQL:经过大规模运维验证的策略(第4版) High Performance MySQL, Fourth Edition [美] Silvia Botros(西尔维亚·博特罗斯);Jeremy Tinley(杰里米·廷利) 电子工业出版社,2022年10月出版 1.1. 读 ......
读后 高性能 感想 笔记 MySQL

Python 利用pandas和mysql-connector获取Excel数据写入到MySQL数据库

如何将Excel数据插入到MySQL数据库中 在实际应用中,我们可能需要将Excel表格中的数据导入到MySQL数据库中,以便于进行进一步的数据分析和处理。本文将介绍如何使用Python将Excel表格中的数据插入到MySQL数据库中。 导入必要的库 首先,我们需要导入pandas库和MySQL C ......

mysql 索引

1. 索引介绍 索引就是一种数据结构,类似于书的目录。意味着以后再查数据应该先找目录再找数据,而不是用翻页的方式查询数据 索引在MySQL中也叫做“键”,是存储引擎用于快速找到记录的一种数据结构。 primary key unique key index key 注意:上面三种key前两种除了有加速 ......
索引 mysql

mysql

mysql 索引下推 个人认为 主要场景是组合索引上 idx_age_reward select * from t_user where age > 20 and reward = 100000; 联合索引当遇到范围查询 (>、<) 就会停止匹配,也就是 age 字段能用到联合索引,但是 rewar ......
mysql

Mysql 删除数据重重复

一、背景 二、实现 查看表的重复数据条数 SELECT count(1) a,serial_no FROM `mud_weighbridge_record` GROUP BY serial_no HAVING a >1 ; 删除表的重复数据 DELETE t1 from mud_weighbridg ......
数据 Mysql

MYSQL中行记录格式的一些说明

MYSQL中,行记录的存储结构一般包括四部分: 变长字段长度列表 NULL值字段列表 记录头信息 记录的真实信息 变长字段长度列表是由多组两个字节组成的,因为MYSQL中规定行记录的最多占据的空间是65535个字节,所以使用两个字节的空间(0~2^16-1)就可以表示出某个变长字段使用空间的真实长度 ......
格式 MYSQL

MySQL学习(10)基于规则的优化

前言 MySQL为了更高的执行效率,会将客户端发送的SQL语句进行优化。 条件化简 MySQL优化器会对SQL语句中的表达式进行简化处理,以提高执行效率。 移除不必要的括号。 常量传递。a = 5 AND b > a可优化为a = 5 AND b > 5。 移除没用的条件。优化器会移除掉明显为TRU ......
规则 MySQL 10

mysql-基于GTID的binlog日志

一、什么是GTID 从 MySQL 5.6.5 开始新增了一种基于 GTID 的复制方式。 通过 GTID 保证了每个在主库上提交的事务在集群中有一个唯一的ID。 这种方式强化了数据库的主备一致性,故障恢复以及容错能力。 在原来基于二进制日志的复制中,从库需要告知主库要从哪个偏移量pos值进行增量同 ......
binlog mysql 日志 GTID

mysql-日志管理

一、mysql日志文件的作用 1、能记录物理数据页面的修改的信息; 2、能将数据从逻辑上恢复至事务之前的状态; 3、能以二进制文件的形式记录了数据库中的操作; 4、能记录错误的相关信息; 5、能从主服务器中二进制文件取的事件等等。 普通日志 记录了服务器接收到的每一个查询或是命令,无论这些查询或是命 ......
mysql 日志

mysql 导入csv 文件

1. 获取 mysql 配置文件路径 mysqld --verbose --help | grep .cnf 2. mysqld 文件添加配置 [mysqld] ... secure-file-priv = "" 3. 建表 create table t_table ( bank_code text ......
文件 mysql csv

MySQL 8.2.0 GA

MySQL新的进化版8.2.0于2023年10月25日发行,让我们一起快速浏览一下该版本发生哪些变化。审计日志* 添加了新的“audit_log_filter_uninstall.sql”脚本,简化删除“MySQL Enterprise Audit”的过程。认证 * “mysql_native_pa ......
MySQL GA

创建并运行一个MySQL容器,将宿主机目录直接挂载到容器

关键命令 docker run \ --name mysql \ -e MYSQL_ROOT_PASSWORD=123 \ -p 3306:3306 \ -v /tmp/mysql/conf/hmy.cnf:/etc/mysql/conf.d/hmy.cnf \ -v /tmp/mysql/data ......
容器 宿主机 宿主 目录 MySQL

mysql5.7启用ssl连接(windows版本)

环境:OS:windows2012Mysql:5.7.29 1.安装mysql安装步骤省略,mysql5.7默认安装都已经安装好了ssl的,并默认启用了的.证书在数据目录下 D:\mysql57\data D:\mysql57\data>dir 驱动器 D 中的卷是 新加卷 卷的序列号是 7603- ......
windows 版本 mysql5 mysql ssl

Sybench性能测试MySQL/TIDB

一、安装部署 1.1源码/包:https://github.com/akopytov/sysbench 1.2安装工具Sysbench1.0.20版本 切换root用户执行 方式一: - Debian/Ubuntu系统: curl -s https://packagecloud.io/install ......
性能 Sybench MySQL TIDB

本地docker搭 建开源MySQL审计平台 yearning

简单介绍: Yearning是一个轻量级的Web端的MySQL SQL语句审核平台,提供查询审计,SQL审核,SQL回滚,自定义工作流等多种功能。Yearning的前端是基于Vue.js构建的,它还提供SQL语法高亮、自动补全和智能提示、可视化等。 Yearning自身包含了一套通常适用的审核规范, ......
yearning docker MySQL 平台

mysql统计 不含的月份补0

构造当前日期之前10天的日期表 可以把DAY换成 MONTH 构造需要的月份 不需要固定天数的 可以去掉limit SELECT @cdate := date_add( @cdate, INTERVAL - 1 DAY ) date FROM ( SELECT @cdate := date_add( ......
月份 mysql

41 mysql 索引和慢查询优化

MySQL之索引原理与慢查询优化 阅读目录 一 介绍 二 索引的原理 三 索引的数据结构 四 聚集索引与辅助索引 五 MySQL索引管理 六 测试索引 七 正确使用索引 八 联合索引与覆盖索引 九 查询优化神器-explain 十 慢查询优化的基本步骤 十一 慢日志管理 一 介绍 为何要有索引? 一 ......
索引 mysql 41

scrapy中爬虫数据如何异步存储mysql数据库jd

1. SQL CREATE TABLE `JDAll` ( `shop_id` VARCHAR (16) NOT NULL, //商品ID `url` VARCHAR (255) DEFAULT NULL, //商品url `title` VARCHAR (1024) DEFAULT NULL, / ......
数据 爬虫 数据库 scrapy mysql

MySQL函数right与left截取字符简介

如下 Right(str,length); Right(str,length) 功能从字符串右端取指定个数字符。 参数string:string类型,指定要提取子串的字符串;n:long类型,指定子串长度返回值String。函数执行成功时返回string字符串右边n个字符,发生错误时返回空字符串(" ......
函数 字符 简介 MySQL right