从头mysql

Streamsets读取binlog数据实时同步到MySQL

原文:https://blog.csdn.net/maomaosi2009/article/details/108293217 1、说明实时同步binlog数据到MySQL我使用了2种方式, 2、方式一第一种方式较为繁琐,数据从binlog流出,经过JS数据解析器将必要的字段解析出来,流入操作选择器 ......
Streamsets 实时 数据 binlog MySQL

MySQL:一文弄懂时区&time_zone

https://zhuanlan.zhihu.com/p/448999520 你还在被以下问题困扰吗: MySQL 的安装规范中应该设置什么时区? JAVA 应用读取到的时间和北京时间差了14个小时,为什么?怎么解决? 已经运行一段时间的业务,修改 MySQL 的时区会影响已经存储的时间类型数据吗? ......
time_zone 时区 MySQL time zone

读书笔记《高性能Mysql》

主要是为了记录在阅读过程中的一些笔记,可能杂乱无章,也可能不知所云。 ##### 1 对count查询的优化: sql中一个常见的错误,在括号内指定了一个列却希望统计结果集的行数。如果希望获取结果集的行数最好使用count(*)而不是把*替换成具体的列,因为这会过滤掉结果为null的列值导致所得的结 ......
高性能 笔记 Mysql

各类数据库适配mysql

1.clickhouse: Array(Date)=TEXT Array(DateTime=TEXT Array(FLoat32)=TEXT Array(FLoat64)=TEXT Array(Int16)=TEXT Array(Int32)=TExT Array(Int64)=TEXT Array ......
数据库 数据 mysql

Mysql 逗号分隔的字段查询

二、find_in_set为了解决like存在的问题,还可以使用mysql提供的find_in_set(str, strlist),sql可以这样写: select * from user where find_in_set('1', hobby_ids);这样mysql就会把hobby_ids的值 ......
逗号 字段 Mysql

淘宝太细了:mysql 和 es 的5个一致性方案,你知道吗?

文章很长,且持续更新,建议收藏起来,慢慢读![**疯狂创客圈总目录 博客园版**](https://www.cnblogs.com/crazymakercircle/p/9904544.html) 为您奉上珍贵的学习资源 : 免费赠送 :[**《尼恩Java面试宝典》**](https://www. ......
一致性 方案 mysql es

MySQL——json类型的应用

在制作动态报表的时候,如果需要字段灵活配置,用 json 存储数据,可以让查询变得非常简单。 业务场景: 绩效系统中,需要从10个系统中抓取不同数据,并且性能不会太高,但是用于计算的只有其中 3 个,用哪 3 个看领导心情,设计一张表存储抓取到的数据。 1、傻瓜式做法,设计一张表,从字段 1 列到字 ......
类型 MySQL json

Mysql:范式

# 概念 范式,指的是数据库表和字段设计,要遵循的规范。 # 范式类型 范式分为:第一范式,第二范式,第三范式,巴斯范式,第四范式,第五范式 越往后范式越高,数据库结构设计冗余度,合理性越好。但是实际大部分开发中,**用的最多还是第二范式和第三范式** # 基本名词 ![image](https:/ ......
范式 Mysql

php启用mysql扩展

在 PHP 中,要启用 MySQL 扩展,需要先确保已经安装了 MySQL 或 MariaDB 数据库,并安装了相应的 PHP MySQL 扩展。接下来,可以按照以下步骤进行配置: 确认 MySQL 或 MariaDB 安装 首先需要确认是否已经安装了 MySQL 或 MariaDB 数据库。可以使 ......
mysql php

mysql数据库自动删除

关于早上发现数据库丢失,留下了一份文档 检查了下发现是命令的问题 由于使用了这条命令,导致后门被开了,真是血泪的教训。 修改远程登录权限的话还是使用update user表来修改。 ......
数据库 数据 mysql

java同步mysql的数据到PostgreSQL时报错ERROR: invalid byte sequence for encoding "UTF8": 0x00

最近,同事在做一个功能,通过java程序将mysql中的一张表的数据同步到pgsql中,在同步过程中,插入到pgsql中出现了如下错误: `### Error updating database. Cause: org.postgresql.util.PSQLException: ERROR: in ......
quot PostgreSQL encoding sequence 时报

Mysql:主键设计

如果你的项目业务量不大,单个数据库实例就能搞定,那你们表的主键完全可以用bigint自增。 若是同一业务数据,比如会员数据。是分布在多个不同的数据库里,这时是万不能用bigint自增的,这只保证了单个数据库实例的唯一,而没有保证全局唯一 目前用的比较多,是Mysql8.0提供的有序UUID,能保证全 ......
Mysql

mac apple silicon M2 安装mysql5.7

#### 1、brew安装MySQL ``` // 1. 若不考虑版本直接执行以下命令 brew install mysql // 2. 若要选择版本只要加上@版本即可,例如 brew install mysql@5.7 // 3. 安装完后启动mysql brew services start m ......
silicon mysql5 apple mysql mac

关于mysql 创建索引报错 1071 specified key was too long ;max key length is 3027

另一种张表也是相同的字段创建索引却能成功,在网上查了一些资料。后来发现是两张表字段都用的varchar类型,不过能成功建索引的表设置的长度是50,而不能成功的表里设置的255,修改字符长度就能成功建索引了。 关于varchar(50)和varchar(255)的区别:https://dba.stac ......
key specified 索引 length mysql

关于MySQL的一些优化(单表访问)

以此表为例 CREATE TABLE `single_table` ( `id` int NOT NULL AUTO_INCREMENT, `key1` varchar(100) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NULL DEFAUL ......
MySQL

MySQL数据库,货币格式化

## MySQL数据库,货币格式化 > 如何将数字表示为美元格式 例$10,000.00 ###查询语句 ```mysql SELECT CONCAT('$', FORMAT(price*1000, 2, ',')) AS Price FROM item; ``` ### 千位分隔 FORMAT(n ......
货币 格式 数据库 数据 MySQL

MySQL数据库,字符串字段拆分

## MySQL数据库,字符串字段拆分 > 英文姓名存储在一个字段 > 如何拆分出firstname和lastname ### 查询语句 ```mysql SELECT REPLACE(name, CONCAT(' ', SUBSTRING_INDEX(name, ' ', -1)), '') AS ......
字段 字符串 字符 数据库 数据

mysql8和pgsql10你选哪个?

手里有个云服务器1核1G,ubuntu 20.04,经常用来测试一些开源应用。刚好有个应用需要数据库支持,或者mysql8,或者pgsql10。显然 mysql 用起来更得心应手,可是安装不上mysql8,显然内存不够,无奈只好试下pgsql,安装竟然非常顺畅。安装了pgsql12,目前占用内存也就 ......
mysql8 mysql pgsql 10

MySQL学习进阶篇Day5

2.6.4 索引失效情况 2.6.4.1 索引列运算 不要在索引列上进行运算操作, 索引将失效。 在tb_user表中,除了前面介绍的联合索引之外,还有一个索引,是phone字段的单列索引。 A. 当根据phone字段进行等值匹配查询时, 索引生效。 explain select * from tb ......
MySQL Day5 Day

MySQL之常用函数介绍

一:函数的简介 函数可以把我们经常使用的代码封装起来,需要的时候直接调用即可。这样既提高了代码效率,又提高了可维护性。在SQL中我们也可以使用函数对检索出来的数据进行函数操作。使用这些函数,可以极大地提高用户对数据库的管理效率。 我们在使用SQL语言的时候,不是直接和这门语言打交道,而是通过它使用不 ......
函数 常用 MySQL

mysql中update会锁表吗

MySQL 中的 update 操作会不会锁表是一个值得关注的问题,因为这会影响到并发性能和系统的响应速度。本文将从两个方面探讨这个问题:一是有没有索引的情况下,二是 MySQL 开启了自动提交事务和手动提交事务的情况下。首先,在没有索引的情况下,MySQL 的 update 操作会锁整个表。这是因 ......
update mysql

mysql执行优化器

sql 这个ql看着给人感觉t表是驱动表,其实优化器优化后trc才是驱动表,因为t的查询条件筛选出来有50多万,二trc筛选只有几千条 explain select distinct t.`id` as "id", t.deleted as "deleted", t.no as "no", ru.n ......
mysql

MySQL之DQL数据查询操作

一:SQL概述及规范 SQL(Structured Query Language,结构化查询语言)是使用关系模型的数据库应用语言,与数据直接打交道,由 IBM 上世纪70年代开发出来。后由美国国家标准局(ANSI)开始着手制定SQL标准,先后有SQL-86,SQL-89,SQL-92,SQL-99等 ......
数据查询 数据 MySQL DQL

mysql索引损坏,Record in index `log_time` of table `lts`.`lts_job_log_po` was not found on update

【1】错误信息 [ERROR] [MY-012869] [InnoDB] Record in index `log_time` of table `lts`.`lts_job_log_po` was not found on update: TUPLE (info_bits=0, 2 n_cmp=2 ......
lts_job_log_po log lts 索引 log_time

Mysql DDL执行方式-pt-osc介绍 | 京东云技术团队

大家好,接着上次和大家一起学习了《MySQL DDL执行方式-Online DDL介绍》,那么今天接着和大家一起学习另一种MySQL DDL执行方式之pt-soc。 ......
团队 方式 pt-osc Mysql 技术

Mysql:数据库优化步骤

# 数据库优化步骤 1. 查看mysql是否存在周期性波动 1.1 是。代表可能遇上如618,双十一等活动对数据库暂时性的压力增大,可以mysql加缓存或更改缓存策略 1.2 不是。大概率是本身开发人员编写的SQL有问题,或者是业务量达到一定程度引发的查询慢 ## 非周期性波动调优思路 1. 开启慢 ......
步骤 数据库 数据 Mysql

MySQL数据库A表和B表id冲突解决办法?

方法1:不要定义自增长,用触发器来实现。方法2:不要定义自增长,两张表共享同一个sequence。(规则唯一)方法3:自增长,但是一张表是奇数,另一张全是偶数 基于触发器的方法三:(对于现有系统的补救方案),最好的方案还是方法二使用同一个自增sequence获取 -- 修改A表id 别和B表id重复 ......
办法 数据库 数据 MySQL

springboot使用jdbc连接mysql(不用配置文件)

1、连接mysql的工具类: package com.jzproject.common.mysql; import com.alibaba.fastjson.JSON; import com.alibaba.fastjson.JSONArray; import org.springframework ......
springboot 不用 文件 mysql jdbc

spingBoot连接mysql数据库

1.最终效果 字符串+数据库中id为2的手机号 2.代码设置了响应的内容的格式 3 mysql数据库内表内容 数据库名称qikegu_demo 步骤 1 .打开IDEA,血的教训,IDEA使用的版本必须是旧版本,2021.1之前的,我没有破解,使用的免费30天版本 2. 新建项目 选择Sping I ......
spingBoot 数据库 数据 mysql

Mysql Php 推送获取随机数据解决分页重复问题

或许你已经看过很多博主写的文章,要不就是抄袭,要不就是给你一个下面的语句,随机是随机了,但是多来两页,你会发现前面出现的数据在第三页甚至第二页就出现了 select * from table order by rand() 这是因为rand()机制的问题,他每次都会打乱数据给你,然后你去取的时候0- ......
数据 问题 Mysql Php