方案mysql es

mysql 在线修改表结构 onlineDDL

背景:在项目库中有几个表的数据特别大,数据条数达到几千万。由于新需求上线,要加两个字段。 如果直接在数据库用alter,会导致锁表,时长一两个小时,影响业务。所以找了pt-osc和gh-ost两个工具对比下。其他大佬已经有了这方面的记录了,比如: https://zhuanlan.zhihu.com ......
onlineDDL 结构 mysql

mysql数据库无法录入汉字问题

1.插入数据出现错误 show full columns from 表名;//查看数据表列编码 2. alter table 表名 change 列名 列名 varchar(自己设置) character set utf8 collate utf8_unicode_ci not null defau ......
数据库 数据 问题 mysql

es6

ES6 1、简介 ECMAScript 6.0(以下简称 ES6,ECMAScript 是一种由 Ecma 国际(前身为欧洲计算机制造商 协会,英文名称是 European Computer Manufacturers Association)通过 ECMA-262标准化的脚本 程序设计语言)是 J ......
es6 es

mysql的CHARSET

社区版:mysql5.7: Latin1/latin1_swedish_ci mysql8.0: utf8mb4/utf8mb4_0900_ai_ci RDS默认的是utf8 MySQL 8.0 默认的是 utf8mb4_0900_ai_ci,属于 utf8mb4_unicode_ci 中的一种,具 ......
CHARSET mysql

mysql查询所有表及字段的注释信息

查询information_schema.tables表,查询结果去掉4个系统库 SELECT t1.TABLE_SCHEMA 库名, t1.table_name 表名, t1.table_comment 表注释, t2.COLUMN_NAME 字段名, t2.column_comment 字段注释 ......
字段 注释 mysql 信息

如何设计高可靠的订单同步方案

跨业务域数据联查和搜索的需求层面优化 为了实现对跨业务域数据的联查和搜索,例如退款单的退款状态和发货状态,订单的订单状态和退款状态,需要在需求层面进行上溯。这样可以跳出现有方案框架的局限,拓展搜索解决方案的范围,并且更清晰地认识现有方案设计和实现的前提和约束。 具体来说,这种跨业务域的联查和搜索需要 ......
订单 方案

GaussDB(DWS)运维:导致SQL执行不下推的改写方案

摘要:本文就针对因USING子句的书写方式可能导致MERGE INTO语句的执行不下推的场景,对USING子句的SQL语句进行改写一遍,整个SQL语句可以下推。 本文分享自华为云社区《GaussDB(DWS)运维 -- values子句做MERGE数据源导致SQL执行不下推的改写方案》,作者: 譡里 ......
GaussDB 方案 DWS SQL

4.1.1 MySQL索引原理及SQL优化

Linux C/C++服务器 MySQL索引原理及SQL优化 innodb 索引组成 一种有序的存储结构,按照单个或这多个列的值进行排序,目的是为了提升搜索效率 索引分类:主键索引、唯一索引、普通索引、组合索引、以及全文索引(elasticsearch) 主键选择 innodb 中表是索引组织表,每 ......
索引 原理 MySQL SQL

全自动加药装置远程维护解决方案

一、方案背景自动加药装置是一种时间程序控制,可自由设定自动加药的周期,加药量,加药时间和加药频率。以计量泵为主,装配加药箱、安全阀、止回阀、过滤器、缓冲器、阀门、底座、控制等。 在以后的系统运转过程中,到加药周期,计量泵自动打开加药,加到规定的时间计量泵关闭;到排污周期,计量泵停止加药,排到规定的时 ......
加药装置 全自动 解决方案 方案

mysql集群搭建docker-compose方案

MySQL集群搭建大致有两种方式,一种是单主/多从的主从复制方式,另一种是使用Galera Cluster高可用解决方案。 1、步骤 以下我们详细介绍一下单主/多从的主从复制方式: 确认服务器环境,采用官方支持的操作系统版本和MySQL版本,并保证主从服务器之间的网络连接能够正常通信。 安装MySQ ......
集群 docker-compose compose 方案 docker

mysql max_allowed_packet查询和修改

工作中经常需要导入或者导出较大的sql文件。导出时一般没问题,但在导入到其它Mysql库中,可能会出现“Packet for query is too large (1706 > 1024). You can change this value on the server by setting th ......
max_allowed_packet allowed packet mysql max

01解决mysql8.0无法远程登录问题

问题原因:mysql8.0服务器出于安全考虑,默认只允许本地登录数据库服务器 问题解决:登入mysql后,更改 "mysql" 数据库里的 "user" 表里的 "host" 项,从"localhost"改称"%",然后重启mysql这样就允许所有的远程机器进行访问了。步骤1:修改mysql表 my ......
mysql8 问题 mysql

scrapy架构介绍、scrapy解析数据、scrapy解析数据、持久化方案、全站爬取cnblogs文章、爬虫和下载中间件、加代理,cookie,header,加入selenium

# 1 selenium -登录cnblogs,拿到cookie,再打开cnblogs,写入cookie,它就是登录状态 -半自动点赞 》selenium生成的cookie,给requests用 -selenium操作浏览器,速度慢 -requests速度快 -动作链 -自动登录12306 # 2 ......
scrapy 数据 爬虫 中间件 全站

【标准的产品解决方案】Softerra与上海道宁为IT行业提供优质且全面的解决方案,帮助世界各地的企业应对严苛的IT挑战

Softerra为IT行业提供标准产品和解决方案以及从头开始研发定制软件,以及物联网、定制芯片和电子产品等提供嵌入式研发服务 ......
解决方案 方案 Softerra 标准 行业

MySQL只有data文件夹(数据库同名)数据恢复

第一步,查看环境,有没有可运行的数据库服务,如果有,进行第三步,如果没有,进行第二步; 第二步,安装一个数据库服务,进行第三步; 第三步,创建一个要恢复数据同名的DB; 第四步,创建一个要恢复的数据表,比如Table1; 第五步,执行语句:ALTER TABLE Table1 DISCARD TAB ......

【Python】Jupyter Notebook:IOPub message rate exceeded. The notebook server will temporarily stop sending output to the client in order to avoid crashing it..解决方案

✨报错提示 IOPub message rate exceeded. The notebook server will temporarily stop sending output to the client in order to avoid crashing it. To change thi ......

mysql 事务

https://blog.csdn.net/m0_46836425/article/details/121851867 https://blog.csdn.net/qq_33459343/article/details/124634721 ......
事务 mysql

mysql事务是什么锁

mysql,有索引并且使用了该索引当条件的时候就是行锁,没有索引的时候就是表锁。innodb 的行锁是在有索引的情况下,没有索引的表是锁定全表的. ......
事务 mysql

[MySql] 数据库死锁的排查和相关知识

查看数据库最近的一次死锁 执行以下命令: show engine innodb status; 查询结果 ...... LATEST DETECTED DEADLOCK 2023-03-20 15:26:35 7f37cf7bc700 *** (1) TRANSACTION: TRANSACTION ......
数据库 知识 数据 MySql

力扣511(MySQL)-游戏玩法分析Ⅰ(简单)

题目: 活动表 Activity: 写一条 SQL 查询语句获取每位玩家 第一次登陆平台的日期。 查询结果的格式如下所示: 解题思路: 方法一:使用dense_rank() over(partition by ... order by ...):将登录时间按用户id进行分组然后升序排序,最后筛选出排 ......
玩法 MySQL 511

力扣512(MySQL)-游戏玩法分析Ⅱ(简单)

题目: 需求:请编写一个 SQL 查询,描述每位玩家首次登陆的设备名称 查询结果格式在以下示例中: 解题思路: 方法一:使用dense_rank() over(partition by ...order by ...)先以player_id分组,再按登录时期进行排序,最后再筛选出排序为1的设备id。 ......
玩法 MySQL 512

Mysql数据脱敏

1、姓名脱敏 update table set 列 = REPLACE(列,SUBSTR(列,2,1),'*') PS:脱敏效果:张* ,张*三 2、手机号脱敏 UPDATE table SET 列 = ( CASE WHEN 列 IS NOT NULL THEN SUBSTR (列, 1, 3) ......
数据 Mysql

TLog与Easy-Es

TLog简介 TLog能解决什么痛点 随着微服务盛行,很多公司都把系统按照业务边界拆成了很多微服务,在排错查日志的时候。因为业务链路贯穿着很多微服务节点,导致定位某个请求的日志以及上下游业务的日志会变得有些困难。 这时候很多童鞋会开始考虑上SkyWalking,Pinpoint等分布式追踪系统来解决 ......
Easy-Es TLog Easy Es

【MySQL】通过xenon实现数据库高可用集群

[root@node01 ~]# yum install -y golang screen git[root@node01 ~]# which ip /usr/sbin/ip [root@node01 ~]# visudo mysql ALL=(ALL) NOPASSWD:/usr/sbin/ip ......
集群 数据库 数据 MySQL xenon

Mysql Docker

Docker部署Mysql主从复制 在docker内部,mysql5.7 与mysql8.0 目录存放位置是不一样的 echo net.ipv4.ip_forward=1>>/etc/sysctl.conf sysctl -p service network restart systemctl re ......
Docker Mysql

mysql5.7奇怪bug

看这个查询很奇怪, 1145就错,子查询返回多于 1 行。。。 1就对。 1145跟1144都不行,1143可以。 更新为0 ,是正常执行的 1145也只有一条、 表清空。还是不行。 删表,建表,重新录入,可以。 想不出什么问题,,,会是数据库bug吗。 ......
mysql5 mysql bug

MAUI Blazor 加载本地图片的解决方案

前言 为了解决MAUI Blazor无法加载本地图片,https://github.com/dotnet/maui/issues/2907,所以写了这篇文章。 有token大佬珠玉在前,https://www.cnblogs.com/hejiale010426/p/17073079.html ,以及 ......
解决方案 方案 Blazor 图片 MAUI

Mysql拒绝远程访问, sql_mode=only_full_group_by的解决

MYSQL禁止远程访问解决: mysql -u root -pmysql>use mysql;mysql>update user set host = '%' where user = 'root';mysql>select host, user from user;mysql>FLUSH PRIV ......
only_full_group_by sql_mode Mysql group mode

POI Excel单元格样式超过最大数(4000或64000)的解决方案

aliases: [] tags : " #QA #Java " summary: [POI生成Excel超出的单元格样式的最大数量] author : [yaenli] notekey: [20230322-100908] 问题现象 使用Apache POI生成Excel时,如果创建的单元格样式过 ......
样式 单元 解决方案 方案 Excel

一文了解清楚kafka消息丢失问题和解决方案

前言 今天分享一下kafka的消息丢失问题,kafka的消息丢失是一个很值得关注的问题,根据消息的重要性,消息丢失的严重性也会进行放大,如何从最大程度上保证消息不丢失,要从生产者,消费者,broker几个端来说。 消息发送和接收流程 kafka生产者生产好消息后,会将消息发送到broker节点,br ......
解决方案 消息 方案 问题 kafka