方案mysql es
mysql 在线修改表结构 onlineDDL
背景:在项目库中有几个表的数据特别大,数据条数达到几千万。由于新需求上线,要加两个字段。 如果直接在数据库用alter,会导致锁表,时长一两个小时,影响业务。所以找了pt-osc和gh-ost两个工具对比下。其他大佬已经有了这方面的记录了,比如: https://zhuanlan.zhihu.com ......
mysql数据库无法录入汉字问题
1.插入数据出现错误 show full columns from 表名;//查看数据表列编码 2. alter table 表名 change 列名 列名 varchar(自己设置) character set utf8 collate utf8_unicode_ci not null defau ......
es6
ES6 1、简介 ECMAScript 6.0(以下简称 ES6,ECMAScript 是一种由 Ecma 国际(前身为欧洲计算机制造商 协会,英文名称是 European Computer Manufacturers Association)通过 ECMA-262标准化的脚本 程序设计语言)是 J ......
mysql的CHARSET
社区版:mysql5.7: Latin1/latin1_swedish_ci mysql8.0: utf8mb4/utf8mb4_0900_ai_ci RDS默认的是utf8 MySQL 8.0 默认的是 utf8mb4_0900_ai_ci,属于 utf8mb4_unicode_ci 中的一种,具 ......
mysql查询所有表及字段的注释信息
查询information_schema.tables表,查询结果去掉4个系统库 SELECT t1.TABLE_SCHEMA 库名, t1.table_name 表名, t1.table_comment 表注释, t2.COLUMN_NAME 字段名, t2.column_comment 字段注释 ......
如何设计高可靠的订单同步方案
跨业务域数据联查和搜索的需求层面优化 为了实现对跨业务域数据的联查和搜索,例如退款单的退款状态和发货状态,订单的订单状态和退款状态,需要在需求层面进行上溯。这样可以跳出现有方案框架的局限,拓展搜索解决方案的范围,并且更清晰地认识现有方案设计和实现的前提和约束。 具体来说,这种跨业务域的联查和搜索需要 ......
GaussDB(DWS)运维:导致SQL执行不下推的改写方案
摘要:本文就针对因USING子句的书写方式可能导致MERGE INTO语句的执行不下推的场景,对USING子句的SQL语句进行改写一遍,整个SQL语句可以下推。 本文分享自华为云社区《GaussDB(DWS)运维 -- values子句做MERGE数据源导致SQL执行不下推的改写方案》,作者: 譡里 ......
4.1.1 MySQL索引原理及SQL优化
Linux C/C++服务器 MySQL索引原理及SQL优化 innodb 索引组成 一种有序的存储结构,按照单个或这多个列的值进行排序,目的是为了提升搜索效率 索引分类:主键索引、唯一索引、普通索引、组合索引、以及全文索引(elasticsearch) 主键选择 innodb 中表是索引组织表,每 ......
全自动加药装置远程维护解决方案
一、方案背景自动加药装置是一种时间程序控制,可自由设定自动加药的周期,加药量,加药时间和加药频率。以计量泵为主,装配加药箱、安全阀、止回阀、过滤器、缓冲器、阀门、底座、控制等。 在以后的系统运转过程中,到加药周期,计量泵自动打开加药,加到规定的时间计量泵关闭;到排污周期,计量泵停止加药,排到规定的时 ......
mysql集群搭建docker-compose方案
MySQL集群搭建大致有两种方式,一种是单主/多从的主从复制方式,另一种是使用Galera Cluster高可用解决方案。 1、步骤 以下我们详细介绍一下单主/多从的主从复制方式: 确认服务器环境,采用官方支持的操作系统版本和MySQL版本,并保证主从服务器之间的网络连接能够正常通信。 安装MySQ ......
mysql max_allowed_packet查询和修改
工作中经常需要导入或者导出较大的sql文件。导出时一般没问题,但在导入到其它Mysql库中,可能会出现“Packet for query is too large (1706 > 1024). You can change this value on the server by setting th ......
01解决mysql8.0无法远程登录问题
问题原因:mysql8.0服务器出于安全考虑,默认只允许本地登录数据库服务器 问题解决:登入mysql后,更改 "mysql" 数据库里的 "user" 表里的 "host" 项,从"localhost"改称"%",然后重启mysql这样就允许所有的远程机器进行访问了。步骤1:修改mysql表 my ......
scrapy架构介绍、scrapy解析数据、scrapy解析数据、持久化方案、全站爬取cnblogs文章、爬虫和下载中间件、加代理,cookie,header,加入selenium
# 1 selenium -登录cnblogs,拿到cookie,再打开cnblogs,写入cookie,它就是登录状态 -半自动点赞 》selenium生成的cookie,给requests用 -selenium操作浏览器,速度慢 -requests速度快 -动作链 -自动登录12306 # 2 ......
【标准的产品解决方案】Softerra与上海道宁为IT行业提供优质且全面的解决方案,帮助世界各地的企业应对严苛的IT挑战
Softerra为IT行业提供标准产品和解决方案以及从头开始研发定制软件,以及物联网、定制芯片和电子产品等提供嵌入式研发服务 ......
MySQL只有data文件夹(数据库同名)数据恢复
第一步,查看环境,有没有可运行的数据库服务,如果有,进行第三步,如果没有,进行第二步; 第二步,安装一个数据库服务,进行第三步; 第三步,创建一个要恢复数据同名的DB; 第四步,创建一个要恢复的数据表,比如Table1; 第五步,执行语句:ALTER TABLE Table1 DISCARD TAB ......
【Python】Jupyter Notebook:IOPub message rate exceeded. The notebook server will temporarily stop sending output to the client in order to avoid crashing it..解决方案
✨报错提示 IOPub message rate exceeded. The notebook server will temporarily stop sending output to the client in order to avoid crashing it. To change thi ......
mysql 事务
https://blog.csdn.net/m0_46836425/article/details/121851867 https://blog.csdn.net/qq_33459343/article/details/124634721 ......
[MySql] 数据库死锁的排查和相关知识
查看数据库最近的一次死锁 执行以下命令: show engine innodb status; 查询结果 ...... LATEST DETECTED DEADLOCK 2023-03-20 15:26:35 7f37cf7bc700 *** (1) TRANSACTION: TRANSACTION ......
力扣511(MySQL)-游戏玩法分析Ⅰ(简单)
题目: 活动表 Activity: 写一条 SQL 查询语句获取每位玩家 第一次登陆平台的日期。 查询结果的格式如下所示: 解题思路: 方法一:使用dense_rank() over(partition by ... order by ...):将登录时间按用户id进行分组然后升序排序,最后筛选出排 ......
力扣512(MySQL)-游戏玩法分析Ⅱ(简单)
题目: 需求:请编写一个 SQL 查询,描述每位玩家首次登陆的设备名称 查询结果格式在以下示例中: 解题思路: 方法一:使用dense_rank() over(partition by ...order by ...)先以player_id分组,再按登录时期进行排序,最后再筛选出排序为1的设备id。 ......
Mysql数据脱敏
1、姓名脱敏 update table set 列 = REPLACE(列,SUBSTR(列,2,1),'*') PS:脱敏效果:张* ,张*三 2、手机号脱敏 UPDATE table SET 列 = ( CASE WHEN 列 IS NOT NULL THEN SUBSTR (列, 1, 3) ......
TLog与Easy-Es
TLog简介 TLog能解决什么痛点 随着微服务盛行,很多公司都把系统按照业务边界拆成了很多微服务,在排错查日志的时候。因为业务链路贯穿着很多微服务节点,导致定位某个请求的日志以及上下游业务的日志会变得有些困难。 这时候很多童鞋会开始考虑上SkyWalking,Pinpoint等分布式追踪系统来解决 ......
【MySQL】通过xenon实现数据库高可用集群
[root@node01 ~]# yum install -y golang screen git[root@node01 ~]# which ip /usr/sbin/ip [root@node01 ~]# visudo mysql ALL=(ALL) NOPASSWD:/usr/sbin/ip ......
Mysql Docker
Docker部署Mysql主从复制 在docker内部,mysql5.7 与mysql8.0 目录存放位置是不一样的 echo net.ipv4.ip_forward=1>>/etc/sysctl.conf sysctl -p service network restart systemctl re ......
mysql5.7奇怪bug
看这个查询很奇怪, 1145就错,子查询返回多于 1 行。。。 1就对。 1145跟1144都不行,1143可以。 更新为0 ,是正常执行的 1145也只有一条、 表清空。还是不行。 删表,建表,重新录入,可以。 想不出什么问题,,,会是数据库bug吗。 ......
MAUI Blazor 加载本地图片的解决方案
前言 为了解决MAUI Blazor无法加载本地图片,https://github.com/dotnet/maui/issues/2907,所以写了这篇文章。 有token大佬珠玉在前,https://www.cnblogs.com/hejiale010426/p/17073079.html ,以及 ......
Mysql拒绝远程访问, sql_mode=only_full_group_by的解决
MYSQL禁止远程访问解决: mysql -u root -pmysql>use mysql;mysql>update user set host = '%' where user = 'root';mysql>select host, user from user;mysql>FLUSH PRIV ......
POI Excel单元格样式超过最大数(4000或64000)的解决方案
aliases: [] tags : " #QA #Java " summary: [POI生成Excel超出的单元格样式的最大数量] author : [yaenli] notekey: [20230322-100908] 问题现象 使用Apache POI生成Excel时,如果创建的单元格样式过 ......