差异mysql tidb sql

【解决方案】MySQL5.7 百万数据迁移到 ElasticSearch7.x 的思考

在日常项目开发中,可能会遇到使用 ES 做关键词搜索的场景,但是一般来说业务数据是不会直接通过 CRUD 写进 ES 的。 因为这可能违背了 ES 是用来查询的初衷,数据持久化的事情可以交给数据库来做。那么,这里就有一个显而易见的问题:ES 里的数据从哪里来? 本文介绍的就是如何将 MySQL ... ......

Mysql定时备份 Using a password on the command line interface can be insecure

最近运维过程中需要备份Mysql数据库,网上找bat脚本执行发现提示不能直接在脚本里放密码,Using a password on the command line interface can be insecure,应该是高级的mysql数据库的安全策略。 首先建一个bat文件 --default ......
备份 interface password insecure command

细说SQL与ETL之间的小秘密

本文分享自华为云社区《GaussDB数据库SQL系列-SQL与ETL浅谈》,作者:Gauss松鼠会小助手2。 一、前言 在SQL语言中,ETL(抽取、转换和加载)是一种用于将数据从源系统抽取到目标系统的过程。ETL过程通常包括三个阶段:抽取(Extract)、转换(Transform)和加载(Loa ......
之间 秘密 SQL ETL

数据库系列:MySQL不同操作分别用什么锁?

数据库系列:MySQL慢查询分析和性能优化 数据库系列:MySQL索引优化总结(综合版) 数据库系列:高并发下的数据字段变更 数据库系列:覆盖索引和规避回表 数据库系列:数据库高可用及无损扩容 数据库系列:使用高区分度索引列提升性能 数据库系列:前缀索引和索引长度的取舍 数据库系列:MySQL引擎M ......
数据库 数据 MySQL

MySQL 日志管理

错误日志 主要是用来记录MySQL服务器启动、运行或停止时遇到的问题,像使用 mysql --initialize初始化mysql的基础数据时候,默认给root用户生成的密码就放在错误日志里面。 错误日志的配置只需要一个配置选项即可: log_error :指定错误日志的存放位置和文件名 例如: l ......
MySQL 日志

使用SQL查询elasticsearch

目录SQL REST APIkibana DevToolsJava其他 elasticsearch Query DSL 太难写了,所以我放弃啦🤣 SQL REST API kibana DevTools 直接POST /_sql端点即可调试。示例: POST /_sql?format=csv { ......
elasticsearch SQL

mysql join

select * from a,b 等同于inner join join 有两种执行方式 Nested Loop Join(嵌套循环连接):这是最简单和最基础的连接算法。它会遍历一个表中的每一条记录,并与另一个表进行比较,以查找匹配的记录。这种方法适用于较小的表或者没有索引的情况。 其中Nested ......
mysql join

同事写了一条 SQL,把 MyBatis 都干翻了。。

作者:Lxlxxx 链接:https://juejin.cn/post/7221461552343072828 前言 继上次线上CPU出现了报警,这次服务又开始整活了,风平浪静了没几天,看生产日志服务的运行的时候,频繁的出现OutOfMemoryError,就是我们俗称的OOM,这可还行! 频繁的O ......
同事 MyBatis SQL

tidb断电pd数据被破坏修复

思路:找到cluster id 和 分配的id 启动单点的pd pd-recover修复pd 恢复成pd集群 强制删除多个pd 启动tidb集群 1、pd的日志报错 [root@localhost log]# pwd /tidb-deploy/pd-2379/log [root@localhost ......
数据 tidb

查找说明性弹性域SQL

查找说明性弹性域: SELECT fnd_dfv.title, fnd_dfv.descriptive_flexfield_name, fnd_dfv.form_context_prompt, fnd_dfc.descriptive_flex_context_code, fnd_dfc.descri ......
说明性 弹性 SQL

sql 查询慢

查询慢的原因 网络 CPU IO 上下文切换 系统调用 生成统计信息 锁等待时间 是否向数据库请求不需要的数据 减少IO 确认应用程序是否在检索大量超过需要的数据:数据量大时排序时可能不使用索引排序 可能30% 数据 确认mysql 服务层是否在分析大量超过需要的数据行不需要的 查询不需要的记录 l ......
sql

hive执行sql报错 FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask

前言: 执行hive sql报错,sql逻辑是两个表左连接并将数据插入新的表中。 报错信息: [ERROR] 2023-12-05 15:49:49.165 +0800 - execute sql error: Error while processing statement: FAILED: Ex ......
hive MapredLocalTask Execution FAILED apache

mysql 索引优化

MySQL索引优化是提高数据库性能的关键步骤之一。下面是一些建议,以帮助你优化MySQL索引: 最左前缀原则:确保查询条件使用了索引的最左侧列。如果查询没有涵盖索引的最左侧列,索引将不会被使用。 选择性原则:具有高选择性的索引(即返回结果集中较小部分的索引)通常更有效。使用具有唯一值的列作为索引键可 ......
索引 mysql

MySQL 优化

以下是 SQL 查询的典型执行顺序: FROM 和 JOIN 这里确定了要从哪些表中查询数据以及如何进行表之间的连接。 WHERE 过滤出不符合条件的记录。 GROUP BY 将来自多个记录的数据值分组为一个数据集或根据某些条件进行分组。 HAVING 在 GROUP BY 之后对分组进行过滤。通常 ......
MySQL

Docker部署MySQL

一、简介 MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS (Relational Database Management System,关系数据 ......
Docker MySQL

MySQL-03基本的SELECT语句(基础)

课程中,第二章是MySQL环境搭建,因为我是网上找的博客,下载zip,直接安装的,就没看视频,所以没有第二章笔记。这里给出MySQL社区版下载地址。 C-03.基本的SELECT语句 1.SQL概述 1.1 SQL背景知识 1974年,IBM研究员发布了一篇揭开数据库技术的论文《SEQUEL:一门结 ......
语句 基础 SELECT MySQL 03

docker创建mysql集群

一、创建mysql的节点目录 # 创建第一个节点 mkdir /home/mysql-cluster/node1 cd /home/mysql-cluster/node1 mkdir conf data files log # 创建第二个节点 mkdir /home/mysql-cluster/no ......
集群 docker mysql

数据库总结复习(sql应用题 二)

目录前言关系代数关系间运算条件表达式使用案例语法树例子 前言 本文针对考纲上的30分sql应用题所涉及到的知识进行归纳总结。 分为两篇文章,本篇为关系代数相关知识点。 关系代数 关系间运算 关系和关系之间需要用到以下关系运算符: 其中,连接从连接条件上分,等值连接,非等值连接。上图不加任何条件的连接 ......
应用题 数据库 数据 sql

SQL 数据库语句- 创建和管理数据库

SQL CREATE DATABASE 语句 SQL CREATE DATABASE 语句用于创建一个新的 SQL 数据库。 语法 CREATE DATABASE 数据库名称; 示例 以下 SQL 语句创建了一个名为 "testDB" 的数据库: CREATE DATABASE testDB; 通过 ......
数据库 数据 语句 SQL

orm打印原生sql语句方法

方式一: 使用print打印时在queryset对象后使用.query book_qs = models.Book.objects.filter(pk=1).values('publish__name','title') print(book_qs.query) 打印结果: SELECT `app0 ......
语句 方法 orm sql

sql-3.1外键

从表 CREATE TABLE `student1` ( `id` INT NOT NULL AUTO_INCREMENT COMMENT'id', `greadid` INT(11) NOT NULL COMMENT 'gradeid', `pwd` VARCHAR(23) COMMENT '密码 ......
sql 3.1

大数据实验——mysql服务的启动

黑马程序的mysql服务启动密码是hadoop 直接在主控制台上输出mysql -u root -p 然后输入密码进入mysql服务 剩下的就是在finallshell里面进行一些建表增删改查操作, 还有一个问题就是通过java代码进行对表数据的增删改查 我才用的方法是在Navicat里面建一个no ......
据实 大数 mysql

【MySQL】回收普通用户对其他库的查询权限,普通用户只能看见自己的表

如何解决已回收权限的普通用户对其他库的查看权限? 正常来说,普通用户自己创建的数据库表的权限无法被回收,如果用户曾经被授权过所有权限,取消权限后,依然可以看见其他库。其原因就是被授予了grant option权限,需要手动取消 "WITH GRANT OPTION"是MySQL中的一个选项,用于将授 ......
用户 权限 MySQL

mybaits的sql执行控制台有的打印,有的不打印

最近公司打算拿一个老的产品进行二次开发然后卖给客户 让我先熟悉熟悉了解了解 万年老系统:项目的技术是jsp前后端一体化的,并且系统代码量庞大 废话少说 遇到的问题就是有的sql控制台打印 有的sql控制台不打印 打断点打的眼都花了 最后发现的问题点是 项目中引入的log4j的依赖有两个 去掉一个就好 ......
控制台 mybaits sql

19、oracle慢sql查询

oracle慢sql查询 SELECT * FROM (SELECT SQL_TEXT, EXECUTIONS, ELAPSED_TIME / 1000000 AS ELAPSED_SECONDS, CPU_TIME / 1000000 AS CPU_SECONDS, FETCHES, DISK_R ......
oracle sql

mysql与elasticsearch

索引(Index),就是相同类型的文档的集合。 例如: 所有用户文档,就可以组织在一起,称为用户的索引; 所有商品的文档,可以组织在一起,称为商品的索引; 所有订单的文档,可以组织在一起,称为订单的索引; 数据库的表会有约束信息,用来定义表的结构、字段的名称、类型等信息。因此,索引库中就有映射(ma ......
elasticsearch mysql

MySQL创建用户并赋权

最简单(全部赋权) 语法 # 创建用户 CREATE USER 'username'@'%' IDENTIFIED BY 'mypassword'; # 赋权所有 GRANT ALL PRIVILEGES ON *.* TO 'username'@'%'; # 刷新权限 FLUSH PRIVILEG ......
赋权 用户 MySQL

dhango要迁移时mysql安装及配置

一、apt安装MySQL sudo apt-get update #更新源 sudo apt-get install mysql-server #安装 sudo apt install net-tools 二、MySQL服务管理 sudo service mysql status # 查看服务状态 ......
dhango mysql

mysql 日志配置

在mysql的my.ini中,如果不做配置,mysql自动以hostname.err命名,用户电脑名称若有图标或者一些特殊符号,会导致日志文件无法创建,从而引发mysql服务无法启动。因此建议主动配置,参考如下:log_error="../data/LogName.log",LogName建议使用英 ......
mysql 日志

SQL Pretty Printer for SSMS 很不错的SQL格式化插件

写SQL语句或者脚本时,看到凌乱的格式就头大了,于是决心找一款SQL语句格式化的工具。功夫不负有心人还真的被我找到一款很好用,很方便的SQL Server插件:SQL Pretty Printer for SSMS。安装SQL Pretty Printer 以后你可以在 SSMS (SQL Serv ......
SQL 插件 Printer 格式 Pretty