redis mysql es

07-Redis 多API开发实践

Redis提供了各类开发语言的API,方便开发语言连接使用Redis。 https://redis.io/clients 官方网站提供了不同开发语言的API程序。 网中,给我们提供了很多种Python连接redis的API,我们通常选择有“笑脸”并且带有“星号”的使用 这里我们推荐使用redis-p ......
Redis API 07

05-redis-sentinel(哨兵)

一、redis-sentinel介绍 Redis-Sentinel是Redis官方推荐的高可用性(HA)解决方案,当用Redis做Master-slave的高可用方案时,假如master宕机了,Redis本身(包括它的很多客户端)都没有实现自动进行主备切换,而Redis-sentinel本身也是一个 ......
哨兵 redis-sentinel sentinel redis 05

04-redis主从复制

一、主从复制特性 使用异步复制。 一个主服务器可以有多个从服务器。 从服务器也可以有自己的从服务器。 复制功能不会阻塞主服务器。 可以通过复制功能来让主服务器免于执行持久化操作,由从服务器去执行持久化操作即可 当配置Redis复制功能时,强烈建议打开主服务器的持久化功能。 否则的话,由于延迟等问题, ......
主从 redis 04

03-redis事务,锁和服务器管理命令

一、redis中的事务 redis中的事务跟关系型数据库中的事务是一个相似的概念,但是有不同之处。关系型数据库事务执行失败后面的sql语句不在执行,而redis中的一条命令执行失败,其余的命令照常执行。 redis中开启一个事务是使用multi,相当于begin\start transaction, ......
命令 事务 服务器 redis 03

01-redis的安装和基本配置

一、redis简介 1、Redis是一款开源的,ANSI C语言编写的,高级键值(key-value)缓存和支持永久存储NoSQL数据库产品。 2、 Redis采用内存(In-Memory)数据集(DataSet) 。 3、支持多种数据类型。 4、运行于大多数POSIX系统,如Linux、*BSD、 ......
基本配置 redis 01

02-redis的持久化和数据类型

一、redis持久化 1.1 持久化类型 |持久化类型 | 介绍|优点|缺点 | | | | |-- |RDB持久化 | 可以在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot)。|速度快,适合于用做备份,主从复制也是基于RDB持久化功能实现的。|会有丢失部分数据 ......
类型 数据 redis 02

redis安装

#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat ......
redis

mysql5.7安装

#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat ......
mysql5 mysql

mysql查询中返回一列序号

可以设一个变量,然后赋值。 select (@i:=@i+1) as aid, signup.* from signup,(select @i:=0) as it WHERE 1=1 and id = 12 注:signup是表名,aid是返回的自增长的序号 前端: aid * (page-1) * ......
序号 mysql

0x13.mysql注入

基本判断 定义:后台服务器在接收相关参数时未做好过滤直接带入到数据库中查询,导致可以拼接执行构造的SQL语句 常见组合: asp+access/sqlserver aspx+sqlserver php+mysql jsp+mysql/sqlserver/oracle 静态与动态: 判断方式:docu ......
mysql 0x 13

Redis设计与实现-15.复制

redis可以通过SLAVEOF命令去复制(同步)另一台服务器,例如: 当前有两台redis服务器其信息为: hostname ip port redis_1 127.0.0.1 6379 redis_2 127.0.0.1 12345 如果redis_2想要同步redis_1的内容,可以在redi ......
Redis 15

kafka 自定义开发Sink Connector组件(兼容mysql和oracle)

1.情景展示 目前,市场上已有不少能从kafka消费数据的插件,如:io.confluent.connect.jdbc.JdbcSinkConnector,但这个组件有个致命的问题是,只能同步字符串类型。 具体意思是:源库源表的日期类型字段,往目标库目标表插入数据的时候,只能是字符串类型,无法自动将 ......
组件 Connector oracle kafka mysql

MySQL安装

安装 tar -zxvf mysql-5.7.43-el7-x86_64.tar.gz -C /usr/local/ cd /usr/local mv mysql-5.7.43-el7-x86_64 mysql cd /usr/lcoal/mysql groupadd mysql useradd - ......
MySQL

[升级] MySQL升级步骤及注意事项

升级步骤 a. 备份数据库(包括schema,data,routines(function,triggers etc) b. 修复util.checkForZSzerverUpgrade()发现的问题 c. 添加innodb_fast_shutdown=0来彻底的关闭mysql d. 更新mysql ......
注意事项 步骤 事项 MySQL

MySQL

基础篇 转载地址:https://dhc.pythonanywhere.com/article/public/1/#h2-u901Au7528u8BEDu6CD5u53CAu5206u7C7B 通用语法及分类 DDL: 数据定义语言,用来定义数据库对象(数据库、表、字段) DML: 数据操作语言,用 ......
MySQL

通过docker环境mysqldump全量备份mysql数据库

应用场景:生产环境mysql数据库大小5G以内(超过15G推荐使用xtrabackup工具),在数据库以外的一台机器上做每天全量备份,以防止数据丢失 1.首先导入最新的mysql 镜像 可以联网的环境下 #下载docker镜像docker pull mysql:5.7.44 #查看docker镜像d ......
备份 mysqldump 环境 数据库 数据

Redis哨兵内存碎片化故障处理

背景介绍 近期研发同学反馈业务响应波动厉害,怀疑是Redis操作key比较慢的缘故。由于该环境是我一手安装部署的,我将进行问题排查。 Redis环境以及业务环境都已经使用Prometheus进行了监控。 环境说明 我们有两套一样的环境来服务不同的客户,另外一套环境中业务一直平稳运行,Redis并没有 ......
哨兵 碎片 故障 内存 Redis

MySql的information_schema.processlist库学习之"如何检测出大数据sql查询"

1.如何通过MySql检测出大数据sql查询 一般数据库都会存在:information_schema数据库 检测出大数据sql查询[time时间越长说明,数据量越大,要根据公司的限度来衡量,我的思路是500以上都要查看是否是大数据的范畴] 2.案例 -- 检测出大数据sql查询[time时间越长说 ......

ES 修改 Mapping

https://www.cnblogs.com/ititit111222333/p/16382887.html 新建v1 index PUT /test_v1 设置v1 mapping POST /test_v1/_mapping { "properties": { "itemId": { "typ ......
Mapping ES

ES 进行数据迁移 reindex (加速)

https://www.cnblogs.com/ititit111222333/p/16382943.html 修改批量大小值 POST _reindex { "source": { "index": "源索引名称", "size": 5000 }, "dest": { "index": "迁移的索 ......
reindex 数据 ES

【MYSQL高级】Mysql找出执行慢的SQL【慢查询日志使用与分析】

分析慢SQL的步骤1.慢查询的开启并捕获:开启慢查询日志,设置阈值,比如超过5秒钟的就是慢SQL,至少跑1天,看看生产的慢SQL情况,并将它抓取出来2.explain + 慢SQL分析3.show Profile。(比explain还要详细,可以查询SQL在MySQL数据库中的执行细节和生命周期情况 ......
MYSQL Mysql 日志 SQL

Windows下的Redis启动报错Redis service failed to start解决方法

报错原因:Redis服务没有找到log文件 解决方法 在Redis安装目录下打开redis.windows-service.conf文件 搜索logfile,找到logfile存放目录,一般默认为Logs/redis_log.txt 在Redis安装目录创建Logs文件夹,在Logs文件夹下创建re ......
Redis Windows service 方法 failed

mysql 配置主从复制

主库配置 # Binary Logging. # log-bin log-bin=mysql-bin #[必须]启用二进制日志 # Error Logging. log-error="mysql-error.log" # Server Id. server-id=200 #不同步的数据库,可设置多个 ......
主从 mysql

Mysql报语法错误,排查竟然花了一个钟!!!!

背景:最近协助远程同事开发一个功能,我调用同事写的接口,发现报错,,同事正在处理其他事情,暂时无暇顾及。遂自行解决。查看日志发现,发现一个inser语句报语法错误。 解决过程:1、找到报错的日志,查看sql。如果没有,打开mybatis-plus日志输出。 2、将sql复制出来在mysql客户端模拟 ......
语法 错误 Mysql

什么是 MySQL JDBC 连接池中最高效的连接检测语句?

在回答这个问题之前,首先我们看看 MySQL 中有哪些常用的 JDBC 连接池: c3p0 DBCP Druid Tomcat JDBC Pool HikariCP 这些连接池中,c3p0 是一个老牌的连接池,很多流行框架,在其老版本中,都将 c3p0 作为默认的连接池。 DBCP 和 Tomcat ......
语句 MySQL JDBC

Redis相关

2023.12.26 臭宝今天早上起床没拉粑粑,so sad o(╥﹏╥)o 1.Redis为什么快? Redis是存在内存中的,Redis是单线程的,避免上下文切换。 渐进式Rehash Redis的所有数据都是存在一个hash数组上的,hash数组每个元素都是一个链表(所有类型都是,如Strin ......
Redis

MYSQL 事务

事务 定义 事务就是一组数据库操作序列(包含一个或多个sql操作命令),事务会把所有操作看作是一个不可分割的整体向数据库系统提交或撤销操作,所有操作要么都执行,要么都不执行。 事务是一个不可分割的工作逻辑单元,在数据库系统上执行并发操作时,事务是最小的控制单元。 事务适用于多用户同时操作的数据库系统 ......
事务 MYSQL

Mysql如何查看操作记录

分为文件记录日志和数据库记录日志两种方式,效果相同 一 、文件记录数据库操作日志首先进入mysql输入指令 show variables like 'gen%'; general_log是开启还是关闭状态,以及这个帐号的general_log文件在哪如果没有开启,请先设置开启 set global ......
Mysql

MySql之json_extract函数处理json字段

转自:链接:https://juejin.cn/post/7103482347894358046 MySql之json_extract函数处理json字段 在db中存储json格式的数据,相信大家都或多或少的使用过,那么在查询这个json结构中的数据时,有什么好的方法么?取出String之后再代码中 ......
json 字段 json_extract 函数 extract

MySQL的事务(看看也许有帮助呢)

MySQL的事务 一、事务的概念 在MySQL中,只有InnoDB存储引擎才支持事务。 事务的处理用来维护数据库数据的完整性,保证同一个事务里的一批SQL语句,要么全部执行,要么全部不执行。 事务用来管理DDL、DML、DCL操作,比如insert、update、delete语句,默认自动提交,即执 ......
事务 MySQL