主从redis集群
死锁、内部碎片、外部碎片、多进程/多线程、服务器高并发、集群
死锁：两个（多个）线程互相等待对方数据的过程 1.死锁产生条件（解决办法）： 🔴 互斥条件：所需求的资源具有排他性，其他请求进程只能等待（可以允许多进程、多线程访问） 🔴 不剥夺条件：未主动释放，不能被其他进程夺走（可以强制剥夺） 🔴 请求和保持：进程或线程至少持有一个资源，并且在等待其他资源 ......
14-Mysql主从复制
一、mysql复制原理 1.1 主从复制原理过程 从库的I/O thread 线程会读取master info 文件 获取主库的 user,password port信息然后还会获取上次获取主库二进制日志的位置 如3640 就是00003这个文件640这个位置，主库收到从库的请求后，会验证用户名密码 ......
后端技术：Redis进行数据缓存的两种方法
在fastapi项目中Redis进行数据缓存的两种不同的方法的demo 第一种方法：通过FastAPI应用状态 准备文件：models/redis.py为fastapi的数据库模型文件 import os import aioredis from aioredis import Redis asyn ......
Redis进阶 Lua基本库
【String库】 1.获取长度，相当于# 2.大小写 相当于C#里面的 3.获取子字符串，注意下标从1开始 结尾默认数字是-1。负数指从后往前数 【table库】 ......
【Redis】应用[2]
1、缓存设计 Redis常用来做数据库的缓存，应用先到Redis读取数据，缓存不存在的话才会去访问数据库，拿到数据后将数据缓存在Redis中，这样后续请求可以直接命中缓存，减少访问数据库的次数。 1.1、缓存失效 缓存雪崩 通常缓存在Redis中的数据会设置过期时间，那么，当大量的缓存数据在同一时间 ......
06-redis的cluster集群
一、介绍 Redis 集群是一个可以在多个 Redis 节点之间进行数据共享的设施（installation）。 Redis 集群不支持那些需要同时处理多个键的 Redis 命令， 因为执行这些命令需要在多个 Redis 节点之间移动数据， 并且在高负载的情况下， 这些命令将降低 Redis 集群的 ......
07-Redis 多API开发实践
Redis提供了各类开发语言的API，方便开发语言连接使用Redis。 https://redis.io/clients 官方网站提供了不同开发语言的API程序。 网中，给我们提供了很多种Python连接redis的API，我们通常选择有“笑脸”并且带有“星号”的使用 这里我们推荐使用redis-p ......
05-redis-sentinel（哨兵）
一、redis-sentinel介绍 Redis-Sentinel是Redis官方推荐的高可用性(HA)解决方案，当用Redis做Master-slave的高可用方案时，假如master宕机了，Redis本身(包括它的很多客户端)都没有实现自动进行主备切换，而Redis-sentinel本身也是一个 ......
04-redis主从复制
一、主从复制特性 使用异步复制。 一个主服务器可以有多个从服务器。 从服务器也可以有自己的从服务器。 复制功能不会阻塞主服务器。 可以通过复制功能来让主服务器免于执行持久化操作，由从服务器去执行持久化操作即可 当配置Redis复制功能时，强烈建议打开主服务器的持久化功能。 否则的话，由于延迟等问题， ......
03-redis事务，锁和服务器管理命令
一、redis中的事务 redis中的事务跟关系型数据库中的事务是一个相似的概念，但是有不同之处。关系型数据库事务执行失败后面的sql语句不在执行，而redis中的一条命令执行失败，其余的命令照常执行。 redis中开启一个事务是使用multi，相当于begin\start transaction， ......
01-redis的安装和基本配置
一、redis简介 1、Redis是一款开源的，ANSI C语言编写的，高级键值(key-value)缓存和支持永久存储NoSQL数据库产品。 2、 Redis采用内存(In-Memory)数据集(DataSet) 。 3、支持多种数据类型。 4、运行于大多数POSIX系统，如Linux、*BSD、 ......
02-redis的持久化和数据类型
一、redis持久化 1.1 持久化类型 |持久化类型 | 介绍|优点|缺点 | | | | |-- |RDB持久化 | 可以在指定的时间间隔内生成数据集的时间点快照（point-in-time snapshot）。|速度快，适合于用做备份，主从复制也是基于RDB持久化功能实现的。|会有丢失部分数据 ......
redis安装
#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat ......
Redis设计与实现-15.复制
redis可以通过SLAVEOF命令去复制（同步）另一台服务器，例如： 当前有两台redis服务器其信息为： hostname ip port redis_1 127.0.0.1 6379 redis_2 127.0.0.1 12345 如果redis_2想要同步redis_1的内容，可以在redi ......
Redis哨兵内存碎片化故障处理
背景介绍 近期研发同学反馈业务响应波动厉害，怀疑是Redis操作key比较慢的缘故。由于该环境是我一手安装部署的，我将进行问题排查。 Redis环境以及业务环境都已经使用Prometheus进行了监控。 环境说明 我们有两套一样的环境来服务不同的客户，另外一套环境中业务一直平稳运行，Redis并没有 ......
EMQX集群的创建和使用
EMQX的安装 Ubuntu 本页将指导您如何在 Ubuntu 系统中下载安装并启动 EMQX。 通过 Apt 源安装 EMQX 支持通过 Apt 源安装，免除了用户需要手动处理依赖关系和更新软件包等的困扰，具有更加方便、安全和易用等优点。如希望通过 Apt 源安装 EMQX，可参考如下步骤。 1. ......
Logstash：如何连接到带有 HTTPS 访问的集群
https://blog.csdn.net/UbuntuTouch/article/details/126868040 前段时间，有一个开发者在评论区问了一个问题：如何运用 Logstash 采集数据，并写入到带有 HTTPS 的 Elasticsearch 集群中。我们知道，在 Elasticse ......
minio集群的部署【nginx+minio]
1、 配置MinIO集群配置本地解析在/etc/hosts中配置 vim /etc/hosts #添加以下内容，每台MinIO节点都需要配置 192.168.5.1 minio-1 192.168.5.2 minio-2 192.168.5.3 minio-3 192.168.5.4 minio-4 ......
Windows下的Redis启动报错Redis service failed to start解决方法
报错原因：Redis服务没有找到log文件 解决方法 在Redis安装目录下打开redis.windows-service.conf文件 搜索logfile，找到logfile存放目录，一般默认为Logs/redis_log.txt 在Redis安装目录创建Logs文件夹，在Logs文件夹下创建re ......
mysql 配置主从复制
主库配置 # Binary Logging. # log-bin log-bin=mysql-bin #[必须]启用二进制日志 # Error Logging. log-error="mysql-error.log" # Server Id. server-id=200 #不同步的数据库，可设置多个 ......
Redis相关
2023.12.26 臭宝今天早上起床没拉粑粑，so sad o(╥﹏╥)o 1.Redis为什么快？ Redis是存在内存中的，Redis是单线程的，避免上下文切换。 渐进式Rehash Redis的所有数据都是存在一个hash数组上的，hash数组每个元素都是一个链表（所有类型都是，如Strin ......
GlusterFS集群安装
GlusterFS集群安装 GlusterFS 参考链接：https://zhuanlan.zhihu.com/p/586419358 安装环境准备 服务器编号 OS IP GFS1 CentOS7.9-2009 192.168.1.15 GFS2 CentOS7.9-2009 192.168.1. ......
如何通过port-forward命令在本地访问 k8s 集群服务
公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享 概述 在我们访问k8s中的pod服务时，一般通过node port映射pod端口进行访问，还有一种是通过ingress或者istio通过域名方式来访问，虽然两种方式能满足我们需求，但是如果针对临时访问，配置起来还是有点复杂和 ......
centos7 安装mysql 8.0.34 并配置主从
mkdir -p /data/mysql/data /data/mysql/log groupadd mysqluseradd -g mysql mysqlchown -R mysql:mysql /data/mysql/ #/etc/my.cnf 配置文件 [client]port = 3306 ......
Redis进阶 Lua函数
1.可以直接声明一个局部变量来接收函数，也可以直接简写 local square=function(i) return i*i end 简写： local function square(i) return i*i end 2.当调用函数时，参数是一一对应的，如果多了参数，则会忽略，少则会将对应位置 ......
mysql主从同步原理
(1) master服务器将数据的改变记录二进制binlog日志，当master上的数据发生改变时，则将其改变写入二进制日志中 (2) slave服务器会在一定时间间隔内对master二进制日志进行探测其是否发生改变，如果发生改变，则开始一个IOThread请求master二进制事件 (3)同时主节 ......
美团面试：ES+Redis+MySQL高可用，如何实现？
文章很长，且持续更新，建议收藏起来，慢慢读！疯狂创客圈总目录 博客园版 为您奉上珍贵的学习资源 ： 免费赠送 :《尼恩Java面试宝典》 持续更新+ 史上最全 + 面试必备 2000页+ 面试必备 + 大厂必备 +涨薪必备 免费赠送 :《尼恩技术圣经+高并发系列PDF》 ，帮你 实现技术自由，完成职 ......
Ubuntu上安装、使用Redis的详细教程
sudo apt-get update sudo apt-get install redis 启动方式二systemctl start redis-server启动方式三service redis-server start重启redisservice redis-server restart关闭re ......