集群 水平cluster redis
mysql集群高可用搭建
mysql galera 集群模式 mysql节点多主模式 对任意一个节点的mysql操作都会实时同步到集群中的所有节点mysql上 使mysql集群像是无状态对外提供服务 首节点安装 rpm -e postfix-2:2.10.1-9.el7.x86_64 rpm -e mariadb-libs- ......
vCenter集群中已孤立虚拟机解决办法
vCenter集群中已孤立虚拟机解决办法问题描述 在一次意外断电后,vCenter中的部分机器出现 已孤立 状态。 解决办法1.选中已孤立虚拟机名字,右键选择“从清单中删除”,如图。 2.打开数据存储,找到对应虚拟机名字的文件夹,进入目录后,找到.vmx后缀的文件,选中,然后点击注册虚拟机重新注册即 ......
pyspark 环境搭建和相关操作redis ,es
一.环境搭建 1. 创建虚拟环境, 指定python包 2. 切换到虚拟环境,安装你所需要的python相关模块包 3. 把整个虚拟环境打成.zip 4. 将 zip上传的hadfs 5. spark-submit 指定python包的路径 可以参考 https://dandelioncloud.c ......
A07、redis
#review #Spring全家桶 #Spring #中间件 回顾 ```markdown 1. springboot特性 版本锁定 继承官方的parent 起步依赖 完成某个功能的坐标集合体 自动装配 可以通过默认规则创建对象 2. yml配置文件 简单 对象/map 集合 3. 整合junit ......
Redis持久化
RDB 持久化 Redis 可以通过创建快照来获得存储在内存里面的数据在 某个时间点 上的副本。Redis 创建快照之后,可以对快照进行备份,可以将快照复制到其他服务器从而创建具有相同数据的服务器副本(Redis 主从结构,主要用来提高 Redis 性能),还可以将快照留在原地以便重启服务器的时候使 ......
【Azure K8S | AKS】在AKS集群中创建 PVC(PersistentVolumeClaim)和 PV(PersistentVolume) 示例
问题描述 在AKS集群中创建 PVC(PersistentVolumeClaim)和 PV(PersistentVolume) 示例 问题解答 在Azure Kubernetes Service(AKS)的官方网站中,关于存储的选项介绍中,并没有具体的yaml实例来创建PV, PVC。特别是使用自定 ......
怎么设置centos限定redis使用的内存
1、Redis-Cluster集群 2、怎么设置centos限定redis使用的内存 3、高性能高并发网站架构,教你搭建Redis5缓存集群 4、Redis-Cluster 5、「实用教程」在配备持久内存的实例上部署Redis应用 Redis-Cluster集群 1、连接如下https://redi ......
Mongodb主从复制/ 副本集/分片集群介绍
来源: https://cloud.tencent.com/developer/article/1026185 前面的文章介绍了Mongodb的安装使用,在 MongoDB 中,有两种数据冗余方式,一种 是 Master-Slave 模式(主从复制),一种是 Replica Sets 模式(副本集) ......
k8s Cluster Autoscaler
Cluster Autoscaler Cluster AutoScaler 是一个自动扩展和收缩 Kubernetes 集群 Node 的扩展。当集群容量不足时,它会自动去 Cloud Provider (支持 GCE、GKE、Azure、AKS、AWS 等)创建新的 Node,而在 Node 长时 ......
集群与分布式
集群:多个人干同样一件事情 分布式:多个人干不同的事情,合起来时一件事情 两个人都是做饭,洗菜,切菜 所以他两个是一个集群 雇人洗菜,切菜,自己做饭,三个人共同干做饭一件事,这就是分布式 集群分布式系统的有点: ......
SpringBoot 整合 redis-阿里云发送短信
### pom ```pom.xml com.aliyun aliyun-java-sdk-core 4.5.16 com.aliyun aliyun-java-sdk-dysmsapi 1.1.0 cn.hutool hutool-all 5.8.4 com.alibaba fastjson 2. ......
kubeadm集群添加新节点
###1.生成添加node节点token `kubeadm token create --print-join-command` ####结果示例 ``` kubeadm join 10.10.10.10:6443 --token xxxxxx.xxx...xxx --discovery-token ......
rabbitmq添加集群高可用
10.20.4.176机器sudo docker run -d --hostname rabbitmq1 --add-host=rabbitmq2:10.20.4.177 --add-host=rabbitmq3:10.20.4.178 --restart=unless-stopped --name ......
springboot + redis stream做轻量级消息队列
### 背景 前面我们探讨了使用redis stream做消息中间件的可行性,结论是在保证数据并发量不大, 数据敏感性不高, 且不方便使用重量级MQ,kafka的情况下可以使用. 探讨过程:https://www.cnblogs.com/qds1401744017/p/17598613.html # ......
Redis从入门到放弃(7):主从复制
## 1、概念 主从复制是Redis的一项重要特性,用于将一个Redis服务器(Master主节点)的数据复制到其他Redis服务器(Slave从节点),以实现数据的高可用性和读写分离。数据的复制是单向的,只能由主节点到从节点。 ![](https://img2023.cnblogs.com/blo ......
redis stream做轻量级消息队列的可行性
#### 背景 对于消息数量很少的场景, 尝试使用redis stream来做消息队列. #### 为什么要用redis的stream, redis的其他数据结构可以吗? 参考文章1:https://www.zhihu.com/question/43688764?sort=created 参考文章2 ......
redis 集群重启问题
redis出现链接不稳定或者链接不上的时候,需要重新启动 1.找到集群的位置上 下面的两个启动和停止命令进行停止和启动 但停止时候启动的时候可能会出现下面的问题 这是要删除 appendonly.aof 和dump.rdb文件,也可以选先将这两个先备份一下,然后启动后重新恢复,才能启动成功 end. ......
redis远程代码执行CVE-2016-8339
Redis 3.2.x < 3.2.4 版本存在缓冲区溢出漏洞,可导致任意代码执行。Redis 数据结构存储 的 CONFIG SET 命令中 client-output-buffer-limit 选项处理存在越界写漏洞。构造的 CONFIG SET 命令可导致越界写,代码执行。 漏洞利用: 修改配 ......
调用链完整方案(zipkin 集群)
一、首先摆一张基于 zipkin 的调用链数据架构图 1.1 应用程序把搜集到 span 信息发送到 kafka 1.2 zipkin 消费 kafka 中消息 1.3 zipkin 将数据写入到 mysql 1.4 为 zipkin 集群配置反向代理,路由 web ui 请求 二、接下来描述每个步 ......
Redis基础
Redis是一个基于内存的key-value结构数据库。Redis 是互联网技术领域使用最为广泛的存储中间件,它是【Remote Dictionary Service】的首字母缩写,也就是【远程字典服务】。 基于内存存储,读写性能高 适合存储热点数据(热点商品、资讯、新闻) 企业应用广泛 Redis ......
运维——CentOS7 安装redis
转自:https://www.cnblogs.com/Mr-xy/p/17055453.html 1.检查是否有redis yum 源 yum install redis 2.下载fedora的epel仓库 yum install epel-release 3.安装redis yum install ......
nginx1.20-tomcat9-redisson集群,好像不怎么完善
配置信息 在同一台服务器上使用nginx做反向代理与两个tomcat组成简易tomcat集群 使用 nginx端口80 tomcat1端口21005,21080,21009 tomcat2端口22005,22080,22009 配置过程 1. 先下载apache-tomcat-9.0.78,解压到两 ......
Redis中Key中为什么要使用{}
Redis集群介绍 Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。 Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误. Redis 集群通过分区来提供一定程度的可用性,在实 ......
Lua script attempted to access a non local key in a cluster node 问题解决
一、问题描述 最近优化公司需要对不同的业务系统的缓存工具提供一个标准化的解决方案。各个业务系统将缓存数据通过map结构进行存储,然后在缓存系统中将这些map获取出来,然后保存在redis数据库中。技术经理想到的最好解决方案是将map集合直接存储在redis的hash表中。但是要求对hash表中的每个 ......
软件测试|redis的穿透、击穿、雪崩有什么不同点
**前言** 作为一种非关系型数据库,redis也总是免不了有各种各样的问题。如何有效的理解并且区分 Reids 穿透、击穿和雪崩之间的区别,一直以来都挺困扰我的一个难题,下面将一一举例。 **(一)缓存穿透** **关键词:穿过 Redis 和数据库** 当 Redis 和数据库中都没有我们想要的 ......
patriotic 集群管理
2022-05-05 346 安装环境 主机名ip角色 cs1 192.168.43.10 etcd、patroni、postgresql cs2 192.168.43.11 etcd、patroni、postgresql cs3 192.168.43.12 etcd、patroni、postgre ......
scrapy源码分析:redis分布式爬虫队列中,priority值越大,优先级越高
# scrapy源码分析:redis分布式爬虫队列中,priority值越大,优先级越高 # 一、背景 scrapy爬虫项目中,遇到scrapy的priority属性,搞不懂priority的值越大优先级越高,还是值越小优先级越高 ```python # 通过priority修改优先级 return ......
Redis 发生高延迟时
Redis 是一种内存数据库,将数据保存在内存中,读写效率要比传统的将数据保存在磁盘上的数据库要快很多。但是 Redis 也会发生延迟时,这是就需要我们对其产生原因有深刻的了解,以便于快速排查问题,解决 Redis的延迟问题 一条命令执行过程 在本文场景下,延迟 (latency) 是指从客户端发送 ......
Redis 内存管理机制和实现
Redis是一个基于内存的键值数据库,其内存管理是非常重要的。本文内存管理的内容包括:过期键的懒性删除和过期删除以及内存溢出控制策略。 最大内存限制 Redis使用 maxmemory 参数限制最大可用内存,默认值为0,表示无限制。限制内存的目的主要 有: 用于缓存场景,当超出内存上限 maxmem ......