集群 水平cluster redis

KingbaseES V8R6集群运维案例-- 备库数据库服务意外down分析

案例说明: KingbaseES V8R6一主二备架构的集群,两个备库节点sys_log日志分别不同时间点收到‘fast shutdown request’的日志信息,导致备库数据库服务down,需要对备库数据库服务down的原因进行分析。 集群节点信息: node12:primary node10 ......
集群 KingbaseES 案例 数据库 数据

详解Redis三大集群模式,轻松实现高可用!

转自:https://zhuanlan.zhihu.com/p/624144774 1. Redis集群简介 1.1 什么是Redis集群 Redis集群是一种通过将多个Redis节点连接在一起以实现高可用性、数据分片和负载均衡的技术。它允许Redis在不同节点上同时提供服务,提高整体性能和可靠性。 ......
集群 三大 模式 Redis

在阿里云和腾讯云的轻量应用服务器上搭建Hadoop集群

引入 本文在两台2核2g的云服务器上搭建了Hadoop集群,两台云服务器分别是阿里云(hjm)和腾讯云(gyt),集群部署规划如下: hjm gyt HDFS NameNode\SecondaryNameNode\DataNode DataNode YARN ResourceManager\Node ......
轻量 集群 服务器 Hadoop

Linux服务器使用Redis作为数据缓存,并用log4j2进行日志记录

前言 个人网站使用Vue作为前端,SpringBoot作为后端,MySQL作为数据库,但前端每次请求都会从MySQL数据库中读取数据,而MySQL数据库的数据是存储于服务器磁盘中,所以响应速度有一定影响。之前了解过一点Redis数据库,该数据库数据存储于内存中(也可以持久化于磁盘中),数据读取速度就 ......
缓存 服务器 数据 log4j2 Linux

redis和mysql的区别以及它们是如何配合使用的

redis和mysql的区别 : 1、从类型上来说,mysql是关系型数据库,redis是缓存数据库。 2、mysql用于持久化的存储数据到硬盘,功能强大,但是速度较慢。redis用于存储使用较为频繁的数据到缓存中,读取速度快。 3、mysql和redis因为需求的不同,一般都是配合使用。 mysq ......
redis mysql

K8s部署Nacos 2.0.3集群模式(外置mysql数据库)

来源:https://www.woniusnail.com/?p=1691 Nacos 具体介绍就不介绍了,详细的官方都有。 本次主要介绍在k8s集群中部署Nacos集群(3节点),数据库使用外置的 mysql ,相比使用官方的在k8s内创建数据库的方案维护更方便,所有nacos配置 全部保存在数据 ......
集群 模式 数据库 数据 Nacos

KingbaseES V8R6 集群运维案例 -- 脚本部署集群后ssh无法连接

案例说明: 在kylin V10环境下,通过脚本方式部署KingbaseES V8R6集群后,发现ssh无法连接主机,通过分析发现在脚本部署过程中会对系统环境进行优化配置,在修改了/etc/ssh/sshd_config中的usePAM=yes后,导致ssh连接不上。 适用版本: KingbaseE ......
集群 脚本 KingbaseES 案例 V8R6

基本环境安装 jdk,mq,redis,nginx

JDK:解压安装包,命令为 tar -zxvf jdk-8u381-linux-x64.tar.gz配置环境变量,使用 vim 命令(需要安装vim,安装命令为:yum install vim)修改 /etc/profile 文件,在文件末尾加入如下配置 JAVA_HOME=/usr/local/j ......
环境 redis nginx jdk

KingbaseES V8R6集群运维案例之---同一主机节点部署多个集群

案例说明: 在同一主机环境,由于生产需要,需要部署两个集群;本案例详细描述了两个集群的部署过程。 注意:同一主机部署多个集群需要先部署securecmdd服务,节点之间通过securecmdd服务通讯。多个集群共享主机的securecmdd服务在节点之间通讯。 适用版本: KingbaseES V8 ......
集群 节点 KingbaseES 多个 案例

KingbaseES V8R6 集群中复制槽非活跃状态的可能原因

背景 此问题环境是一主五备物理集群,其中node1是主节点,node2,3是集群同步节点,node4,5是集群异地异步节点,由于异地和主节点不同网段,网速非常慢。 kdts-plus工具纯迁数据,每分钟3G数据左右,单机迁移到集群主库再同步到备库。 问题现象:node4,5的复制槽active字段非 ......
集群 KingbaseES 状态 原因 V8R6

详细解释一下redis的缓存击穿、缓存雪崩的原理,以及如何避免?

缓存击穿和缓存雪崩是两种常见的缓存问题,它们会对系统性能和可用性产生负面影响。以下是对这两个问题的详细解释以及如何避免它们的方法: 缓存击穿(Cache Miss) 原理: 缓存击穿是指在高并发的情况下,多个请求同时访问缓存,但缓存中不存在所需数据。这些请求会穿透缓存,直接访问底层数据库或其他数据存 ......
缓存 雪崩 原理 redis

redis的持久化方案有哪些,分别有什么优缺点

Redis提供了多种持久化方案,以确保数据在服务器重启或故障恢复时不会丢失。以下是Redis的两种主要持久化方式,以及它们的优点和缺点: RDB(Redis DataBase)持久化: 优点: 节省空间:RDB文件是二进制的,通常比AOF文件更紧凑,因此可以节省磁盘空间。 适用于备份:RDB文件非常 ......
优缺点 方案 redis

IDEA一个项目启动多个实例,以集群启动

在微服务开发场景下,服务大多是以集群方式部署的。在本地开发时 有时候会需要以集群的方式启动项目,同时启动多个实例来测试一些相关功能(例如分布式锁),此时不需要打包之后再仍到测试环境去启动多个实例,在IDE中就可以同时启动多个实例。 首先用idea打开项目,不用打开多个idea,因为你会发现同一个项目 ......
集群 实例 多个 项目 IDEA

Redis面试题

Redis到底是多线程还是单线程 Redis 6.0版本之前的单线程指的是其网络I/O和键值对的读写是由一个线程完成的。多线程在Redis 6.0中的引入是为了改善一些特定场景下的性能问题,特别是在大型多核系统上。Redis 6.0引入了多个I/O线程,这些线程负责处理网络事件的监听和接收。主线程仍 ......
Redis

北京市的教育水平一直以来都备受瞩目

在2021年的统计数据中,北京市的普通初中教育呈现出一系列有趣的特征。首先,北京市共有335所普通初中,为34.96万名在校学生提供服务。而招生数达到12.04万人,相较于在校学生数量,这个数字表明了北京市作为中国首都的吸引力和教育资源的丰富性。 然而,令人印象深刻的是北京市的普通初中毕业人数,高达 ......
水平

kubernates的集群安装-kubadm

kubernates的集群安装-kubadm 环境准备工作(CentOS) 准备三台或以上的虚拟机 停用防火墙 sudo systemctl stop firewalld sudo systemctl disable firewalld 修改主机名(命名规则符合 DNS 标准) cat <<EOF ......
集群 kubernates kubadm

Redis缓存穿透,击穿,雪崩问题改如何解决?

无论在开发过程中还是面试过程中,这三个问题总是被遇到。下面是各个问题的原因和解决方案。 缓存穿透 原因 缓存穿透其实是缓存的单点问题,是指查询一个一定不存在的数据。如果从存储层查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到 DB 去查询,可能导致 DB 挂掉。这种情况大概率是遭到了攻 ......
雪崩 缓存 问题 Redis

一次访问Redis延时高问题排查与总结

一次访问Redis延时高问题排查与总结 https://mp.weixin.qq.com/s/f3dQIC4DBhWibyXQKBXrzg 实战总结|一次访问Redis延时高问题排查与总结(续) https://mp.weixin.qq.com/s/trbGNYZPEfzaAMz6kZ_YKg 翻译 ......
问题 Redis

Redis 全景解析

Redis 解析信息图 什么是 Redis? Redis("REmote DIctionary Service" 的缩写)是一个开源的键值数据库服务器。 对 Redis 最准确的描述是它是一个数据结构服务器。Redis 的这种特定性质使其在开发人员中非常受欢迎和广泛采用。 与其对行进行迭代、排序和排 ......
Redis

外卖项目学习之Redis

今天在学习外卖项目时,要学一个新东西--Redis,下面是对他的简短介绍: Redis是一个开源的高性能键值存储数据库,它以键值对的形式存储数据,并支持多种数据结构(例如字符串、哈希表、列表、集合、有序集合等)。它被广泛用作缓存、消息队列、发布/订阅系统等。以下是一些关键的特点和用途: 1.高性能: ......
项目 Redis

centos7安装redis

1.普通安装,非最新版本 yum install redis 2.yum安装最新redis 如果要安装最新的redis,需要安装Remi的软件源,官网地址 yum install -y http://rpms.famillecollet.com/enterprise/remi-release-7.r ......
centos7 centos redis

记录一次k8s集群升级报错

集群升级报错 failed to upgrade cluster, err: the cluster is already in upgrading, taskID: "upgradeclusterv3-cdd88149e9bb444e38f9857bbaadaad99-1656899231-041 ......
集群 k8s k8 8s

逻辑越权之水平垂直越权

水平越权 登录kobe账户,点击查看个人信息,burp抓包 把Kobe换成Lucy 如何查看水平用户,你可以自己注册两个用户,或者注册用户时显示用户已存在,或者查看其他用户发的评论等等 垂直越权 登录管理员账号 添加用户抓包,数据包to repeater 登录普通用户账号 找到普通用户cookie值 ......
逻辑 水平

使用 redis 实现分布式接口限流注解 RedisLimit

前言 很多时候,由于种种不可描述的原因,我们需要针对单个接口实现接口限流,防止访问次数过于频繁。这里就用 redis+aop 实现一个限流接口注解 @RedisLimit 代码 点击查看RedisLimit注解代码 import java.lang.annotation.*; /** * 功能:分布 ......
注解 分布式 RedisLimit 接口 redis

KingbaseES V8R6集群运维案例之---在线扩容节点通讯故障问题

案例说明: KingbaseES V8R6集群节点之间通过ssh或securecmdd工具通讯,默认节点之间通过公钥和私钥方式认证,可以密码通讯;在执行集群节点扩容时,出现以下故障,节点之间仍需要输入密码进行连接 : 适用版本: KingbaseES V8R6 一、问题分析 1、测试节点secure ......
节点 集群 KingbaseES 故障 案例

解决k8s集群中opensearch服务CrashLoopBackOff的问题

1. 前言 我使用的k8s版本是1.23.6,前面安装了Kubesphere可视化组件,然后开始的时候没有启用日志模块,而是在安装Kubesphere后启用日志系统(参考在安装后启用日志系统),安装一切正常,但是安装后验证,就出现opensearch-cluster-master-x和opensea ......

KingbaseES V8R3集群运维案例---failover切换故障分析

案例说明: KingbaseES V8R3集群主库数据库服务重启后,failover切换失败,分析failover失败的具体原因。 适用版本: KingbaseES V8R3 一、集群架构 node13 >主库(primary) node25 >管理备库(standby) node58 >备库(st ......
集群 KingbaseES failover 故障 案例

KingbaseES V8R6集群部署案例之---openEuler系统脚本部署故障

案例说明: 在openEuler系统下通过脚本方式部署KingbaseES V8R6集群,脚本执行过程中,加载vip失败。本次故障问题,主要是因为openEuler系统shell和脚本的不兼容引起。 适用版本: KingbaseES V8R6 系统环境: openEuler-22.03-LTS 一、 ......
集群 脚本 KingbaseES openEuler 故障

KingbaseES V8R3集群运维案例之---流复制异步同步及全同步模式配置

案例说明: 通过案例描述KingbaseES V8R3集群异步、同步及全同步强一致性配置,本案例为一主二备的架构。 适用版本: KingbaseES V8R3 集群架构: 集群复制配置参数说明: 1)sync_flag [kingbase@node101 bin]$ cat ../etc/HAmod ......
集群 KingbaseES 案例 模式 V8R3

KingbaseES V8R3集群运维案例之---主库数据库服务down后failover切换详解

案例说明: 对KingbaseES V8R3集群,主库数据库服务down后,failover切换进行分析,详解其执行切换的过程,本案例可用于对KingbaseES V8R3集群failover故障的分析参考。 适用版本: KingbaseES V8R3 集群架构: node_id | hostnam ......
集群 KingbaseES failover 案例 数据库