集群 水平cluster redis
Redis安装与使用、redis主从复制、redis集群
# Redis 文章内容主要参考b站 运维实战课程 的redis视频：[redis的课程介绍_哔哩哔哩_bilibili](https://www.bilibili.com/video/BV1cP4y1D7yh?p=1) ## 简介 1.Redis是一个缓存数据库，主要是做缓存。什么是缓存？也就是缓 ......
Redis-cluster windows搭建
一、Redis cluster 搭建步骤 1、Buby环境搭建以及Redis安装 zlib安装 i. 下载地址：http://zlib.net/ ii. tar xf zlib-1.2.11.tar.gz –C /usr/local/src iii. cd /usr/local/src/zlib-1 ......
ES集群搜索稳定性保障
如果将 Elasticsearch（ES）作为线上C端服务的查询引擎，那么 search query 的响应时间则至关重要。因为毕竟面向C端用户，如果一个搜索请求 1 秒内还未返回，那么用户将不可接受。 因此，C端服务对ES的性能稳定性做了许多工程上的优化，比如： 1. 强制将索引的段文件设置为1， ......
Redis持久化(备份)
Redis持久化分为两种ROB/AOF ROB：运用的快照的原理，默认开启， 备份条件：时间线/数量线（60 ：10000） ①时间到达60秒，检测访问数量是否达到10000，如果达到进行备份操作，如果没到达(哪怕是9999)继续计时，直至达到下一个约定条件 ②访问数量达到10000，查看时间是否达 ......
CentOS 7安装Redis6
# 安装步骤 若系统没有安装`wget`，需要先安装`wget` ``` yum -y install wget ``` 从官网下载redis ``` wget https://download.redis.io/releases/redis-6.2.3.tar.gz ``` 将下载的文件解压至`/ ......
Redis持久化
## 1.描述 redis的持久化是为了避免进程突然退出导致数据永久丢失，需要将redis中的数据以某种形式从内存保存到硬盘中。当redis再次重启时，通过这些redis持久化文件对进程结束之前的数据进行数据恢复。 redis持久化的方式有RDB持久化和AOF持久化两种。**RDB持久化是通过将数据 ......
Spring缓存抽象怎么和redis进行集成
一.在Maven pom.xml文件中加入Redis包 <!--redis--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-redis</artifactId> < ......
Redis-基础篇
本文为针对[黑马课程redis](https://www.bilibili.com/video/BV1cr4y1671t/?spm_id_from=333.1007.top_right_bar_window_custom_collection.content.click)所总结笔记。 # 基础知识 ......
虹科干货 | 什么是Redis数据集成（RDI）？
Redis 数据集成(RDI) 是在 Redis Enterprise 内部运行的工具，它可以帮助用户近乎实时地将数据从现有关系数据库同步到 Redis，以便应用程序的读取查询完全从关系数据库转移到 Redis。Redis 数据集成(RDI)无需代码即可实现过滤和数据转换，将开发人员从编码和集成工作... ......
关于XXLJOB集群模式下调度失败的问题
xxljob在集群模式下调度高频任务时，有时会出现调度失败的问题，具体报错如下： java.io.EOFException: HttpConnectionOverHTTP@6be8bf0c(l:/10.48.2.64:38538 <-> r:/10.48.1.125:18989,closed=fal ......
Redis存取数据快的原因
1.Redis是完全基于内存的，绝大部分请求是纯粹的内存操作，这个数据存在内存中，类似于HashMap,而HashMap的优势就是查找和操作的时间复杂度都是0（1）； 2.数据结构简单，对数据操作也简单，redis中的结构都是特殊设计的； 3.采用单线程，不存在多进程和多线程导致的切换而消耗CPU， ......
MySQL MGR集群部署运维常用脚本
Linux系统-部署-运维系列导航 安装、初始化操作汇总 #初始化、重置mysql rm -rf /data/mysql/ ; mkdir -p /data/mysql/data /data/mysql/log ; chown -R mysql:mysql /data/mysql/ ; chmod ......
随笔（三十二）『Linux - es集群』
### 1、使用VMware安装虚拟机 ``` 参考： http://e.betheme.net/article/show-298568.html?action=onClick ``` ### 2、准备3台虚拟机 ``` IP分别为： vm_es_1：192.168.195.102 vm_es_2： ......
MySQL MGR集群搭建（CentOS7 + MySQL 5.7.35）
Linux系统-部署-运维系列导航 一、MGR架构的介绍 1、简介 MGR（MySQL Group Replication）是MySQL5.7.17版本引进来的一个数据库高可用架构，解决了传统异步复制和半同步复制的缺陷（主从数据一致性的问题），MGR依靠分布式一致性协议PAXOS，实现了主从数据库的 ......
Ubuntu部署Hadoop集群
## 前期准备 ### 系统及软件版本说明 本章操作中所使用的相关操作系统及软件版本如下： | 软件 | 版本 | | | | | 操作系统 | Ubuntu 14.04.1 | | JDK | 1.8.0 | | Hadoop | 2.7.3 | ### JDK 安装 集群中每台机器都需要安装 J ......
Ubuntu部署Spark集群
## 前期准备 ### 系统及软件版本说明 本章操作中所使用的相关操作系统及软件版本如下： | 软件 | 版本 | | | | | 操作系统 | Ubuntu 14.04.1 | | JDK | 1.8.0 | | Hadoop | 2.7.3 | | Spark | 2.2.0 | ### JDK ......
redis conf
# Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with the file path as first argumen ......
使用 Sealos 在离线环境中光速安装 K8s 集群
> 作者：尹珉。Sealos 开源社区 Ambassador，云原生爱好者。 ## 当容器化交付遇上离线环境 在当今快节奏的软件交付环境中，容器化交付已经成为许多企业选择的首选技术手段。在可以访问公网的环境下，容器化交付不仅能够提高软件开发和交付的效率，还能够帮助企业实现快速迭代和持续交付。 然而， ......
redis 热点key问题及其解决方案
#### 缓存穿透+解决方案 - 缓存穿透（查询不存在的数据） - 查询不存在的缓存，由于缓存不命中，并且出于容错的考虑，就会进入存储层查询 - 而如果从存储层查不到数据也不将这个不存在的数据写入缓存， - 风险：如果查询大量这种不存在数据查询请求，不命中缓存，也不写入缓存，一直请求存储层，DB很有 ......
Redis下载安装与配置(windows)——转载
Redis下载安装与配置(windows)_pingcode的博客-CSDN博客 下载 Releases · tporadowski/redis (github.com) 学习 Redis 安装 | 菜鸟教程 (runoob.com) ......
利用Redis缓存解决ES查询延迟的问题
背景 因为ES的近实时性 所以insert和update es的数据 在短时间可能查询不到(1s左右) 参考上一篇博客https://www.cnblogs.com/ssskkk/p/15417053.html#_label0 这在开发中这是一个很头疼的问题. 解决方案 1.数据insert upd ......
rocket集群环境搭建-主从集群
1.准备环境 搭建2主2从的异步刷盘的集群，使用conf/2m-2s-async下的配置文件。 机器 nameserver部署 broker部署 192.168.19.132 部署 192.168.19.133 部署 broker-a,broker-b-s 192.168.19.134 部署 bro ......
Redis—分布式锁
# 单实例的正确实现方式 获取锁的正确操作为：` SET resource_name my_random_value NX PX 30000`，它限定了只有当锁空闲且持有锁的时间为30000ms，并且锁资源对应的 value 为一个随机值。设置随机值是为了在释放锁时，确保当前线程能够释放该锁，避免出 ......
springboot - 整合redis
1.引入pom依赖 <!-- redis --><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId></dependency>< ......
redis的访问监控
ELK的packetbeat插件分析redis的数据访问分析怎么实现 要实现用 ELK 中的 Packetbeat 插件分析 Redis 数据访问情况，可以按照以下步骤进行： 安装并配置 Packetbeat：首先需要安装 Packetbeat，并配置其能够监听 Redis 的网络流量。此外，还需要 ......
SpringBoot集成redis集群
1、添加依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> <exclusions> <!-- 过滤lettuce，使用 ......
【面试题精讲】Redis如何实现分布式锁
[首发博客地址](https://blog.zysicyj.top/) [系列文章地址](https://blog.zysicyj.top/categories/技术文章/后端技术/系列文章/面试题精讲/) Redis 可以使用分布式锁来实现多个进程或多个线程之间的并发控制，以确保在给定时间内只有一 ......
K8S集群搭建流程
#### 1. 环境准备 - 三台Centos7主机(3G及以上RAM,2核CPU,40G硬盘空间) - 网络环境:要求主机之间能够互相通信 ``` k8s-node1 10.15.0.21 k8s-node2 10.15.0.22 k8s-node3 10.15.0.23 ``` #### 2. ......
Keepalived高可用集群、Keepalive+LVS
# Keepalived高可用集群 ## 高可用集群简介 **什么是高可用集群？** 高可用集群 (High Availability;Cluster，简称HA Cluster) ，是指以减少服务中断时间为目的的服务器集群技术。它通过保护用户的业务程序对外不间断提供的服务，把因软件、硬件、人为造成的 ......
向量搜索技术：基于Elasticsearch/PostgreSQL/Redis扩展的向量搜索数据库或独立向量搜索引擎方案参考
理论基础与研究 向量数据库用于非结构化文本、图片、音频、视频搜索、推荐，将他们转换为数字向量表示来进行相似性(ANN)搜索。存储和搜索高维向量是其特征之一，通常采用高级索引技术和算法如HNSW, Annoy, 或Faiss来实现。不同于SQL数据库，向量数据库更像nosql，用户接受使用sdk/AP ......