主从 节点 集群redis
Hadoop-3.3.3分布式集群的文件配置，启动hadoop历史服务和启动日志聚集
一、分布式集群的文件配置 涉及$HADOOP_HOME/etc/hadoop路径下的5个文件 workers、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml 首先修改workers 进入$HADOOP_HOME/etc/hadoop ......
虚拟机集群ssh配置免密登录
在dn节点机首先安装ssh，没有就执行以下代码 sudo apt-get install openssh-server 然后 cd ~/.ssh 如果没有该路径就执行一次 ssh localhost 然后执行以下代码，删除之前可能生成过的私钥，公钥 rm ./id_rsa* 执行以下代码，然后三次回 ......
Redis可用性
主从模式 读写分离，master处理读写命令，slave仅处理读命令。 为什么仅有一个masater能处理读？ 这是避免引入加锁、实例间协商是否完成修改等操作。 主从同步方式 通过replicaof {master_ip} 6379去请求RDB文件，同步细节如下。 从库给主库发送 psync 命令， ......
Redis创始人开源最小聊天服务器，仅200行代码，几天功夫已获2.8K Star！
中午时候，在技术交流群里聊起关于Redis创始人的一些趣事，比如离开Redis之后，去写科幻小说之类的。 因为好奇科幻小说，TJ君就去搜索了一下。结果一搜，发现Redis作者最近居然又搞了个新活儿！ 世界上最小的聊天服务器 这次Redis作者的新开源项目名叫：SmallChat。 从关于内容中可以知 ......
Redis监控方法之二
Redis监控方法之二 背景 前期整理过使用 exporter + prometheus 方式进行Redis监控的搭建过程 最近给同事研究clickhouse时发现 clickhouse 有对应的plugin 可以直接拉取CK的信息 当时就想其他的中间件肯定有类似的方法进行处理. 当时第一反应是想学 ......
java——redis随笔——实战——分布式缓存
在使用Redis过程中，持久化是一项非常重要的功能，因为如果Redis Server停止工作，所有的数据将全部丢失。为了避免这种情况的出现，我们需要将Redis中的数据保存在硬盘上，以保证数据不受服务器宕机影响。Redis提供了两种持久化方式——RDB和AOF。笔者将会以RDB与AOF的区别为话题， ......
k8s在master节点上调度pod
默认情况下，出于安全原因，集群不会在Master节点上调度 Pod。 如果你希望能够在Master节点上调度Pod，请运行： kubectl taint nodes --all node-role.kubernetes.io/control-plane- 输出如下： node "test-01" u ......
hadoop 将nn节点的环境配置同步到dn节点
使用scp命令克隆配置 输入 sudo scp -r jdk1.8.0_391/ hxf@slaver2:/opt/module 报错ssh: Could not resolve hostname hxf: Temporary failure in name resolution lost conn ......
Redis的Java客户端
Redis 的 Java 客户端很多，常用的几种： Jedis Lettuce Spring Data Redis Spring 对 Redis 客户端进行了整合，提供了 Spring Data Redis，在Spring Boot项目中还提供了对应的Starter，即 spring-boot-st ......
Redis 技术整理
认识Redis Redis官网：https://redis.io/ Redis诞生于2009年全称是Remote Dictionary Server 远程词典服务器，是一个基于内存的键值型NoSQL数据库 特征： 键值（key-value）型，value支持多种不同数据结构，功能丰富 单线程，每个命 ......
redis知识点
redis知识点 场景类 缓存 缓存穿透 定义：大量查询业务不存在的key击穿redis，直接查询数据库. 解决方案： value null 实施：来一个这样的key，写入到缓存中，将其值设置为null。 缺点： 会缓存大量这样的内容，内存存在溢出可能。 后续如果有这样的业务key生成，则缓存中的数 ......
haproxy+keepalived部署高可用k8s集群
四台机器 节点名称节点ip节点角色 基础配置 1、升级机器内核 2、将机器ip 名称写入到/etc/hosts中 3、基础环境准备 #关闭防火墙，selinux systemctl stop firewalld systemctl disable firewalld sed -i 's/enforc ......
Docker+Nextcloud+Redis+Onlyoffice部署私有网盘
使用docker命令清除数据：使用命令 docker system prune 清理没有使用的数据，包括镜像数据，已经停止的容器等。更进一步，使用-a选项可以做深度清理。使用命令 docker system prune -a使用下述命令重启docker，如果不重启可能还是会报错。systemctl ......
几行命令用minikube快速搭建可测试的kubernetes单节点环境
几行命令用minikube快速搭建可测试的kubernetes单节点环境 需要docker环境，https://www.cnblogs.com/xiaofei12/p/17544579.html，网速好的可以不用配置阿里云镜像 Minikube安装 curl -LO https://storage. ......
Redis宕机恢复
AOF（Append Only File） Redis持久化：AOF日志 用 AOF 方法进行故障恢复的时候，需要逐一把操作日志都执行一遍。如果操作日志非常多，Redis 就会恢复得很缓慢，影响到正常使用。 RDB（Redis DataBase） 内存数据的全量快照，即把内存数据都保存到磁盘。 sa ......
Redis 哨兵模式（Sentinel）配置
哨兵是Redis的一种运行模式，它专注于对Redis实例（主节点、从节点）运行状态的监控，并能够在主节点发生故障时通过一系列的机制实现选主及主从切换，实现故障转移，确保整个Redis系统的可用性。 集群演示 本次测试为“1主2从” 的模式，即一个master 两个从节点 slave 。如下图 条件限 ......
11月LeetCode每日一题: 117. 填充每个节点的下一个右侧节点指针 II
题目描述: 给定一个二叉树： struct Node { int val; Node *left; Node *right; Node *next; } 填充它的每个 next 指针，让这个指针指向其下一个右侧节点。如果找不到下一个右侧节点，则将 next 指针设置为 NULL 。 初始状态下，所有 ......
redis单线程
一，redis单线程是什么意思 Redis的单线程指的是Redis的网络IO和键值对读写是由一个线程来完成的，这是Redis对外提供键值存储服务的主要流程。然而，请注意，Redis的其他功能，如持久化、异步删除、集群数据同步等，实际上是由额外的线程执行的。 Redis的单线程模型主要是为了避免资源共 ......
记一次GFS集群节点系统重做数据恢复
背景： 比较倒霉，周日晚上服务器硬盘损坏更换后发现数据块损坏，系统无法正常使用只能重做系统，恢复了好多虚拟机，过程无比痛苦，目前只说一说恢复gfs。 思路： 登录gfs master节点查看peer状态，gluster peer status 发现另一个节点处于State: Peer Rejecte ......
SpringBoot+Redis实现接口级别缓存信息
本文主要讲述如何通过SpringBoot+Redis实现接口级别缓存信息 背景 近期因为一直在处理公司的老项目，恰好碰到产品说页面有一些信息展示慢，简单看了一下页面接口，发现查询的是系统中几张大表(数据量在千万级别)，还会关联一些其他的表，导致接口性能极差，但是由于这些信息也不存在"及时性"这么一说 ......
62.redis5安装
1.依赖包安装 yum -y install cpp binutils glibc glibc-kernheaders glibc-common glibc-devel gcc make gcc-c++ libstdc++-devel tcl 2.安装包准备 官网https://redis.io下载 ......
倾斜摄影三维模型的根节点合并的文件大小与质量关系分析
三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作，从而实现三维模型轻量化。轻量化压缩比大，模型轻量化效率高，自动化处理能力高；采用多种算法对三维模型进行几何精纠正处理，精度高，... ......
Ubuntu 修改主机名和hosts文件并克隆虚拟机初步搭建集群
进入终端输入 sudo vim /etc/hosts 像红框里一样，添加自己虚拟机的主机名称映射 然后终端输入reboot 重启虚拟机 然后操作参考Ubuntu20虚拟机克隆以及克隆后静态IP和主机名的修改_ubuntu克隆后修改ip-CSDN博客 ......
MySQL5.7.18主从复制搭建(一主一从)详解
一、复制原理 主服务器将更新写入二进制日志文件，并维护文件的一个索引以跟踪日志循环。这些日志可以记录发送到从服务器的更新.当一个从服务器连接主服务器时，它通知主服务器从服务器在日志中读取的最后一次成功更新的位置。从服务器接收从那时起发生的任何更新，然后封锁并等待主服务器通知新的更新。 MySQL使用 ......
美团面试：Redis 除了缓存还能做什么？可以做消息队列吗？
这是一道面试中常见的 Redis 基础面试题，主要考察求职者对于 Redis 应用场景的了解。 即使不准备面试也建议看看，实际开发中也能够用到。 内容概览： Redis 除了做缓存，还能做什么？ 分布式锁：通过 Redis 来做分布式锁是一种比较常见的方式。通常情况下，我们都是基于 Redisson ......
分布式存储——ceph集群部署
一、部署结构 以x.x.x.150、x.x.x.151、x.x.x.152三台服务器搭建最基本的三节点ceph集群，服务器系统使用的是centos7版本，IP网段为x.x.x.0/24，三台服务器的名称分别为： ceph001: x.x.x.150，管理节点 ceph002: x.x.x.151，子 ......
寻找两个链表相交节点方法（可以是有环链表）
问题分析：两个链表相交可以分为两个大类，一是两个无环链表相交，二是两个有环链表相交。 无环相交如图： 有环相交有两种情况，一种是 先相交后成环，如图： 另一种是交点有两个，是成环后的交点（入环节点不同） 方法 1.判断链表是否有环，返回第一个入环节点。 2.判断是否相交 3.判断相交节点是否相同 判 ......
Redis 分布式锁
1、讲一讲Redis的分布式锁 Redis分布式锁最简单的实现 想要实现分布式锁，必须要求 Redis 有「互斥」的能力，我们可以使用 SETNX 命令，这个命令表示SET if Not Exists，即如果 key 不存在，才会设置它的值，否则什么也不做。 两个客户端进程可以执行这个命令，达到互斥 ......