集群zookeeper
Centos7 集群SSH无密码用户免密登录配置
例:配置集群1的A,B,C三台Centos7的test无密码用户免密登录 1,在A机器执行ssh-kengen生成秘钥,一路回车 [root@lms lms]# su - test [test@test ~]# ssh-keygen Generating public/private rsa key ......
MQ集群扩容
# 集群扩容 ## 加入集群 1)启动一个新的MQ容器: 点击查看代码 ``` docker run -d --net mq-net \ -v ${PWD}/.erlang.cookie:/var/lib/rabbitmq/.erlang.cookie \ -e RABBITMQ_DEFAULT_U ......
Java连接MQ集群
Java代码创建仲裁队列 ![](https://img2023.cnblogs.com/blog/3120037/202306/3120037-20230629154950671-1666791666.png) 点击查看代码 ``` @Bean public Queue quorumQueue() ......
MQ集群之仲裁队列
仲裁队列:仲裁队列是3.8版本以后才有的新功能,用来替代镜像队列,具备下列特征: - 与镜像队列一样,都是主从模式,支持主从数据同步 - 使用非常简单,没有复杂的配置 - 主从同步基于Raft协议,强一致 从RabbitMQ 3.8版本开始,引入了新的仲裁队列,他具备与镜像队里类似的功能,但使用更加 ......
MQ集群
RabbitMQ是基于Erlang语言编写,而Erlang又是一个面向并发的语言,天然支持集群模式。RabbitMQ的集群有两种模式: •**普通集群**:是一种分布式集群,将队列分散到集群的各个节点,从而提高整个集群的并发能力。 •**镜像集群**:是一种主从集群,普通集群的基础上,添加了主从备份 ......
Zookeeper 介绍
一、Zookeeper 介绍 1.什么是 Zookeeper Zookeeper 是一种分布式协调服务用于管理大型主机,分布式环境中协调管理服务是一个复杂的过程,Zookeeper 通过其简单的架构和 API 解决这个问题。Zookeeper 允许开发人员专注于核心应用程序逻辑,而不必担心应用程序的 ......
树莓派集群真的可以顶上一台高性能计算机吗?(扩展篇)
之前写过文章: 树莓派集群真的可以顶上一台高性能计算机吗 讨论过树莓派集群是否可以比得上一台高性能计算机的问题,本篇这里是对前文的扩展。 之所以写了本篇扩展是因为无意中在网上发现了下文: https://arxiv.org/ftp/arxiv/papers/1911/1911.03709.pdf 之 ......
ElasticSearch系列---【linux离线安装elasticsearch7.8非默认端口组成的集群】
# linux离线安装elasticsearch7.8非默认端口组成的集群 ## 前置环境配置,es用户创建和包下载 请参考:[https://www.cnblogs.com/hujunwei/p/17481718.html](https://www.cnblogs.com/hujunwei/p/1 ......
容器化部署RocketMQ4.9.4集群
## 容器化部署RocketMQ4.9.4集群 - 背景: 生产环境单机的MQ不具有高可用,所以我们应该部署成集群模式,这里给大家部署一个**双主双从异步复制的Broker集群** ### 一、安装docker ```sh yum install -y docker systemctl enable ......
【Websocket】SpringBoot整合Websocket集群实现服务端推送(一)
一.背景 最近项目中有需要使用到Websocket做长连接推送,这里整理在具体实现过程中的细节和踩过的坑 二.问题点 在实现过程中,这里自己整理了一些问题点 1.WebsocketSession无法序列化到Redis以及MySQL中,集群环境下,如果进行服务端推送到指定客户端,如何知道该客户端与后台 ......
promethues + grafana 监测ceph集群状态
##### 前 最近在使用海量小文件压测ceph集群,想着搭建一个可视化的界面来监测集群状态,由于很久之前使用过promethues + grafana 监测k8s集群状态,用来监测 ceph 集群应该问题不大,那么就开始吧! 首先了解下 promethues 和 grafana 是什么? prom ......
使用kubeadm快速部署一个K8s集群
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。 这个工具能通过两条指令完成一个kubernetes集群的部署: ``` # 创建一个 Master 节点 $ kubeadm init # 将一个 Node 节点加入到当前集群中 $ kubeadm join ``` # ......
minio对象存储四台服务器部署4个节点集群
# 环境说明 **·** 分布式Minio至少需要4个节点 **·** 如果资源不够,可以采用两个节点每个节点启动两个实例的方式来实现四节点的集群,仅用于测试环境 **·** 生产环境建议最少4节点 # 环境准备 ``` #所有节点执行下列操作 # 配置时间同步,配置时间同步的方式不做讲述 # 创建 ......
Redis集群环境下keys被禁用,该怎么实现keys?
> 在生产环境中,禁用Redis的keys命令是为了避免对Redis实例的性能造成负面影响。keys命令会遍历整个 Redis数据库,查找与给定模式匹配的所有键,这在大规模的Redis数据库中可能会非常耗时; 那么,在keys禁用的情况下,仍然需要使用keys该怎么办呢?我们搜索一些处理方案大多是建 ......
Hive3.1.3集群安装
一、安装mysql Hive默认的Derby数据库一次只能打开一个会话,不支持多用户并发访问,需要替换Hive的存储引擎为mysql 1. 下载mysql安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch. ......
006.hdfs-查看各节点磁盘使用情况,集群平衡
查看各节点磁盘使用情况 hdfs dfsadmin -report | grep -E "Name:|DFS Used%:" 集群平衡 mv balance.sh /home/hdfs/ su hdfs vim balance.sh chmod +x balance.sh ls hdfs dfsad ......
CentOS7 部署 k8s 集群
CentOS7 部署 k8s 集群 BUG弄潮儿 2023-06-10 20:32 发表于广东 BUG弄潮儿 多年开发经验,专注软件开发、架构;推送 微服务,分布式,Spring全家桶,Redis,Linux,Nginx等技术,欢迎一起学习、探讨。 396篇原创内容 公众号 K8s+Istio+Go ......
zookeeper集群启停脚本
方式一 #!/bin/bash #zookeeper集群启停脚本 ip="master slave1 slave2 slave3 slave4" #IP地址或域名都可以 zk-home="/home/zookeeper/zookeeper-3.4.14" case $1 in "start"){ f ......
重新初始化k8s集群
##### 执行如下命令,所有节点都执行 ```shell kubeadm reset ``` ##### 初始化集群,仅在master(centos01)上执行 ```shell [root@centos01 opt]# kubeadm init --apiserver-advertise-add ......
ZooKeeper学习连接
zookeeper启动报错:Address unresolved:https://www.4spaces.org/1143.html启动zkServer.cmd闪退问题: https://blog.csdn.net/qq279862451/article/details/79083522 ZooKe ......
Redis分片集群-故障转移
为了演示故障转移,我们可以先通过watch命令查看某台节点信息监控整个集群状态: watch redis-cli -p 9001 cluster nodes 接着我们让某台节点宕机,执行命令:redis-cli -p 9002 shutdown,回车。 可以发现控制台监控到9002已失去连接。等待一 ......
Redis分片集群-集群伸缩
redis-cli --cluster提供了很多操作集群的命令,可以通过下面方式查看: redis-cli --cluster help执行如下: 比如,添加节点的命令: new_host代表需要添加的节点ip, exitsting_host代表已经存在的主机IP,也即集群中已经有的,为什么需要知道 ......
Kubernetes编程——查询集群提供哪些API资源
查询集群提供哪些API资源 [root@JumperServer:~] # kubectl api-resources NAME SHORTNAMES APIVERSION NAMESPACED KIND bindings v1 true Binding componentstatuses cs v ......
从2PC和容错共识算法讨论zookeeper中的Create请求
最近在读《数据密集型应用系统设计》,其中谈到了zookeeper对容错共识算法的应用。这让我想到之前参考的zookeeper学习资料中,误将容错共识算法写成了2PC(两阶段提交协议),所以准备以此文对共识算法和2PC做梳理和区分,也希望它能帮助像我一样对这两者有误解的同学。 ......
行行AI人才直播第3期:浙江大学周鑫博士《空中机器人复杂环境高效自主导航—从单机到集群》
空中飞行的无人车、无人机集群是科幻电影的常客,也往往是未来科技的一大代表。在电影《星球大战:西斯的复仇》(2005)和《银翼杀手2049》(2017)中,飞车构成的密集空中交通有条不紊的运行于高楼大厦之间,俨然是高科技星球的“标配”。电影中的集群所展现出的导航和协同能力数十年来吸引了无数的研究者。 ......
linux-zookeeper
# zookeeper ## 一、部署zookeeper单点 ### 1.下载zookeeper软件 ```shell https://zookeeper.apache.org/releases.html [root@elk101.com ~]# ll -rw-r--r-- 1 root root ......
kafka集群搭建
https://blog.csdn.net/wudidahuanggua/article/details/127086186 1 安装准备 请确保zookeeper集群的正常启动 可参考:大数据学前准备--zookeeper详解与集群搭建(保姆级教程) 2 下载kafka Apache Kafka ......
Keepalived+Nginx 高可用集群架构
Keepalived+Nginx 高可用集群(主从模式) 一、两台群集服务器都需要安装nginx和keepalived,先添加nginx yum 源 vim /etc/yum.repos.d/nginx.repo [nginx-stable] name=nginx stable repo baseu ......
MGR集群命令
MGR集群命令 https://www.modb.pro/db/538741 官方文档: #### 一. 基本命令 ##### 1.检查集群状态,或者叫组复制状态 ``` select * from performance_schema.replication_group_members; ``` ......
Zookeeper的浅尝
![](https://files.mdnice.com/user/44095/01303e65-5552-4e0b-83f5-fdf653dfe28f.png) Zookeeper 是一个分布式的协调服务,可以用来管理共享数据、配置信息、命名服务(如 DNS)和分布式锁等。 Zookeeper 的 ......