主从 哨兵 集群 单机
通过 docker-compose 快速部署 Hadoop 集群极简教程
前面那篇文章内容过多，可能小伙伴只是想快速部署，所以这里出了一个极简的部署教程，如果想了解详细部署过程，可以建议参考我上一篇的文章：通过 docker-compose 快速部署 Hadoop 集群详细教程 1）安装 docker # 安装yum-config-manager配置工具 yum -y i ......
Redis集群从节点无限循环同步故障
今天是清明节假日第一天，收到客户请求，我们的redis出问题了帮忙看看！ 程序的报错日志提供如图 登录该套redis集群查看节点信息与集群状态 根据现场状态与监控，迅速做出判断与推理 第一时间内给出个人的建议：建议重启部分异常程序，业务全部恢复正常！ 业务已经恢复了，那继续来修复这个fail的异常r ......
基于3.5.x 版本进行zookeeper 集群搭建
搭建 zk 3.5.x 版本的集群环境 本次搭建使用 3.5.7 版本的zk。 3.5.x 版本进行集群环境的搭建，本质其实和 3.4.x 是没有太大区别的。 但是 3.5.x 的集群环境支持动态的扩缩容，因此 在配置文件方面，将集群节点的配置单独抽取出来了，存放到一个 zoo.cfg.dynami ......
基于3.4.x 版本进行zookeeper 集群搭建
搭建一主二从 三个节点 zookeeper 集群环境 *** 使用 zk 的 3.4.13 的版本 *** 注意：对于 zk , 3.4 版本和3.5 版本集群环境是有一些区别的。 3.5 版本以后使用的是动态集群模式，支持集群的动态扩缩容。(可以在不重启的情况下，实现集群的扩容，缩容) 本集群搭建 ......
提升集群吞吐量与稳定性的秘诀： Dubbo 自适应负载均衡与限流策略实现解析
本文所说的“柔性服务”主要是指 consumer 端的负载均衡和 provider 端的限流两个功能。在之前的 Dubbo 版本中，负载均衡部分更多的考虑的是公平性原则，即 consumer 端尽可能平等的从 provider 中作出选择，在某些情况下表现并不够理想。而限流部分只提供了静态的限流方案... ......
windows下使用pytorch进行单机多卡分布式训练
现在有四张卡，但是部署在windows10系统上，想尝试下在windows上使用单机多卡进行分布式训练，网上找了一圈硬是没找到相关的文章。以下是踩坑过程。 首先，pytorch的版本必须是大于1.7，这里使用的环境是： pytorch==1.12+cu11.6 四张4090显卡 python==3. ......
HAProxy实现mycat集群的负载均衡
上文我们已经实现了mycat集群（https://www.cnblogs.com/zwh0910/p/17278863.html），现在我们来实现mycat集群的负载均衡 在前面架构中，虽然对mycat做了集群，保障了mycat的可靠性，但是，应用程序需要连接到多个mycat，显然不是很友好的，也就 ......
主从数据库
主从数据库 1、概念 Linux中，数据库服务有三种：互为主主，互为主从，一主一从（主从数据库） 互为主主：数据库实时更新 互为主从：数据库达到一定的容量再更新 一主一从：主数据库可同步到从数据库，但从数据库不能同步到主数据库 软件包 mariadb mariadb-server 服务名 maria ......
java——spring boot集成kafka——kafka集群中Rebalance机制
前提是：消费者没有指明分区消费。当消费组⾥消费者和分区的关系发⽣变化，那么就会触发rebalance机制。 这个机制会重新调整消费者消费哪个分区。 在触发rebalance机制之前，消费者消费哪个分区有三种策略： 1、range：通过公示来计算某个消费者消费哪个分区2、轮询：⼤家轮着消费3、stic ......
java——spring boot集成kafka——kafka集群中controller的作用
Kafka集群中的broker在zk中创建临时序号节点，序号最⼩的节点（最先创建的节点）将作为集群的controller，负责管理整个集群中的所有分区和副本的状态： 1、当某个分区的leader副本出现故障时，由控制器负责为该分区选举新的leader副本。 2、当检测到某个分区的ISR集合发⽣变化时 ......
Elasticsearch 学习-Linux单机和集群安装
Elasticsearch 学习-Linux 单机和集群安装 3.3linux集群安装 3.3.1 软件下载 软件下载地址：https://www.elastic.co/cn/downloads/past-releases/elasticsearch-7-8-0 3.3.2 软件安装 ==1) 解压 ......
Tomcat 入门实战(4)--Tomcat 集群 Session 复制
本文主要介绍在 Tomcat 集群中如何进行 Session 复制，文中所使用到的软件版本：Centos 7.9.2009、Java 1.8.0_321、Tomcat 8.5.87。 1、快速配置 取消 conf/server.xml 文件中的以下注释来启用集群： <Cluster classNam ......
MongoDB 集群
优质博文：IT-BLOG-CN 一、高可用架构 高可用性HA（High Availability）指的是缩短因正常运维或者非预期故障而导致的停机时间，提高系统可用性。 高可用量化衡量标准： 引出一个SLA的概念。SLA是Service Level Agreement(服务等级协议)的缩写。SLA就是 ......
通过 docker-compose 快速部署 Hadoop 集群详细教程
一、概述 docker-compose 项目是docker官方的开源项目， 负责实现对docker容器集群的快速编排，来轻松高效的管理容器，定义运行多个容器。 通过docker-compose来部署应用是非常简单和快捷的。但是因为docker-compose是管理单机的，所以一般通过docker-c ......
PostgreSQL 13 pacemaker 高可用集群
环境介绍 操作系统版本 CentOS Linux release 7.8.2003 (Core) 数据库版本 psql (13.10) PCS集群版本 [root@hd-clw-select-proxysql01 ~]# rpm -qa|grep pacemaker pacemaker-libs-1 ......
mycat集群
前面我们是用一个mycat对应两个mysql集群，参考：https://www.cnblogs.com/zwh0910/p/17278041.html 但是在高并发的情况下，我们的系统也会出现性能的问题，显然是mycat，即所有的压力都压倒mycat上面，所以需要给mycat做集群。 mycat做了 ......
redis集群方案的优缺点以及原理
如果主库挂了，我们就需要运行一个新主库，比如说把一个从库切换为主库，把它当成主库。 这就涉及到三个问题： 主库真的挂了吗？ 该选择哪个从库作为主库？ 怎么把新主库的相关信息通知给从库和客户端呢？ 这就要提到哨兵机制了。在 Redis 主从集群中，哨兵机制是实现主从库自动切换的关键机制，它有效地解决了 ......
kubernetes 集群部署rabbimq3.11.11
通过官方镜像 RabbitMQ Docker Image 和 rabbitmq-peer-discovery-k8s 插件进行集群部署。 0. 环境 kubernetes 1.24 rabbitmq3.11.11 1.命名空间 将 rabbitmq 的资源都放在 rabbitmq 命名空间内。 Na ......
mycat分库分表一主一从（主从复制）
一、mysql主从复制 1、准备挂载文件 为了将配置文件在宿主机做挂载，先运行测试镜像拷贝配置文件 1）、拉取镜像 docker pull mysql:8.0.26 2）、创建测试容器mysql-demo docker run -it -p 3300:3306 \ --name mysql-demo ......
mysql主从复制，读写分离（基于mycat）
环境：CentOS7.9，mysql-5.7，mycat-1.6 主库上设置 1.设置server-id值并开启binlog参数 [mysqld] log_bin = mysql-bin server_id = 1 2.建立同步账号 mysql> grant replication slave on ......
MATLAB代码：基于元模型优化的虚拟电厂主从博弈优化调度模型
MATLAB代码：基于元模型优化的虚拟电厂主从博弈优化调度模型 关键词：元模型 虚拟电厂 主从博弈 优化调度 参考文档：《基于元模型优化算法的主从博弈多虚拟电厂动态定价和能量管理》复现元模型 仿真平台：MATLAB+CPLEX平台 主要内容：代码主要做的是虚拟电厂的优化调度策略，其实是多虚拟电厂 微 ......
CentOS7-自动化部署web集群
一、项目要求 1、创建role，通过role完成项目（可能需要多个role） 2、部署nginx调度器（node2主机） 3、部署2台lnmp服务器（node3，node4主机） 4、部署mariadb数据库（node5主机） 主要用的ansible实现自动化部署，ansible的安装教程省略，控制 ......
hadoop系列---【hadoop集群的搭建---(二)Zookeeper的安装】
#(二)Zookeeper的安装 ##1.准备三台服务器 ##2.下载安装包 下载地址：http://archive.apache.org/dist/zookeeper/ 这里我们以zookeeper-3.4.9.tar.gz版本为例，下载完后，上传到三台服务器的/app目录下。 ##3.在第一台服 ......
k8s部署redis集群（cluster模式）
参考：https://www.cnblogs.com/LiuChang-blog/p/15898005.html 一、redis集群部署(三主三从) 1.1yaml文件准备 （1） 配置文件说明 # 部署所在命名空间: redis-cluster [root@k8s-master1 ~]# cd / ......
redis cluster 故障后，主从位于不同节点的修复【转】
今天机房有一台物理机宕机了，有一个虚拟机192.168.1.122，其上有两个redis 节点也不能用了。 redis没有备份，丢失的192.168.1.122节点只能重建。 我找运维的人，分配了一个全新的虚拟机，并且分配的ip的地址仍然是192.168.1.122。 我在上面装了两个全新的redi ......
redis cluster 故障后，主从位于相同节点的修复（丢失了部分数据）【转】
今天机房出现故障，有一个机器启动不起来，redis cluster集群丢失了一部分数据，拓扑图如下： 通过上图可以看到，192.168.1.122启动不起来后，其上的主1和从1因为在一个机器上，就全部丢失了。 这个布局非常危险，主和从不应该放在一个机器上。 我找运维，运维给我分配了一个全新的机器，并 ......
k8s 中使用helm 安装zookeeper，kafka集群<三>
helm repo add bitnami https://charts.bitnami.com/bitnami helm repo update helm install kafka bitnami/kafka \ --set statefulset.replicaCount=1 \ --set ......
玩转RuoYi-Cloud-Plus--7.docker部署nacos(单机)
7.docker部署nacos(单机) 仅部署nacos-server,不使用prometheus/grafana等监控组件 1.拉取镜像 docker pull nacos/nacos-server docker pull nacos/nacos-server:v2.0.3 2.启动容器 需要得到 ......