集群zookeeper
使用nomad管理集群-1 单机部署
背景 由于白嫖+购买了很多vps，管理起来有点困难，只能一个个ssh上去看，同时有的命令要反复敲好几遍，因此需要有一个集群管理的工具。 其次因为工作需要经常和k8s，docker等打交道，于是打算使用类似的工具来管理vps。 首先考虑的自然就是k8s，作为云原生的老大哥，相关的生态和文档自然是巨好， ......
hadoop集群搭建及编程实践
Hadoop集群搭建 前期准备及JDK，hadoop安装 设置主机名和添加主机映射 验证连通性 SSH无密码登录 配置集群/分布式环境 修改workers 修改文件core-site.xml 修改hdfs-site.xml 修改mapred-site.xml 修改yarn-site.xml 分发到其 ......
使用 Rancher 部署管理 K8S 集群
目录使用 Rancher 部署管理 K8S 集群主机规划部署 docker-ce（rancher）部署 rancher 使用 Rancher 部署管理 K8S 集群 主机规划 主机名称 角色 IP 地址 基础软件 rancher 管理 k8s 集群 10.0.0.203 docker-ce mast ......
Maven 引用CDH 5.4 的zookeeper时报错：Could not find artifact javax.jms:jms:jar:1.1 in cloudera 的解决办法
错误： Could not find artifact javax.jms:jms:jar:1.1 in cloudera 由于默认5.4.0的包引用了zookeeper 3.3.1版本，进而引用了log4j的某个版本，导致的报错，改为如下即可： pom： 使用cloudera的源： <reposi ......
实现haproxy+keepalived集群高可用集群转发
#环境：centos8 10.0.0.150 ka1 10.0.0.160 ka2 10.0.0.170 web1 10.0.0.180 web2 10.0.0.190 client ######ka1配置 #安装软件包 [root@ka1 ~]#yum install -y haproxy kee ......
Zookeeper集群部署
1.#ZooKeeper 使用场景 ZooKeeper 是一个分布式服务框架，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：命名服务、状态同步、配置中心、集群管理等。 #命名服务： 命名服务是分布式系统中比较常见的一类场景。命名服务是分布式系统最基本的公共服务之一。在分布式系统中，被命 ......
Dubbo3应用开发—Dubbo3注册中心（zookeeper、nacos、consul）的使用
Dubbo3注册中心的使用 zookeeper注册中心的使用 依赖引入 <dependency> <groupId>org.apache.dubbo</groupId> <artifactId>dubbo-dependencies-zookeeper-curator5</artifactId> <v ......
docker部署nacos集群
环境准备 系统 ip 插件 centos7 10.190.107.191 docker、nginx centos7 10.190.107.192 docker、nacos centos7 10.190.107.193 docker、nacos centos7 10.190.107.194 docke ......
【高可用】alertmanager高可用,alertmanager集群
【1】alertmanager集群高可用介绍 （1.1）基本介绍 Alertmanager成为单点 为了提升Promthues的服务可用性，通常用户会部署两个或者两个以上的Promthus Server，它们具有完全相同的配置包括Job配置，以及告警配置等。当某一个Prometheus Server ......
简述redis集群的实现原理
为了解决单机性能的瓶颈，提高Redis 性能，可以使用分布式集群的解决方案 1. 所有Redis节点使用(PING机制)互联 2. 集群中某个节点的是否失效，是由整个集群中超过半数的节点监测都失效，才能算真正的失效 3. 客户端不需要proxy即可直接连接redis，应用程序中需要配置有全部的red ......
ansible-kube集群部署项目简述
ansible-kube集群部署项目简述 1.目录要求 介于证书生成文件和一些脚本使用了绝对路径；必须将ansible.tgz 包解压到 /ansible 路径下。 工作路径必须为 /ansible/Playbooks/k8s_deploy 2.目录结构以及功能概要 ├── k8s_deploy # ......
ZooKeeper
1. ZooKeeper 是什么？ ZooKeeper 是一个开源的分布式协调服务。它是一个为分布式应用提供一致性服务的软件，分布式应用程序可以基于 Zookeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、分布式锁和分布式队列等功能。 ZooK ......
RabbitMQ 集群搭建和仲裁队列的使用
RabbitMQ 是基于 Erlang 语言开发的，该语言天然支持集群分布式模式，因此部署 RabbitMQ 集群非常简单。 RabbitMQ 的集群部署有两种模式： 普通集群：又称为标准集群，是一种分布式集群，将队列分散到集群的各个节点，提高整个集群的并发能力。 镜像集群：在普通集群的基础上，添加 ......
k8s之集群部署（kubeadm）
[master&node] 1.修改主机名 hostnamectl set-hostname master-01 cat >> /etc/hosts << EOF 172.28.32.1 master-01 172.28.32.2 worker-01 EOF 2.配置阿里云官方源 mkdir -p ......
redis集群搭建注意事项
官方教程：https://redis.io/docs/management/scaling/ 其他参考： https://note.youdao.com/ynoteshare/index.html?id=174eaa7104ce961f8012d521d8155bd9&type=note&_time ......
[SpringBoot 2] 任务 和 Dubbo+ Zookeeper
SpringBoot_2 1. 任务 1.1 异步任务： 方法上添加@Async, Application方法上开启异步@EnableAsync 1.2 邮件任务： 添加 spring-boot-starter-mail 在自己的邮件账户中打开POP3/SMTP协议， 并获取到授权码 spring. ......
Redis主从及哨兵及集群相关介绍
主从模式 为了避免单点故障 和 读写不分离，Redis 提供了复制（replication）功能，master数据库中的数据更新后，会自动将更新的数据同步到其他slave数据库上。 优点: 主从结构具有读写分离，提高效率、数据备份，提供多个副本等优点。 不足: 大的不足就是主从模式不具备自动容错和恢 ......
hadoop HA高可用集群搭建
首先是四项配置 core-site.xml <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <!-- Licensed under the Apach ......
使用 Terraform 创建K8S集群
使用Terraform创建Kubernetes（K8S）集群是一个强大的自动化过程，它可以让您轻松地部署和管理K8S环境。以下是一般步骤以及示例Terraform配置文件的概述，用于创建K8S集群。 ......
秒懂Zookeeper原理与工作机制
什么是Zookeeper Zookeeper简称zk，先从字面意思上去理解，那就是动物园管理员。其实zk是大数据领域中的一员，为整个分布式环境提供了协调服务，主要可以用于存储一些配置信息，同时也可以基于zk实现集群。它是一个apache的开源分布式中间件。 zk和大数据领域结合比较密切，可以管理很多 ......
第1章 简单认识zookeeper
官网 https://zookeeper.apache.org Learn about 官方提供的学习资料（权威），一个优秀程序员第1手资料就是官网，了解她是什么？能帮我们解决什么问题？如何解决问题？ https://zookeeper.apache.org/doc/current/index.ht ......
k8s 监控（二）监控集群组件和 pod
原文链接：https://juejin.cn/post/6844903921207492621 在上一篇文章中，我们已经在 k8s 中安装了 Prometheus，并且收集了它自身的监控指标。而在这篇文章，我们将收集 k8s 所有组件和 pod 的监控指标。 在这之前需要先修改下之前监控 Prome ......
kubernetes集群搭建2023
参考： https://zhuanlan.zhihu.com/p/627310856（比较详细的一篇k8s集群部署文章） https://www.cnblogs.com/libruce/p/17477374.html 或者 https://zhuanlan.zhihu.com/p/590652259 ......
Kafka 集群副本数量调整
Kafka 创建时未指定多个副本或者副本数量过少，都可以在后期手动添加，另外如果副本过多也可以减少，当前调整基于 Kafka 的版本是 2.5.1，但是估计 2.1 ~ 2.5 应该都是兼容的。 下面先来操作一下 Topic 副本减少的过程，首先查看 Kafka Topic 的详情： # 新版本的 ......
Error: Could not find or load main class org.apache.zookeeper.server.quorum.QuorumPeerMain
下载maven apache-maven-3.9.4-bin.tar.gz 解压 tar -zxvf apache-maven-3.9.4-bin.tar.gz 添加环境变量 vim /etc/profile export MAVEN_HOME=/usr/local/maven-3.9.4 expo ......
Zookeeper
Zookeeper Zookeeper是Apache Hadoop项目下的一个子项目，是一个树形目录服务，简称zk；是一个分布式应用程序的协调服务。 作用： 配置管理：从配置中心拉取对应的配置信息供自己的服务使用，运维时只需要配置配置中心 分布式锁：多个机器访问，但是锁（JDK提供的，跟JVM绑定） ......
Hadoop集群搭建(完全分布式)
一，Hadoop集群简介 1.1 Hadoop集群整体概述 Hadoop集群包括两个集群:HDFS集群、YARN集群 两个集群逻辑上分离、通常物理上在一起 两个集群都是标准的主从架构集群 Hadoop两种集群内容： 逻辑上分离，物理上合并的理解： 逻辑上分离：两个集群互相之间没有依赖、互不影响 物理 ......
视频监控/视频汇聚/安防视频监控平台EasyCVR配置集群后有一台显示离线是什么原因？
开源EasyDarwin视频监控TSINGSEE青犀视频平台EasyCVR能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，在视频监控播放上，TSINGSEE青犀视频安防监控汇聚平台可支持1、4、9、16个画面窗口播放，可同时播放多路视频流，也能支持视频定时轮播。视频监控汇聚平 ......
视频监控/视频汇聚/安防视频监控平台EasyCVR配置集群后有一台显示离线是什么原因？
服务器时间获取的还是utc时区的时间；因为数据库的时间戳获取的就是utc时间，判断与跟现场数据库获取的时间戳有关 ......