集群hdfs-ha hdfs ha
关于es中集群，节点，分片和副本的理解
集群 页面中每一个对象就是一个集群 节点 集群中包含许多es实例，其中一个es实例就是一个节点 节点也分许多功能 分片和副本 该例子中分片数为9，副本数为1 数据节点就是Node 注意：a和b是同样的数据，a为主分片，b为副本分片，但是同样的数据不能放在相同的节点上面，为了防止某个节点瘫痪导致主节点 ......
更新 Kubernetes 集群中 Argo CD 的服务类型为 NodePort失败
这个问题是我再做项目的时候要开区argoCD时并链接时端口开区不了 kubectl patch svc argocd-server -n argocd -p '{"spec": {"type": "NodePort"}}' service/argocd-server patched (no chan ......
Nacos安装部署（单机、集群）
一、前言 （一）、nacos支持三种部署 单机模式 - 用于测试和单机试用。 集群模式 - 用于生产环境，确保高可用。 多集群模式 - 用于多数据中心场景。 （二）、官网地址 https://nacos.io/zh-cn/ 1.点击进入nacos版本及源码下载网页 2.根据圈中进行nacos版本选择 ......
手动部署Kraft模式Kafka集群
手动部署Kraft模式kafka集群 基本信息 IP地址 Hostname Release Kafka-Version 172.29.145.157 iamdemo1 Centos7.9 kafka_2.12-3.5.1 172.29.145.182 iamdemo2 Centos7.9 kafka ......
Hadoop-3.3.6分布式集群搭建步骤
1.下载JDK8 Linux 安装Openjdk 2.下载Hadoop3.3.6 Hadoop 安装及环境变量配置 3.创建hadoop数据存储的目录 mkdir -p /opt/hadoop/tmp /opt/hadoop/hdfs/data /opt/hadoop/hdfs/name 4.配置h ......
C++聊天集群服务器2
总体项目结构如下： 一、数据库的封装 db.h如图代码量不多 db.cpp： #include "db.h" #include <muduo/base/Logging.h> // 数据库配置信息 static string server = "127.0.0.1"; static str ......
C++聊天集群服务器1
先给出整个项目的结构图： 一、环境搭建 施磊的c++聊天项目。相信已经到了这部分内容就已经能够自行搭建环境了，这里主要给出搭建的具体内容，方法自行百度。下面给出环境要求。 1.json-cpp 2.muduo库 3.cmake 4.mysql 二、CMake编写 主目 ......
minio集群部署
minio集群部署 1.说明： 安装前需要再添加一个磁盘后将磁盘挂载到/opt/minio目录,minio集群部署需要独占磁盘分区，不能使用文件夹代替。 运行分布式 MinIO 实例的服务器时间差不应超过15分钟 所有运行分布式 MinIO 设置的节点都是同构的，即相同的操作系统、相同数量的磁盘和相 ......
11、Redis集群（cluster）【面试重点】
*提示 目前一般比较少用复制+哨兵模式，一般都是直接上集群 一、是什么 二、能干嘛 三、集群算法-分片-槽位slot【高频考点】 1、官网出处 2、redis集群的槽位slot 3、redis集群的分片 4、他两的优势 5、slot槽位映射，一般业界有3中解决方案 5.1 哈希取余分区 5.2 一致 ......
安装k8s集群的小问题
网络问题：直接安装calico插件，没有配置网络会导致每个节点的路由无法转发，pod之间跨节点无法通信 解决办法：使用calico+flannel作为cni普罗米修斯部署时，网络策略会导致只能特定pod才能通信（nodeport部署服务失效） 解决办法：删除网络策略的部署 ......
Kubernetes进阶之使用二进制包部署集群
前言 之前关于Kubernetes有写过文档 参考：Kubernetes入门进阶课程 https://www.cnblogs.com/minseo/category/1654539.html 本文针对操作系统以及软件的新版本补充使用二进制包部署集群 之前版本部署参考：https://www.cnbl ......
线上ES集群参数配置引起的业务异常案例分析
作者：vivo 互联网数据库团队- Liu Huang 本文介绍了一次排查Elasticsearch node_concurrent_recoveries 引发的性能问题的过程。 一、故障描述 1.1 故障现象 1. 业务反馈 业务部分读请求抛出请求超时的错误。 2. 故障定位信息获取 故障开始时间 ......
Windows下RabbitMQ 集群及应用测试
转自：https://blog.csdn.net/elie_yang/article/details/86657851 1：安装erlang环境； 2：安装RabbitMQ, 以上2步都是下载安装，下一步结束；参考官网：http://www.rabbitmq.com/install-windows. ......
haproxy+nginx实现web负载均衡集群：
haproxy+nginx实现web负载均衡集群： 主机 | 系统 |IP地址|主要软件|—|— |—| — |—Haproxy服务器 |CentOS7.9 X86_64 |192.168.8.202| haproxy-1.5.19.tar.gzNginx服务器1 |CentOS7.9 X86_64 ......
Docker Swarm动态扩容MINIO集群
需求背景 当一个minio集群的磁盘不够用的时候，可以有两种方式，第一个通过扩磁盘，第二种增加机器。但是不管是哪种方式，都不能去动原来集群的启动方式，那样集群就起不来了，会一直提示类似下面这种报错，ERROR Unable to initialize backend: /data1 drive is ......
k8s 高可用集群3：VIP：HAProxy、keepalived
为何要使用负载均衡器VIP（HAProxy、keepalived） k8s Master 初始化配置时，使用负载均衡器，可以将 apiserver 的请求转发到不同的机器上，避免一台服务器宕机，造成所有节点不可使用。 如果不使用负载均衡器，先创建一个 k8s Master，然后再加入其他的 k8s ......
k8s集群二进制安装部署
1、前期规划 主机规划 IP地址 主机名 主机角色 软件列表 192.168.16.129 k8s-master01 master kube-apiserver、kube-controller-manager、kube-scheduler、etcd、kubelet、haproxy、keepalive ......
如何快速实现Prometheus监控Kubernetes集群
Prometheus K8S集群中常见的监控工具有哪些: Kubernetes Dashboard Kube-monkey K8s-testsuite Kubespray Minikube Prometheus K8S集群监控-外部 | apiserver 访问 | | | 集群外部访问： 通过pu ......
docker+docker-compose部署rocketmq集群遇到的大坑
搭建时间为2023-11-22 环境：CentOS7、Docker24.0.6、Docker-Compose2.23.0、RocketMQ镜像为apache/rocketmq:5.1.2 部署说明：两台Linux服务器，先是尝试了传统2主2从，没有实现主备自动切换，一步一步部署下来没有特别大的问题。 ......
Redis集群的实例什么情况使用redis集群和哨兵
当考虑Redis集群和哨兵的使用时，我们可以考虑一个在线购物系统的场景，其中需要处理用户会话数据。这个例子将涵盖横向扩展、高可用性和故障处理的方面。 场景描述： 假设你的在线购物系统使用Redis存储用户会话数据，以提供个性化的购物体验。用户的会话数据包括购物车、用户偏好设置等信息。 Redis集群 ......
HDFS与MAPREDUCE操作
HDFS文件操作 在分布式文件系统上验证HDFS文件命令，如下。 hadoop fs [genericOpitions] [-ls <path>] //显示目标路径当前目录下的所有文件 [-lsr <path>] //递归显示目标路径下的所有目录及文件（深度优先） [-du <path>] //以字 ......
strimzi operator 部署kafka集群
环境说明 本环境使用了单节点、临时存储集群的kafka-ephemeral-single配置。线上环境推荐kafka-persistent.yaml配置并修改storage配置为自动创建pv/pvc类型。 配置清单说明 1. kafka-ephemeral-single.yaml：非持久化存储，单节 ......
分布式事务 Seata 集群搭建
Seata 是蚂蚁金服和阿里巴巴共同开源的一款分布式事务项目，致力于在微服务架构下提供高性能和简单易用的分布式事务解决方案。自诞生以来就备受国内开发人员推崇，在实际工作中使用者甚多。Seata 提供了四种不同的分布式事务解决方案： XA模式：强一致性分阶段事务模式，牺牲了一定的可用性，无业务侵入 T ......
Kubernetes Gateway API 攻略：解锁集群流量服务新维度！
Kubernetes Gateway API 刚刚 GA，旨在改进将集群服务暴露给外部的过程。这其中包括一套更标准、更强大的 API资源，用于管理已暴露的服务。在这篇文章中，我将介绍 Gateway API 资源，并以 Istio 为例来展示这些资源是如何关联的。通过这个示例，你将了解 Gatewa ......
org.elasticsearch.client.transport.NoNodeAvailableException: None of the configured nodes are available es端口号及集群名称
org.elasticsearch.client.transport.NoNodeAvailableException: None of the configured nodes are available elasticsearch有两个端口：http_port和transport.tcp.por ......
kubectl-切换集群
kubectl远程调用k8s集群 // 当前集群信息kubectl cofing current-context// 当前集训配置信息kubectl config view// 选择集群 通过上下文名字切换kubectl cofing use-context contextNAME .kube/co ......
HDFS
目录HDFS1、HDFS概述1.1 hdfs产生背景和意义1.2 HDFS优缺点1.3 HDFS组成架构1.4 HDFS文件块大小2、HDFS的Shell（命令）3、API4、HDFS的读写流程（面试重点）4.1.1 写入流程4.1.2 网络拓扑 - 节点距离计算4.1.3 机架感知4.2 HDFS ......
Hadoop学习(一) 搭建伪分布式集群
文章结构 1.准备工作 1.1 配置IP 1.2 关闭防火墙 1.3 修改主机名并与IP绑定 1.4 创建新用户 1.5 配置免密匙 2.安装并配置Hadoop伪分布式集群 2.1 安装Java 2.2 安装配置Hadoop伪分布式集群 1.准备工作 1.1 配置IP 首先进入该路径下 cd /et ......
windows下redis集群环境搭建教程
所谓 redis 集群，就是有的挂了可以继续用别的。下面是搭建集群环境的步骤 （1）准备多个 redis 环境 新建文件夹 redis-cluster 将 redis 安装目录拷贝多份，放到二级目录，并分别以 XXXX 端口号命名 编辑 redis.windows.conf 依次修改 port 属性 ......