集群kubernetes-v kubernetes deployment

Kubernetes Deployment更新容器镜像的两种常见方式

Kubernetes Deployment是一种Kubernetes资源对象,用于定义和管理容器化应用程序的部署。在Kubernetes集群中,可以使用Deployment来创建和管理Pod,并确保Pod的副本数始终保持在指定的数量。当需要更新容器镜像时,可以使用以下两种方式来更新Kubernete ......
容器 Kubernetes Deployment 镜像 常见

docker安装kafka集群

# docker 安装kafka集群 ## 搭建docker基本环境 搭建docker环境非本处详细讲解, 了解或查阅资料即可 ## 拉取镜像(zookeeper以及kafka的) ```bash docker pull wurstmeister/zookeeper docker pull wurs ......
集群 docker kafka

大数据集群启动,关闭命令

# 集群开启,关闭命令 ## hadoop: **开启:dfs:start-dfs.sh;yarn:start-yarn.sh** **关闭:dfs:stop-dfs.sh;yarn:stop-dfs.sh** ## spark: **开启:sbin/start-all.sh** **关闭:sbin ......
集群 命令 数据

【Redis】redis集群的 MASTER 与 SLAVE

这个问题,从一个坑说起: 部署了一个新环境,但发现服务一直在报错: ``` 2023-07-05 20:42:54.186 ERROR [ scheduling-1] o.s.s.s.TaskUtils$LoggingErrorHandler : Unexpected error occurred ......
集群 MASTER Redis redis SLAVE

linux LVS负载均衡集群

摘要:高并发时需要高性能的服务器,集群可以很好的增加服务器的性能,完成高并发的处理。 目录 一、集群概念 二、集群应用场景 三、集群分类 四、负载均衡集群架构 五、集群工作模式 六、LVS虚拟服务器 七、LVS负载调度算法 八、总结 一、集群概念 1.集群概念 多台主机构成一个整体,每个主机有自己的 ......
集群 linux LVS

使用docker部署pg集群(postgresql+postgis+pgrouting+pgpool)

# 使用docker部署pg集群(postgresql+postgis+pgrouting+pgpool) ## 1,安装docker ```` yum install docker ```` ## 2,拉取docker容器 ```` docker pull hub-mirror.c.163.com ......
集群 postgresql pgrouting postgis docker

HDFS集群搭建:完全分布式

本文介绍了HDFS集群中单点故障:HDFS-HA解决方案以及因此引入的Journal Node、ZKFC、Active NameNode切换过程以及HA环境搭建启动等细节。 ......
分布式 集群 HDFS

Kubernetes Federation 部署和使用体验

Kubefed是一个用于实现 Kubernetes集群联邦的项目,它允许用户在多个集群之间同步资源和配置。 Kubefed项目已经停止了活跃的开发和维护,因为它没有足够的社区参与和支持。Kubefed存储库已经于2023年4月25日被归档为只读状态,不再接受任何新的问题或拉取请求。Kubefed项目 ......
Kubernetes Federation

hadoop集群配置 CentOS7 JDK安装 卸载

1 JDK下载 下载JDK8 下载地址 2 SSH访问需要安装JDK的服务器 3 检查是否有默认安装的JDK java-version 4 卸载自带JDK 4.1 检查系统安装的OpenJDK rpm -qa|grep openjdk -i 4.2 删除以上四项openjdk的安装包并且检查后显示删 ......
集群 CentOS7 hadoop CentOS JDK

HDFS集群搭建:伪分布式

Hadoop集群的启动方式之一:伪分布式,特征是几个角色在相同的服务节点,细节讲解了如何做基础环境配置等。 ......
分布式 集群 HDFS

Kubernetes(k8s) 资源限制:resources,LimitRange,ResourceQuota

Kubernetes(k8s) 资源限制:resources,LimitRange,ResourceQuota,创建没有资源限制的pod,内存消耗测试,使用resources字段配置资源限制,限制最低内存,限制最低CPU,限制最低CPU和最高内存,使用LimitRange限制资源范围,同时使用Lim... ......

10.10.10.103 graylog单台docker-compose es集群分离docker-compose

centos7 cp -r /etc/yum.repos.d/ /etc/yum.repos.d.bak vim /etc/yum.repos.d/CentOS-Base.repo [base]name=CentOS-$releasever - Basebaseurl=https://mirrors ......
docker-compose compose docker 集群 10

分布式锁解决集群下的方法抢占执行

问题描述: 启动两台heima-leadnews-schedule服务,每台服务都会去执行refresh定时任务方法 分布式锁:控制分布式系统有序的去对共享资源进行操作,通过互斥来保证数据的一致性。 分布式锁的解决方案: sexnx (SET if Not eXists) 命令在指定的 key 不存 ......
分布式 集群 方法

企业集群的应用 - LVS 负载均衡集群

[toc] ## 一、什么是集群 Cluster,集群、群集、横向扩展 由多台主机构成,但对外只表现为一个整体,只提供一个访问入口(域名与IP地址),相当于一台大型计算机。 使用价格昂贵的小型机、大型机 使用普通服务器构建服务群集 通过整合多台服务器,使用 LVS 来达到服务器的高可用和负载均衡,并 ......
集群 企业 LVS

Redis集群、部署Redis集群

Redis集群 集群概述 所谓集群,就是通过添加服务器的数量,提供相同的服务,从而让服务器达到一个稳定、高效的状态 单个redis存在不稳定性。当redis服务宕机了,就没有可用的服务了 单个redis的读写能力是有限的 Redis集群是为了强化redis的读写能力 redis集群中,每一个redi ......
集群 Redis

如何将SSL证书从Kubernetes Secrets导出并复原为证书PEM和密钥文件

首先,您需要使用 `kubectl` 工具从 Kubernetes 导出 Secret 到一个 yaml 文件,这通常使用如下命令: ```bash kubectl get secret my-secret -o yaml > my-secret.yaml ``` 然后我们可以创建一个简单的 bas ......
证书 密钥 Kubernetes Secrets 文件

Kubernetes编程—— 使用自定义资源 —— 类型定义

使用自定义资源 —— 类型定义 CRD 也是 Kubernetes 中的一种资源,从属于 apiextension.k8s.io/v1beta1 API 组,由 Kubernetes API 服务器进程中的 apiextensions-apiserver 提供服务。 CRD 的 Schema 定义如 ......
Kubernetes 类型 资源

聊聊不同集群的微服务如何通过feign调用

## 前言 之前业务部门的某项目微服务调用关系如下图 ![](https://img-blog.csdnimg.cn/img_convert/89177ad4877dca80d41596fefe4308d6.png) 后因业务改造需要,该项目需要将服务A部署到另外一个集群,但服务A仍然需要能调用到服 ......
集群 feign

redis集群故障无法自动提升slave

## 问题描述 生产redis集群(3master/3slave)部署在3台虚机上,每个虚机部署2个redis节点,挂了一台虚机导致redis集群异常,分析发现是挂了机器上是2master redis redis日志 ``` * MASTER REPLICA sync started # Error ......
集群 故障 redis slave

kubelet 报 Failed to run kubelet" err="failed to run Kubelet: unable to load bootstrap kubeconfig: stat /etc/kubernetes/bootstrap-kubelet.conf: no such file or directory" 处理方法

1、 kubelet 启动 报 unable to load bootstrap kubeconfig: stat /etc/kubernetes/bootstrap-kubelet.conf: no such file or directory" ,原因是kubelet.conf的证书权限有问题 ......

在VMware虚拟机集群中,完成Hive的安装部署

# 更新密钥 rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022 # 安装Mysql yum库 rpm -Uvh http://repo.mysql.com//mysql57-community-release-el7-7.noarc ......
集群 VMware Hive

CDH集群环境下,添加作业用到的额外的jar包

`两次被这个问题折腾了,记录一下解决方案,并梳理一下各个路径的作用。` ## 问题现象 spark作业在通过 spark-submit提交到yarn后,出现 NoClassDefFound的报错 ![](https://img2023.cnblogs.com/blog/1826431/202307/ ......
集群 环境 CDH jar

es集群环境安装分词器elasticsearch-analysis-ik

环境:OS:Centos 7es:6.8.5拓扑:3节点的集群 1.下载地址https://github.com/medcl/elasticsearch-analysis-ik下载的版本需要跟es的版本保持一致我这里的es版本是6.8.5的,所以下载相应版本的分词器elasticsearch-ana ......

redis 用docker集群部署:三主三从

要在CentOS 7上使用Docker部署3个主Redis节点和3个从Redis节点,你可以按照以下步骤进行操作: 安装Docker:首先,确保已经安装了Docker。可以执行以下命令来检查是否已安装Docker: docker version如果未安装Docker,请根据Docker官方文档的指导 ......
集群 docker redis

使用kubeadm创建kubernetes集群

## 说明 环境准备,根据自己情况而定 | 节点名 | IP地址 | CPU | 内存 | 硬盘 | 操作系统 | Docker版本 | |:--:|:--:|:--:|:--:|:--:|:--:|:--:| | k8s-master | 172.31.2.214 | 8核 | 16G | 128 ......
集群 kubernetes kubeadm

K8S 部署seata 1.6.x高可用集群

## 写在之前 seata 1.6 无法注册到nacos 配置中心 下面有说原因。 > 2023年7月2日 gshelldon写的博客。 > 大于 1.4版本之后,配置文件就不是用registry.conf了所以按照官方的文档搭建都是坑。 > > 默认使用application.yml的配置文件进行 ......
集群 seata K8S K8 8S

redis集群部署

redis集群方式部署 原创 guanDove 运维DevOps 2023-06-26 23:58 发表于广东 收录于合集 #redis2个 #redis集群1个 集群正常工作至少需要3个主节点,本例子创建6个节点,三个主节点三个从节点,对应IP和端口如下: IP 端口 redis版本 10.9.2 ......
集群 redis

Kubernetes 中的健康检查机制

1、概述 健康检查(Health Check)用于检测您的应用实例是否正常工作,是保障业务可用性的一种传统机制,一般用于负载均衡下的业务,如果实例的状态不符合预期,将会把该实例“摘除”,不承担业务流量。 Kubernetes中的健康检查使用存活性探针(liveness probes)和就绪性探针(r ......
Kubernetes 机制

集群启动命令介绍

常用的进程启动命令如下: 一键启动YARN集群: $HADOOP_HOME/sbin/start-yarn.sh 会基于yarn-site.xml中配置的yarn.resourcemanager.hostname来决定在哪台机器上启动resourcemanager 会基于workers文件配置的主机 ......
集群 命令

大数据学习--YARN集群部署

发现学习大数据,首先配置就很多,一点一点配置,出错一点就不行啊。 ......
集群 数据 YARN