8s

spark on k8s环境下不重新打镜像实现celeborn client或其他底层jar包升级

博客园首发,转载请注明地址:https://www.cnblogs.com/tzxxh/p/17792469.html 前言 Apache Kyuubi 是一个分布式和多租户网关,用于在数据仓库和湖仓上提供无服务器 SQL。Apache Celeborn 是一个Remote Shuffle Serv ......
底层 celeborn 镜像 环境 client

K8S 权限管理

k8s 权限管理 目录k8s 权限管理1、k8s 用户1.1、k8s 用户概念1.2、User&ServiceAccount 的区别1.3、k8s 用户创建1.3.1、创建用户私钥1.3.2、创建证书签名请求1.3.3、集群证书签署2、k8s角色2.1、Role&ClusterRole2.1.1、R ......
权限 K8S K8 8S

K8s - 安装部署Kafka、Zookeeper集群教程(支持从K8s外部访问)

本文演示如何在K8s集群下部署Kafka集群,并且搭建后除了可以K8s内部访问Kafka服务,也支持从K8s集群外部访问Kafka服务。服务的集群部署通常有两种方式:一种是 StatefulSet,另一种是 Service&Deployment。本次我们使用 StatefulSet 方式搭建 Zoo ......
集群 K8s Zookeeper 教程 Kafka

kube-prometheus监控k8s集群内服务

一. 测试环境 1.1 服务器IP分布 节点 IP master-vip 10.255.61.20 tmp-k8s-master1 10.255.61.21 tmp-k8s-master2 10.255.61.22 tmp-k8s-master3 10.255.61.23 tmp-k8s-node1 ......
kube-prometheus 集群 prometheus kube k8s

k8s 相关命令

查看pod kubectl get pod -A 重新部署 kubectl rollout restart deployment <deployment_name> -n <namespace> kubectl rollout restart deployment webdatamanager -n ......
命令 k8s k8 8s

安装k8s

完成安装k8s集群以后,推荐使用https://github.com/512team/dhorse发布应用。 准备环境 准备两台服务器节点,如果需要安装虚拟机,可以参考《wmware和centos安装过程》 机器名 IP 角色 CPU 内存 centos01 192.168.109.130 mast ......
k8s k8 8s

Sentinel-dashboard安装(k8s部署)

目录Sentinel-dashboard安装(k8s部署)一.拉取镜像并推送到私库二.准备sentinel statefulset部署配置文件三.部署并访问sentinel Sentinel-dashboard安装(k8s部署) 一.拉取镜像并推送到私库 这里选择的是docker hub已经有人制作 ......
Sentinel-dashboard dashboard Sentinel k8s 8s

k8s 扩容指定版本机器 kubeadm

一、新增机器 二、同步/etc/hosts文件 三、关闭新机器防火墙 systemctl stop firewalld systemctl disable firewalld 四、新机器增加repo文件 cat kubernetes.repo [kubernetes] name=Kubernetes ......
机器 kubeadm 版本 k8s k8

k8s~service的种类与使用场景

Kubernetes (K8s) 中的 Service 用于将应用程序的一组 Pod 暴露给其他应用程序或服务,以便它们可以相互通信。K8s 中的 Service 主要分为以下几种类型,每种类型都有其特点和适用场景: ClusterIP Service: 特点:ClusterIP Service 为 ......
种类 场景 service k8s k8

k8s~ExternalName的使用

在Kubernetes中,Service资源的type字段有多种选项,其中之一是ExternalName。ExternalName类型的服务用于将外部服务引入到Kubernetes集群中,通常会将外部服务的域名映射到Kubernetes集群中的一个DNS名称。 ExternalName服务类型不涉及 ......
ExternalName k8s k8 8s

使用 kind 在本地运行 k8s

原文:https://www.jianshu.com/p/a4a4116e97df 本文介绍如何使用 kind 在本地快速启动一个 k8s 集群。kind 是 Kubernetes in Docker 的简写,从名字上看很容易猜出 kind 的目标是将一个 k8s 集群以容器的方式部署在本机电脑上。 ......
kind k8s k8 8s

k8s安装与卸载chaosblade

k8s安装与卸载chaosblade # 安装helm3 ``` wget https://get.helm.sh/helm-v3.12.3-linux-amd64.tar.gz tar -zxvf helm-v3.12.3-linux-amd64.tar.gz mv linux-amd64/hel ......
chaosblade k8s k8 8s

promethus监控k8s--外部

promethus监控k8s有两种方式,一直是k8s搭建自己监控自己 第二种是外部搭建好了promethus,k8s搭建pod收集信息 yaml地址为 https://github.com/starsliao/Prometheus/tree/master/kubernetes 一般选择2.2.1 按 ......
promethus k8s k8 8s

k8s 1.24.1 containerd 证书过期处理

在 master 节点上进行操作 [root@k8s-master-1 ~]# kubectl get nodes Unable to connect to the server: x509: certificate has expired or is not yet valid: current ......
containerd 证书 k8s k8 8s

jenkins安装部署、主从架构、slave镜像、K8S对接

介绍 CI/CD工具,自动化持续集成和持续部署,用于构建各种自动化任务。 官方提供了docker镜像https://hub.docker.com/r/jenkins/jenkins 使用Deployments部署镜像,然后通过暴露jenkins的8080端口(web端口)和50000端口(slave ......
主从 架构 镜像 jenkins slave

K8S集群搭建

集群搭建的几种方式 kubeadm 通过kubeadm init、kubeadm join快速部署集群。 二进制包 下载官方编译好的二进制文件,手动部署,比较麻烦。。 第三方工具、web端 第三方提供的部署工具、web部署端。 kubeadm部署k8s集群 实验环境 master节点: IP:10. ......
集群 K8S K8 8S

k8s-命名空间namespace

查看namespace: kubectl get namespaces #namespaces可以简写为namespace或ns 创建namespace: kubectl create namespace 命名空间名称 kubectl create namespace namespace1 删除na ......
namespace 空间 k8s k8 8s

k8s-pod

Pod是Kubernetes最小的管理单位,一个Pod可以封装一个容器或多个容器 一个Pod里的多个容器可以共享存储和网络, 可以看作一个逻辑的主机 获取pod帮助方法: kubectl explain pod 查看pod信息: kubectl get pod -n namespace -o wid ......
k8s-pod pod k8 8s

k8s网络-ingress

Ingress资源 https://kubernetes.io/zh-cn/docs/concepts/services-networking/ingress/ Ingress 是对集群中服务的外部访问进行管理的 API 对象,典型的访问方式是 HTTP。 Ingress 可以提供负载均衡、SSL ......
ingress 网络 k8s k8 8s

k8s-节点标签label

查看节点标签信息: kubectl get node --show-labels 设置节点标签信息: kubectl label node 节点名 标签值 kubectl label node node2 region=huanai zone=A env=test bussiness=game 显示 ......
节点 标签 label k8s k8

k8s网络-service

k8s网络 Kubernetes本身并不负责网络通信,Kubernetes提供了容器网络接口CNI(Container Network Interface),具体的网络通信交给CNI插件来负责,开源的CNI插件非常多,像Flannel、Calico。 Kubernetes虽然不负责网络,但要求集群中 ......
service 网络 k8s k8 8s

k8s-pod版本更新

pod版本更新⭐️⭐️ 在实际应用中,升级是一个常见的场景,Deployment能够很方便的支撑应用升级。 Deployment可以设置不同的升级策略,有如下两种。 RollingUpdate:滚动升级,即逐步创建新Pod再删除旧Pod,为默认策略。 Recreate:替换升级,即先把当前Pod删掉 ......
k8s-pod 版本 pod k8 8s

K8S使用开源CEPH作为后端StorageClass

1 引言 K8S在1.13版本开始支持使用Ceph作为StorageClass。其中云原生存储Rook和开源Ceph应用都非常广泛。本文主要介绍K8S如何对接开源Ceph使用RBD卷。 K8S对接Ceph的技术栈如下图所示。K8S主要通过容器存储接口CSI和Ceph进行交互。 https://doc ......
StorageClass CEPH K8S K8 8S

kubeadm部署k8s集群

一、系统环境准备 1、系统环境说明 系统环境说明 系统 角色 IP 组件 K8s版本 centos7.9 kubeadm-master1 192.168.100.41 docker,kubeadm,kubelet,kubectl v1.20.0 centos7.9 kubeadm-master1 1 ......
集群 kubeadm k8s k8 8s

k8s 监控之展示页面Grafana

1 Grafana介绍 Grafana是一个跨平台的开源的度量分析和可视化工具,可以将采集的数据可视化的展示,并及时通知给告警接收方。它主要有以下六大特点: 1、展示方式:快速灵活的客户端图表,面板插件有许多不同方式的可视化指标和日志,官方库中具有丰富的仪表盘插件,比如热图、折线图、图表等多种展示方 ......
Grafana 页面 k8s k8 8s

205-303 K8S API资源对象介绍03 (Job CronJob Endpoint ConfigMap Secret) 2.17-3.3

一、水平自动扩容和缩容HPA(K8S 版本>=1.23.x) HPA全称Horizontal Pod Autoscaler,Pod水平自动伸缩,HPA可以基于CPU利用率replication controller、deployment和replicaset中的pod数量进行自动扩缩容。pod自动缩 ......
ConfigMap Endpoint 对象 CronJob Secret

k8s中服务器重启后,provisioner制备区异常

kubectl logs -f openebs-localpv-provisioner-77886fbccd-fbv8k -n openebs F1019 06:43:35.908984 1 provisioner.go:247] Error getting server version: Get ......
provisioner 服务器 k8s k8 8s

使用 kaniko 在 K8S 中构建镜像

背景 现有个需求需要在 K8S 中构建一个新的镜像,之前使用 docker 命令进行构建,后面 K8S 升级,容器运行时换成了 containerd,故查了一下网络,发现 kaniko 比较好用。所以测试记录一下~ 项目地址:https://github.com/GoogleContainerToo ......
镜像 kaniko K8S K8 8S

kubeadm安装k8s集群

kubeadm安装k8s集群 一、机器准备(所有的master和node节点需要执行) 部署k8s集群的节点按照用途可以划分为如下2类角色: master:集群的master节点,集群的初始化节点,基础配置不低于2c 4g slave:集群的slave节点,可以多台,基础配置不低于1c 2g 主机名 ......
集群 kubeadm k8s k8 8s

k8s pv与pvc

k8s pv与pvc # 概念 ## PV 我们想要持久化k8s pod中的数据,就需要用到存储,找一个地方,存放数据。不然一旦pod被删除,则数据就丢失了。 在k8s中,pv就是存储数据的地方,可以理解为pv就是存储后端。 pv可以由多种存储系统提供,如NFS,GFS,本地,CIFS,云存储集群等 ......
k8s pvc k8 8s