集群kubernetes openeuler k8s
两台实体机器4个虚拟机节点的Hadoop集群搭建（Ubuntu版）
安装Ubuntu Linux元信息 两台机器，每台机器两台Ubuntu Ubuntu版本：ubuntu-22.04.3-desktop-amd64.iso 处理器数量2，每个处理器的核心数量2，总处理器核心数量4 单个虚拟机内存8192MB（8G），最大磁盘大小30G 参考链接 清华大学开源软件镜像 ......
k8s-命名空间namespace
查看namespace： kubectl get namespaces #namespaces可以简写为namespace或ns 创建namespace： kubectl create namespace 命名空间名称 kubectl create namespace namespace1 删除na ......
k8s网络-ingress
Ingress资源 https://kubernetes.io/zh-cn/docs/concepts/services-networking/ingress/ Ingress 是对集群中服务的外部访问进行管理的 API 对象，典型的访问方式是 HTTP。 Ingress 可以提供负载均衡、SSL ......
k8s-节点标签label
查看节点标签信息： kubectl get node --show-labels 设置节点标签信息： kubectl label node 节点名 标签值 kubectl label node node2 region=huanai zone=A env=test bussiness=game 显示 ......
k8s网络-service
k8s网络 Kubernetes本身并不负责网络通信，Kubernetes提供了容器网络接口CNI（Container Network Interface），具体的网络通信交给CNI插件来负责，开源的CNI插件非常多，像Flannel、Calico。 Kubernetes虽然不负责网络，但要求集群中 ......
405-503 搞懂Kubernetes调度 (DNS ingress NodeSelector NodeAffinity)4.5-5.3
一、Kubernetes里的DNS K8S集群默认使用CoreDNS作为DNS服务： # kubectl get svc -n kube-system |grep dns kube-dns ClusterIP 10.96.0.10 <none> 53/UDP,53/TCP,9153/TCP 24d ......
kubernetes 概述
云原生是一条最佳路径或者最佳实践。更详细的说，云原生为用户指定了一条低心智负担的、敏捷的、能够以可扩展、可复制的方式最大化地利用云的能力、发挥云的价值的最佳路径。因此，云原生其实是一套指导进行软件架构设计的思想。 ......
Redis 集群
sentinel模式基本可以满足一般生产的需求，具备高可用性。但是当数据量过大到一台服务器存放不下的情况时，主从模式或sentinel模式就不能满足需求了，这个时候需要对存储的数据进行分片，将数据存储到多个Redis实例中。cluster模式的出现就是为了解决单机Redis容量有限的问题，将Redi ......
K8S使用开源CEPH作为后端StorageClass
1 引言 K8S在1.13版本开始支持使用Ceph作为StorageClass。其中云原生存储Rook和开源Ceph应用都非常广泛。本文主要介绍K8S如何对接开源Ceph使用RBD卷。 K8S对接Ceph的技术栈如下图所示。K8S主要通过容器存储接口CSI和Ceph进行交互。 https://doc ......
kubeadm部署k8s集群
一、系统环境准备 1、系统环境说明 系统环境说明 系统 角色 IP 组件 K8s版本 centos7.9 kubeadm-master1 192.168.100.41 docker,kubeadm,kubelet,kubectl v1.20.0 centos7.9 kubeadm-master1 1 ......
401 Kubernetes网络 (Pod Service Calico Flannel) 4.1-4.4
一、Pod网络 在K8S集群里，多个节点上的Pod相互通信，要通过网络插件完成，比如Calico网络插件。 使用kubeadm初始化K8S集群时，需要指定一个参数--pod--network-cidr=10.18.0.0/16 它用来定义Pod的网段。配置Calico的时候，也要定义CALICO_I ......
hadoop集群 大数据项目实战_电信用户行为分析_day04
进行HIVE环境配置 1.上传相关的包 2.对上传的包进行下载和创建软连接 3.配置相关的文件 4.分别发送给其他机子 假设你需要在所有机器执行同一个指令，则你就需要相关设置 5.在hive的onf文件中创建hive-site.xml进行相关设置 ```xml<configuration> <-- ......
部署redis-cluster集群
参考： https://www.cnblogs.com/paul8339/p/11987345.html https://mikechen.cc/31360.html https://zhuanlan.zhihu.com/p/637366705 本文使用一台虚拟机部署6个不同端口的redis实例 1 ......
如何优雅重启 kubernetes 的 Pod
最近在升级服务网格 Istio，升级后有个必要的流程就是需要重启数据面的所有的 Pod，也就是业务的 Pod，这样才能将这些 Pod 的 sidecar 更新为新版本。 方案 1 因为我们不同环境的 Pod 数不少，不可能手动一个个重启；之前也做过类似的操作： kubectl delete --al ......
Oracle集群升级迁移—主机网络设置及交换机侧bond vlan划分
目录Oracle集群升级迁移—主机网络设置及交换机bond vlan划分网络规划操作系统层面的IP设置bond类型介绍设置bond1和bond0交换机侧的设置（省略） Oracle集群升级迁移—主机网络设置及交换机bond vlan划分 网络规划 按照工程师要求，配置了5个IP供集群使用。1个IP为 ......
k8s 监控之展示页面Grafana
1 Grafana介绍 Grafana是一个跨平台的开源的度量分析和可视化工具，可以将采集的数据可视化的展示，并及时通知给告警接收方。它主要有以下六大特点： 1、展示方式：快速灵活的客户端图表，面板插件有许多不同方式的可视化指标和日志，官方库中具有丰富的仪表盘插件，比如热图、折线图、图表等多种展示方 ......
CDH集群日志清理
CDH集群日志清理 一、查看磁盘占用情况 df -h 二、查看日志占用情况 cdh的各种组件日志一般在 /var/log 目录下，因此需要关注“/”根目录， 查看 /var/log 下使用空间较大的文件夹，并又大到小排列 cd /var/log/ du -s ./* |sort -nr 还有一个是 ......
205-303 K8S API资源对象介绍03 (Job CronJob Endpoint ConfigMap Secret) 2.17-3.3
一、水平自动扩容和缩容HPA（K8S 版本>=1.23.x） HPA全称Horizontal Pod Autoscaler，Pod水平自动伸缩，HPA可以基于CPU利用率replication controller、deployment和replicaset中的pod数量进行自动扩缩容。pod自动缩 ......
Oracle集群升级迁移——存储及主机连接配置
目录Oracle集群升级迁移——存储及主机连接配置存储映射新LUN给Oracle新集群旧存储删除multipath.conf删除相应磁盘将主机和主机组里剔除磁盘，在从LUN、LUN组删除新建磁盘映射给Oracle数据库（映射前需要划Zone）映射完毕，刷新主机配置并修改multipath.conf文 ......
VM部署HDFS集群
上传hadoop-3.3.4.tar.gz到/export/server 解压 tar -zxvf hadoop-3.3.4.tar.gz -C /export/server/ # 快捷方式 ln -s /export/server/hadoop-3.3.4 hadoop Hadoop安装包目录结构 ......
k8s中服务器重启后，provisioner制备区异常
kubectl logs -f openebs-localpv-provisioner-77886fbccd-fbv8k -n openebs F1019 06:43:35.908984 1 provisioner.go:247] Error getting server version: Get ......
Oracle集群升级迁移—老集群磁盘切割
目录Oracle升级迁移剔除磁盘腾出存储LUNGRID用户登录，查询ASM磁盘剔除磁盘 Oracle升级迁移 目前有两套Oracle采用ADG + RAC架构，其中备库使用的为SUSE12.4目前已EOS，文件系统BFTFS与Oracle兼容性据说也有一定的问题，决定对现有的集群进行升级，升级后服务 ......
（华为欧拉操作系统）openEuler 22.03 LTS SP2 安装使用记录
本来是准备在虚拟机中安装rocky linux,，结果安装失败，你可以从第4步开始看。 1.到 https://www.virtualbox.org/ 下载VirtualBox-7.0.12-159484-Win.exe 并安装 2.到 https://rockylinux.org/zh_CN/do ......
使用 kaniko 在 K8S 中构建镜像
背景 现有个需求需要在 K8S 中构建一个新的镜像，之前使用 docker 命令进行构建，后面 K8S 升级，容器运行时换成了 containerd，故查了一下网络，发现 kaniko 比较好用。所以测试记录一下~ 项目地址：https://github.com/GoogleContainerToo ......
kubeadm安装k8s集群
kubeadm安装k8s集群 一、机器准备(所有的master和node节点需要执行) 部署k8s集群的节点按照用途可以划分为如下2类角色： master：集群的master节点，集群的初始化节点，基础配置不低于2c 4g slave：集群的slave节点，可以多台，基础配置不低于1c 2g 主机名 ......
k8s pv与pvc
k8s pv与pvc # 概念 ## PV 我们想要持久化k8s pod中的数据，就需要用到存储，找一个地方，存放数据。不然一旦pod被删除，则数据就丢失了。 在k8s中，pv就是存储数据的地方，可以理解为pv就是存储后端。 pv可以由多种存储系统提供，如NFS，GFS，本地，CIFS，云存储集群等 ......
Kubernetes:kube-apiserver 之 scheme（二）
接 Kubernetes:kube-apiserver 之 scheme(一)。 2.2 资源 convert 上篇说到资源版本之间通过内部版本 __internal 进行资源转换。这里进一步扩展介绍资源转换内容，以加深理解。 同样以例子开始，通过 kubectl 将 apps/v1beta1/De ......
hadoop集群 大数据项目实战_电信用户行为分析_day03
配置系统环境 Reis 1.先把之前的dump.rdb删除掉 rm -rf dump.rdb 2.把原始项目给的dump.rdb 放进来，它里面包含了需要的数据，比如端口；在这部之前必须要进行关闭端口，随后传送文件，最后重启端口 相关指令: bin/redis-server conf/redis.c ......
Centos7系统二进制安装Kubernetes（v1.18）集群
一、环境准备 1、集群环境 集群环境 角色 IP 组件 k8s-master01 192.168.100.31 kube-apiserver、 kube-controllermanager、 kube-scheduler、 etcd k8s-master02 192.168.100.32 kube- ......
kubernetes文档支持的版本
https://kubernetes.io/zh-cn/docs/ 网站一共是可以阅读5个k8s版本的文档。这5个版本包括k8s最新版和最近的4个版本。例如当前最新版是1.28，那么文档网站可以阅读1.28、1.27、1.26、1.25、1.24这5个版本。 在接下来的文档中，全部是以kuberne ......