集群vmware hdfs
100 个常用 Kubernetes 诊断命令，助你轻松搞定各种 Kubernetes 集群故障
100 个常用 Kubernetes 诊断命令，助你轻松搞定各种 Kubernetes 集群故障 云原生百宝箱 奇妙的Linux世界 2023-10-30 08:13 发表于重庆 收录于合集 #Kubernetes285个 #云计算106个 #Docker208个 #开源474个 公众号关注 「奇妙 ......
Centos7系统二进制安装Kubernetes（v1.20）集群
一、环境准备 参考：https://www.cnblogs.com/Mr-Ding/p/17773745.html 二、部署ETCD集群 2.1、准备cfssl证书生成工具 cd k8s1.20二进制包/ chmod +x cfssl_linux-amd64 cfssljson_linux-amd6 ......
VMware VCSA 5480 后台登录提示无法登陆问题解决
通过控制台登入 启用shell 使用service-control --status --all查看applmgmt服务状态（显示已停止） 使用service-control --start applmgmt启动服务 回车后会自动退出命令行模式 此时回到浏览器新建标签页重新登录5480端口成功 使用 ......
Ansible部署mariadb高可用集群
节点规划 主机名 IP地址 master 192.168.238.10 node1 192.168.238.11 node2 192.168.238.12 node3 192.168.238.13 准备四台虚拟机，使用CentOS-7-x86_64-DVD-2009.iso镜像 基础准备 1，安装a ......
vmware esxi
解决：Vmware Workstation 和 Vmware ESXI 创建虚拟机Ubuntu20.04时界面显示不全，无法点击Continue进行下一步 ......
shell 脚本一键部署 k8s 高可用集群
github地址： https://github.com/Johnny-Demo/deploy/tree/k8s-cluster 有不理解的地方可以私信我 ......
Nacos2.0.3集群搭建踩坑
Nacos2.0版本相比1.X新增了gRPC的通信方式，如果已经有Nacos集群，那么需要更改集群的配置方式，这里以Nginx为例，来介绍下如何搭建集群。 配置流程 新增端口是在配置的主端口(server.port)基础上，进行一定偏移量自动生成。 端口 与主端口的偏移量 描述 9848 1000 ......
[datax][报错解决] datax发送数据到hdfs时的一系列问题
前提 项目里有三个表需要同步到hdfs上，用datax进行全量同步，写了脚本一把梭，结果就报错了 不支持truncate写入模式 报错信息就是datax不支持truncate模式，原因是之前有的版本不支持truncate，源码有点问题，最好直接找最新的版本，没问题 不支持写入HDFS 报错IOExc ......
Docker部署Redis集群----第三节（docker-redis集群主从复制【上】实现篇）
1、redis的集群方式有哪些？ 主从复制 哨兵集群 redis-cluster集群 本节课我们主要讲解主从复制，现在大家手上是否有一台属于自己的云服务器了呢，今天我们要做的就是在云服务器上搭建我们的第一个集群主从复制。在讲之前，首先我们来了解下为什么要用集群模式以及集群模式的优点、给我们的项目带来 ......
Docker部署Redis集群----第二节（docker安装centos和指令讲解）
1、安装docker 在安装前：先讲下，因为我们是在云服务上部署的，有时候会出现短时间不操作就会断开ssh远端连接记得加个心跳： [root@instance-rttngj1u ~]# vim /etc/ssh/sshd_config 在末尾添加这两行代码 ClientAliveInterval 6 ......
Docker部署Redis集群----第一节（docker初认识）
作者：逻辑链接：https://zhuanlan.zhihu.com/p/59183420来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 1、Docker是什么？ docker是开源的应用容器引擎，我们可以理解为一个轻量级的“虚拟机”，开发者可以打包自己开发的应用或程 ......
怎么用Python写一个浏览器集群框架
这是做什么用的 框架用途 在采集大量新闻网站时，不可避免的遇到动态加载的网站，这给配模版的人增加了很大难度。本来配静态网站只需要两个技能点：xpath和正则，如果是动态网站的还得抓包，遇到加密的还得js逆向。 所以就需要用浏览器渲染这些动态网站，来减少了配模板的工作难度和技能要求。动态加载的网站在新 ......
vmware上的linux挂载共享目录
创建共享文件夹 vmware上点击设置，进入虚拟机设置，点击选项，共享文件夹，添加 主机路径，物理机上要分享的文件夹路径，这里我设置为 D:\test_shared 名称，要在虚拟机上显示的名称,，这里我设置为 VM-centos-share 一般选择总是启动，确认。 打开CentOS终端，输入命令 ......
vmware转kvm
由于kvm比vmware更高的性能，所以准备把虚拟机换到kvm上。 导出虚拟机 虚拟机使用久了，大部分都是多块vmdk虚拟硬盘，所以先要合并到一起。实际上不需要在vmware安装目录查找命令自己合并，直接把虚拟机导出即可，vmware会自动合并数据。 转换虚拟磁盘格式 qemu-img conver ......
K8s - 安装部署Kafka、Zookeeper集群教程（支持从K8s外部访问）
本文演示如何在K8s集群下部署Kafka集群，并且搭建后除了可以K8s内部访问Kafka服务，也支持从K8s集群外部访问Kafka服务。服务的集群部署通常有两种方式：一种是 StatefulSet，另一种是 Service&Deployment。本次我们使用 StatefulSet 方式搭建 Zoo ......
VMware vCenter Server Appliance重置root密码
转自dinghui的博客 近期不少用户计划给vCenter升级补丁，但是登录https://vcsa_fqdn:5480；输入root账户和密码之后报错： root 密码过期时会发生此问题。设备 root 帐户的密码有效期定义为 90 天。如果在有效期内未更改密码，root 用户将无法登录设备管理控 ......
kube-prometheus监控k8s集群内服务
一. 测试环境 1.1 服务器IP分布 节点 IP master-vip 10.255.61.20 tmp-k8s-master1 10.255.61.21 tmp-k8s-master2 10.255.61.22 tmp-k8s-master3 10.255.61.23 tmp-k8s-node1 ......
【1】基于docker搭建hadoop+hive+spark+hbase+zookeeper+scale集群
1、设置主机上的虚拟缓存 当本地内存不足时，可以使用虚拟内存将一些内存数据转移到硬盘上，从而扩展计算机的内存容量。这样可以让计算机运行更复杂、更占用内存的程序，不会出现内存不足的情况。减轻物理存储器不足的压力，设置虚拟内存可以在内存不够的情况下将缓存一时放在硬盘上，解决内存不足问题。 通过虚拟内存， ......
oracle rac集群
操作系统：centos7.6 oracle: 19c 两台 RAC 服务器配置 hosts 文件 # cat /etc/hosts 192.168.3.37 rac1 192.168.3.105 rac2 192.168.2.2 racprv1 192.168.2.3 racprv2 192.168 ......
docker搭建minio集群
1、启动命令 分别在三台服务器上执行即可，需要修改下面http中的ip地址 docker run -id \ --name=minio \ --restart=always \ --network=host \ -p 9000:9000 \ -p 9090:9090 \ -e "MINIO_ROOT ......
ElasticSearch 无密码集群搭建、监控和使用
对于 ElasticSearch8 集群，比较容易的方式就是无密码集群搭建。对于 ElasticSearch 来说，一般都是运行在内网中，可以通过防火墙限制来源 ip 或者通过 ElasticSearch 自身的配置来限制来源 ip。这种保障安全的方式比较类似于 Redis 。 对于 Kibana ......
docker-搭建一主两备redis集群
一 目的 docker-搭建一主两备redis集群 概述：目前要搭建一个“一主两备”redis集群，这个三个容器中redis的端口号为默认的6379，对外暴露的端口为6701,6702,6703，其中6701为master。6702和6703为slave 二 实现 1. 准备三份配置文件 1.1 配 ......
apisix etcd集群数据备份恢复
#etcd数据备份 /home/apisix-etcd-backup.sh #!/bin/bash #创建备份目录 mkdir -p /data/{apisix-etcd-0,apisix-etcd-1,apisix-etcd-2} #apisix etcd数据备份 ETCDCTL_API=3 /o ......
大数据HDFS集群相关概念
一、Zookeeper服务 端口 描述 配置路径 2181 主要使用端口，对cline端提供服务。连接方式jdbc:hive2://ip:2181 conf/zoo.cfg中clientPort 2183 选举leader使用 conf/zoo.cfg中server.x=2182:2183 2182 ......
k3d创建k3s集群
安装go wget https://golang.google.cn/dl/go1.21.3.linux-amd64.tar.gz tar zxvf go1.15.3.linux-amd64.tar.gz mv go /usr/local/ vim /etc/profile在最结尾添加 export ......
分布式集群与多线程高并发
后台数据的处理语言有很多，Java 是对前端采集的数据的一种比较常见的开发语言。互联网移动客户端的用户量特别大，大量的数据处理需求应运而生。可移动嵌入式设备的表现形式 很多，如 PC 端，手机移动端，智能手表，Google 眼镜等。Server2client 的互联网开发模式比较常见，有一种新的数据 ......
基于docker容器，搭建hadoop+spark+hive+hbase+Zookeeper Scala集群
1.安装Docker和Docker Compose 2.下载镜像 docker pull bde2020/hadoop-base:2.0.0-hadoop3.2.1-java8 docker pull bde2020/hadoop-namenode:2.0.0-hadoop3.2.1-java8 d ......
ETCD集群key超出200w给etcd压力太大，导致集群调度器延迟
背景： 业务在做测试的时候，突然集群不可用了，无法做出变更了，找到我们平台侧，经过排查，发现controller-manager调度器出现问题，经过查看，调度器不可使用， 处理 方案： 删除etcd集群的key 查询etcd集群中的key的数量： #etcd的命令行 etcdctl="/opt/et ......
利用kubeadm创建高可用集群
前言 本页的高可用是控制平面组件的高可用部署，同时还分为2种情况：堆叠etcd和外部etcd。使用kubeadm部署多master节点很方便，大体是3个步骤：使用init参数初始化好第一个master节点，然后其余的master节点使用join命令加入到master集群中，形成一个高可用的maste ......
使用kubeadm创建集群
前言 k8s集群在Node节点数量少的情况下，逐台去维护是可行的，但是如果Node节点数量多的情况下，再去想着我大不了一台一台来维护可能就不现实了。而且k8s的每个版本都差不多只有14个月的支持时间。可能还没稳定下来，一个新的版本已经更新了。这样一来版本升级的工作就变的会比较多一些。为了能够保证k8 ......