集群vmware hdfs
虚拟机(Vmware)磁盘扩容
磁盘的扩容分两种方式，进行分区后挂载形成新的空间 或 原先使用的空间出现内存不足，扩大利用空间 我理解的大概常见类型： 1.新增加的空间，增加到已有分区空间中（此处又分为两种情况，1是通过卷组进行分配扩容，2是未划分卷组的空间，直接进行默认扩容）； 2.新增加的空间，成一个独立分区进行使用； 虚拟机 ......
Hadoop-HDFS压测】针对HDFS进行读写性能测试
###【Hadoop-HDFS压测】针对HDFS进行读写性能测试 1）测试工具 2）写入数据测试 3）读取数据测试 4）清除数据 ####1)测试工具 Hadoop自身集成的工具包：hadoop-mapreduce-client-jobclient-3.1.1.jar 注意： 1、如果是Apache ......
小知识：使用oracle用户查看RAC集群资源状态
正常情况按照标准配置的环境变量，只能grid用户查看RAC集群资源状态。 crsctl stat res -t 但是绝大部分操作其实都是oracle用户来操作，比如启停数据库，操作完成以后就需要检查下集群资源状态。 看到好多DBA在现场操作时就是来回各种切换或开多个窗口。 其实有两个简单的解决方法可 ......
Redis——cluster集群原理
摘要在 redis3.0之前，redis使用的哨兵架构，它借助 sentinel 工具来监控 master 节点的状态；如果 master 节点异常，则会做主从切换，将一台 slave 作为 master。当master挂掉的时候，sentinel 会选举出来一个 master，选举的时候是没有办法 ......
VMware虚拟机Linux动态扩容磁盘空间
Vmware中虚拟机使用时间长，发现磁盘空间不够，有些情况是无法新加新硬盘扩容到虚拟机中，因为有些数据不好移动或数据目录无法修改。 所以，在不加新的硬盘情况下，VMware中直接在原来的硬盘上新增空间扩容。操作思路是，硬盘增加空间、虚拟机硬盘fdisk分区、扩展卷组、扩容逻辑卷、重新定义文件系统操作 ......
Hadoop集群搭建总结
对这两天搭建Hadoop集群做个经验总结 master节点:Ubuntu 22.04，也就是我的台式机主机 slave节点：Debian 11，通过VMware虚拟出来 （1）集群节点设置和角色分配 master namenode,datanode,resourcemanager,nodemanag ......
VMware没有VMnet0网络
具体方法如下： 1、此问题可在关闭所有虚机后依次打开 编辑-虚拟网络编辑器，会发现没有桥接模式的VMnet0网卡。 2、按下win+r打开运行小窗口，输入services.msc，回车打开服务管理器，找到Device Install Service服务并启动此服务，默认是关闭的。 3、接着返回虚拟网 ......
解决VMware Workstation安装VMware Tools显示灰色的办法
想在VMware Workstation中安装VMware Tools，方便文件的复制粘贴。但是如下图，总是灰色 按照网上教程设置 方法一： 1.关闭虚拟机； 2.在虚拟机设置分别设置CD/DVD、CD/DVD2和软盘为自动检测三个步骤； 3.再重启虚拟机，灰色字即点亮。 灰色没有点亮。 接着尝试了 ......
在kubernetes中部署redis-cluster集群
使用k8s的DaemonSet创建6个节点的redis-cluster集群, 集群为3主3从, 所以3个控制平台(主)也要部署上pod, redis集群IP如下: (注:用StatfulSet也可以, 大同小异) 192.168.10.34:7000 192.168.10.35:7000 192.1 ......
redis，python操作哨兵，python操作集群，缓存优化，缓存击穿，穿透，雪崩
python操作哨兵 高可用架构后》不能直接连接某一个主库》主库可能会挂掉，后来他就不是主库了 之前的连接redis操作就不能用了 import redis conn=redis.Redis(host='',port=6379) conn.set() conn.close() 新的连接哨兵的操作 连 ......
ubuntu虚拟机运行VMware提示 /dev/vmmon 错误解决
sudo vmware-modconfig --console --install-all openssl req -new -x509 -newkey rsa:2048 -keyout VMWARE15.priv -outform DER -out VMWARE15.der -nodes -day ......
SpringCloud之Nacos配置管理（热共享、更新配置、集群搭建）
统一配置管理 随着微服务越来越多，如果达到成百上千个服务，如果一个配置文件和数十个服务有关系，需要逐个微服务的配置文件去调——麻烦； 并且调完，每个微服务都需要重启——生产环境下，一个服务的重启带来的影响比较大； 需求：希望配置文件能够实现统一的管理，比如说数十个配置文件的修改，想只需要修改一个就行 ......
DNS集群搭建
DNS实践（DNS集群） 实验环境： Linux Rocky8.6 三台 10.0.0.127 主DNS 10.0.0.128 从DNS 10.0.0.131 client客户端 软件：bind(实现DNS)，bind-utils（测试工具） (yum -y install bind bind-ut ......
kubernetes 1.27.1最新版集群部署
kubernetes 1.27.1 最新版集群部署国内环境 官方安装部署文档：https://kubernetes.io/zh-cn/docs/setup/production-environment/tools/kubeadm/install-kubeadm/ 准备云服务器 首先买三台服务器。我用 ......
ray-分布式计算框架-集群与异步Job管理
0. ray 简介 ray是开源分布式计算框架，为并行处理提供计算层，用于扩展AI与Python应用程序，是ML工作负载统一工具包 Ray AI Runtime ML应用程序库集 Ray Core 通用分布式计算库 Task -- Ray允许任意Python函数在单独的Python worker上运 ......
Nginx + Nacos2.x集群配置
Nginx : # 集群配置 http { upstream nacos-cluster { ip_hash; server 127.0.0.1:8858; server 127.0.0.1:8868; server 127.0.0.1:8878; } server { listen 8838; s ......
如何建设一个用于编译 iOS App 的 macOS 云服务器集群？
现代软件开发一般会借助 CI/CD 来提升代码质量、加快发版速度、自动化重复的事情，iOS App 只能在 mac 机器上编译，CI/CD 工具因此需要有一个 macOS 云服务器集群来执行 iOS App 的编译。今天就来谈谈如何建设 macOS 云服务器集群 ......
REDIES集群脚本
REDIES集群脚本 转至元数据结尾 Created by 蒋颖伟, last modified on 六月 16, 2017 转至元数据起始 一、dockerfile 及其中的脚本 1.创建集群的cluster.sh #/bin/bashcat /mnt/redishosts|awk '{prin ......
StarRocks 3.0 集群安装手册
本文介绍如何以二进制安装包方式手动部署最新版 StarRocks 3.0集群。 什么是 StarRocks StarRocks 是新一代极速全场景 MPP (Massively Parallel Processing) 数据库。StarRocks 的愿景是能够让用户的数据分析变得更加简单和敏捷。用户 ......
[问题记录]k8s集群中coredns解析失败
[问题记录]k8s集群中coredns解析失败 故障现象 在k8s集群，使用coredns提供集群内部dns服务 但是在使用过程中，偶现解析公网域名失败的情况，应用内日志记录显示UnknownHost 问题排查 对有问题的集群进行网络抓包解析，在服务侧记录到DNS解析失败的现象时，观察当时的DNS解 ......
VMware kali2023 桥接模式 联网 局域网主机发现
1.配置VMware网络 2.配置虚拟机网络设置（虚拟机硬件层面） 3.配置虚拟机网络2（虚拟机软件层面） 3.1 查看物理机上桥接的网卡的信息和虚拟机奇加网网卡的信息 记下了，方便下一步配置实验 我要配置的 网卡名是 eth2 网关和DNS一样：192.168.43.1 子网掩码 255.255. ......
使用docker 运行etcd 单实例/集群
一. 介绍 本文描述了如何使用docker搭建etcd集群，github/etcd上有单实例etcd服务的搭建方法，包括linux，mac，docker。 在操作之前你需要安装docker docker-compose 是可选的,如果你不想使用 docker-compose 就跳过他 二. etcd ......
win环境基于docker搭建zookeeper伪集群
创建路径：D:\Docker\zk-cluster 在此路径下创建配置文件：docker-compose.yml version: '2' networks: zk-net: name: zk-net services: zoo1: image: zookeeper restart: always ......
OSD自然OUT之后无法再加入集群-v1-20210308_124828
OSD自然OUT之后无法再加入集群企业云平台产品中心共享知识库Exported on 03/08/2021Table of Contents问题描述 4问题原因 5解决方法 6验证步骤 6相关下载链接：OSD自然OUT之后无法再加入集群.pdf1- - - - - - - - 这是一条华丽的分割线 ......
手动部署OceanBase集群
1. 准备工作 准备工作参考：https://www.cnblogs.com/haha029/p/17336622.html 中的“准备工作” 初始化基础环境：创建admin用户、配置ssh互信、修改内核、修改会话变量、配置防火墙、配置时钟同步。 2. 部署OceanBase集群 2.1 安装oce ......
Vmware不是有效的短文件名，安装Vmware时XXXX不是有效的短文件名
今天在整理Vmware的时候，不小心删除了部分文件 于是整个卸载重新安装 下载完后，点击安装时，发现报如下图所示内容，导致无法安装 于是我也很费解，怎么回事，在网上各种百度。最后得到的解决办法如下： 出现这种问题的情况是，是之前有装过VM，在卸载的时候，没有卸载完全，或是没有卸载。直接删除文件 导致 ......
k8s大规模集群优化
大规模集群优化2022-11-24 13:11Kubernetes ⾃ v1.6 以来，官⽅就宣称单集群最⼤⽀持 5000 个节点。不过这只是理论上，在具体实践中从 0 到 500 0，还是有很⻓的路要⾛，需要⻅招拆招。官⽅标准如下：不超过 5000 个节点 不超过 150000 个 pod不超过 ......
集群
1. 大纲 1. redis应用场景 2. redis得持久化方式 3. redis得集群 4. java连接redis服务器 2. redis应用场景 1、热点数据的缓存 由于redis访问速度块、支持的数据类型比较丰富，所以redis很适合用来存储热点数据，另外结合 expire，我们可以设置过 ......
K8S集群node的删除和添加
copy自： K8S集群node的删除和添加 1、在master节点查看所有的node节点 [root@master ~]# kubectl get node NAME STATUS ROLES AGE VERSION master Ready master 23h v1.17.4 node01 R ......