集群vmware hdfs
VMware虚拟机如何联网？虚拟机设置上网的详细操作
Vmware是一款非常好用的虚拟机软件，可以让用户在单一的桌面上同时运行不同的操作系统。最近有一些用户下载安装了Vmware虚拟机后，不知道怎么设置上网，那么VMware虚拟机如何联网？下面就来看看详细的操作教程吧。 VMware Workstation Pro V16.0.0 官方版 [电脑软件] ......
elasticsearch 集群搭建
elasticsearch 集群搭建 elasticsearch.yml cluster.name: bigdata node.name: node-1 path.data: /usr/local/las/data/elasticsearch path.logs: /usr/local/las/lo ......
MySQL 双主集群搭建
MySQL 双主集群搭建 参考文档： 图文结合带你搞懂MySQL日志之relay log（中继日志） - GreatSQL - 博客园 (cnblogs.com) 一个月后，我们又从 MySQL 双主切换成了主 - 从！ (baidu.com) MySQL 简介 MySQL是一个关系型数据库管理系统 ......
redis Cluster（主从集群）
redis Cluster（主从集群） Redis的主从同步机制 得分点 psync,全量复制、部分复制 标准回答 Redis主从同步是指任意数量的从节点（slave node）都可以从主节点上（master node）同步数据。而除了多个 slave 可以连接到同一个 master 之外,slav ......
关于hdfs删除数据之后9870报错进入safe mode
1.运行 fsck 命令：首先，运行 Hadoop 的 fsck 命令来检查文件系统的完整性并标记出已删除的文件。在终端或命令提示符中执行以下命令： hdfs fsck / -files -blocks -locations -delete 上述命令会运行 fsck 并删除标记为已删除的文件。这将清 ......
Docker 部署 redis 网络集群
Docker 部署 redis 网络集群 ## 1. 创建网卡 docker network create redis --subnet 172.38.0.0/16 # 2. 通过脚本创建六个redis配置 for port in $(seq 1 6); \ do \ mkdir -p /mydat ......
如何在win10系统中安装vmware16虚拟机安装教程
###回答1：以下是VMware16虚拟机安装教程Win10的步骤：1.首先，下载并安装VMware16软件。2.打开VMware16软件，点击“新建虚拟机”。3.选择“典型(推荐)”模式，点击“下一步”。4.选择操作系统类型和版本，这儿选择“MicrosoftWindows”和“Windows10 ......
rockerMQ双主双从集群搭建
总体架构 集群工作流程 启动NameServer，NameServer起来后监听端口，等待Broker、Producer、Consumer连上来，相当于一个路由控制中心。 Broker启动，跟所有的NameServer保持长连接，定时发送心跳包。心跳包中包含当前Broker信息(IP+端口等)以及存 ......
ceph（一）基于ceph-deploy部署ceph集群
1.梳理ceph的组件关系 1.1 ceph介绍 Ceph是一个开源的分布式存储系统，同时支持对象存储、块设备、文件系统。 ceph支持EB(1EB=1,000,000,00OGB)级别的数据存储, ceph把每一个待管理的数据流(文件等数据)切分为一到多个固定大小(默认4兆)的对象数据，并以其为原 ......
PostgreSQL高可用集群项目实战之Repmgr
一、风哥PG-DBA培训18：PostgreSQL高可用集群项目实战之Repmgr 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL高可用集群项目实战之Repmgr，学完本课程可以掌握Repmgr运行 ......
PostgreSQL高可用集群项目实战之Patroni
一、风哥PG-DBA培训19：PostgreSQL高可用集群项目实战之Patroni 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL高可用集群项目实战之Patroni，学完本课程可以掌握Patron ......
PostgreSQL集群解决方案与流复制项目实战
一、风哥PG-DBA培训15：PostgreSQL集群解决方案与流复制项目实战 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL集群解决方案与流复制项目实战，学完本课程可以掌握PostgreSQL集群 ......
Kubeadm方式搭建K8S集群
Kubeadm方式搭建K8S集群 一、搭建k8s集群（kubeadm方式） kubeadm部署方式介绍 kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具，这个工具能通过两条指令完成一个kubernetes集群的部署： 第一，创建一个master几点 kubeadm ini ......
Docker Swarm + Harbor + Portainer 打造高可用，高伸缩，集群自动化部署，更新。
Docker Swarm是Docker官方自带的容器编排工具，Swarm，Compose，Machine合称Docker三剑客。Docker Swarm对于中小型应用来说，还是比较方便，灵活，当然K8S对于大型项目在各方面有着明显的优势。技术选型需要针对公司实际情况选择，架构往往是一步一步随着业务变 ......
VMware ESXi 8.0U2 发布 - 领先的裸机 Hypervisor
VMware ESXi 8.0U2 发布 - 领先的裸机 Hypervisor 2023-09-21，北京时间 22 日凌晨 vSphere 8.0 Update 2 正式发布。 同步发布 Dell 和 HPE 等 OEM 定制版镜像 请访问原文链接：https://sysin.org/blog/v ......
VMware vCenter Server 8.0U2 发布 - 集中式管理 vSphere 环境
VMware vCenter Server 8.0U2 发布 - 集中式管理 vSphere 环境 2023-09-21，北京时间 22 日凌晨 vSphere 8.0 Update 2 正式发布。 请访问原文链接：https://sysin.org/blog/vmware-vcenter-8-u2 ......
VMware vSphere 8.0 Update 2 正式版发布 - 企业级工作负载平台
VMware vSphere 8.0 Update 2 正式版发布 - 企业级工作负载平台 2023-09-21，北京时间 22 日凌晨 vSphere 8.0 Update 2 正式发布。 ESXi 8.0 U2 & vCenter Server 8.0 U2 请访问原文链接：https://sy ......
Kafka详解、Kafka集群搭建与使用
Kafka详解、Kafka集群搭建与使用 原创 凉兮 凉兮的运维日记 2023-09-21 16:10 发表于北京 收录于合集 #docker6个 #消息队列1个 一、Kafka详解 1.Kafka是什么 Kafka是Apache旗下的一款分布式流媒体平台，Kafka是一种高吞吐量、持久性、分布式的 ......
每日总结(hdfs文件导入到hive表)
1 CREATE TABLE employees ( 2 id INT, 3 name STRING, 4 age INT, 5 salary FLOAT 6 ) 7 ROW FORMAT DELIMITED 8 FIELDS TERMINATED BY ',' 9 STORED AS TEXTFI ......
Windows访问Kerberos认证HDFS web
我们可以通过Window访问keberos安全认证的HDFS WebUI，如果Windows客户端没有进行kerberos主体认证会导致在HDFS WebUI中看不到HDFS目录，这时需要我们在Window客户端进行Kerberos主体认证，在Window中进行Kerberos认证时可以使用Kerb ......
k8s-集群搭建
部署目标 在所有节点上安装Docker和kubeadm，kubelet 部署容器网络插件flannel 安装基础软件 1、配置Master和work节点的域名 2、CPU设置为2核 3、下载阿里云的yum源repo文件 curl -o /etc/yum.repos.d/CentOS-Base.rep ......
ElasticSearch集群的搭建
一、集群有什么用 1.1 群集的含义与产生 群集（或称为集群）是由多台主机构成，但对外，只表现为一个整体，只提供一个访问入口（域名或IP），相当于一台大型计算机。互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器开始无法满足负载均衡及高可用的需求，群集因此应 ......
如何查看kubeadm搭建出来的集群，admin.conf文件，使用的是哪些用户？
当使用kubeadm工具搭建一个k8s集群之后，会自动的创建一个admin.conf文件。 同时，会建议将这个文件拷贝到$HOME/.kube/config，kubectl会使用这个配置文件来访问k8s集群，也可以说是访问apiserver。 那么，在admin.conf中，到底设置的是哪个用户呢？ ......
数据库集群
一、海量数据存储问题 传统的关系型数据库，因为数据存储量越来越大，已经无法满足快速查询与插入数据的需求。NoSql的出现暂时解决了这一危机。它通过降低数据的安全性，减少对事务的支持，减少对复杂查询的支持，换取性能的提升。 有的场景要求绝对要有事务与安全指标，这时候NoSql一些折中是无法满足使用场景 ......
HDFS高可用架构
1 HDFS高可用架构原理1.1 HDFS的基本架构NameNode负责响应客户端的请求，负责管理整个文件系统的元数据HDFS 的读、写操作都必须向 NameNode 申请，元数据非常关键负责维持文件副本的数据SecondNameNode是为了帮助 NameNode 合并编辑日志，减少 NameNo ......
kubesphere快速搭建集群
1，资源准备 mkdir -p /opt/kubesphere cd /opt/kubesphere curl -sfL https://get-kk.kubesphere.io | VERSION=v3.1.0-alpha.4 sh - chmod +x kk ./kk create config ......
使用vmware时，在Linux虚拟机开机时读取文件
条件： 有esxi或vcenter的权限 Linux虚拟机开机且不能中断运行 不知道Linux虚拟机的账号密码 方法： linxu-flat.vmdk为基础磁盘文件 没有快照时，读取、复制linxu-flat.vmdk显示Device or resource busy 有快照时，可以读取、复制lin ......
hdfs副本数设置
1.调整HDFS副本数 ##该命令只会设置当前已有的文件副本数，不会改默认副本数参数 hadoop fs -setrep -R -w 5 /corelogs 2.查看HDFS当前文件副本数 hadoop fs -ls /corelogs ##显示的第二个参数即为当前副本数 ......
redis cluster三主六从 redis三主三从集群搭建
转自：https://blog.51cto.com/u_16099166/6885197 一、下载安装二、本文架构（三台服务器，每台部署两个节点，主从同步，生产最好是部署六台服务器）： 三、进入redis安装目录，复制redis.conf文件，建立从节点配置文件 1 #进入redis安装目录 2 c ......