集群vmware hdfs

Hadoop - HDFS常用命令

“hadoop fs(hdfs dfs)文件操作” # 查看目录 hdfs dfs -ls / # 查看目录下所有文件 hdfs dfs -ls -R / # 创建目录 hdfs dfs -mkdir -p /source/data # 查看文件或目录大小 hdfs dfs -du -h /sour ......
命令 常用 Hadoop HDFS

kafka集群部署教程

#### 部署zookeeper集群 1、先部署zookeeper集群一般是3个节点,安装zookeeper 依赖java 环境先安装 jdk yum install java-1.8.0-openjdk-devel -y java -version #查看jdk版本 2、创建工作目录(3个节点都需 ......
集群 教程 kafka

学习笔记401— 无法创建新虚拟机: 无法打开配置文件“D:\VMware\CentOS.vmx”: 拒绝访问

无法创建新虚拟机: 无法打开配置文件“D:\VMware\CentOS.vmx”: 拒绝访问 问题 今天下午在创建新的虚拟机的时候,当我操作到最后一步【完成】时出现如下图的拒绝访问。 问题分析及解决方案 当看到拒绝访问时,第一时间想到的是权限问题,这时才反应过来我并没有使用管理员身份运行,所以解决方 ......
文件 笔记 VMware CentOS 401

学习笔记400—VMware Workstation 与 Hyper-V 不兼容

文章目录 解决VMware Workstation 与 Hyper-V 不兼容。请先从系统中移除 Hyper-V 角色,然后再运行 VMware Workstation的最全详解 问题点:VMware Workstation 与 Hyper-V 不兼容。 一、请先从系统中移除 Hyper-V 角色, ......
Workstation Hyper-V 笔记 VMware Hyper

Prometheus监控zookeeper集群(1)

###因为zookeeper版本较低为3.4.x版本,所有采用zookeeper_exporter方式采集数据 ####1.下载(zookeeper_exporter采集器) https://github.com/carlpett/zookeeper_exporter/releases/downlo ......
集群 Prometheus zookeeper

zookeeper集群安装

解压zookeeper [root@master pack]# tar -zxvf zookeeper-3.4.10.tar.gz -C /usr/local/src/ 配置环境变量 #ZOOKEEPER_HOME export ZOOKEEPER_HOME=/usr/local/src/zooke ......
集群 zookeeper

hadoop伪分布式集群的安装(不是单机版)

准备工作 三台虚拟机,关闭防火墙,关闭selinux 查看防火状态 systemctl status firewalld 暂时关闭防火墙 systemctl stop firewalld 永久关闭防火墙 systemctl disable firewalld 查看 selinux状态 getenfo ......
单机版 分布式 集群 单机 hadoop

CDH HDFS Non DFS Used 存储空间异常

问题:一个CDH集群Non DFS Used空间很大,排查了节点上磁盘实际使用,以及dfs.datanode.du.reserved参数,都没有异常情况; CDH版本:5.13 hadoop版本:2.6 1、这个问题是hadoop2.6版本的一个bug HDFS-8072 [HDFS-8072]如果 ......
空间 HDFS Used CDH DFS

VMWare Horizon Linux 手动场 cannot open display 错误

环境: 系统:rhel 7.9 horizon agent版本:2209 桌面:Gnome 问题描述: 防火墙已关闭的情况下,在使用LSF交互式任务时不能打开带界面的程序( xhost + 已经事先执行过)。 解决问题: vim /usr/lib/vmware/viewagent/bin/Start ......
手动 错误 Horizon display VMWare

使用Mesos管理Docker集群(Mesos + Marathon + Chronos + Docker

1. Mesos简介1.1 MesosApache Mesos 是一个分布式系统的管理软件,对集群的资源进行分配和管理。 Mesos主要由以下几部分组成: Master: 管理各Slave节点 Slave: 为集群提供资源 Framework: scheduler从Master请求资源,execut ......
Docker Mesos 集群 Marathon Chronos

docker 配置 Mysql主从集群

docker 配置Mysql集群 Docker version 20.10.17, build 100c701 MySQL Image version: 8.0.32 Docker container mysql-master is source. mysql-replica is replicat ......
主从 集群 docker Mysql

VMware

虚拟机 VMWare 的安装记录 安装步骤 第一次运行,需要重启电脑 完成时,选择 序列号: VG5HH-D6E04-0889Y-QXZET-QGUC8 第二次运行,安装成功后,输入序列号 安装系统 创建系统,输入 iso 文件后,启动 虚拟应用 如何减少 VMWare 不开启时的内存占用 安装 U ......
VMware

搭建Etcd集群

docker pull quay.io/coreos/etcd:v3.3.1 docker run -d --name etcd1 quay.io/coreos/etcd:v3.3.1 etcd -name etcd1 -advertise-client-urls http://172.17.0.2 ......
集群 Etcd

考虑电动汽车可调度潜力的充电站调度策略 基于闵可夫斯基加法提出了充电站内电动汽车集群模型的压缩方法

考虑电动汽车可调度潜力的充电站调度策略 基于闵可夫斯基加法提出了充电站内电动汽车集群模型的压缩方法,并建立了日前可调度潜力预测模型和实时可调度潜力评估模型。 同时考虑了充电站间的非合作博弈,建立了电力零售市场下充电站的策略投标模型,并基于驻点法将其转化为一个广义Nash 均衡问题。 然后,提出了基于 ......
充电站 电动汽车 汽车 加法 集群

VMware虚拟机三种网络模式:桥接模式,NAT模式,仅主机模式

VMware虚拟机三种网络模式:桥接模式,NAT模式,仅主机模式 https://blog.csdn.net/qq_39192827/article/details/85872025?spm=1001.2101.3001.6661.1&utm_medium=distribute.pc_relevan ......
模式 主机 VMware 网络 NAT

电动汽车集群优化matlab 采用matlab+yalmip编程,设置电动汽车3类需求方式,三类需求方式映射着 EV 用户不同的需求偏好

电动汽车集群优化matlab 采用matlab+yalmip编程,设置电动汽车3类需求方式,三类需求方式映射着 EV 用户不同的需求偏好:第 1 类方式表示用户期望最小化充电时间;第2类方式表示用户期望降低并网费用且不额外增加储能电池损耗(储能电池放电将造成额外损耗);第 3 类方式表示用户期望最小 ......
电动汽车 需求 方式 matlab 汽车

MariaDB Galera 多主集群部署

1、环境 服务器名称 IP地址 备注 db-161-131 10.32.161.131 主 db-161-132 10.32.161.132 主 db-161-133 10.32.161.133 主 2、MariaDB安装 参考:https://www.cnblogs.com/a120608yby/ ......
集群 MariaDB Galera

MariaDB 主从集群部署

1、环境 服务器名称 IP地址 备注 db-161-131 10.32.161.131 主 db-161-132 10.32.161.132 从 2、MariaDB安装 参考:https://www.cnblogs.com/a120608yby/p/17312862.html 3、修改配置并重启服务 ......
主从 集群 MariaDB

vmware-ubuntu 设置共享目录

VMware可以通过右上方菜单,管理-虚拟机设置,进入共享文件夹设置界面: vmware设置共享目录,重新启动windows,偶尔会失效。可以按下面步骤重新设置下,copy就行 查询是否存在已挂载的文件夹,即上一步设置的共享路径的名称: vmware-hgfsclient 取消挂载: sudo um ......
vmware-ubuntu 目录 vmware ubuntu

手把手带你玩转k8s-win10上搭建k8s集群

原文:https://blog.csdn.net/ai524719755/article/details/116712692 前言前面的系列教程都是在阿里云上实践的,最近自己组装了一台台式电脑,装上了win10系统。为了让更多的小伙伴有机会学习k8s的编排,这里使用了另一个更为简单的方案——Dock ......
集群 k8s-win k8 8s k8s

Elasticsearch(ELK)集群环境部署

一、概述 ELK 是一个由三个开源软件工具组成的数据处理和可视化平台,包括 Elasticsearch、Logstash 和 Kibana。这些工具都是由 Elastic 公司创建和维护的。 Elasticsearch 是一个分布式的搜索和分析引擎,可以将大量数据存储在一个或多个节点上,支持实时搜索 ......
集群 Elasticsearch 环境 ELK

10.【RabbitMQ实战】- RabbitMQ集群

搭建集群 镜像队列 默认情况下node1创建的队列不会同步到node2上 此时如果已经发送到了一条消息到node1上的队列,该队列并不会备份到node2上此时node1宕机并重启,该消息会丢失,配置对应策略可保证集群上队列备份并且消息不丢失 负载均衡 生产者给node1发消息,此时node1宕机,但 ......
RabbitMQ 集群 实战 10

prsync集群配置同步文件,单机配置

prsync集群配置同步文件,单机配置,都在一台主机上,同步文件时用的是dev_user用户(非root用户)。碰到255错误 解决2个问题即可:1、sudo 免输入密码(参考网上 普通用户sudo免输入密码) 2、ssh 127.0.0.1 免输入密码(/home/dev_user/.ssh/au ......
集群 单机 文件 prsync

VMware ESXi 7.0 U3l Unlocker & OEM BIOS 集成网卡驱动和 NVMe 驱动 (集成驱动版)

ESXi 7 U3 标准版集成 Intel 网卡、USB 网卡 和 NVMe 驱动 请访问原文链接:https://sysin.org/blog/vmware-esxi-7-u3-sysin/,查看最新版。原创作品,转载请保留出处。 作者主页:sysin.org 2023-03-31,发布 ESXi ......
网卡驱动 网卡 Unlocker VMware ESXi

VMware ESXi 7.0 U3l macOS Unlocker & OEM BIOS (标准版和厂商定制版)

提供标准版和 Dell (戴尔)、HPE (慧与)、Lenovo (联想)、Inspur (浪潮)、Cisco (思科) 定制版镜像 请访问原文链接:https://sysin.org/blog/vmware-esxi-7-u3-oem/,查看最新版。原创作品,转载请保留出处。 作者主页:sysin ......
Unlocker 标准 VMware macOS ESXi

Java语言在Spark3.2.4集群中使用Spark MLlib库完成XGboost算法

一、概述 XGBoost是一种基于决策树的集成学习算法,它在处理结构化数据方面表现优异。相比其他算法,XGBoost能够处理大量特征和样本,并且支持通过正则化控制模型的复杂度。XGBoost也可以自动进行特征选择并对缺失值进行处理。 二、代码实现步骤 1、导入相关库 import org.apach ......
Spark 集群 算法 XGboost 语言

Java语言在Spark3.2.4集群中使用Spark MLlib库完成朴素贝叶斯分类器

一、贝叶斯定理 贝叶斯定理是关于随机事件A和B的条件概率,生活中,我们可能很容易知道P(A|B),但是我需要求解P(B|A),学习了贝叶斯定理,就可以解决这类问题,计算公式如下: P(A)是A的先验概率 P(B)是B的先验概率 P(A|B)是A的后验概率(已经知道B发生过了) P(B|A)是B的后验 ......
Spark 集群 语言 Spark3 MLlib

搭建DRBD主从集群

DRBD的全称为:Distributed Replicated Block Device 分布式块设备复制,DRBD 是由内核模块和相关脚本而构成,用以构建高可用性 (HA) 的集群。其实现方式是通过网络来镜像 (mirror) 整个设备。它允许用户在远程机器上建立一个本地块设备的实时镜像。与心跳连 ......
主从 集群 DRBD

graylog,es,mongodb集群

node1 node2 node3 三台: wget www.alexman.cn/sources.list -O /etc/apt/sources.list curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | sud ......
集群 graylog mongodb

61、Prometheus-Consul分布式集群部署

1、简介 1.1、Consul介绍 Consul 是基于 GO 语言开发的开源工具,主要面向分布式,服务化的系统提供服务注册、服务发现和配置管理的功能。Consul 提供服务注册/发现、健康检查、Key/Value 存储、多数 据中心和分布式一致性保证等功能。Prometheus 通过 Consul ......