hadoop集群
电动汽车集群优化matlab 采用matlab+yalmip编程，设置电动汽车3类需求方式，三类需求方式映射着 EV 用户不同的需求偏好
电动汽车集群优化matlab 采用matlab+yalmip编程，设置电动汽车3类需求方式，三类需求方式映射着 EV 用户不同的需求偏好：第 1 类方式表示用户期望最小化充电时间；第2类方式表示用户期望降低并网费用且不额外增加储能电池损耗（储能电池放电将造成额外损耗）；第 3 类方式表示用户期望最小 ......
MariaDB Galera 多主集群部署
1、环境 服务器名称 IP地址 备注 db-161-131 10.32.161.131 主 db-161-132 10.32.161.132 主 db-161-133 10.32.161.133 主 2、MariaDB安装 参考：https://www.cnblogs.com/a120608yby/ ......
MariaDB 主从集群部署
1、环境 服务器名称 IP地址 备注 db-161-131 10.32.161.131 主 db-161-132 10.32.161.132 从 2、MariaDB安装 参考：https://www.cnblogs.com/a120608yby/p/17312862.html 3、修改配置并重启服务 ......
手把手带你玩转k8s-win10上搭建k8s集群
原文：https://blog.csdn.net/ai524719755/article/details/116712692 前言前面的系列教程都是在阿里云上实践的，最近自己组装了一台台式电脑，装上了win10系统。为了让更多的小伙伴有机会学习k8s的编排，这里使用了另一个更为简单的方案——Dock ......
Elasticsearch（ELK）集群环境部署
一、概述 ELK 是一个由三个开源软件工具组成的数据处理和可视化平台，包括 Elasticsearch、Logstash 和 Kibana。这些工具都是由 Elastic 公司创建和维护的。 Elasticsearch 是一个分布式的搜索和分析引擎，可以将大量数据存储在一个或多个节点上，支持实时搜索 ......
10.【RabbitMQ实战】- RabbitMQ集群
搭建集群 镜像队列 默认情况下node1创建的队列不会同步到node2上 此时如果已经发送到了一条消息到node1上的队列，该队列并不会备份到node2上此时node1宕机并重启，该消息会丢失，配置对应策略可保证集群上队列备份并且消息不丢失 负载均衡 生产者给node1发消息，此时node1宕机，但 ......
hadoop完全分布式
准备工作 三台虚拟机，关闭防火墙，关闭selinux 查看防火状态 systemctl status firewalld 暂时关闭防火墙 systemctl stop firewalld 永久关闭防火墙 systemctl disable firewalld 查看 selinux状态 getenfo ......
prsync集群配置同步文件，单机配置
prsync集群配置同步文件，单机配置，都在一台主机上，同步文件时用的是dev_user用户（非root用户）。碰到255错误 解决2个问题即可：1、sudo 免输入密码(参考网上 普通用户sudo免输入密码) 2、ssh 127.0.0.1 免输入密码（/home/dev_user/.ssh/au ......
Java语言在Spark3.2.4集群中使用Spark MLlib库完成XGboost算法
一、概述 XGBoost是一种基于决策树的集成学习算法，它在处理结构化数据方面表现优异。相比其他算法，XGBoost能够处理大量特征和样本，并且支持通过正则化控制模型的复杂度。XGBoost也可以自动进行特征选择并对缺失值进行处理。 二、代码实现步骤 1、导入相关库 import org.apach ......
Java语言在Spark3.2.4集群中使用Spark MLlib库完成朴素贝叶斯分类器
一、贝叶斯定理 贝叶斯定理是关于随机事件A和B的条件概率，生活中，我们可能很容易知道P（A|B），但是我需要求解P（B|A），学习了贝叶斯定理，就可以解决这类问题，计算公式如下： P（A）是A的先验概率 P（B）是B的先验概率 P（A|B）是A的后验概率（已经知道B发生过了） P（B|A）是B的后验 ......
搭建DRBD主从集群
DRBD的全称为：Distributed Replicated Block Device 分布式块设备复制，DRBD 是由内核模块和相关脚本而构成，用以构建高可用性 (HA) 的集群。其实现方式是通过网络来镜像 (mirror) 整个设备。它允许用户在远程机器上建立一个本地块设备的实时镜像。与心跳连 ......
graylog，es，mongodb集群
node1 node2 node3 三台： wget www.alexman.cn/sources.list -O /etc/apt/sources.list curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | sud ......
61、Prometheus-Consul分布式集群部署
1、简介 1.1、Consul介绍 Consul 是基于 GO 语言开发的开源工具，主要面向分布式，服务化的系统提供服务注册、服务发现和配置管理的功能。Consul 提供服务注册/发现、健康检查、Key/Value 存储、多数 据中心和分布式一致性保证等功能。Prometheus 通过 Consul ......
redis集群
本文为joshua317原创文章,转载请注明：转载自joshua317博客 https://www.joshua317.com/article/305 一、介绍 Redis是一个流行的高性能内存数据存储系统，常用于缓存、消息队列和实时数据分析等领域。然而，随着数据量的增长和高可用性需求的增加，单个R ......
openEuler 单机部署 Hadoop SingleNode 模式
openEuler 单机部署 Hadoop SingleNode 模式 升级操作系统和软件 yum -y update 升级后建议重启 安装常用软件 yum -y install gcc gcc-c++ autoconf automake cmake make rsync openssh-serve ......
openEuler Linux 部署 Zookeeper 集群
openEuler Linux 部署 Zookeeper 集群 openEuler Linux 部署 Zookeeper 集群 | 主机名 | IP地址 | | | | | spark01 | 192.168.28.11 | | spark02 | 192.168.28.12 | | spark03 ......
hadoop优化
# Hadoop优化 ## 案例、天气预报 > 随机生成温度代码 ```java package com.shujia.weather; import java.text.DateFormat; import java.text.ParseException; import java.text.Si ......
Rocky Linux 9 Minio 集群部署
1、Docker CE安装 参考：https://www.cnblogs.com/a120608yby/p/9883175.html 2、Docker Compose安装 参考：https://www.cnblogs.com/a120608yby/p/14582853.html 3、Minio部署 ......
TiDB集群安装维护
TIDB安装操作文档-https://docs.pingcap.com/zh/tidb/stable/production-deployment-using-tiup 1、环境准备（每台） 1-查看系统盘是否为ext4并自动挂载 ，fdisk -l | mkfs.ext4 /dev/ | mount ......
数据库:Redis哨兵及cluster集群部署
1、什么是哨兵模式哨兵模式：可以自动切换解决单点故障，但是不能负载均衡，存储能力受限制。 哨兵核心功能：在主从复制的基础上，实现了主节点的自动故障转移 2、哨兵的作用监控：监控主节点和从节点是否在正常运行 故障自动转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从 ......
arroyo集群部署简单说明
arroyo 推荐的调度是基于nomad 当然也可以基于内置的 运行配置 pg arroyo 基于了refinery 管理迁移 s3 进行checkpoints 存储，通过controller 以及worker 进行的状态写入 运行服务 arroyo 集群 包含了多特api server 以及一个c ......
13-springcloud-eureka-9-Eureka集群注册中心打包发布
在实际项目中，需要将Eureka发布到具体服务器上进行部署，打包部署其实和SpringBoot里面的一样，我们可以把其达成jar包，启动时对于properties文件，不同的环境激活不同的配置文件； 运行： java -jar springcloud-service-eureka.jar --spr ......
Redis缓存高可用集群
在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般。 ......
SonarQube(CE)版集群环境下的高可用性实践
摘要：本文将详细介绍SonarQube的落地场景，集群环境（CE）下的高可用性（HA）最佳实践，包括部署策略、负载均衡、数据同步等方面的内容，以帮助您更好地构建一个健壮、高性能的代码质量分析系统 一、为什么是SonarQubeSonarQube是一个广泛使用的开源的代码质量分析工具，它可以帮助开发团 ......
Moebius数据库多活集群
背景 数据库是信息化的基石，支撑着整个业务系统，发挥着非常重要的作用，被喻为“IT的心脏”。因此，让数据库安全、稳定、高效地运行已经成为IT管理者必须要面对的问题。数据库在底层架构层面需要满足以下几点建设要求： 安全和可靠：不能因为服务器的软硬件故障导致数据丢失和业务中断； 容灾：多数据中心间的数据 ......
k8s集群搭建及相关问题解决
原文链接：https://juejin.cn/post/7011425524790591519 环境准备 三台机器： master：192.168.0.1 node1：192.168.0.2 node2：192.168.0.3 基础环境设置 [1] 设置3台机器hostname基于主机名通信：/et ......
linux系统下Hadoop集群环境搭建
1、前言 基于redhat7.6系统搭建全分布式Hadoop3.3.5集群环境（模拟三台机，1主角色，2从角色）。 2、安装虚拟机 参考：https://www.cnblogs.com/jpxjx/p/16800831.html 3、虚拟机安装redhat7.6 参考：https://www.cnb ......
基于k8s的web集群项目
准备5台linux机器 系统是centos7.9 2核/4G的配置 1.k8s的部署安装 1.1.准备环境： 先给每台服务器起好名字，使用固定的ip地址，防止后面因为ip地址的变化，导致整个集群异常(每台机器) master 192.168.18.139 node1 192.168.18.138 n ......
分片集群之 添加删除节点
redis cluster 节点加入集群 环境说明：3主3从 集群模式 redis version 5.0.14 模拟集群中一个实例长期离线(比如虚拟机损坏、pod损坏)，重启一个实例从新接入到当前集群 第一步 停止pod,模拟损坏环境 docker rm -f 6380 随后查询集群节点状态，发现 ......
Zookeeper集群
一、Zookeeper概述 1. Zookeeper定义及工作机制 定义：Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。 工作机制：Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观 ......