集群hdfs-ha hdfs ha
Redis安装与使用、redis主从复制、redis集群
# Redis 文章内容主要参考b站 运维实战课程 的redis视频：[redis的课程介绍_哔哩哔哩_bilibili](https://www.bilibili.com/video/BV1cP4y1D7yh?p=1) ## 简介 1.Redis是一个缓存数据库，主要是做缓存。什么是缓存？也就是缓 ......
ES集群搜索稳定性保障
如果将 Elasticsearch（ES）作为线上C端服务的查询引擎，那么 search query 的响应时间则至关重要。因为毕竟面向C端用户，如果一个搜索请求 1 秒内还未返回，那么用户将不可接受。 因此，C端服务对ES的性能稳定性做了许多工程上的优化，比如： 1. 强制将索引的段文件设置为1， ......
关于XXLJOB集群模式下调度失败的问题
xxljob在集群模式下调度高频任务时，有时会出现调度失败的问题，具体报错如下： java.io.EOFException: HttpConnectionOverHTTP@6be8bf0c(l:/10.48.2.64:38538 <-> r:/10.48.1.125:18989,closed=fal ......
MySQL MGR集群部署运维常用脚本
Linux系统-部署-运维系列导航 安装、初始化操作汇总 #初始化、重置mysql rm -rf /data/mysql/ ; mkdir -p /data/mysql/data /data/mysql/log ; chown -R mysql:mysql /data/mysql/ ; chmod ......
随笔（三十二）『Linux - es集群』
### 1、使用VMware安装虚拟机 ``` 参考： http://e.betheme.net/article/show-298568.html?action=onClick ``` ### 2、准备3台虚拟机 ``` IP分别为： vm_es_1：192.168.195.102 vm_es_2： ......
MySQL MGR集群搭建（CentOS7 + MySQL 5.7.35）
Linux系统-部署-运维系列导航 一、MGR架构的介绍 1、简介 MGR（MySQL Group Replication）是MySQL5.7.17版本引进来的一个数据库高可用架构，解决了传统异步复制和半同步复制的缺陷（主从数据一致性的问题），MGR依靠分布式一致性协议PAXOS，实现了主从数据库的 ......
Ubuntu部署Hadoop集群
## 前期准备 ### 系统及软件版本说明 本章操作中所使用的相关操作系统及软件版本如下： | 软件 | 版本 | | | | | 操作系统 | Ubuntu 14.04.1 | | JDK | 1.8.0 | | Hadoop | 2.7.3 | ### JDK 安装 集群中每台机器都需要安装 J ......
Ubuntu部署Spark集群
## 前期准备 ### 系统及软件版本说明 本章操作中所使用的相关操作系统及软件版本如下： | 软件 | 版本 | | | | | 操作系统 | Ubuntu 14.04.1 | | JDK | 1.8.0 | | Hadoop | 2.7.3 | | Spark | 2.2.0 | ### JDK ......
使用 Sealos 在离线环境中光速安装 K8s 集群
> 作者：尹珉。Sealos 开源社区 Ambassador，云原生爱好者。 ## 当容器化交付遇上离线环境 在当今快节奏的软件交付环境中，容器化交付已经成为许多企业选择的首选技术手段。在可以访问公网的环境下，容器化交付不仅能够提高软件开发和交付的效率，还能够帮助企业实现快速迭代和持续交付。 然而， ......
rocket集群环境搭建-主从集群
1.准备环境 搭建2主2从的异步刷盘的集群，使用conf/2m-2s-async下的配置文件。 机器 nameserver部署 broker部署 192.168.19.132 部署 192.168.19.133 部署 broker-a,broker-b-s 192.168.19.134 部署 bro ......
SpringBoot集成redis集群
1、添加依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> <exclusions> <!-- 过滤lettuce，使用 ......
K8S集群搭建流程
#### 1. 环境准备 - 三台Centos7主机(3G及以上RAM,2核CPU,40G硬盘空间) - 网络环境:要求主机之间能够互相通信 ``` k8s-node1 10.15.0.21 k8s-node2 10.15.0.22 k8s-node3 10.15.0.23 ``` #### 2. ......
Keepalived高可用集群、Keepalive+LVS
# Keepalived高可用集群 ## 高可用集群简介 **什么是高可用集群？** 高可用集群 (High Availability;Cluster，简称HA Cluster) ，是指以减少服务中断时间为目的的服务器集群技术。它通过保护用户的业务程序对外不间断提供的服务，把因软件、硬件、人为造成的 ......
龙芯平台Hadoop集群搭建问题解决
这几天一直在困扰我 pycurl 版本和本机的版本不符合 他连接又连接的自己自带的版本 与系统不相同 低级也会报错 https://blog.csdn.net/u010910682/article/details/89496550/?ops_request_misc=&request_id=&biz ......
Redis高可用集群之水平扩展(3.2)
Redis3.0以后的版本虽然有了集群功能，提供了比之前版本的哨兵模式更高的性能与可用性，但是集群的水平扩展却比较麻烦，今天就来带大家看看redis高可用集群如何做水平扩展，原始集群(见下图)由6个节点组成，6个节点分布在三台机器上，采用三主三从的模式 1、启动集群 # 启动整个集群 /usr/lo ......
分布式存储FusionStorage将搬迁走的计算节点踢出集群
1、登录Device Manager管理界面，在服务-vbs页面下，选中已经异常的VBS，将异常的VBS进行强制删除。 2、通过第三方远程连接工具，连接进FSM后台，IP为浮动IP，用fsadmin用户进入，切换到root用户。 fsadmin 默认密码：IaaS@OS-CLOUD9！ 2.1执行s ......
为什么创建 Redis 集群时会自动错开主从节点？
哈喽大家好，我是咸鱼 在《[一台服务器上部署 Redis 伪集群》](https://mp.weixin.qq.com/s?__biz=MzkzNzI1MzE2Mw==&mid=2247486439&idx=1&sn=0b10317397ef3259dd98d493915dd706&chksm=c2 ......
Apache Doris集群部署
一、Doris部署环境及系统依赖 环境要求参考:https://doris.apache.org/zh-CN/docs/dev/install/standard-deployment 1.部署环境 2.系统依赖 1.Java环境 tar xf jdk-8u201-linux-x64.tar.gz - ......
Tomcat : 集群搭建
[TOC] # Tomcat 集群搭建 ## 参考资料 - 官方文档：https://tomcat.apache.org/tomcat-8.5-doc/cluster-howto.html - 《 [Tomcat 单机多实例使用记录 ](https://www.cnblogs.com/lihw-st ......
集群部署专题之一：详解集群间SSH无密码登录配置步骤
#### 一、SSH简介 SSH（Secure Shell）是一种网络安全协议，通过加密和认证机制实现安全访问和文件传输等业务。传统远程登录和文件传输方式有Telnet或FTP，这两种方式都使用明文传输数据，存在很多安全隐患。SSH采用加密传输数据、提升认证强度等手段，克服了Telnet和FTP应用 ......
Zookeeper集群搭建
>zookeeper 3.8.2 ### 使用docker安装zookeeper集群 [zookeeper下载地址](https://zookeeper.apache.org/releases.html) 下载最新的稳定版本即可，当前稳定版本为3.8.2。 第一步，修改logback.xml 解压后 ......
三台N1上离线安装k3s集群
## 前期准备 三台N1 ``` uname -a Linux armbian 6.1.40-ophub #1 SMP Sun Jul 23 21:46:15 EDT 2023 aarch64 aarch64 aarch64 GNU/Linux ``` 分别是 | | hostname | IP | ......
Redis7.X Centos集群搭建
## 下载 https://download.redis.io/redis-stable.tar.gz ## 部署 1. 上传解压 ``` tar -zxvf redis-stable.tar.gz ``` 2. 编译安装 ```sh cd redis-stable make && make ins ......
如何通过集群扩展 Node.js 应用程序
# 如何通过集群扩展 Node.js 应用程序 - [原文链接](https://www.digitalocean.com/community/tutorials/how-to-scale-node-js-applications-with-clustering#prerequisites) - [ ......
ceph集群状态 pgs not scrubbed in time
检查集群状态 ``` # ceph -s cluster: id: 83738b81-56e4-4d34-bdc2-3a60d789d224 health: HEALTH_WARN 75 pgs not scrubbed in time services: mon: 3 daemons, quoru ......
pve搭建ceph集群
文章参考 https://zhuanlan.zhihu.com/p/617024637 http://www.taodudu.cc/news/show-4270751.html?action=onClick pve 版本 8.0.2 > 配置建议：机器最好是8C16G以上的配置 > > 硬盘最好有三 ......
将Go开发的代码部署到k8s集群
一、在服务器上编译go程序 1.1 编译go语言程序 # 安装go yum install go -y mkdir /root/test && cd /root/test # 设置代理 go env -w GOPROXY=https://goproxy.cn,direct # 创建源码文件 [roo ......
flume采集文件到HDFS案例
（1）：采集需求：比如业务系统使用log4j生成的日志，日志内容不断增加，需要把追加到日志文件中的数据实时采集到hdfs （2）：根据需求，首先定义以下3大要素 采集源，即source——监控文件内容更新 : exec ‘tail -F file’ 下沉目标，即sink——HDFS文件系统 : hd ......
flume采集目录到HDFS案例：
（1）采集需求：某服务器的某特定目录下，会不断产生新的文件，每当有新文件出现，就需要把文件采集到HDFS中去 （2）根据需求，首先定义以下3大要素 a）：采集源，即source——监控文件目录 : spooldir b）：下沉目标，即sink——HDFS文件系统 : hdfs sink c）：sou ......
Linux部署Consul单机和集群
Linux部署Consul单机和集群 一、Consul简介 Consul是由HashiCorp基于Go语言开发的支持多数据中心的分布式高可用服务发布和注册软件, 采用Raft算法保持服务的一致性, 且支持健康检查，Consul和Eureka的侵入式服务中心不同的是, Consul是以独立的软件形式运 ......