集群docker-compose zookeeper compose
Hadoop学习(一) 搭建伪分布式集群
文章结构 1.准备工作 1.1 配置IP 1.2 关闭防火墙 1.3 修改主机名并与IP绑定 1.4 创建新用户 1.5 配置免密匙 2.安装并配置Hadoop伪分布式集群 2.1 安装Java 2.2 安装配置Hadoop伪分布式集群 1.准备工作 1.1 配置IP 首先进入该路径下 cd /et ......
windows下redis集群环境搭建教程
所谓 redis 集群，就是有的挂了可以继续用别的。下面是搭建集群环境的步骤 （1）准备多个 redis 环境 新建文件夹 redis-cluster 将 redis 安装目录拷贝多份，放到二级目录，并分别以 XXXX 端口号命名 编辑 redis.windows.conf 依次修改 port 属性 ......
技术实践｜高斯集群服务器双缺省网关故障
导语：当前国产化数据库使用范围越来越广泛，在GaussDB数据库的使用过程中难免会遇到一些问题，有的问题是由于在安装过程中没有注意细节而产生的，多数隐患问题都是在特定场景下才会暴露出来，且暴露的时间未知，这就给数据库的运维工作带来极大的挑战。 本文就是基于一次数据库安装过程中出现的故障而形成的， ......
【docker】docker中装Redis集群
一、搭建步骤 1、启动容器 #关闭防火墙 systemctl start docker 2、新建6个docker容器redis实例 docker run -d --name redis-node-1 --net host --privileged=true -v /data/redis/share/ ......
Zookeeper 在 Kafka 中的作用
Zookeeper 在 Kafka 中的作用 1、Broker注册 Broker是分布式部署并且相互之间相互独立，但是需要有一个注册系统能够将整个集群中的Broker管理起来，此时就使用到了Zookeeper。在Zookeeper上会有一个专门用来进行Broker服务器列表记录的节点： /broke ......
Linux环境配置redis集群启动、停止脚本
1、创建redisc脚本 vim /etc/init.d/redisc 2、编辑脚本内容 #!/bin/sh # chkconfig: 2345 80 90 # Simple Redis init.d script conceived to work on Linux systems # as it ......
Kafka 集群如何实现数据同步？
哈喽大家好，我是咸鱼 最近这段时间比较忙，将近一周没更新文章，再不更新我那为数不多的粉丝量就要库库往下掉了 T﹏T 刚好最近在学 Kafka，于是决定写篇跟 Kafka 相关的文章（文中有不对的地方欢迎大家指出） 考虑到有些小伙伴可能是第一次接触 Kafka ，所以先简单介绍一下什么是 Kafka ......
composer公共包设计
目的：封装一个公共包，供全项目使用，最大化的抽象封装，减少重复代码，里面可以包含公共函数库、工具类、跨服务调用接口类，包罗万象 肯定是要用到composer管理的，两种方式： 1、加载本地包，当所有项目部署在同一台服务器上时，可以采用这个方式，https://codeleading.com/arti ......
k8s集群节点配置GPU
默认已有以下前置条件 k8s 1.10+ 操作系统：麒麟v10 SP2（Centos，Ubuntu等见“安装NVIDIA Container Toolkit”中其他源配置） GPU驱动：已安装 官方文档：https://github.com/NVIDIA/k8s-device-plugin 一、验证 ......
NIFI系列---【Linux离线安装nifi集群】
1.环境准备 准备三台4c8g的centos7服务器，分别安装jdk8，zookeeper-3.4.9 node01 node02 node03 2.下载nifi安装包和nifi-toolkit-1.19.1-bin.zip安装包 下载地址:https://archive.apache.org/di ......
Centos7部署zookeeper+kafka
一、Zookeeper 概述 1、Zookeeper 定义 Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。 2、Zookeeper 工作机制 Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据， ......
docker & docker compose常用命令
docker常用命令 容器生命周期管理命令 run 创建一个新的容器。 # 使用docker镜像nginx:latest以后台模式启动一个容器, # 并将容器命名为mynginx。 docker run --name mynginx -d nginx:latest # 使用镜像 nginx:late ......
ZooKeeper集群脑裂问题处理，值得收藏！
转载自：https://cloud.tencent.com/developer/article/1758883 本文重点讲解ZooKeeper脑裂问题的处理办法。ZooKeeper是用来协调（同步）分布式进程的服务，提供了一个简单高性能的协调内核，用户可以在此之上构建更多复杂的分布式协调功能。脑裂通 ......
如何使用docker-compose重新启动单个容器
内容来自 DOC https://q.houxu6.top/?s=如何使用docker-compose重新启动单个容器 我有一个包含4个容器的docker-compose.yml文件，它们分别是redis、postgres、api和worker。 在开发worker容器期间，我经常需要重新启动它以应 ......
zookeeper节点介绍
参考：https://blog.51cto.com/u_15535797/6076363 节点特性 zookeeper 中节点叫znode存储结构上跟文件系统类似，以树级结构进行存储。不同之外在于znode没有目录的概念，不能执行类似cd之类的命令。 znode结点属性如下： path:唯一路径 c ......
zookeeper之curator API
参考：https://www.jianshu.com/p/075f3262938c 概述 Apache Curator是一个比较完善的，由Netflix公司开源的一套ZooKeeper的JAVA客户端框架组件。解决了很多Zookeeper客户端非常底层的细节开发工作，包括连接重连、反复注册Watch ......
redis 集群部署
在生产环境不存在单体果奔的数据库，且云厂商rds等高可用数据库性价比极低，因此很多场景需要我们使用实例自建集群。本章介绍如何从0开始搭建redis7三主三从基础集群环境与故障迁移模拟测试。 预备姿势 vm模拟环境 vmware cetos7.9 //关闭防火墙与selinux redis7 | 6 ......
openGauss集群主库出现流复制延迟告警
问题描述：环境是openGauss 5.0集群，在一次意外重启数据库之后。收到了一个主库的主从延迟告警，只有从库才能出现延迟，主库怎么会出现了告警延迟 告警信息： Status: Resolved Hostname: hkuatxcrecondb01 IP Address: 192.168.163. ......
docker-compose容器编排管理
一、简介 Docker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。 Docker-Compose将所管理的容器分为三层，分别是工程（project），服务（service）以及容器（container）。Docker-Compose运行目录下的所有文件 ......
Linux下安装Zookeeper
前言 Zookeeper是java编写，所以需要先安装JDK环境：linux安装JDK 1.下载解压文件 tar zxvf apache-zookeeper-3.6.3-bin.tar.gz 2.在主目录下创建data和logs两个目录用于存储数据和日志： cd /opt/apache-zookee ......
kk 工具安装K8S集群
设置时区 每个节点都要操作 timedatectl set-timezone Asia/Shanghai 查看时区 timedatectl 安装环境依赖 yum install -y socat conntrack ebtables ipset 安装时间同步 每个节点都要操作 yum install ......
分布式和集群概念
分布式和集群概念 分布式：每台机器上部署不同组件集群：每台机器上部署相同组件 大数据分布式存储、分布式计算 linux 桌面操作系统：mac os、windows、linux嵌入式操作系统：μlinux、wince、RTOS服务器操作系统：unxi、linux、Windows server、netw ......
手把手系列 - Ceph使用rbd及cephfs与k8s集群集成 - 三种方式实现
前言 本次详细部署 k8s、ceph 以及如何使用 ceph 作为 k8s 的外部存储。 主机信息 主机名 IP 说明信息 k8s-master 192.168.199.41 k8s master k8s-node01 192.168.199.42 node k8s-node02 192.168.1 ......
3大方面升级华为云CCE集群体验，助力集群高效运维管理
我们会持续在“过程业务无感”、“稳定高效升级”、“丝滑交互体验”等方面进行持续优化，让集群升级过程更简单、高效和可靠。 ......
docker 部署 rabbitmq集群
rabbitmq集群: pull: docker pull rabbitmq 普通模式(默认): what: 集群中各节点有相同的队列结构， 但消息只会存在于集群中的一个节点。 对于消费者来说， 若消息进入 A 节点的 Queue 中， 当从 B 节点拉取时， RabbitMQ 会将消息从 A 中取 ......
脚本安装docker和docker-composed
该脚本支持centos7和centos8系统 #！/bin/bash #一键安装docker-ce和docker-compose,本脚本适用于CentOS7和8 function os7_install_docker () { rpm -qa | grep docker &> /etc/null i ......
windows操作系统中如何将apache zookeeper安装为系统服务
记录一下，网上有些资料是错的，prunsrv的参数要以--开头！ 一 下载最新版的apache commons daemon http://archive.apache.org/dist/commons/daemon/binaries/windows/commons-daemon-1.3.4-bin ......
大数据集群备份
今天又备份了虚拟机集群。然后删除D盘的大数据，备份的放在F盘，让D盘有更多空间， 因为我的Anaconda安装在D盘中，而我创建了很多python虚拟环境，D盘当时有点空间不够了， 所以备份大数据到F盘。D可以更多空间。 ......
xixa oraclelinux上kafka集群部署(一)----kafka安装
kafka部署前提：需要安装jdk1.7以上版本、zookeeper 官网下载：http://kafka.apache.org/quickstart kafka配置 配置server.properties文件中zookeeper配置，如果集群应该怎么配置？还需要尝试 配置kafka集群 在bin目录 ......
以 Kubernetes 原生方式实现多集群告警
作者：向军涛、雷万钧 来源：2023 上海 KubeCon 分享 可观测性来源 在 Kubernetes 集群上，各个维度的可观测性数据，可以让我们及时了解集群上应用的状态，以及集群本身的状态。 Metrics 指标：监控对象状态的量化信息，通常会以时序数据的形式采集和存储。 Events：这里特指 ......