集群anasible master worker

StackGres 数据库平台工程,使用 Citus + Patroni 创建生产级高可用分布式 PostgreSQL 分片集群

系列 StackGres, 可私有部署的云原生数据库平台工程 StackGres 数据库平台工程功能介绍与快速上手 StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer) StackGres 1.6 数据库平台工程,集群高可用(Patro ......

4、虚拟机单机、集群的克隆、删除脚本(以初始化好的虚拟机为模板)

摘自:https://blog.51cto.com/mfc001/6408229 虚拟机克隆、删除脚本 [root@ubunt ~]# cat clone.sh #!/bin/bash # #. /etc/init.d/functions (如果是ubuntu,注释此行) Red="\e[1;31m ......
集群 脚本 单机 模板

使用Slurm集群进行分布式图计算:对Github网络影响力的系统分析

本文在华为云弹性云服务器集群中部署Slurm作业调度系统,并运行针对Github协作网络影响力分析的分布式图计算应用程序。 ......
分布式 集群 影响力 Github 系统

聊聊部署在不同K8S集群上的服务如何利用nginx-ingress进行灰度发布

前言 之前有篇文章聊聊如何利用springcloud gateway实现简易版灰度路由,里面的主人公又有一个需求,他们有个服务是没经过网关的,而是直接通过nginx-ingress暴露出去,现在这个服务也想做灰度,他知道在同个集群如何利用nginx-ingress进行灰度发布,但是现在这个服务是部署 ......
灰度 集群 nginx-ingress ingress nginx

公网搭建Kubernetes集群

由于本次软分大作业采用一台华为云服务器和两台阿里云服务器,两者之间内网不互通,无法搭建内网k8s集群,不得已才在公网搭建。 公网搭建会出各种问题,有条件的话还是建议在内网搭建。 一个很详细的教程:https://zhuanlan.zhihu.com/p/627310856 一、服务器配置 主机名 i ......
集群 Kubernetes

容器与集群——通过deployment 创建pod以及Java Web应用的容器化发布

## 一、通过deployment 创建pod 1.1 编写yaml文件 1.2 安装pod 创建kubectl create -f dp-nginx.yaml 查看Deployment信息 1.3 查看相关信息 查看pod信息kubecel get pods 查看rs信息 二、Java Web应用 ......
容器 集群 deployment Java Web

docker compose 一键部署zookeeper集群

compose.yml 文件 services: zoo1: image: zookeeper:3.8.3 restart: always hostname: zoo1 ports: - 2181:2181 environment: ZOO_MY_ID: 1 ZOO_SERVERS: server. ......
集群 zookeeper compose docker

RabbitMQ高可用集群的搭建部署(Centos7)

高可用集群架构 节点域名 操作系统 RabbitMQ版本 Erlang版本 iamdemo.tp-link.com Centos7.9 3.8.28 23.3-2 iamdemo2.tp-link.com Centos7.9 3.8.28 23.3-2 iamdemo3.tp-link.com Ce ......
集群 RabbitMQ Centos7 Centos

redis集群

集群:支持多个master,一个master挂载多个slave cluster自带了sentinel的故障转移机制,内置了高可用的支持,无需再去使用哨兵功能 客户端不再需要连接所有节点,只需连接一个可用节点 槽位slot负责分配各个物理节点,对应的节点来维护节点,插槽,数据之间的关系 集群算法--分 ......
集群 redis

StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer)

Postgres 配置 PostgreSQL 的配置在 SGPostgresConfig CRD 中指定。如果在创建集群时没有指定自定义配置,StackGres 将创建一个默认配置,您可以在 这里 看到。 https://stackgres.io/doc/latest/reference/crd/s ......

使用 anasible 搭建一个多 master 多 worker 的 k8s 集群

kubernetes + istio 是目前最强大,也是最易于使用的服务网格方案。 要使用kubernetes + istio, 首先要搭建 kubernets 集群。搭建kubernetes 集群的 方式有很多,其中使用anisble自动化搭建kubernetes集群算是最具合适的方案了。 服务器 ......
集群 anasible master worker k8s

Hadoop集群部署后相关WEB界面打不开大概原因

集群部署完毕后,查看相关WEB界面,打不开的原因可能如下: 1、可以先去检查LINUX(CentOS7)机器的防火墙是否关闭,命令如下: systemctl status firewalld.service (查看防火墙状态) (如果显示为关闭状态,则进行下一步; 如果显示尚未关闭,则进行关闭并设定 ......
集群 界面 原因 Hadoop WEB

Redis哨兵、复制、集群的设计原理与区别

本篇主要谈Redis的高可用 谈到Redis服务器的高可用,如何保证备份的机器是原始服务器的完整备份呢? 这时候就需要哨兵和复制 1.哨兵(Sentinel): 可以管理多个Redis服务器,它提供了监控,提醒以及自动的故转移的功能 2.复制(Replication): 则是负责让一个Redis服务 ......
哨兵 集群 原理 Redis

使用极限网关助力 ES 集群无缝升级、迁移上/下云

在工作中大家可能会遇到以下这些场景: 自建 ES 集群需要平滑迁移到 XX 云; 从 XX 云将 ES 集群迁移到自建机房; ES 集群进行跨版本升级,同时保留回退能力; 这些场景往往都还有个共同的需求:迁移过程要保证业务的最小停机时间。 幸运的是,在这三个场景中,我们都能使用极限网关来帮助我们进行 ......
网关 集群 无缝 极限 ES

redis集群压测报错Error from server: MOVED

## redis集群压测报错Error from server: MOVED ## 故障描述 redis7集群压测报错 ```sh Summary: throughput summary: 31250.00 requests per second latency summary (msec): av ......
集群 server redis Error MOVED

INFINI Labs 产品更新 | 修复 Easysearch 跨集群复制索引同步问题,Gateway 内存异常增长等问题

INFINI Labs 产品又更新啦~,本次更新主要对 Easysearch、Gateway、Console、Agent 等产品功能进行优化和相关 Bug 修复,解决了内存异常增长等问题,以下是详细说明。 INFINI Easysearch v1.6.2 INFINI Easysearch 是一个分 ......
问题 集群 Easysearch 索引 内存

C++聊天集群服务器5

一、服务器异常处理函数 ​ 这部分主要处理服务器异常退出时,用户的在线状态还是online不会改变,因此需要修改。由于是需要对用户进行操作,因此我们在user表的数据操作类添加重置用户状态函数。 ​ 在usermodel.hpp添加后: #ifndef USERMODEL_ #define USER ......
集群 服务器

k8s集群部署nginx服务以及外网访问nginx服务

1、查看k8s进群状态 [root@k8s-master test]# kubectl get node NAME STATUS ROLES AGE VERSION k8s-master Ready master 16d v1.15.1 k8s-node1 Ready <none> 16d v1.1 ......
nginx 集群 k8s k8 8s

hadoop高可用集群集成hive

hive和hadoop的关系 从上图可以看出实际上外界是通过thrift server这个节点和hadoop的hdfs以及rm进行交互的,中间为driver 因此当我修改完hadoop集群为高可用的时候,hive也需要重新配置环境以下是我hive的全新配置 <configuration> <!-- ......
集群 hadoop hive

MySQL集群搭建,你会吗

对于目前的应用来说,一般很少使用单机MySQL服务,都会采用主从复制或集群方式,那么如何搭建呢? 1.集群 1.1概述 所谓集群,就是多台服务器之间共享数据,从而实现系统的高可用。节点之间的数据是实时同步的,采用的是同步复制机制。除了有多个主节点外,这些主节点还有多个从节点,当在主节点上进行写操作时 ......
集群 MySQL

Docker中创建ES集群并修改默认用户密码-sunziren

注1,本文参考了https://www.elastic.co/guide/en/elasticsearch/reference/current/docker.html注2,本文这种搭建的方式,适用于开发环境,不适用与生产环境,生产环境要用Docker搭建ES集群,请使用docker-compose命 ......
集群 sunziren 密码 用户 Docker

Hadoop API 通过租户代理访问 Kerberos 安全 Hadoop 集群

这里记录一些方法,具备下面的特征: * 通过租户代理访问 Kerberos 认证的 HADOOP 资源 * 获取 FileSystem 对象的技巧:FileSystem.get(URI, configuration) * 通用 doAs模板 * 通用 hdfsCommand模板,使用 try-wit... ......
Hadoop 租户 集群 Kerberos API

docker 一键搭建 MySQL 主从集群

分享一个 GitHub 项目,用来一键搭建 MySQL 的主从集群的: https://github.com/vbabak/docker-mysql-master-slave 前面Google了一下没找到,搜出来的都是需要自己手动调操作过的,本来想自己写一个的,让 GPT 取了个名字,结果一搜就搜到 ......
主从 集群 docker MySQL

com.alibaba.nacos.client.Worker.longPolling.fixed-mse

com.alibaba.nacos.client.Worker.longPolling 这个线程池是1.x的nacos-client的长轮训线程,数量应该为 NacosConfigService数量 * CPU 数量 可能原因系统环境问题。程序读取到的CPU数量错误,导致线程池核心大小和最大大小过大 ......
longPolling fixed-mse alibaba Worker client

12.kafka单集群安装部署

一.安装jdk ,kafka需要至少jdk8+ 1.安装jdk yum install java-11-openjdk.x86_64 -y 2.查看安装是否正常 [root@localhost bin]# java --version openjdk 11.0.21 2023-10-17 LTS O ......
集群 kafka 12

MySQL Shell如何接管手动搭建(含仲裁节点)MGR集群

MySQL Shell如何接管手动搭建(含仲裁节点)MGR集群 本文源自GreatSQL社区用户的一次提问: Q:一个包含仲裁节点(ARBITRATOR)的GreatSQL MGR集群,一开始是用手动方式构建,后来想用MySQL Shell接管,可以吗? A:是可以的,不过也有一定局限性 具体的操作 ......
节点 集群 手动 MySQL Shell

Hbase关于建表一直报错Master is initializing

最近在做大数据实验的时候发现hbase突然不能建表了,list命令没有问题而建表就报错 如下图所示 网上的答案是打开zookeeper的命令行删除下面的hbase,但是没有说明效果 后来,我突然想到,之前我搭载hadoop和hbase的时候,Hadoop并没有开启高可用 解决办法 先关闭hbase, ......
initializing Master Hbase is

TKE在Kubernetes集群原地无损大版本升级的一些探索

如何在不重建容器不中断服务的情况下升级Kubernetes集群大版本,一些探索,方案实现于2021年9月 该功能已上线一段时间,因为一些原因文章迟迟没有发布,升级肯定会有还没有触及到的未知问题,该方案也不是十全十美,但目前上线后也基本平稳,能够处理大部分情况,把自己在这方面的思路和方案的迭代发出来, ......
集群 Kubernetes 原地 版本 TKE

Nacos集群配置

docker run -itd \ -e MODE=cluster \ -e NACOS_APPLICATION_PORT=8860 \ -e NACOS_SERVERS=10.200.1.xx:8860,10.200.1.xx:8870,10.200.1.xx:8880 \ -e SPRING_D ......
集群 Nacos

详解Redis三大集群模式,轻松实现高可用!

原文:https://zhuanlan.zhihu.com/p/624144774?utm_id=0 1. Redis集群简介 1.1 什么是Redis集群 Redis集群是一种通过将多个Redis节点连接在一起以实现高可用性、数据分片和负载均衡的技术。它允许Redis在不同节点上同时提供服务,提高 ......
集群 三大 模式 Redis