主从 哨兵 集群 单机
Docker-compose 容器集群
一、Docker-compose 简介 Docker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。 Docker-Compose将所管理的容器分为三层，分别是 工程（project），服务（service）以及容器（container）。Docker-C ......
云原生第一周--ubuntu2204使用containerd容器和kubeadm工具部署单master k8s集群
1 Kubernetes介绍 Kubernetes 是一个可移植、可扩展的开源平台，用于管理容器化的工作负载和服务，可促进声明式配置和自动化。 Kubernetes 拥有一个庞大且快速增长的生态，其服务、支持和工具的使用范围相当广泛。 Kubernetes它能做什么 服务发现和负载均衡 Kubern ......
快速实现 MySQL 主从复制
MySQL 主从复制是一个异步的复制过程，底层是基于Mysql数据库自带的二进制日志功能。就是一台或多台 MySQL 数据库（Slave 库）从另一台 MySQL 数据库（master 库）进行日志的复制，然后再解析日志并应用到自身，最终实现从库的数据和主库的数据保持一致。MySQL 主从复制是My ......
云原生第二周--使用kubeasz部署多master的k8s集群
1 k8s集群介绍 1.1 k8s单master架构 [ ] 单master节点的架构，通常只用于测试环境，生产环境绝对不允许；这是因为k8s集群master的节点是单点，一旦master节点宕机，将导致整个集群不可用；其次单master节点apiServer是性能瓶颈；从上图我们就可以看到，mas ......
Kubernetes从入门到精通 集群测试
1 创建一个nginx服务 kubectl create deployment nginx --image=nginx:1.14-alpine 2 暴露端口 kubectl expose deploy nginx --port=80 --target-port=80 --type=NodePort ......
openGauss单机+主从集群部署_万能场景安装_搭建_适用所有场景_openGauss3.0.0_openGauss课程
一、opengauss 的背景和行业现状 2022 年，七大 openGauss 商业版发布，是基于 openGauss3.0 推出商业发行版 目前海量数据库 Vastbase 表现最佳，一直是 TOP 1 作者认为之所以海量数据库 Vastbase 目前无法被同行超越，和各家研发实力和技术背景有关 ......
使用nginx搭建3台Tomcat集群
#配置上游服务器 upstream tomcats { server 192.168.206.129:8080; server 192.168.206.130:8080; server 192.168.206.131:8080; } server { listen 612; server_name ......
Hadoop集群运行
1. 实验一：hadoop 集群运行 实验任务一：配置 Hadoop 格式化 步骤一：NameNode 格式化 [root@master ~]# su - hadoop [hadoop@master ~]$ cd /usr/local/src/hadoop/ 结果： [hadoop@master ~ ......
Hive单机安装与测试
安装MySQL并运行 在当前用户下运行 sudo apt update sudo apt install mysql-server 安装成功后启动MySQL服务，运行 sudo service mysql start 查看MySQL的默认用户名和密码，运行 sudo cat /etc/mysql/d ......
Kubernetes从入门到精通 集群安装
kubernetes集群安装 一 准备集群镜像从阿里云镜像仓库拉镜像 标签改名 # 在安装kubernetes集群之前，必须要提前准备好集群需要的镜像，所需镜像可以通过下面命令查看 [root@master ~]# kubeadm config images list # 下载镜像 # 此镜像kub ......
单机版hadoop在Linux环境下的安装和配置
创建hadoop用户 首先打开终端窗口，输入如下命令创建hadoop用户，这条命令创建可以登录的hadoop用户，并使用/bin/bash作为shell： $ sudo useradd -m hadoop -s /bin/bash 接着为hadoop设置登录密码，可简单设为123456，按提示输入两 ......
Kubernetes从入门到精通 集群安装准备工作
一、准备环境 master01 192.168.117.100 docker，kubectl，kubeadm，kubelet node01 192.168.117.101 docker，kubectl，kubeadm，kubelet node02 192.168.117.102 docker，kub ......
Cloud集群模式XXL-job开启自动注册执行器
在微服务架构下，传统的spring task、Quartz已经不再推荐使用， 在数据与业务增长的同时，定时任务处理数据是避免不了的，抛开单节点不谈，集群服务如果想要执行以往的定时任务最简单粗暴的方式就是使用分布式锁来保证唯一性，但是由于不可控原因，可能在执行任务期间所以压力集中到其中一个节点，所以这 ......
Cobar使用文档（可用作MySQL大型集群解决方案）
Cobar使用文档（可用作MySQL大型集群解决方案） 2014-06-17 1514举报 简介： 原文：http://blog.csdn.net/shagoo/article/details/8191346 项目已经迁移到Git上面，地址为：https://github.com/alibaba/c ......
用于大数据集群的Centos7虚拟机基础环境配置
用于大数据集群（自定义Hadoop和CDH6）的Centos7虚拟机基础环境配置 博客ID 2 安装一些通用的软件并配置，然后复制为多个虚拟机 下载 CentOS-7-x86_64-DVD-1908.iso http://ftp.iij.ad.jp/pub/linux/centos-vault/7. ......
用于大数据集群的Centos7虚拟机基础环境配置
用于大数据集群（自定义Hadoop和CDH6）的Centos7虚拟机基础环境配置 博客ID 2 安装一些通用的软件并配置，然后复制为多个虚拟机 下载 CentOS-7-x86_64-DVD-1908.iso http://ftp.iij.ad.jp/pub/linux/centos-vault/7. ......
搭建ElasticSearch7.4.2集群
推荐阅读Helm3（K8S 资源对象管理工具）视频教程：https://edu.csdn.net/course/detail/32506Helm3（K8S 资源对象管理工具）博客专栏：https://blog.csdn.net/xzk9381/category_10895812.html本文原文链接 ......
Performance_schema中的主从复制系列表总结
主从半同步复制是目前用得最多的MySQL复制方案，日常工作中我们一般通过show slave status语句查看当前复制过程中状态信息，基本上能满足大多数场景下的需求。Performance_schema中提供了16个关于复制的监控表（包括组复制、过滤复制等，这里我们先不讨论），show slav ......
Hadoop启动集群报错:Starting namenodes on [hadoop01] hadoop01: root@hadoop01: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
搭建三个hadoop集群的时候,master没有启动namenode和datanode， 报错: Starting namenodes on [hadoop01]hadoop01: root@hadoop01: Permission denied (publickey,gssapi-keyex,gs ......
基于ENVI和哨兵2数据提取云南玉溪和安宁山火受灾面积
引言 2023年4月11日15时27分，云南省玉溪市江川区九溪镇发生森林火情。当地森林草原防灭火指挥部立即启动应急预案，组织力量扑救。省、市、区各级共投入森林消防、消防救援、公安民警、武警官兵、专业扑火队、民兵、干部群众共计4000余人开展扑救工作，妥善转移安置部分可能受火灾影响村庄的群众。经过全体 ......
redis之持久化方案，主从复制，哨兵高可用，集群原理及搭建，缓存优化
redis之持久化方案，主从复制，哨兵高可用，集群原理及搭建，缓存优化 昨日内容回顾 # 悲观锁乐观锁： django中实现： 悲观锁：mysql 行锁 表锁 乐观锁：真正修改时 加入限制条件 django中事务如何开启 原生sql如何开启事务：begin； commit； django中如何开启事 ......
关于sap-hana-数据库-在pacemaker集群中迁移主控节点-master节点
环境介绍，hana数据库的两个节点：azphxxxdb01 azphxxxdb02 目前master位于azphxxxdb02，现在需要切换回azphxxxdb01 需要确保 Pacemaker 没有任何失败的操作（通过 pcs 状态检查）、没有任何意外的位置约束（例如迁移测试的遗留内容）， 并且 ......
redis主从异常
1、现象 redis启用redis-sentinel架构，三台sentinel两台redis。发现从库没有从主库同步数据。 2、日志 31201:S 24 Feb 2023 14:26:59.626 * Connecting to MASTER 192.168.162.152:16380 31201 ......
Windows平台下单机Spark环境搭建
为了在有限的资源上学习大数据处理与分析技术，借鉴Linux以及部分网上的教程，在Windows10平台搭建Spark环境。本文将简单记录搭建流程以及其中遇到的坑。 Spark的部署模式主要有四种： Local模式（单机模式） Standalone模式（使用Spark自带的简单集群管理器） YARN模 ......
2-Hadoop集群配置-安装-启动
1、 流程说明 在单机测试wordcount没问题后，开始配置集群模式 说明: hadoop有几个功能 ① hdfs存 NameNode SecondNameNode DataNode ②yarn资源调度 ResourceManager NodeManager ③ma ......
小知识：使用oracle用户查看RAC集群资源状态
正常情况按照标准配置的环境变量，只能grid用户查看RAC集群资源状态。 crsctl stat res -t 但是绝大部分操作其实都是oracle用户来操作，比如启停数据库，操作完成以后就需要检查下集群资源状态。 看到好多DBA在现场操作时就是来回各种切换或开多个窗口。 其实有两个简单的解决方法可 ......
Redis——cluster集群原理
摘要在 redis3.0之前，redis使用的哨兵架构，它借助 sentinel 工具来监控 master 节点的状态；如果 master 节点异常，则会做主从切换，将一台 slave 作为 master。当master挂掉的时候，sentinel 会选举出来一个 master，选举的时候是没有办法 ......
Hadoop集群搭建总结
对这两天搭建Hadoop集群做个经验总结 master节点:Ubuntu 22.04，也就是我的台式机主机 slave节点：Debian 11，通过VMware虚拟出来 （1）集群节点设置和角色分配 master namenode,datanode,resourcemanager,nodemanag ......
MySQL主从复制搭配SharingSphere踩大坑记录
报错内容： Caused by: java.util.NoSuchElementException: No value bound 点击查看原始错误代码 Error starting ApplicationContext. To display the conditions report re-ru ......