主从 哨兵 集群 单机
redis高级：持久化方案、主从复制原理和方案、哨兵高可用
一、持久化方案 1、什么是持久化 redis的所有数据保存在内存中，把内存中的数据同步到硬盘上这个过程称之为持久化 ps：redis是默认使用自动持久化的，在使用redis的时候我们如果不是强行关掉redis服务，再启动，就可以看到之前设置的数据。因为正常退出或执行shutdown关闭redis连接 ......
集群之MYsql主从服务之引伸出Mysql互为主从(环形结构)外加简单实现自己个人的负载均衡器(3)
集群之MYsql主从服务之引伸出Mysql互为主从(环形结构)外加简单实现自己个人的负载均衡器(3) 2017-06-02 1786举报 简介： 备注： 本人资历很浅，说的不对话，万望各位前辈不要计较，另关于环形的问题，我在后面的评论给予回复，其实环形，解决多地域问题比较好的选择关于配置步骤我重新整 ......
团体天梯练习 L3-003 社交集群
#L3-003 社交集群 当你在社交网络平台注册时，一般总是被要求填写你的个人兴趣爱好，以便找到具有相同兴趣爱好的潜在的朋友。一个“社交集群”是指部分兴趣爱好相同的人的集合。你需要找出所有的社交集群。 ####输入格式： 输入在第一行给出一个正整数 $N$（ $≤1000$ ），为社交网络平台注册的 ......
尝试CentOS8---部署集群(生产环境7.9为好)
一、LVS集群简介 什么是集群 通过网络将很多服务器集中起来，提供同一种服务，在客户端看来就像是只有一个服务器 二、LVS-NAT集群 1、环境准备 启动3台虚拟机，禁用selinux和firewalld，挂载光盘文件并配置yum扩展源，安装vim、bash-completion net-tools ......
redis 哈希，集合，有序集合，持久化方案，主从复制，高可用，集群搭建扩容缩容
哈希类型操作方法 hget key field # 获取hash key对应的field的value值 hset key field # 设置 hdel key field # 删除 测试 hset user:1001 age 23 hget user:1001 age hset user:1001 ......
Redis主从切换
1、停止主Redis（模仿主机挂掉） /usr/local/redis6/bin/redis-cli -a "dianshang" -h 192.168.x.x -p 7020 shutdown 2、将从Redis 设成主Redis /usr/local/redis6/bin/redis-cli - ......
mysql8主从节点搭建
设置主从前先创建作为同步数据的用户，可直接在Navicat中创建并对需同步的库授权。 注意创建用户的密码插件plugin要保持一致，MySQL8.0 设为mysql_native_password ，此项可在Navicat直接设置。 以192.168.1.1 从 和192.168.1.2 主 1、在 ......
Redis-Cluster(redis集群)
Redis-Cluster(redis集群) Redis-Cluster的背景介绍 1.1存在的问题 1.并发量：单机Redis qps为10w/s，但是我们需要百万级别的并发量 2.数据量：机器内存16-256g，如果存储500g数据呢 1.2解决 # 解决方法：加机器，分布式 redis clu ......
redis高级-day5——redis集群原理及搭建
一、集群原理及搭建 当我们做了读写分离，做了高可用，还存在问题 并发量：单机redis qps为10w/s,但是我们可能需要百万级别的并发量 数据量：机器内存16g--256g，如果存500g数据呢？ Redis集群是一个分布式的Redis数据库系统，它可以在多个节点上存储数据，并提供高可用性和可伸 ......
单机单节点Flink的部署
一、Flink的下载和安装 1、Flink的下载 官方下载网址：https://archive.apache.org/dist/flink/这里选择1.15.2这个版本 2、把Flink上传到主机上 把下载好的文件上传到/opt/software上 3、解压Flink安装包 把Flink解压到/op ......
MYSQL---主从同步概述与配置
一、MYSQL主从同步概述 1、什么是MySQL主从同步？ 实现数据自动同步的服务结构 主服务器（master）: 接受客户端访问连接 从服务器（slave)：自动同步主服务器数据 2、主从同步原理 Maste：启用binlog 日志 Slave：Slave_IO: 复制master主机binlog ......
redis03 持久化方案 主从复制原理和方案 哨兵高可用
今日内容详细 1 持久化方案 # 什么是持久化 redis的所有数据保存在内存中，把内存中的数据同步到硬盘上这个过程称之为持久化 # 持久化的实现方式 快照：某时某刻数据的一个完成备份 -mysql的Dump -redis的RDB 写日志：任何操作记录日志，要恢复数据，只要把日志重新走一遍即可 -m ......
redis高级-day4——redis持久化方案、主从复制原理和方案、哨兵高可用
一、持久化方案 1、什么是持久化 redis的所有数据保存在内存中，把内存中的数据同步到硬盘上这个过程称之为持久化 ps：redis是默认使用自动持久化的，在使用redis的时候我们如果不是强行关掉redis服务，再启动，就可以看到之前设置的数据。因为正常退出或执行shutdown关闭redis连接 ......
django中开启事务，GEO地理位置信息、持久化方案、主从复制原理和方案、哨兵高可用、集群原理及搭建、缓存优化、mysql主从、django做读写分离
==django中开启事务== # django中如何开启事务 全局开启：每个http请求都在一个事务中 DATABASES = { 'default': { 'ENGINE': 'django.db.backends.mysql', 'NAME': 'lqz', 'HOST': '127.0.0. ......
MySQL GTID 主从复制错误修复方法
MySQL 传统的主从复制方式使用 master_log_files 和 master_log_pos 两个参数来确定复制位点。当出现复制错误时，可以设置跳过出错的事务来恢复同步，MySQL 提供了 sql_slave_skip_counter 参数来实现此功能。使用方法如下： root@(none ......
Redis持久化、主从复制、哨兵高可用
Redis持久化、主从复制、哨兵高可用 Redis持久化 1.什么是持久化？ Redis的所有数据保存在内存中，对数据的更新将异步的保存到硬盘上 2.持久化的实现方式？ 快照：某时某刻数据的一个完成备份 mysql >Doump redis >RDB 写日志：任何操作记录日志，要恢复日志，只要吧日志 ......
Kafka 集群安装部署
为什么使用 Kafka 消息中间件 缓冲/消峰：有助于控制和优化数据流经过系统的速度，解决生产消息和消费消息的处理速度不一致的情况 解耦：允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 异步通信：允许用户把一个消息放入队列，但并不立即处理它，然后在需要的时候再去处理它们。 K ......
MySQL: 为什么使用 innobackupex 备份恢复搭建主从时，必须人为设置 gtid_purged 变量
###问题描述： 使用innobackupex 搭建主从的步骤如下： 1.主库使用 innobackupex 备份并 apply-log 2.将备份文件拷贝至从库，从库清空datadir目录，并使用 innobackupex 进行 copy-back 3.从库根据备份目录中的 xtrabackup_ ......
使用obd自动化部署多节点集群
环境介绍 操作系统：CentOS 7.6 可用内存不低于8G 每个虚拟机4个CPU 主机IP 角色 192.168.1.71 observer,obproxy,obclient,obd 192.168.1.72 observer,obproxy,oblcient 192.168.1.73 obser ......
obd自动化部署单副本集群
1. 环境介绍 centos 7.6 可用内存不少于8G 根目录可用空间不少于30G 2. 介绍 obd针对不同部署场景提供不同配置文件 谷歌浏览器：https://github.com/oceanbase/obdeploy/tree/master/example mini-single-examp ......
Nacos笔记(五)：Nacos集群整合Nginx
前言 Nginx搭建，参考：Linux安装Nginx。 1、Nginx配置 添加nacos集群，调整端口与服务名，并设置代理，详情如下： 配置详情如下 http { include mime.types; default_type application/octet-stream; sendfile ......
使用obd demo快速部署单副本oceanbase集群（离线）
环境介绍： centos 7.6 可用内存不少于8G 安装目录空间不少于50G（默认安装在当前安装用户的家目录下） 1. 什么是obd？ odb是oceanbase社区版部署工具oceanbase deployer的简称，通过obd可以快速完成oceanbase clusterr的部署。 不传入配置 ......
【Redis】Setninel 哨兵机制
一、sentinel 工作原理 在Redis2.6+引入哨兵机制，在2.8版本后趋于稳定状态，在生产环境中建议使用2.8版本以上的sentinel服务。sentinel集群用于监控redis集群中Master节点工作状态，在Master节点发生故障时，可以实现主从切换，保证系统的高可用。 哨兵（Se ......
Hadoop集群手动主备切换
查看节点状态 #查看节点状态 [root@hadoop1 bin]# hdfs haadmin -getServiceState nn1 standby [root@hadoop1 bin]# hdfs haadmin -getServiceState nn2 active [root@hadoop ......
mysql主从复制
数据库主从复制的概述和原理这里就不做描述了，这里最重要的就是一个binlog日志，有兴趣的可以去了解，以下着重讲解如何搭建： 1、准备工作 准备两台服务器环境，安装好mysql服务 192.168.80.131 主库192.168.80.132 从库 开放两台服务器的3306端口（或者关闭防火墙服务 ......
docker swarm集群迁移（ES示例）
docker swarm 集群迁移 0. 先down掉集群内的stack docker stack down es 1. 集群解散 # 在每个节点执行 docker swarm leave --force 注意： 记得备份每个节点对应的标签 node1: tag1,tag2 node2:... 集群 ......
Debian Linux（帕拉迪）的方式：安装Linux并且部署主从nginx的步骤（自己实践过的）
1. ./configure 和 make && make install 分开执行，不要连起来，会报错。 (其实可以不用&&，其实他们是可以分开执行的，分三步) && 是连接的意思， 2.linux安装nginx后没有sbin目录的解决方法 3.按照第二步修改后启动nginx报错的解决方法 解决n ......
LInux单机部署ELK日志收集
LInux单机部署ELK日志收集 一、环境准备 centos7 cpu：1核 内存：8G #安装vim，wget，net-tools 设置主机名： vim /etc/hosts 127.0.0.1 localhost localhost.localdomain localhost4 localhos ......
MySQL 主从延迟的常见原因及解决方法
承蒙大家的支持，刚上市的《MySQL实战》已经跃居京东自营数据库图书热卖榜第 1 名，收到的反馈也普遍不错。对该书感兴趣的童鞋可通过右边的链接购买。目前，京东自营有活动，只需 5 折。 主从延迟作为 MySQL 的痛点已经存在很多年了，以至于大家都有一种错觉：有 MySQL 复制的地方就有主从延迟。 ......