主从 哨兵 集群redis
redis 数据库
1 redis 单机数据库结构 1 redis server/client 结构 2 每个数据库都有一个包含所有数据的字典 2 过期时间 redis 每个库都会保存一个结构，里面包含了 每个键的过期时间的字典结构； redis 如何判断过期，首先检查给的键是否在过期字典中， 如果在，那就获取过期时间 ......
分布式限流——基于Redis的Lua脚本限流实现
分布式限流 当你的应用分布式部署出现对等端（peer）时，单机的限流往往不能满足对下游保护的作用，因为它仅仅是jvm内存层面的流量控制。这个时候自然而然会想到用一些跨JVM的分布式中间件控制在单位时间窗口内的请求是否通行，本文我们将探讨如何借助Redis实现分布式限流。 1 固定窗口限流 前文已经介 ......
Spark版本不兼容导致Standalone集群无法连接问题
一、Spark版本不一致报错现象 当使用client模式连接Spark的standalone集群时，报错所有的spark master的节点都没有回应。 二、问题排查思路 通过client端的日志产看没有什么有价值的信息，需要看下spark端的master的日志，docker logs spark- ......
Redis 哨兵启动 以及 手动切换节点
服务启动 ./redis-server ../redis.conf 哨兵启动 ./redis-sentinel ../sentinel.conf查看当前服务是否是主节点（先登录到redis）INFO replication 要将从节点切换为主节点，您可以执行以下步骤： 首先，确保从节点已成功连接到主 ......
redis 浅谈3
1 redis数据结构简介 sds 链表 字典 跳跃表 整数集合 压缩列表 2 过期时间 redis 每个库都会保存一个结构，里面包含了 每个键的过期时间的字典结构； redis 如何判断过期，首先检查给的键是否在过期字典中， 如果在，那就获取过期时间，在检查当前Unix时间戳是否大于键的过期时间 ......
Linux 部署redis集群（三主三从）
1、由于redis是C语言编写的，安装之前需要保证有gcc的环境配置 首先使用命令，查看gcc版本，若已经存在则跳过gcc的安装：gcc -v 若不存在gcc，则使用命令安装gcc：yum install gcc-c++ 2、下载redis源文件 mkdir /usr/local/redis cd ......
Redis持久化之RDB和AOF
Redis是基于内存的，内存中的信息断电丢失，有时需要持久化来解决这个弊端。 在之前的文章中Shiro中使用Redis管理session - 东方来客 - 博客园 (cnblogs.com)使用了Redis管理Shiro的session。 想要配置Redis持久化不是 在Maven项目中，而是 要通 ......
1.12_redis 的存取在最后 晚上_浙江本地环境的header不能用线上的_header中host和refer分别代表什么意思?_模型的save()参数是数组怎么理解?
方便点1： 问题: 为什么这个浙江的这个线上的header用到本地就不行,而熊师爷的这个却可以? 线上的 header中的host 本地的 header中的host 根据上面弄得对照关系 header中host和refer分别代表什么意思? 活1: 分析如下： 上面分析出现的问题：既然只统计：开业状 ......
redis报错MISCONF Errors writing to the AOF file: No space left on device，磁盘满无法写入数据报错
查询报错远程调用接口异常，F12查看网络和标投和预览到是mgr的接口此错误#根据报错提示：Error in execution; nested excepti on is io.lettuce.core.RedisCommandExecutionException: MISCONF Errors w ......
CentOS7上配置MySQL5.7主从备份
CentOS7,MySQL5.7 两台机器,master为192.168.226.130,slave为192.168.226.131 配置主MySQL 首先,登录MySQL,创建一个同步账号,用于从服务器访问主服务器 create user 'repl'@'%' identified by '密码' ......
Prometheus监控k8s集群节点主机内存/CPU使用率
CPU使用率： (1 - avg(rate(node_cpu_seconds_total{mode="idle"}[5m])) by (instance)) *100 说明： container_cpu_usage_seconds_total 该容器服务针对每个CPU累计消耗的CPU时间。如果有多个 ......
TiDB 多集群告警监控-中章-融合多集群 Grafana
author：longzhuquan 背景 随着公司XC改造步伐的前进，越来越多的业务选择 TiDB，由于各个业务之间需要物理隔离，避免不了的 TiDB 集群数量越来越多。虽然每套 TiDB 集群均有两个详细的监控 Dashboard、Grafana，但对于运维来说几十套集群的监控、告警、巡检均需消 ......
Redis - JSON human-friendly format
127.0.0.1:6379> JSON.SET obj $ '{"name":"Leonard Cohen", "lastSeen":1478476800,"loggedOut": true}' OK zzh@ZZHPC:~$ docker exec -it redis-stack-server ......
TiDB 在单机上模拟部署生产环境集群
参考地址：https://docs.pingcap.com/zh/tidb/dev/quick-start-with-tidb 前提条件 硬件要求 开始部署 TiDB 集群前，准备一台部署主机，确保其软件满足需求： 推荐安装 CentOS 7.3 及以上版本 运行环境可以支持互联网访问，用于下载 T ......
k8s集群手动更换证书过程
第一步部分老的证书 1. 生成etcd证书，更换etcd证书，重启etcd服务。2. 替换/etc/calico的证书为etcd的证书重启calico-node服务。3. 更换calico的pod的证书为新生成的calico-node和calico-kube-controllers.4. 更换k8s ......
MySQL 主从延迟的常见原因及解决方法
承蒙大家的支持和厚爱，刚上市的《MySQL实战》已经跃居京东自营数据库图书热卖榜第1名，收到的反馈也普遍不错，欢迎大家购买。 正文 主从延迟作为 MySQL 的痛点已经存在很多年了，以至于大家都有一种错觉：有 MySQL 复制的地方就有主从延迟。 对于主从延迟的原因，很多人将之归结为从库的单线程重放 ......
Kubernetes 多集群网络方案系列 1 -- Submariner 介绍
https://cloudpods.csdn.net/657811c5b8e5f01e1e449b3e.html Kubernetes 多集群网络方案系列 1 -- Submariner 介绍 本文首先介绍了 Submariner 的架构，包括 Broker、Gateway Engine、Route ......
Kubernetes 多集群网络方案系列 2 -- Submariner 监控
https://juejin.cn/post/7222575963565015096 Kubernetes 多集群网络方案系列 2 -- Submariner 监控 2023-04-16 62 阅读10分钟 Submariner 是一个用于连接 Kubernetes 集群的跨集群网络解决方案，可以实 ......
一篇文章彻底搞懂TiDB集群各种容量计算方式
背景 TiDB 集群的监控面板里面有两个非常重要、且非常常用的指标，相信用了 TiDB 的都见过： Storage capacity：集群的总容量 Current storage size：集群当前已经使用的空间大小 当你准备了一堆服务器，经过各种思考设计部署了一个 TiDB 集群，有没有想过这两个 ......
K8s 多集群实践思考和探索
https://www.cnblogs.com/vivotech/p/17684105.html 作者：vivo 互联网容器团队 - Zhang Rong 本文主要讲述了一些对于K8s多集群管理的思考，包括为什么需要多集群、多集群的优势以及现有的一些基于Kubernetes衍生出的多集群管理架构实践 ......
redis
ValueOperations<String, String> valueOps = redisTemplate.opsForValue(); valueOps.set("key", "value"); 获取字符串值： javaCopy Code String value = valueOps.ge ......
Redis - (error) WRONGTYPE Operation against a key holding the wrong kind of value
zzh@ZZHPC:~$ docker exec -it redis redis-cli 127.0.0.1:6379> SET bike:1 "Process 134" OK 127.0.0.1:6379> GET bike:1 "Process 134" 127.0.0.1:6379> HSET ......
FastAPI 结合 Redis 使用方法，FastAPI 已经很快了，但是更快的方案依然是结合 Redis 充当缓存
实现功能或目的 FastAPI 结合 Redis 使用方法，FastAPI 已经很快了，但是 更快的方案依然是继续结合 Redis 来当数据缓存 本文章提供3种 Redis 结合 FastAPI 的方法 分别见这里： 第1种方案:使用依赖注入来实现 第2种方案:使用Lifespan Events生命 ......
Redis性能分析
一、Redis是什么？ 内存数据库，纯内存操作 Key-Value数据库，NoSQL数据库 C语言编写，性能极高 Redis支持数据持久化 需要大量内存（网络带宽），CPU不是瓶颈 单线程 避免 切换与锁 --使用多路复用 二、Redis和Mysql区别 1、redis缓存服务器，数据存储在内存 m ......
22-安全机制：Kubernete 如何保障集群安全？
（https://rancher.com/blog/2019/2019-01-17-101-more-kubernetes-security-best-practices/） 你好，我是正范。 Kubernetes 作为一个分布式集群的管理工具，提供了非常强大的可扩展能力，可以帮助你管理容器，实现业 ......
23-最后的防线：怎样对 Kubernete 集群进行灾备和恢复？
Kubernetes 隐藏了所有容器编排的复杂细节，让我们可以专注在应用本身，而无须过多关注如何去做部署和维护。此外，Kubernetes 还支持多副本，可以保证我们业务的高可用性。而对于集群本身而言，我们一样也要保证其高可用性，你可以参考官方文档：利用 Kubeadm 来创建高可用集群。 但是这些 ......
18-权限分析：Kubernete 集群权限管理那些事儿
你好，我是正范。 通过前面的课程学习，你已经学会了使用kubectl命令行，或者直接发送 REST 请求，以及使用各种语言的 client 库来跟 APIServer 进行交互。那么你是否知道在这其中Kubernetes 是如何对这些请求进行认证、授权的呢？这节课，我们就来一探究竟。 任何请求访问 ......
19-资源限制：如何保障你的 Kubernete 集群资源不会被打爆
前面的课时中，我们曾提到通过 HPA 控制业务的资源水位，通过 ClusterAutoscaler 自动扩充集群的资源。但如果集群资源本身就是受限的情况下，或者一时无法短时间内扩容，那么我们该如何控制集群的整体资源水位，保障集群资源不会被“打爆”？ 今天我们就来看看 Kubernetes 中都有哪些 ......
03-集群搭建：手把手教你玩转 Kubernete 集群搭建
通过上一节课的学习，我们已经对 Kubernetes 的架构有了清楚的认识。但是到现在还没有和 Kubernetes 集群真正打过交道，所以你可能有一种“不识庐山真面目”的云里雾里的感觉。那么本节课，我们就来学习如何搭建 Kubernetes 集群，开启探索 Kubernetes 的第一站。 在线 ......
【K8S系列】快速初始化⼀个最⼩集群
序言 走得最慢的人，只要不丧失目标，也比漫无目的地徘徊的人走得快。 文章标记颜色说明： 黄色：重要标题 红色：用来标记结论 绿色：用来标记一级重要 蓝色：用来标记二级重要 希望这篇文章能让你不仅有一定的收获，而且可以愉快的学习，如果有什么建议，都可以留言和我交流 写在前面 k8s作为⼀个相对⽐较复杂 ......