缓存 优缺点 分布式
Redis缓存雪崩、击穿、穿透、双写一致性、并发竞争、热点key重建优化、BigKey的优化 等解决方案【转】
一. 缓存雪崩 1. 含义 同一时刻，大量的缓存同时过期失效。 2. 产生原因和后果 (1). 原因：由于开发人员经验不足或失误，大量热点缓存设置了统一的过期时间。 (2). 产生后果：恰逢秒杀高峰，缓存过期，瞬间海量的QPS(每秒查询次数)直接打到DB上，如果系统架构没有熔断机制，直接将导致系统全 ......
架构师养成记-mybatis一级缓存，二级缓存
一级缓存级缓存是 MyBatis 中的默认提供的缓存的，也就是说，我们在使用 ybatis 的时候本身就在使用，他是默认开启的，级缓存是 sqlsession 级别的缓存，只有在一个 salSession 内的查询才能共享缓存的数据，当我们关闭 sqlsession 的时候或者执行增删改查的操作的时 ......
查看本机Arp缓存，以及清除arp缓存
查看Arp缓存目录 Windows 系统使用 win+R，输入cmd 在命令窗口输入 arp -a 删除Arp缓存目录 在命令窗口输入 arp -d * 查看主机路由表 ......
laravel8对接阿里云sdk刷新cdn缓存接口RefreshObjectCaches
<?php namespace App\Admin\Forms; use Encore\Admin\Widgets\Form; use Illuminate\Http\Request; use AlibabaCloud\Client\AlibabaCloud; use AlibabaCloud\Cl ......
在 CentOS7/CentOS8 上使用 cephadm 安装分布式存储系统 Ceph【转】
Cephadm 介绍 官方文档：https://docs.ceph.com/en/latest/cephadm/ cephadm 用于部署和管理 Ceph 集群，它通过 SSH 将 manager 守护进程连接到主机来实现这一点。manager 守护进程支持添加、删除和更新 Ceph 容器。ceph ......
Redis——分布式锁
基本原理 synchronized是利用JVM内部的锁监视器控制线程，但是只能在一个JVM中生效。如果有多个JVM的时候，就会有多个线程获取到锁，就无法实现多JVM进程之间的互斥了。 因此不能使用JVM内部的锁监视器了，必须使用JVM外部的锁监视器，就能保证只有一个线程获取到锁，就能实现多进程之间的 ......
造轮子之缓存
缓存也是在业务开发过程中经常使用的一环。在Asp.net core中，原生包含了MemoryCache内存缓存和DistributedCache分布式缓存两种缓存。在Program中添加以下代码注册服务之后即可使用依赖注入使用两种缓存。 builder.Services.AddMemoryCache ......
分布式操作系统市场规模有万亿吗？你怎么看？
昨天参加一个饭局，席间和一位做ICT基础设施投资的朋友聊起我们团队研发的LAXCUS分布式操作系统，请他分析一下分布式操作系统和连带的产业市场规模价值，我给出的分析依据是：1. LAXCUS面向TO B市场，有广泛应用前景，包括AI、大数据、HPC的支持2. LAXCUS属于多机操作系统，和Wind ......
python dict和ttl支持自动过期缓存
python dict和ttl支持自动过期缓存 github: https://github.com/mailgun/expiringdict 安装 pip install expiringdict pip install expiring-dict 使用： from expiringdict im ......
Kafka的分布式架构与高可用性
导语 一开始我们就说过Kafka是一款开源的高吞吐、分布式的消息队列系统，那么今天我们就来说下它的分布式架构和高可用性以及双/多中心部署。 Kafka 体系架构简介 以下是 Kafka 的软件架构，整个 Kafka 体系结构由 Producer、Consumer、Broker、ZooKeeper 组 ......
Redis分布式锁
简述 利用Redis的Setnx命令，来实现一个分布式的加锁方案。利用注解，在拥有该注解的方法上，进行切面处理，在方法执行前，进行加锁，执行结束后，根据是否自动释放锁，进行解锁。 将该注解用在定时任务的方法上，即可实现分布式定时任务，即获取到锁的方法，才会执行。 1 redis命令 1.1 setn ......
分布式事务：XA和Seata的XA模式
上一篇内容《从2PC和容错共识算法讨论zookeeper中的Create请求》介绍了保证分布式事务提交的两阶段提交协议，而XA是针对两阶段提交提出的接口实现标准，本文则对XA进行介绍 ......
Mysql 分布式序列算法
接上文 Mysql分库分表 1.分布式序列简介 在分布式系统下，怎么保证ID的生成满足以上需求？ ShardingJDBC支持以上两种算法自动生成ID。这里，使用ShardingJDBC让主键ID以雪花算法进行生成，首先配置数据库，因为默认的注解id是int类型，装不下64位，需要进行修改： # 在 ......
RDB、AOF详解及优缺点总结
1.RDB模式优缺点 1.1.RDB 模式优点 1.1.1.RDB快照保存了某个时间点的数据，可以通过脚本执行redis指令bgsave(非阻塞，后台执行)或者save(会阻塞写操作,不推荐)命令自定义时间点备份，可以保留多个备份，当出现问题可以恢复到不同时间点的版本,很适合备份,并且此文件格式也支 ......
分布式系统笔记目录
分布式系统笔记目录 本目录源自我校的分布式系统课程，我觉得很有趣，就制作了笔记并分享 老师的笔记的目录结构感觉还是有些问题，但是当时学习时间比较紧，就没来得及排版 仅供学习使用 第一章：基本概念 分布式系统相关概念、与并行计算的关系、云计算概念、分布式计算的背景、目的、应用及展望 第二章：模型问题 ......
对比redis的RDB、AOF模式的优缺点
1.RDB模式优缺点 1.1.RDB 模式优点 1.1.1.RDB快照保存了某个时间点的数据，可以通过脚本执行redis指令bgsave(非阻塞，后台执行)或者save(会阻塞写操作,不推荐)命令自定义时间点备份，可以保留多个备份，当出现问题可以恢复到不同时间点的版本,很适合备份,并且此文件格式也支 ......
关于分布式操作系统
关于分布式操作系统，如果你不太理解的话，可以把它看成是传统操作系统延展。二者的区别在于，传统的操作系统都是单机系统，只能在一台计算机上运行，而分布式操作系统是多机系统，每台计算机都是系统中的一个计算单元，在此基础形成建立网络连接，统一输入输出，形成一个巨大的物理分布逻辑统一的计算机集群。 所以分布式 ......
Transformer 优缺点分析
https://aistudio.baidu.com/projectdetail/4909750 https://zhuanlan.zhihu.com/p/330483336 Transformer优点有位置关联操作不受限，建模能力强，通用性强，可扩展性强，能更好的进行并行运算。 Transform ......
discuz关闭缓存
修改 function_core.php 文件 vim discuz_x3.2/upload/source/function/function_core.php 代码如下，添加红色字体 登录后复制 function checktplrefresh($maintpl, $subtpl, $timeco ......
缓存(Redis)与数据库(MySQL)一致性如何解决？
为了满足用户对一趟列车不同站点不同座位类型的余量查询需求，我们采取了一种优化方案。我们将这些余量信息存储在缓存中，以便用户可以快速查询。 然而，在用户创建订单并完成支付时，我们需要同时从数据库和缓存中扣减相应的列车站点余票。这种设计不仅提高了查询效率，也保证了数据的一致性，确保订单操作的准确性。在这... ......
Redis分布式锁演进架构
分布式锁相信大家一定不会陌生，想要用好或者自己写一个却没那么简单。想要达到上述的条件，一定要 **掌握分布式锁的应用场景**，以及分布式锁的不同实现，不同实现之间有什么区别。 ......
Redis学习之分布式全局id生成
介绍 为什么需要分布式全局 ID 生成器？ 对于订单这种数据，数据库自增的规律性太明显，会暴露一些信息（比如根据昨日和今日的订单号差值看出销量） 数据量过大时，不同表的 id 分别自增，容易出现 id 冲突 分布式全局 ID 生成应满足的特点： 唯一：整个系统每个 id 都是唯一的 递增：虽然不连续 ......
GJOI 2023.10.5 T1 雷老师的正偏态分布
雷老师的正偏态分布 题意：给出一个长度为 \(n\) 的 \(a\) 数组，其中 \(1 \le a_i \le V , 1 \le i \le n\) 。统计其中的满足平均数严格小于中位数且大小为奇数的子集数量，\(n \le 100 , V \le 800\)，时限 \(4\) s 。 输入： ......
Redis学习之缓存雪崩、缓存击穿及封装Redis工具类
缓存雪崩 缓存雪崩是指在同一时段大量的缓存key同时失效或者Redis服务宕机，导致大量请求到达数据库，带来巨大压力。 解决思路： 1.不让key同时失效 2.尽量不让Redis宕机 具体解决方案： 缓存击穿 又叫热点key失效： 两种解决方案： 1.互斥锁：只有一个线程会负责缓存重建，其余线程拿不 ......