思考题 分布式mvc-mvp-mvvm架构
分布式缓存
单点redis的问题 数据丢失问题：Redis是内存存储，服务重启可能会丢失数据。解决：数据持久化 并发能力问题：单节点并发能力不足。解决：主从集群，读写分离。 故障恢复：需要自动的故障恢复手段。解决：Redis哨兵，实现健康检测和自动恢复。 存储能力问题：单节点Redis难以满足海量数据存储。解决 ......
redis分布锁
1.什么是redis分布式锁 Redis分布式锁是一种利用Redis实现的锁机制，用于在分布式系统中保护共享资源的访问。它利用Redis的原子性操作和过期时间设置来实现互斥访问。 在分布式环境中，多个进程或线程可能同时访问共享资源，如果没有合适的机制来保护共享资源，就会导致数据不一致或竞争条件的发生 ......
网易面试：亿级用户，如何做微服务底层架构？
文章很长，且持续更新，建议收藏起来，慢慢读！疯狂创客圈总目录 博客园版 为您奉上珍贵的学习资源 ： 免费赠送 :《尼恩Java面试宝典》 持续更新+ 史上最全 + 面试必备 2000页+ 面试必备 + 大厂必备 +涨薪必备 免费赠送 :《尼恩技术圣经+高并发系列PDF》 ，帮你 实现技术自由，完成职 ......
transformer总体架构
transformer总体架构 目录transformer总体架构循环神经网络总体架构EncoderDecoder输入输出层模型输入位置编码模型输出自注意力机制关于QKV的理解Q, K, V 及注意力计算多头注意力机制多头注意力机制作用Feed Forward 层参考资料 论文地址：Attentio ......
在arm架构的银河麒麟系统部署Nginx
以下是在arm架构的银河麒麟系统上部署Nginx的详细步骤： 1. 创建文件夹 首先，在合适的位置创建必要的文件夹。在本例中，我们将创建/opt/nginx和/usr/src/nginx两个文件夹。 mkdir /opt/nginx mkdir /usr/src/nginx 2. 准备Nginx及其 ......
Seata：打造行业首个分布式事务产品
在 2019 年，我们基于 Dubbo Ecosystem Meetup，收集了 2000 多份关于“在微服务架构，哪些核心问题是开发者最关注的痛点？”的调研问卷。最终分布式事务问题在调研中占比最大，约占 54%。 ......
数据库软硬件选型的思考
数据库软硬件选型的思考 背景 最近有多个项目出现过数据库的问题 这里想总结语一下遇到的问题. 以及可能的软硬件优化方案与思路. 暂时还没有进行过系统的测试验证, 所以仅是一个思考, 后续会慢慢完善. 硬件选型 截止现在 2024年元旦之前. Oracle数据库我认为还是选择 Intel的CPU更好. ......
将Abp默认事件总线改造为分布式事件总线
@目录原理创建分布式事件总线实现自动订阅和事件转发使用启动Redis服务配置传递Abp默认事件传递自定义事件项目地址 原理 本地事件总线是通过Ioc容器来实现的。 IEventBus接口定义了事件总线的基本功能，如注册事件、取消注册事件、触发事件等。 Abp.Events.Bus.EventBus是 ......
seata分布式事务不生效
Fegin调用使用了Fallback降级或抛出的异常被全局处理 解决： 1.通过 GlobalTransactionContext.reload(RootContext.getXID()).rollback() 进行手动回滚 服务A @Service public class ServiceAImp ......
spring-cloud 微服务架构所用到的技术 简介
https://www.bilibili.com/video/BV18E411x7eT https://blog.csdn.net/u011863024/article/details/114298270 https://blog.csdn.net/u011863024/article/detail ......
DeepSpeed分布式训练
一、DeepSpeed 总纲 官方文档：DeepSpeed 官方英文文档 cpoy下来的原版 DeepSpeed 模型的训练是使用DeeSpeed引擎完成的 DeepSpeed引擎可以包装任何 torch.nn.module 类型的模型 二、训练 1、通过 deepspeed.initialize ......
分布式资源管理和调度
分布式资源管理和调度 分布式资源管理和调度是指在分布式系统中有效地管理和调度系统中的资源，以满足各种任务的需求。在一个分布式系统中，资源可以包括计算资源（如CPU、内存）、存储资源（如磁盘空间）、网络带宽等。 分布式资源管理的目标是实现高效的资源利用和公平的资源分配。它需要考虑以下几个方面： 资源发 ......
解决方案架构师 vs 技术架构师，有何区别？
Salesforce架构师角色是生态系统中常见的职业目标。架构师因其丰富的Salesforce知识以及在平台上构建可扩展解决方案的能力而广受认可。 解决方案架构师和技术架构师是Salesforce生态系统中最常见的两个架构师角色，这些角色有一些重叠，但它们完全不同，解决方案架构师和技术架构师到底有什 ......
李强 分布式计算、云计算与大数据 作者:林伟伟 著出版社:机械工业出版社出版时间:2015年11月
前 言背景分布式计算从20世纪六七十年代发展到现在，一直是计算机科学技术的理论与应用的热点问题，特别是*近几年，随着互联网、移动互联网、社交网络应用的发展，急需分布式计算的新技术——云计算、大数据，以满足和实现新时代计算机的应用需求。云计算、大数据等新技术本质上是分布式计算的发展和延伸，现有的书籍一 ......
分布式限流
Spring - 高并发系统限流-漏桶算法和令牌桶算法_spring 限流_当走的路甚远的博客-CSDN博客6种 分布式限流方案，我替你整理好了_Micrle_007的博客-CSDN博客 ......
读程序员的README笔记16_构建可演进的架构（上）
1. 行为准则 2. 需求的不确定性 2.1. 不断变化的客户需求 2.2. 软件项目无法避免的挑战 2.3. 产品需求和环境会随着时间的推移而改变，你的应用程序也必须随之改变 2.4. 不断变化的需求会导致不稳定性，使开发工作偏离轨道 2.5. 通过构建可演进的架构来适应不断变化的需求 2.5.1 ......
【转载】Springboot2.x 使用 Redisson 分布式可重入锁
参考 https://blog.csdn.net/weixin_43749805/article/details/131399516 https://github.com/redisson/redisson （官方仓库） https://github.com/redisson/redisson/tr ......
企业架构概述
我们从事企业数字化建设，首先需要清楚企业架构，当然对于志在的创业同仁们，需要掌握更多更详细的内容，比如商业模式等等一些管理理论方面的，可是大多数人清楚基本概念即可，比如企业架构是什么，什么是企业，什么是架构。 企业就是输出某种价值的主体，组织和个人都可，无非价值大小多少的问题。 架构就是 输出某种价 ......
物联网架构实例—解决Linux(Ubuntu)服务器最大TCP连接数限制
1.前言：在对物联网网关进行压测的时候，发现在腾讯云部署网关程序，设备接入数量只能达到4000多个长连接，之后就再也无法接入终端了。 之前在阿里云部署的时候明明可以到达2万左右，而且腾讯云的这个服务器比阿里云的硬件配置还要高上不少，不至于那么差，随后查阅大量资料终于完美解决。 2.解决步骤：2.1. ......
ABAP存取Excel的技术思考
ABAP存取Excel有OLE,DOI,XML好几种技术啊，试了好多次，发现前两者总是出很多bug，决心以后只用基于Open XML技术的API和函数了。 类CL_FDT_XL_SPREADSHEET基于XML技术实现，示例代码如下；当然，SAP官方是不推荐单独使用这个类的，只限制用于BRF+相关功 ......
销售点分布调查
题目描述 终端部门按层级管理销售负责人，即：销售总裁直接对接公司分布在若干个国家的销售负责人，每个国家的销售负责人对接本国各大区负责人，大区负责人对接本区内各省负责人，各省负责人对接本省各市负责人等等…… 这里假设每个级别的负责人都仅向唯一的上级领导汇报。 假设共有N（N<100）位销售负责人，每人 ......
ES集群架构
一、集群节点 一个ES集群可以有多个节点构成 一个节点就是一个ES服务实例，通过配置集群名称cluster.name加入集群 那么节点是如何通过配置相同的集群名称加入集群的呢？要搞明白这个问题，我们必须先搞清楚ES集群中节点的角色。 ES中节点有角色的区分的，通过配置文件conf/elasticse ......
Redis Cluster 架构
一、架构类型 1、单机架构 2、分布式架构 二、Redis Cluster 架构 节点 集群模式：cluster-enable:yes meet 所有节点共享消息 指派槽 复制 1、Redis Cluster特性 主从复制 高可用 分片 三、集群伸缩 1、原理 集群伸缩实际上是哈希槽和数据移动的过程 ......
分布式锁
一、为什么使用分布式锁 保障集群服务的一致性 二、Redis 分布式锁实现 1、Java客户端现有问题 在程序运行结束和释放锁的两步操作中会存在时间窗口，可能存在线程不安全问题 2、使用Lua脚本实现 -- 目标：获取缓存值，如值与预期相等，则释放分布式锁 -- Lua 内置了一个 redis 对象 ......
分布式架构的演变过程
1. 单应用架构 此时用户量很少，所有功能全部都在一个应用中，应用和数据库部署在一台机器上。 2. 应用服务器和数据库服务器分离 随着系统访问量的再度增加，webserver机器的压力在高峰期会上升到比较高，这个时候开始考虑增加一台服务器，将数据库分离出去。 3. 应用服务器集群 突然有一天，发现系 ......
浅谈分布式事务
事务： 事务是指由一组操作组成的一个工作单元，这个工作单元具有原子性（atomicity）、一致性（consistency）、隔离性（isolation）和持久性（durability）。 原子性：执行单元中的操作要么全部执行成功，要么全部失败。如果有一部分成功一部分失败那么成功的操作要全部回滚到执 ......
《架构师之路：软件架构之美》阅读笔记三
《架构师之路：软件架构之美》是一本关于软件架构的入门书籍，作者李家智从自己的实践经验出发，结合了业内一些经典的案例和经验，系统地介绍了软件架构的基本概念、原则和方法。 本书主要分为三个部分：第一部分介绍了软件架构的基本概念和原则；第二部分详细介绍了一些常用的软件架构模式，如分层架构、微服务架构等；第 ......
数据库的历史-分布式数据库
数据库的历史-分布式数据库 分布式数据库 数据库承载的东西越来越多. 很容易进就超过了单机能够存放的极限. 并且就算没超过单机存放的极限, 插入/查询的性能也是无法保证的. 解决单机解决不了的问题, 其实就是scale-up 和 scale-out 之争 小型机,大型机就是典型的scale-up的方 ......