分布式

分布式事务

整理自b站 1.什么事分布式事务 2.请描述二阶段提交的基本过程,具体的应用 3.2PC协议中,如何处理协调者和参与者之间的通信故障,请列举一些解决方案 超时机制 心跳机制 事务管理器故障->备份 消息队列 3. 3PC讲一下 预提交第二阶段 将数据库的redolog和undolog记录到事务日志里 ......
分布式 事务

分布式事务

注解: @GlobalTransactional 手写: GlobalTransaction tx = GlobalTransactionContext.getCurrentOrCreate(); try { tx.begin(); tx.commit();//不能提交 }catch (Except ......
分布式 事务

cookie和session的区别,分布式环境怎么保存用户状态

1、cookie数据存放在客户的浏览器上,session数据放在服务器上。 2、cookie不是很安全,别人可以分析存放在本地的COOKIE并进行COOKIE欺骗,考虑到安全应当使用session。 3、session会在一定时间内保存在服务器上。当访问增多,会比较占用你服务器的性能,考虑到减轻服务 ......
分布式 状态 session 环境 用户

分布式系统架构

分布式系统的架构思路 一、前言 在计算机领域,当单机性能达到瓶颈时,有两种方式可以解决性能问题,一是堆硬件,进一步提升配置,二是分布式,水平扩展。当然,两者都是一样的烧钱。今天聊聊我所理解的分布式系统的架构思路。 二、分布式系统的两种方式 平时接触到的分布式系统有很多种,比如分布式文件系统,分布式数 ......
分布式 架构 系统

Linux:CAP定理——分布式计算

一、起源与发展 CAP(Consistency、Availability、Partition Tolerance)(一致性、可用性、分区容忍性)也叫Brewer定理,由Eric Brewer于2000年提出。 2002年,Seth Gilbert和Nancy Lynch用严谨的数学推理证明了CAP猜 ......
定理 分布式 Linux CAP

读发布!设计与部署稳定的分布式系统(第2版)笔记31_版本问题

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230812234533249-1035884507.png) # 1. 在软件与外部环境之间的许多交汇点上,版本控制基本上处于混乱状态 ## 1.1. 不应该为了更新自身系统 ......
分布式 版本 笔记 问题 系统

jmeter分布式压测

无论是jdk还是jmeter都放在usr/local目录下 jmeter分布式压测过程1.控制机跟代理机中间ping通2.控制机代理机安装相同版本的jdk,并配置jdk环境 环境配置成功在cmd打Java或javac可以获取内容java -version 查看jdk版本3.控制机代理机安装相同版本的 ......
分布式 jmeter

LAXCUS分布式操作系统:技术创新引领高性能计算与人工智能新时代

随着科技的飞速发展,高性能计算、并行计算、分布式计算、大数据、人工智能等技术在各个领域得到了广泛应用。在这个过程中,LAXCUS分布式操作系统以其卓越的技术创新和强大的性能表现,成为了业界的佼佼者。本文将围绕LAXCUS分布式操作系统的技术创新,探讨其在高性能计算与人工智能领域的应用前景。 一、LA ......

读发布!设计与部署稳定的分布式系统(第2版)笔记30_为部署而设计

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230811224443622-1444719159.png) # 1. 部署行为是系统生命的重要组成部分 ## 1.1. 只编写代码是不够的,只要没有在生产环境中运行,一切都 ......
分布式 笔记 系统 30

公钥 & 数字证书 & 分布式身份DID (上)

## 主页 - 个人微信公众号:密码应用技术实战 - 个人博客园首页:https://www.cnblogs.com/informatics/ ## 引言 密码技术中最令人兴奋的 ## 密码算法简介 | 类别 | 算法 | 描述 | | | | | | 对称加密算法 | AES (Advanced ......
公钥 数字证书 分布式 amp 证书

分布式TCC事务相关问题

TCC分别是Try,Confirm,Cancel,分为三阶段。 1. 第一阶段Try:业务检查及资源预留,尝试事务操作但不提交。 2. 第二阶段Confirm:事务操作提交。 3. 第三阶段Cancel:如果Try阶段发现事务操作无法完成 或者 Confirm阶段出现错误,会撤销已经完成的操作,回滚 ......
分布式 事务 问题 TCC

分布式系统架构设计思想

1. 计算与存储分离 2. 接口幂等, 业务幂等 ,防重提交 3.功能性需求 ,非功能性需求 之间的取舍平衡 4. 数据的冷热分离 5. 高内聚,低耦合 , 模块化设计 ,分层,防腐层 ,DDD 6. 分布式系统,三大件 Redis , MQ , 分布式数据库(1. 满足事务处理简单 , 2. 能快 ......
设计思想 分布式 架构 思想 系统

Spring Cloud Alibaba全解析:构建可靠的分布式系统

标题:Spring Cloud Alibaba全解析:构建可靠的分布式系统 引言:随着互联网技术的不断发展,分布式系统的概念和应用越来越广泛。作为构建可靠和弹性的分布式系统的关键技术之一,Spring Cloud Alibaba提供了一套完整的解决方案,帮助开发者更轻松地构建和管理分布式系统。本文将 ......
分布式 Alibaba Spring 系统 Cloud

【分布式技术专题】RocketMQ延迟消息实现原理和源码分析

[推荐超值课程:点击获取](https://www.sanzhishu.top/) ### 痛点背景 #### 业务场景 > 假设有这么一个需求,用户下单后如果30分钟未支付,则该订单需要被关闭。你会怎么做? #### 之前方案 > **最简单的做法,可以服务端启动个定时器,隔个几秒扫描数据库中待支 ......
分布式 源码 RocketMQ 原理 消息

一篇文章讲透分布式存储【转载】

分布式存储是相对于集中式存储来说的,在介绍分布式存储之前,我们先看看什么是集中式存储。不久之前,企业级的存储设备都是集中式存储。所谓集中式存储,从概念上可以看出来是具有集中性的,也就是整个存储是集中在一个系统中的。但集中式存储并不是一个单独的设备,是集中在一套系统当中的多个设备。以EMC公司的存储为 ......
分布式 篇文章

分布式锁

# 1. 分布式锁作用 解决缓存击穿问题 # 2. 分布式锁思想 加锁:就是去存储一个数据,如果一个线程可以把数据存储成功,就说明当前线程获取到了锁;存储不成功,就说明当前线程没有获取到锁。 解锁:删除数据 # 3. 常用技术 mysql,redis,zookeeper是常用的分布式锁技术 加锁对性 ......
分布式

缓存面试解析:穿透、击穿、雪崩,一致性、分布式锁、Redis过期,海量数据查找

本文提供了一些保证数据一致性和设计分布式锁的策略。这些策略可以在实际应用中帮助开发人员解决相关的问题,确保系统的数据一致性和并发访问的正确性。同时,通过合理地使用缓存和分布式锁,可以提高系统的性能和可靠性。希望对你在面对Redis相关面试题时有所帮助! ......
雪崩 一致性 分布式 海量 缓存

Zabbix 分布式监控平台

[toc] ## 一、Zabbix 概述 作为一个运维,需要会使用监控系统查看服务器状态以及网站流量指标,利用监控系统的数据去了解上线发布的结果,和网站的健康状态。 利用一个优秀的监控软件,我们可以: - 通过一个友好的界面进行浏览整个网站所有的服务器状态 - 可以在Web 前端方便的查看监控数据 ......
分布式 Zabbix 平台

zabbix 基于 Web 界面的提供分布式系统监视

zabbix 基于 Web 界面的提供分布式系统监视,能监视各种网络参数,保证服务器系统的安全运营;并提供灵活的通知机制以让系统管理员快速定位/解决存在的各种问题。 目录 一、zabbix概述 二、监控原理 三、zabbix组件 四、zabbix架构 五、zabbix工作原理 六、部署 zabbix ......
分布式 界面 zabbix 系统 Web

深入浅出关于微服务架构实战指南:分布式系统的设计与部署技巧

深入浅出关于微服务架构实战指南:分布式系统的设计与部署技巧 微服务架构实战指南:分布式系统的设计与部署技巧 摘要:随着互联网应用的快速发展,传统的单体应用架构已经无法满足高可用、可扩展、快速迭代等需求。微服务架构的出现为解决这些问题提供了一种新的思路。本文将深入探讨微服务架构的设计与部署技巧,包括服 ......
深入浅出 分布式 架构 实战 技巧

Redis从入门到放弃(10):分布式锁

在分布式系统中,实现对共享资源的安全访问是一个关键问题。Redis作为一种高性能的内存数据库,提供了多种方式来实现分布式锁,以解决多个节点之间对共享资源的并发访问问题。 本文将介绍五种Redis分布式锁的解决方案及其原理、应用场景以及Java代码的实现步骤。 ## 1、SETNX `SETNX`(S ......
分布式 Redis

【转】分布式事务,EventBus 解决方案:CAP【中文文档】

【转】分布式事务,EventBus 解决方案:CAP【中文文档】 最新文档地址:https://github.com/dotnetcore/CAP/wiki 前言 很多同学想对CAP的机制以及用法等想有一个详细的了解,所以花了将近两周时间写了这份中文的CAP文档,对 CAP 还不知道的同学可以先看一 ......

分布式链路跟踪springcloud-Sleuth和springcloud-Zipkin

分布式链路跟踪springcloud-Sleuth和springcloud-Zipkin 前言 各大厂分布式链路跟踪系统架构对比随着互联网架构的扩张,分布式系统变得日趋复杂,越来越多的组件开始走向分布式化,如微服务、消息收发、分布式数据库、分布式缓存、分布式对象存储、跨域调用,这些组件共同构成了繁杂 ......

云原生可观测框架 OpenTelemetry 基础知识(架构/分布式追踪/指标/日志/采样/收集器)

![image](https://img2023.cnblogs.com/blog/436453/202308/436453-20230808090024609-749001282.png) ## 什么是 OpenTelemetry? [OpenTelemetry](https://opentele ......

[系统设计] 分布式系统 (1) 分布式锁(1)基于Redis(setnx)实现分布式锁组件

# 1 序言 近期遇到一个问题: + 外部查询缓存了InfluxDB中物联网数据表的字段信息元数据的本地缓存(基于Google Guava Cache、及其RefreshAfterWrite(seconds, TimeUnit.SECOND))的Web接口 > 为什么会缓存 Influxdb的字段信 ......
分布式 系统 组件 Redis setnx

应用程序通过 Envoy 代理和 Jaeger 进行分布式追踪(一)

Istio 支持通过 Envoy 代理进行分布式追踪,代理自动为其应用程序生成追踪 span,只需要应用程序转发适当的请求上下文即可。Istio 支持很多追踪系统,包括 Zipkin, Jaeger,Lightstep 和 Datadog,其中 Jaeger 目前已经成为 Istio 默认的分布式追 ......
分布式 应用程序 程序 Jaeger Envoy

[系统设计] 分布式系统 (1) 分布式锁 [转载]

在日常开发工作中,我们为了保证资源操作的最终一致性,同样需要用到锁来进行操作控制。本Chat结合自己工作中的经验沉淀,来跟大家一起聊聊 分布式锁的那些事,分享一些实用内容给大家。 # 为什么会出现分布式锁? 如下图所示,一个应用被部署到多个机器上做负载均衡。为了保证一个方法或属性在高并发情况下的同一 ......
分布式 系统

深度学习框架 —— 分布式训练

现在深度学习的模型结构越来越大,参数动不动都是上亿甚至上千亿,这也对训练模型的资源量有很高的要求,显然单个机器上要训练这么大的网络是不现实的,因此学术界和工业界自然开始研究用分布式训练。也就是将一个机器学习模型任务拆分成多个子任务,并将子任务分发给多个计算节点,解决资源瓶颈。 # 1. 分布式训练概 ......
分布式 框架 深度

读发布!设计与部署稳定的分布式系统(第2版)笔记29_控制层下

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230804112759115-773698620.png) # 1. 配置服务 ## 1.1. 配置服务本身就是分布式数据库 ### 1.1.1. 像ZooKeeper和et ......
分布式 笔记 系统 29

Redis 之分布式锁的实现

## 引言 分布式锁大家应该不陌生,在很多大厂面试的时候,面试官们都很喜欢问这个问题。 我们在系统中修改已有数据时,需要先读取,然后进行修改保存,此时很容易遇到并发问题。由于修改和保存不是原子操作,在并发场景下,部分对数据的操作可能会丢失。在单服务器系统我们常用本地锁来避免并发带来的问题,然而,当服 ......
分布式 Redis