链路 分布式opentelemetry rocketmq

架构:第五章:分布式架构的演进

单一应用架构 适用于小型网站,小型管理系统,将所有功能都部署到一个功能里,简单易用。 缺点: 1、性能扩展比较难 2、协同开发问题 3、不利于升级维护 垂直应用架构 通过切分业务来实现各个模块独立部署,降低了维护和部署的难度,团队各司其职更易管理,性能扩展也更方便,更有针对性。 缺点: 公用模块无法 ......
架构 分布式

华为ENSP学习之链路聚合

作用:合并多条物理链路,形成一条逻辑链路,从而增加带宽,解决网络瓶颈问题 基本思路两种: (一)挨个端口设置聚合: 1、创建聚合状态 2、设置聚合状态的类型 3、进入相应接口,将聚合状态应用到接口 (二)聚合内批量添加: 1、创建聚合状态 2、设置聚合状态的类型 3、进入聚合状态内,批量添加结构到状 ......
链路 ENSP

OpenHarmony 分布式硬件关键技术

本文转载自 OpenHarmony TSC 官方微信公众号《峰会回顾第8期 | OpenHarmony 分布式硬件关键技术》 演讲嘉宾 | 李 刚 回顾整理 | 廖 涛 排版校对 | 李萍萍 嘉宾简介 李刚,华为OpenHarmony技术专家,OpenHarmony分布式硬件技术负责人。主要负责Op ......
分布式 OpenHarmony 关键 硬件 技术

Kurator,你的分布式云原生解决方案

为大家介绍分布式云原生一站式开源解决方案Kurator,结合典型特性的实操演示,让开发者快速了解Kurator 在分布式云场景下的使用。 ......
分布式 解决方案 Kurator 方案

使用 OpenTelemetry 构建可观测性 06 - 生态系统

过去的五篇文章讨论了如何使用 OpenTelemetry 来构建可观测性的技术细节。我认为在本博文系列的结尾介绍有关 OTel 生态系统的信息,为读者提供更全面的了解非常重要。OpenTelemetry 的发展非常迅速,对于刚接触它的人来说,可能会感到有些不知所措或困惑,不知道在哪里找到有效的信息或 ......
OpenTelemetry 生态 系统 06

使用 OpenTelemetry 构建可观测性 05 - 传播和行李(Propagation & Baggage)

我们开发的应用程序可能具有不同的形态和架构:有些是单体应用,有些是微服务。为单体应用程序添加遥测数据相对来说简单,因为所有数据都在同一进程中。然而对于微服务应用程序,情况可能会更具挑战性。 通常,分布式微服务应用程序的不同服务之间仅通过网络连接。然而,当我们想要创建有效的链路追踪数据,就要考虑到下面 ......
OpenTelemetry Propagation 行李 Baggage amp

c# .NET 高级编程 高并发必备技巧(二) - 分布式锁

上一篇文章简单的介绍了单机的情况下如何进行加锁,防止高并发带来的问题。 然而现实中,一般会高并发的应用,很少会单机部署。当用户量达到一定的程度,分布式、集群部署是必然的选择。在分布式部署的情况下,之前的单机锁还会有效吗?代码还是之前的代码: > private static object lck = ......
分布式 技巧 NET

基于Redission的分布式锁

# 分布式锁的设计共分为3步 1. 定义注解 2. 对注解进行扫描 3. 使用注解 加锁核心逻辑为 RLock rLock = redissonClient.getLock(key); //是否加锁成功 boolean isLock = rLock.tryLock(timeOut, expireTi ......
分布式 Redission

k8s部署rocketmq

分别部署rocketmqnamesrv、rocketmqbroker、rocketmq-dashboard三个。 1、部署rocketmqnamesrv 部署时,rocketmq的日志存储采用hostPath方式挂载到服务器磁盘上,所以需要指定node节点。 apiVersion: apps/v1 ......
rocketmq k8s k8 8s

提升访问速度和数据共享的效果 - 分布式缓存技术

在当今互联网时代,访问速度和数据共享是任何在线应用的关键要素。为了满足用户的需求,我们需要解决访问速度慢和数据共享不便的问题。分布式缓存技术应运而生,它通过在应用程序和后端数据库之间引入缓存层,从而提高了访问速度和数据共享的效果。 ## 什么是分布式缓存? 分布式缓存是一种将数据存储在内存中的技术, ......
分布式 缓存 速度 效果 数据

【RocketMQ】消息的存储总结

当Broker收到生产者的消息发送请求时,会对请求进行处理,从请求中解析发送的消息数据,接下来以单个消息的接收为例,看一下消息的接收过程。 ## 数据校验 ### 封装消息 首先Broker会创建一个`MessageExtBrokerInner`对象封装从请求中解析到的消息数据,它会将Topic信息 ......
RocketMQ 消息

如何使用Redis实现分布式锁?

首先来说 Redis 作为一个独立的三方系统,其天生的优势就是可以作为一个分布式系统来使用,因此使用 Redis 实现的锁都是分布式锁,理解了这个概念才能看懂本文所说的内容。 分布式锁的示意图,如下所示: ![image.png](https://cdn.nlark.com/yuque/0/2023 ......
分布式 Redis

Nginx Ingress Contoller 通过 Envoy 代理和 Jaeger 进行分布式追踪(二)

1、概述 在《应用程序通过 Envoy 代理和 Jaeger 进行分布式追踪(一)》一文中,我们详细介绍了单个应用程序如何通过 Envoy 和 Jaeger 实现链路追踪的过程。然而,单独追踪单个应用程序的链路在实际场景中往往显得不够有意义。因此,在本文中,我们将进一步扩展链路追踪范围,演示如何将 ......
分布式 Contoller Ingress Jaeger Nginx

使用 OpenTelemetry 构建可观测性 04 - 收集器

在之前的博文中,我们讨论了如何使用 SDK 和链路追踪生产者来导出进程中的遥测数据。尽管有多种类型的导出器可供选择,但其中一个常见的目标是将数据导出到 OpenTelemetry Collector。本篇文章将深入探讨收集器以及如何使用它。 选 OTel Collector 还是其他 正如上一篇博客 ......
OpenTelemetry 04

ceph分布式存储软件pgs inconsistent

Ceph是一个开源的分布式存储系统,它提供了高性能、高可靠性以及高扩展性。Ceph的设计理念是基于对象存储模型,通过将数据分割成多个对象并存储在不同的节点上,实现数据的分布式存储和访问 ......
分布式 inconsistent 软件 ceph pgs

RocketMQ源码(四):RocketMQ生产者发送消息流程

RocketMQ通过Producer发送消息,以同步方式发送普通消息为例,分析发送消息的整体流程。Producer的示例代码如下: 1 import org.apache.rocketmq.client.producer.DefaultMQProducer; 2 import org.apache. ......
RocketMQ 生产者 源码 流程 消息

微服务集成seata完成分布式事务,解决数据不一致问题

细心的盆友可能已经发现了,我们的跨行转账并没有保证数据一致性,比如小明扣除了100,但是因为各种问题小红在添加100金额的时候遇到了异常,这个时候数据就出现不一致性 我们可以选择seata来进行分布式事务杜绝这种现象的发生 seata官网:https://seata.io/zh-cn/docs/ov ......
分布式 事务 数据 问题 seata

读发布!设计与部署稳定的分布式系统(第2版)笔记34_读后总结与感想兼导读

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230817155723872-372310672.png) # 1. 基本信息 发布!设计与部署稳定的分布式系统 第2版 Release It! Design and Dep ......
读后 分布式 感想 笔记 系统

分布式共识算法之Raft设计与实现

### 如何理解分布式共识? 多个参与者 针对 某一件事 达成完全 一致 :一件事,一个结论 已达成一致的结论,不可推翻 ### 有哪些分布式共识算法? - Paxos:被认为是分布式共识算法的根本,其他都是其变种,但是 Paxos 论文中只给出了单个提案的过程,并没有给出复制状态机中需要的 mul ......
分布式 共识 算法 Raft

集群、分布式、微服务概念和区别

概念: 集群是个物理形态,分布式是个工作方式。 1.分布式:一个业务分拆多个子业务,部署在不同的服务器上 2.集群:同一个业务,部署在多个服务器上 分布式是指将不同的业务分布在不同的地方。而集群指的是将几台服务器集中在一起,实现同一业务。 分布式中的每一个节点,都可以做集群。而集群并不一定就是分布式 ......
分布式 集群 概念

分布式布隆过滤器

# 1. 分布式布隆过滤器的价值 集群环境太浪费系统资源、集群环境也不容易对布隆过滤器进行维护,所以采用Redisson框架的分布式布隆过滤器。 # 2. Redisson提供的分布式布隆过滤器的使用 ```java // 获取一个分布式的布隆过滤器(RedissonClient) RBloomFi ......
分布式 过滤器

第七章 Rocketmq--消息驱动

7.1 MQ简介 7.1.1 什么是MQ MQ(Message Queue)是一种跨进程的通信机制,用于传递消息。通俗点说,就是一个先进先出的数据结构。 7.1.2 MQ的应用场景 7.1.2.1 异步解耦 此架构下注册、邮件、短信三个任务全部完成后,才返回注册结果到客户端,用户才能使用账号登录。但 ......
Rocketmq 消息

读发布!设计与部署稳定的分布式系统(第2版)笔记33_混沌工程

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230817140634376-621525736.png) # 1. 康威定律 ## 1.1. 梅尔文·康威 ### 1.1.1. Melvin Conway ### 1.1 ......
分布式 笔记 工程 系统 33

第六章 Sleuth--链路追踪

6.1 链路追踪介绍 在大型系统的微服务化构建中,一个系统被拆分成了许多模块。这些模块负责不同的功能,组合成系统,最终可以提供丰富的功能。在这种架构中,一次请求往往需要涉及到多个服务。互联网应用构建在不同的软件模块集上,这些软件模块,有可能是由不同的团队开发、可能使用不同的编程语言来实现、有可能布在 ......
链路 Sleuth

Redis分布式锁笔记

1 redis 分布式锁实现原理 所谓分布式锁,应当基本如下几项核心性质: • 独占性:对于同一把锁,在同一时刻只能被一个取锁方占有,这是锁最基础的一项特征 • 健壮性:即不能产生死锁(dead lock). 假如某个占有锁的使用方因为宕机而无法主动执行解锁动作,锁也应该能够被正常传承下去,被其他使 ......
分布式 笔记 Redis

读发布!设计与部署稳定的分布式系统(第2版)笔记32_适应性

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230816164601035-688425072.png) # 1. 变化就是软件的特性 ## 1.1. 变化保证天天有,存活保障无处寻 ## 1.2. 非每一款软件每天都需 ......
分布式 适应性 笔记 系统 32

Copula估计边缘分布模拟收益率计算投资组合风险价值VaR与期望损失ES|附代码数据

全文链接:http://tecdat.cn/?p=24753 最近我们被客户要求撰写关于风险价值的研究报告,包括一些图形和统计输出。 在这项工作中,我通过创建一个包含四只基金的模型来探索 copula,这些基金跟踪股票、债券、美元和商品的市场指数 摘要 然后,我使用该模型生成模拟值,并使用实际收益和 ......
收益率 收益 边缘 损失 风险

分布式存储系统举例剖析(elasticsearch,kafka,redis-cluster)

1. 概述 对于分布式系统,人们首先对现实中的分布式系统进行高层抽象,然后做出各种假设,发展了诸如CAP, FLP 等理论,提出了很多一致性模型,Paxos 是其中最璀璨的明珠。我们对分布式系统的时序,复制模式,一致性等基础理论特别关注。 在共识算法的基础上衍生了选举算法,并且为分布式事务提供了部分 ......

通过 OpenKruise 实现基于 Higress 的全链路灰度

OpenKruise 是一个基于 Kubernetes 的扩展套件,主要聚焦于云原生应用的自动化,比如部署、发布、运维以及可用性防护。本文介绍通过 OpenKruise 构建自动化运维的方式实现全链路灰度功能。 ......
灰度 链路 OpenKruise Higress

分布式锁-lua脚本

// 工具类@Component public class RedisLock { @Autowired private RedisTemplate redisTemplate; // 时间轮异步定时执行 private HashedWheelTimer timer = new HashedWhee ......
分布式 脚本 lua