链路 分布式opentelemetry rocketmq

深入理解RocketMQ 广播消费

这篇文章我们聊聊广播消费,因为广播消费在某些场景下真的有奇效。笔者会从基础概念、实现机制、实战案例、注意事项四个方面一一展开,希望能帮助到大家。 1 基础概念 RocketMQ 支持两种消息模式:集群消费( Clustering )和广播消费( Broadcasting )。 集群消费: 同一 To ......
RocketMQ

RocketMq发送消息之批量消息

概述 批量发送消息能显著提高传递小消息的性能。限制是这些批量消息应该有相同的topic,相同的waitStoreMsgOK,而且不能是延时消息。此外,这一批消息的总大小不应超过4MB 发送批量消息 如果您每次只发送不超过4MB的消息,则很容易使用批处理,样例如下: String topic = "B ......
消息 RocketMq

RocketMq发送消息之延迟消息

延迟消息 比如电商里,提交了一个订单就可以发送一个延时消息,1h后去检查这个订单的状态,如果还是未付款就取消订单释放库存。 使用限制 对比于rabbitmq中的延迟消息来说,rockermq并不支持任意时间的延迟,需要设置几个固定的延时等级,从1s到2h分别对应着等级1到18级 // org/apa ......
消息 RocketMq

素数分布的基本定理(一)

切比雪夫函数$\psi(x)$和$\vartheta(x)$ / Chapter2 $\vartheta(x)$与$\pi(x)$的关系 / 素数定理的等价形式 ......
素数 定理

RocketMQ发送消息之同步异步单向

官网教程:https://rocketmq.apache.org/zh/docs/quickStart/01quickstart 基于双主双从异步方式开启的前提下,在maven项目中引入下列依赖 <dependency> <groupId>org.apache.rocketmq</groupId> ......
单向 RocketMQ 消息

分布式基础理论

分布式基础理论 分布式系统简介: “分布式系统是若干独立计算机的集合,这些计算机对于用户来说就像单个相关系统”分布式系统(distributed system)是建立在网络之上的软件系统。 单一应用架构简介: 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本。此时,用于简 ......
分布式 基础理论 理论 基础

具有可加性的分布函数

一、二项分布 二、泊松分布 三、正态分布 四、卡方分布 ......
函数

什么是分布式锁,如何实现分布式锁

分布式锁其实可以理解为:有序的去操作分布式系统中的共享资源,通过互斥来保持一致性。 分布式锁的三种实现方式:1.数据库,2.redis,3.zookeeper 第2,3种参考:https://zhuanlan.zhihu.com/p/72896771?utm_source=wechat_timeli ......
分布式

分布式锁

为什么需要分布式锁? 在多线程环境中,如果多个线程同时访问共享资源(例如商品库存、外卖订单),会发生数据竞争,可能会导致出现脏数据或者系统问题,威胁到程序的正常运行。 举个例子,假设现在有 100 个用户参与某个限时秒杀活动,每位用户限购 1 件商品,且商品的数量只有 3 个。如果不对共享资源进行互 ......
分布式

Redis中是如何实现分布式锁的?

分布式锁常见的三种实现方式: 数据库乐观锁; 基于Redis的分布式锁; 基于ZooKeeper的分布式锁。 本次面试考点是,你对Redis使用熟悉吗?Redis中是如何实现分布式锁的。 要点 Redis要实现分布式锁,以下条件应该得到满足 互斥性 在任意时刻,只有一个客户端能持有锁。 不能死锁 客 ......
分布式 Redis

什么是分布式系统

分布式系统是由多个独立计算机或服务器组成的系统,这些计算机或服务器通过网络进行通信和协作,共同完成一个或多个任务。分布式系统的设计目标是提高系统的可靠性、可扩展性、性能和容错性。 在分布式系统中,各个计算机或服务器被称为节点,它们可以是物理机器、虚拟机、容器等。这些节点通过网络连接在一起,可以是局域 ......
分布式 系统

mtr命令详解及网络链路诊断路由连通性分析

mtr命令用来诊断网络连通性,mtr命令汇集了ping、tracerouted的功能特性,mtr是非常棒的网路网络诊断工具, mtr命令详解 当目标服务器ping不通或者出现丢包等现象时,建议可以使用mtr测试工具进行网络链路诊断(Windows系统参考:Windows系统下WinMTR工具使用)。 ......
链路 路由 命令 网络 mtr

LAXCUS分布式操作系统和算力

昨天有用户问LAXCUS分布式操作系统和算力的关系,今天借这个话题讲讲二者的关联。 算力是指计算机系统在单位时间内所能完成的计算任务数量。随着计算机技术的发展,尤其是大数据、云计算、人工智能等新技术、新应用业务的出现,算力已经成为了衡量计算系统和产业业态的重要指标。在传统的集中式计算模式下,算力的提 ......
分布式 LAXCUS 系统

RocketMQ源码(六):RocketMQ消费者启动流程

RocketMQ通过Consumer消费消息,可并发和顺序的处理消息,这里以并发消费普通消息为例,分析消息下佛诶的整体流程。Consumer的示例代码如下: 1 import com.snails.rmq.common.RMQConstant; 2 import org.apache.rocketm ......
RocketMQ 源码 流程 消费者

16 链路聚合实验

实验 理解链路聚合的作用和配置 拓扑 此时存在拓扑存在环路,配置STP生成树,STP生成树通过阻塞端口破环,这样两条链路将不会工作,在此场景下有更好的方式解决,链路聚合,将GE0/0/1-3绑定为一根逻辑的链路,在传输流量时,以负载均衡的方式分担给三条链路,因为是逻辑上的一条链路,所以没有环,还不会 ......
链路 16

CentOS7 安装RocketMQ5.1.3

安装JDK 1.要求jdk1.8以上,官网下载地址:https://www.oracle.com/cn/java/technologies/downloads/ 2.下载完成后放到/home/downloadfile 没有目录手动创建 3.解压JDK文件到/usr/lib/jvm目录中 tar -x ......
RocketMQ5 RocketMQ CentOS7 CentOS 1.3

分布式学习1:GFS

大家好,我叫黄晓强,我的学号是102101339,个人爱好包括但不限于写小说、画画、制作立体书、魔术、电影等一切有趣的事情,最近在做MIT6.824的分布式实验,这篇随笔是关于google的分布式文件系统GFS的学习笔记 master不记录哪些chunkserver拥有特定chunk副本,只在启动时 ......
分布式 GFS

【RocketMQ】顺序消息实现总结

全局有序 在RocketMQ中,如果使消息全局有序,可以为Topic设置一个消息队列,使用一个生产者单线程发送数据,消费者端也使用单线程进行消费,从而保证消息的全局有序,但是这种方式效率低,一般不使用。 局部有序 假设一个Topic分配了两个消息队列,生产者在发送消息的时候,可以对消息设置一个路由I ......
顺序 RocketMQ 消息

SpringBoot + MDC 实现全链路调用日志跟踪

简介:MDC(Mapped Diagnostic Context,映射调试上下文)是 log4j 、logback及log4j2 提供的一种方便在多线程条件下记录日志的功能。MDC 可以看成是一个与当前线程绑定的哈希表 ,可以往其中添加键值对。MDC 中包含的内容可以被同一线程中执行的代码所访问 。 ......
链路 SpringBoot 日志 MDC

locust:Python 分布式压力测试(带WebUI)

Locust 介绍 它采用纯 Python 实现,是一个分布式用户负载测试的工具。 使用基于 Requests 库的客户端发起请求,使编写脚本大大简化; 在模拟并发方面摒弃进程和线程,完全基于时间驱动,采用协程(gevent)提供的非阻塞 IO 和 coroutine 来实现网络层的并发请求。因此单 ......
分布式 压力 locust Python WebUI

RocketMQ

https://blog.csdn.net/weixin_44981707/article/details/124138939 https://zhuanlan.zhihu.com/p/528956421?utm_id=0 ......
RocketMQ

分布式数据库第一章

模式--概念模式(关系就是表) RELATION EMP{ -- 定义了一个关系(表),命名为EMP KEY={ENO} -- 关键字 ATTRIBUTE={ -- 属性 ENO:CHAR(9) ENAME:CHAR(15) TITLE:CHAR(10) } } ENO:字符类型,长度为9,表示员工 ......
分布式 数据库 数据

【RocketMQ】消息的消费总结

消费者从Broker拉取到消息之后,会将消息提交到线程池中进行消费,RocketMQ消息消费是批量进行的,如果一批消息的个数小于预先设置的批量消费大小,直接构建消费请求ConsumeRequest将消费请求提交到线程池处理,否则需要分批构建进行提交。 消息消费 在消息被提交到线程池后进行处理时,会调 ......
RocketMQ 消息

路由器PLC接入和多链路组网的区别?

路由器PLC接入和多链路组网都是现代网络技术中的重要概念,但它们在实现方式和应用场景上存在明显的区别。 路由器PLC接入: 路由器PLC接入是一种通过电力线通信(PLC)技术实现的网络接入方式。它将PLC模块与路由器连接,使得电力线不仅能够传输电力,还可以作为数据传输的通道。这种方式利用已有的电力线 ......
链路 路由 路由器 PLC

王道408--CN---数据链路层

一、历年选择题考点 二、数据链路层的主要功能 数据链路层的最基本的功能是向该层用户提供透明的和可靠的数据传送基本服务。 数据链路层是对物理层传输原始比特流的功能的加强,将物理层提供的可能出错的物理连接改造成为逻辑上无差错的数据链路,使之对网络层表现为一无差错的线路。 为网络层提供服务 1、无确认的无 ......
链路 王道 数据 408 CN

对于Istio网络路由链路的理解

背景 最近在看Istio的网络配置,对于里面的几个组件如ingress-gateway、Gateway、VirtualService、DestinationRule和k8s原生的Service间的关系不是很清楚,这里整理以下自己的理解 组件 这里可能陈述不完全正确,属于个人理解 ingress-ga ......
链路 路由 Istio 网络

使用 redis 实现分布式接口限流注解 RedisLimit

前言 很多时候,由于种种不可描述的原因,我们需要针对单个接口实现接口限流,防止访问次数过于频繁。这里就用 redis+aop 实现一个限流接口注解 @RedisLimit 代码 点击查看RedisLimit注解代码 import java.lang.annotation.*; /** * 功能:分布 ......
注解 分布式 RedisLimit 接口 redis

1-03-物理层和数据链路层的基本概念

物理层的基本概念: 传输媒体大致可以被分为两类: 导引型传输媒体:1)双绞线 2)同轴电缆 3)光纤 非导引型传输媒体:1)微波通信(2~40GHz) 物理层协议的主要任务: 数据链路层概述: 数据链路层在网络结构体系中所处的地位: 链路,数据链路和帧的概念: 计算机中的网络适配器(俗称网卡)和其相 ......
物理层 链路 物理 概念 数据

MinIO分布式部署

目录先决条件网络和防火墙网络防火墙负载均衡顺序的主机名驱动器要求XFS格式性能最优最小IO顺序的驱动器名任意迁移时间同步考虑相同的硬软件环境存储容量规划推荐的操作系统预先存在的数据部署分布式MinIO在每一个节点上安装MinIO创建服务文件minio.service创建环境文件添加TLS/SSL证书 ......
分布式 MinIO

分布式一致性算法——Raft

Raft Leader Election 背景介绍 Raft是一种用于管理Log的分布式一致性算法,在了解Raft之前首先需要了解为什么需要Log? 对于不同的系统,无论是中间件疑惑是其余的系统,我们如果想要求其满足CAP协议中的一致性,需要尽量保证多节点的数据是相同的,也就是所谓的“共识”。下文中 ......
一致性 分布式 算法 Raft