链路 分布式opentelemetry rocketmq
分布式【分布式事务】
一、事务 事务实现应该具备原子性、一致性、隔离性和持久性。即ACID。 原子性（Atomicity），可以理解为一个事务内的所有操作要么都执行，要么都不执行。 一致性（Consistency），可以理解为数据是满足完整性约束的，也就是不会存在中间状态的数据，比如你账上有400，我账上有100，你给我 ......
数据统计分析 — 泊松分布
在一指定时间范围内或在指定的面积或体积内某一事件出现的次数的分布，他们对应的随机变量的概率服从的分布叫做泊松分布 例如： 某企业中每月某设备出现故障的次数 单位时间内到达某一服务台需要服务的顾客人数 ......
Ceph分布式存储原理
一. 基本介绍 1. 定义 Ceph是一个分布式存储系统(由c++编写完成，提供软件定义、统一存储解决方案)，根据存储类型可分为块存储、对象存储和文件存储；它提供了一个可无限伸缩的Ceph存储集群 什么是文件存储，块存储，对象存储？ 块存储简称RBD（RADOS Block Device），是一种有 ......
Kafka 在分布式系统中的 7 大应用场景
Kafka 介绍 Kafka 是一个开源的分布式流式平台，它可以处理大量的实时数据，并提供高吞吐量，低延迟，高可靠性和高可扩展性。Kafka 的核心组件包括生产者（Producer），消费者（Consumer），主题（Topic），分区（Partition），副本（Replica），日志（Log）， ......
LoadRunner分布式负载(多机器)
首先调用的负载机器可以没有LoadRunner，但是必须要有Agent Configuration： 全部勾选 在LoadRunner User的脚本中的接口调用必须使用ip，不能使用localhost。 打开Controller： 添加负载机： 测试连接： ready打钩表示连接通了。 点击菜单栏 ......
分布式操作系统的必要性及重要性
总有人在各个平台留言或者私信问LAXCUS分布式操作系统的各种问题，尤其是关于分布式操作系统的应用市场、价值、意义之类的问题。我们团队做LAXCUS分布式操作系统，也不是头脑凭空发热，是基于我们之前的大量产品设计、经验逐渐一步步做起来。当今已经进入智能时代，也是算力时代，人工智能、大数据、云计算是这 ......
分布式系统分析
什么是分布式系统 分布式系统是支持分布式处理的软件系统，是由通信网络互联的多处理机体系结构上执行任务的系统。 一个业务拆分为多个子业务，落地成不同的服务，将各个服务部署在不同的容器上。各个服务之间通过某种协议通信交互。 好处是有更好的可靠性，可扩展性，但也带来了一致性问题。所以碰到分布式系统，主要就 ......
分布式锁总结归纳
我们都知道在微服务架构中，微服务之间要保持单线程运行一段代码只能用到分布式锁，下面这个文章介绍了几种实现分布式锁的方案，并对比了每种方案的优势和劣势： 分布式锁(5种) 需要注意的是，这篇文章中提到了公平锁的概念，在上面这个文章的方案中zookeeper和etcd这两个是天然的公平锁方案，目前来看是 ......
Google全球分布式数据库：Spanner
2012年的OSDI上google发布了Spanner数据库。个人认为Spanner对于版本控制，事务外部一致性的处理，使用TrueTime + Timestamp进行全球备份同步的实现都比较值得一看。个人认为对于其中时序逻辑的理解对在大范围内（通常是全国到全球）部署分布式DB以确保复制同步有重要意 ......
在 Windows Server 2022 中，你可以使用 PowerShell 来检查网络适配器的链路速度
在 Windows Server 2022 中，你可以使用 PowerShell 来检查网络适配器的链路速度。以下是如何进行的步骤： 打开 PowerShell。你可以通过在开始菜单中搜索 "PowerShell" 来找到它。 在 PowerShell 中，输入以下命令并按 Enter 键： Get ......
分布式定时任务-利用分布式定时任务框架xxl-job实现任务动态发布
1.场景：项目前期使用k8s部署的单节点，后期生产需要将单节点的服务扩展多个节点，每个节点的定时任务使用的quartz实现，如果不加限制且定时任务有对数据库的写操作，在不同节点上执行的定时任务容易造成数据库产生脏数据，所以需要分布式任务框架对任务进行控制，这里我们使用xxl-job实现。 2.需要下 ......
docker 安装 RocketMQ
安装 rocketmq 拉取 rocketmq 镜像 docker pull apache/rocketmq 运行 namesrv docker run -d \ --name rmqnamesrv \ --privileged=true \ -p 9876:9876 \ -v /tool/rock ......
分布式事务
本地事务在分布式下会出现的问题 只能各自回滚各自的 簇点头那边抛出异常 >全部回滚(ok) 簇点第一个远程调用返回code不正确,我们可在主方法这抛异常(ok) 簇点非第一个远程调用code不正确,我们只有那个远程调用和主方法会rollback,在其之前的远程调用无法rollback没人通知(NO) ......
谷粒商城分布式基础（一）—— 项目简介 & 分布式基础
目录 一 项目简介 1、项目背景 二、分布式基础概念 分布式基础篇 回到顶部 一 项目简介 1、项目背景 1.1 电商模式 市面上有 5 种常见的电商模式 B2B、B2C、C2B、C2C、O2O； （1）B2B模式 B2B(Business to Business)，是指商家和商家建立的商业关系，如 ......
分布式集群与多线程高并发
后台数据的处理语言有很多，Java 是对前端采集的数据的一种比较常见的开发语言。互联网移动客户端的用户量特别大，大量的数据处理需求应运而生。可移动嵌入式设备的表现形式 很多，如 PC 端，手机移动端，智能手表，Google 眼镜等。Server2client 的互联网开发模式比较常见，有一种新的数据 ......
r语言Bootstrap自助法重采样构建统计量T抽样分布近似值可视化
全文链接：https://tecdat.cn/?p=33939 原文出处：拓端数据部落公众号 统计量T是数据的一个函数，不依赖于任何未知参数（即我们可以根据数据计算得到它）。这意味着给定数据值x1,x2,⋯,xn，统计量T就是一个"数字"。然而，在观察到数据之前，"数据"是随机变量X1,X2,⋯,X ......
几何分布无记忆性的感性理解
几何分布：在独立重复试验中，实验次数预先不能确定，设每次实验成功的概率为p,将实验进行到成功一次为止，以\(X\)表示所需的实验次数，则\(X\)的分布律为 \[P\{X=k\}=(1-p)^{k-1}p,k=1,2,3... \] 无记忆性 ： \[P(X>n|X>m) = P(X>n-m) \] ......
【RocketMQ】数据的清理机制
Broker在启动的时候会注册定时任务，定时清理过期的数据，默认是每10s执行一次，分别清理CommitLog文件和ConsumeQueue文件： public class DefaultMessageStore implements MessageStore { // CommitLog清理类 p ......
数据链路层设备
目录数据链路层设备1. 以太网MAC地址2. 以太网帧格式3. 交换机工作原理3.1 交换机工作过程3.2 交换机四大功能3.3 交换机mac表4. 以太网接口的工作模式5. 交换机的console接口 数据链路层设备 1. 以太网MAC地址 用来识别一个以太网上的某个单独设备或一组设备，由48位二 ......
数据链路层的七七八八
数据链路层的七七八八 主要物理传输介质：线路/网卡/二层交换机（网桥） 以太网 封装好的以太网帧由网卡添加前导码和FCS ->由对端网卡接收后去掉前导码并使用CRC校验，如果帧损坏则丢弃，如果没有损坏则交给软件驱动处理 ->以太网驱动接收物理层传输过来的包读入内存 ->查看源mac和目的mac，如果 ......
linux 聚合链路
聚合链路 聚合链路是将多块网卡逻辑地连接到一起从而允许故障转移或者提高吞吐率的方法。提高服务器网络可用性。 bond是将多块网卡虚拟成为一块网卡的技术，通过bond技术让多块网卡看起来是一个单独的以太网接口设备并具有相同的ip地址。在linux下配置bond，通过网卡绑定技术既能增加服务器的可靠性， ......
[swin-trans]分布式训练的debug：ValueError: Error initializing torch.distributed using env:// rendezvous: en
在用torch.distributed.init_process_group(backend='nccl', init_method='env://', world_size=world_size, rank=rank)时，出现 1、ValueError: Error initializing to ......
Springboot整合RocketMQ实现、消息生产、消息消费
前言： 这里我们需要准备两个Springboot项目，一个项目作为 消息生产，一个作为消费消息 window安装MQ，自行安装，可以参考教程： https://blog.csdn.net/qq_63815371/article/details/131032508 项目1：（生产消息） 项目结构： p ......
数据链路层的七七八八
主要物理传输介质：线路/网卡/二层交换机（网桥） 以太网 封装好的以太网帧由网卡添加前导码和FCS -> 由对端网卡接收后去掉前导码并使用CRC校验，如果帧损坏则丢弃，如果没有损坏则交给软件驱动处理 -> 以太网驱动接收物理层传输过来的包读入内存 -> 查看源mac和目的mac，如果是发给自己的则根 ......
jmeter分布式压测配置
环境： 主机是windows系统方便图形界面使用 从机是虚拟机上的centos7操作系统 主从版本一致：jmeter.5.6.2 检测cpu和内存：插件配置详见 ==> 插件配置 主机配置： 有就配置，没有就添加： server.rmi.ssl.disable=true remote_hosts=1 ......
Redisson分布式锁的原理简介
在解决并发安全问题的时候，思路其实就是将并发执行控制为串行执行，这就是锁的具体表现。 在传统的单机模式下，synchronized关键字、ReentrantLock、CAS等方案的单机锁是可行的，但是分布式架构的微服务，一个服务多个节点的场景就需要Redisson等分布式锁来处理。 经典的秒杀场景下 ......
Disjob—分布式任务调度框架
简介 Disjob是一款分布式的任务调度框架，天然为支持分布式长任务执行而设计，它除了具备常规的任务调度功能外，还提供：任务拆分及分布式并行执行、暂停及取消运行中的任务、恢复执行被暂停的任务、任务执行失败重试、保存任务的执行快照(Savepoint)、任务依赖、任务编排(DAG)、广播任务等能力。 ......
rocketmq记录
Rocketmq 生产者、消费者 maven引用<dependency><groupId>org.apache.rocketmq</groupId><artifactId>rocketmq-client</artifactId><version>4.7.0</version></dependency ......
Rocketmq使用
Rocketmq 生产者、消费者 maven引用 <dependency> <groupId>org.apache.rocketmq</groupId> <artifactId>rocketmq-client</artifactId> <version>4.7.0</version> </depen ......
docker-compose搭建多主机分布式minio
minio介绍 Minio 是个基于 Golang 编写的开源对象存储套件，虽然轻量，却拥有着不错的性能。 官网地址：MinIO | High Performance, Kubernetes Native Object Storage 何为对象存储？我们来看下阿里云 OSS （Object Stor ......