链路 分布式opentelemetry rocketmq

分布式理论 - BASE

> BASE是“Basically Available, Soft state, Eventually consistent(基本可用、软状态、最终一致性)”的首字母缩写。其中的软状态和最终一致性这两种技巧擅于对付存在分区的场合,并因此提高了可用性。 # 什么是BASE > eBay 的架构师 Da ......
分布式 理论 BASE

分布式理论 - CAP

> CAP理论是分布式系统、特别是分布式存储领域中被讨论的最多的理论。其中C代表一致性 (Consistency),A代表可用性 (Availability),P代表分区容错性 (Partition tolerance)。CAP理论告诉我们C、A、P三者不能同时满足,最多只能满足其中两个。 # CA ......
分布式 理论 CAP

计算机网络(数据链路层)

1. **链路、数据链路和帧** * 链路:从一个节点到相邻节点的一段物理线路(有线或无线),而中间没有任何其他的交换节点 * 数据链路:基于链路。当在一条链路上传送数据时,除需要链路本身,还需要一些必要的通信协议来控制这些数据的运输,把实现这些协议的硬件和软件加在链路上,就构成了数据链路。 * 计 ......
链路 计算机网络 数据

redis分布式锁幂等性问题

一.与Transcational注解同时使用 如果是自定义的切面,切面类要加@Order(Ordered.HIGHEST_PRECEDENCE), 保证redis锁的切面在事务切面外面,让事务先提交,再释放redis锁。 二.日期字段是datetime 背景:jmeter 500并发测试接口出现重复 ......
分布式 问题 redis

Linux rocketmq单机测试部署

一.环境说明对于 RocketMQ 4.3.0版本,官方要求环境如下,其中 Git 用于从 GitHub 获取源码,没有安装也没关系,可以直接下载推荐的流程是:Linux 系统上安装 Git 工具 、Maven、Java JDKGit 工具用于直接从 GitHub 获取 RocketMQ 项目源码下 ......
单机 rocketmq Linux

4分布数据库系统

全局外模式 全局概念模式 分片模式 分布模式 局部概念模式 局部内模式 局部数据库 分布透明性 分片透明性:分不分片,用户感受不到:水平分片、垂直分片、混合分片 位置透明性:数据存放在哪里,用户不用管 局部数据模型透明性(逻辑透明):用户不用关系局部数据模型 分布式数据库管理系统组成 LDBMS G ......
数据库 数据 系统

分布式锁

## 1.是什么 一个方法或属性在高并发情况下的同一时间只能被同一个线程执行,在传统单体应用单机部署的情况下,可以使用并发处理相关的功能进行互斥控制。但是,随着业务发展的需要,原单体单机部署的系统被演化成分布式集群系统后,由于分布式系统多线程、多进程并且分布在不同机器上,这将使原单机部署情况下的并发 ......
分布式

使用 OpenTelemetry 构建 .NET 应用可观测性(2):OpenTelemetry 项目简介

[TOC] # 前世今生 ## OpenTracing OpenTracing 项目启动于 2016 年,旨在提供一套分布式追踪标准,以便开发人员可以更轻松地实现分布式追踪。 OpenTracing 定义了一套 Tracing 模型,以及一套 API,用于在应用程序中创建和管理这些数据模型。 下面是 ......
OpenTelemetry 简介 项目 NET

rocketmq的转发模型

1.模型 2.消息模型 RocketMQ主要由 Producer、Broker、Consumer 三部分组成,其中Producer 负责生产消息,Consumer 负责消费消息,Broker 负责存储消息。Broker 在实际 部署过程中对应一台服务器,每个 Broker 可以存储多个Topic的消 ......
rocketmq 模型

京东搜索EE链路演进

本文将从搜索EE近期的全量迭代出发,展现其链路演进的整体脉络,包含:EE自适应动态探测模型——EE场景建模方式升级——打分与穿插两阶段一致性升级——探测与自然流量全局联动优化四个阶段,梳理对搜索EE的思考与下一步迭代方向。 ......
链路

借助AI分析哥斯拉木马原理与Tomcat回显链路挖掘

前言 本次分析使用了ChatGPT进行辅助分析,大大提升了工作效率,很快就分析出木马的工作流程和构造出利用方式。 分析 首先对该木马进行格式化,以增强代码的可读性。得到如下代码 <jsp:root xmlns:jsp="http://java.sun.com/JSP/Page" version="1 ......
链路 木马 原理 Tomcat

什么是分布式事务

......
分布式 事务

2分布式数据库

与集中式数据库有区别 特点: 数据独立性:分布独立性,逻辑独立性物理独立性 集中与自治共享结合的控制结构:各局部的DBMS可以独立地管理局部数据库,具有自治的功能,同时,系统又设有集中控制机制,协调各局部DBMS的工作,执行全局应用 适当增加数据冗余度:在不同的场地存储同一数据的多个副本,可以提高系 ......
分布式 数据库 数据

部署和使用单机版 FastDFS 分布式文件系统

我们工作中经常会有上传和下载文件的需求,早些年代我们一般会将上传的文件保存在网站所在的服务器上,但是现在一般网站都是负载均衡多服务器部署,因此必须要有独立的文件服务器才行。早些年代,如果有一台独立的文件服务器,一般会搭建 NFS 共享服务,给多个网站服务器之间使用。如果有多台文件服务器的话,各个服务 ......
单机版 分布式 单机 FastDFS 文件

新建rocketmq环境-单机版

1.下载版本 2.解压 unzip 3.配置环境变量 export ROCKETMQ_HOME=/opt/software/rocketmq-all-4.9.1-bin-release export PATH=$PATH:$ROCKETMQ_HOME/bin 4.nameserver服务的创建 修改 ......
单机版 单机 rocketmq 环境

Redis—分布式锁

# 单实例的正确实现方式 获取锁的正确操作为:` SET resource_name my_random_value NX PX 30000`,它限定了只有当锁空闲且持有锁的时间为30000ms,并且锁资源对应的 value 为一个随机值。设置随机值是为了在释放锁时,确保当前线程能够释放该锁,避免出 ......
分布式 Redis

【面试题精讲】Redis如何实现分布式锁

[首发博客地址](https://blog.zysicyj.top/) [系列文章地址](https://blog.zysicyj.top/categories/技术文章/后端技术/系列文章/面试题精讲/) Redis 可以使用分布式锁来实现多个进程或多个线程之间的并发控制,以确保在给定时间内只有一 ......
分布式 Redis

SequoiaDB分布式数据库2023.8月刊

本月看点速览 再获认可!巨杉数据库荣登多份Gartner研究报告 未来可期!广州市南沙区发改局局长杨帆一行莅临巨杉数据库 聚焦金融,巨杉数据库入选“2023 IDC中国FinTech 50” 专注创新,荣获2023胡润中国元宇宙潜力企业未来之星 再获认可!巨杉数据库荣登多份Gartner研究报告 近 ......
分布式 月刊 SequoiaDB 数据库 数据

分布式架构

[TOC] # 认识微服务 单体架构:将业务的所有功能集中在一个项目中开发,打成一个包部署 特点:简单方便、高度耦合、扩展性差,适合小型项目。例如:学生管理系统 ![](https://img2023.cnblogs.com/blog/2688333/202309/2688333-202309021 ......
分布式 架构

分布式存储FusionStorage将搬迁走的计算节点踢出集群

1、登录Device Manager管理界面,在服务-vbs页面下,选中已经异常的VBS,将异常的VBS进行强制删除。 2、通过第三方远程连接工具,连接进FSM后台,IP为浮动IP,用fsadmin用户进入,切换到root用户。 fsadmin 默认密码:IaaS@OS-CLOUD9! 2.1执行s ......
分布式 节点 集群 FusionStorage

shell之ceph分布式存储OSD使用率监控实战脚本

ceph分布式存储集群中osd使用满了后,集群将无法提供存储服务,无法继续写入数据,只读。所以需要对osd使用率进行监控以便及时扩容或者迁移数据 ......
使用率 分布式 脚本 实战 shell

redis分布式锁

public static final String SET_NX_SCRIPT = "if redis.call('setnx', KEYS[1], ARGV[1]) == 1 then return redis.call('expire', KEYS[1], ARGV[2]) else retu ......
分布式 redis

Redis实例应用(应用场景+分布式锁)

1.redis的实际使用实例 1.1 热点数据的实际缓存 缓存缓存,在实际应用中,我们通常会把查询数据次数高的数据放入到Redis中,以便减轻后方数据库的压力。 当缓存数据存入到Redis中,下次在访问相同的数据时,就不在直接操作数据库,直接从Redis中取缓存数据 【注:我们通常会把查询频率高的数 ......
分布式 实例 场景 Redis

Kafka的分布式架构与高可用性

导语 一开始我们就说过Kafka是一款开源的高吞吐、分布式的消息队列系统,那么今天我们就来说下它的分布式架构和高可用性以及双/多中心部署。 Kafka 体系架构简介 以下是 Kafka 的软件架构,整个 Kafka 体系结构由 Producer、Consumer、Broker、ZooKeeper 组 ......
可用性 分布式 架构 Kafka

基于jvm-sandbox实现一个简单功能的全链路压测agent

目前我们已知chaosblade-exec-jvm是基于jvm-sandbox开发的混沌工程注入工具,我们可以基于jvm-sandbox创建一些其他的工具agent:流量回放agent、全链路压测agent等等 接下来我会用完全的代码实现一个可以流量透传、mock挡板、影子表数据落地等功能的压测ag ......
链路 jvm-sandbox sandbox 功能 agent

Seata解决分布式事务

### 简介 Seata 是阿里开源的一款开源的分布式事务解决方案,致力于提供高性能和简单易用的分布式事务服务。 ### 初始化数据库 创建 seata 库,初始化脚本如下 ```sql -- The script used when storeMode is 'db' -- the table t ......
分布式 事务 Seata

快速搭建 Seata Service 分布式事务

# 快速搭建 Seata Service 分布式事务 Seata 是一款开源的分布式事务解决方案,致力于在微服务架构下提供高性能和简单易用的分布式事务服务。 [Seata官网](https://seata.io/zh-cn/index.html) [下载地址](https://seata.io/zh ......
分布式 事务 Service Seata

RocketMQ 系列(二) 环境搭建

## RocketMQ 系列(二) 环境搭建 上一个章节对于 RocketMQ 作了一些概念上的介绍,如果你对于 RocketMQ 没有概念,不妨先看[RocketMQ系列(一) 基本介绍](https://www.cnblogs.com/CF1314/p/17662969.html)。 这个章节主 ......
RocketMQ 环境