链路 分布式opentelemetry rocketmq
微信支付-业务流程图+时序图梳理微信支付链路+封装对接微信API工具类
因业务需要，开发微信支付功能，涉及三种支付方式： JSAPI 支付：微信内网页支付，需要开通微信服务号 小程序支付：在小程序中支付，需要开通小程序 H5 支付：在手机浏览器（出微信内网爷）中网页支付 使用微信支付的前提必开通微信商户号，要使用到那种的支付方式要前需在商户平台开通（要审核）。 支付的钱 ......
聊聊分布式 SQL 数据库Doris(七)
LSM-Tree Doris的存储结构是类似LSM-Tree设计的，因此很多方面都是通用的，先阅读了解LSM相关的知识，再看Doris的底层存储与读取流程会清晰透彻很多，如下是几个关键的设计: SSTable: Sorted Strings Table; 一般由一组数据block和一组元数据bloc ......
【scipy 基础】--统计分布
scipy.stats子模块包含大量的概率分布、汇总和频率统计、相关函数和统计测试、掩蔽统计、核密度估计、准蒙特卡罗功能等等。 这个子模块可以帮助我们描述和分析数据，进行假设检验和拟合统计模型等。 1. 主要功能 具体来说，scipy.stats子模块包括以下主要功能： 类别 说明 连续统计分布 包 ......
对Laxcus分布式操作系统的认知、价值、痛点解决的回答
下面是一位网友的提问，回答贴出来供大家参考，欢迎在下方留言评论。 问： Laxcus分布式操作系统有哪些与众不同的地方？它的价值在哪里？解决了哪些市场痛点？我公司现在已经使用Linux操作系统部署了一堆服务器，你如何说服我弃用Linux使用Laxcus？ 回答： Laxcus分布式操作系统是操作系统 ......
全链路压测自动化实践
全链路压测自动化实践是指在软件开发过程中，通过自动化工具和技术来模拟真实的业务场景和流量负载，对应用程序的各个环节进行全面的压力测试。下面是一些关于全链路压测自动化实践的内容： 1、环境准备：在进行全链路压测自动化之前，需要准备相应的测试环境。包括搭建开发、测试和生产环境的仿真环境，以及配置和部署相 ......
聊聊分布式 SQL 数据库Doris(六)
负载均衡 此处的负载均衡指的是FE层的负载均衡. 当部署多个 FE 节点时，用户可以在多个 FE 之上部署负载均衡层来实现 Doris 的高可用。官方文档描述: 负载均衡 。 实现方式 实现方式有多种，如下列举。 开发者在应用层自己进行重试与负载均衡。 JDBC Connector 发现一个连接挂掉 ......
Hadoop-3.3.6分布式集群搭建步骤
1.下载JDK8 Linux 安装Openjdk 2.下载Hadoop3.3.6 Hadoop 安装及环境变量配置 3.创建hadoop数据存储的目录 mkdir -p /opt/hadoop/tmp /opt/hadoop/hdfs/data /opt/hadoop/hdfs/name 4.配置h ......
聊聊分布式 SQL 数据库Doris(五)
阅读 Doris SQL 原理解析，总结下Doris中SQL解析流程： 词法识别：解析原始SQL文本，拆分token 语法识别：将token转换成AST 单机逻辑查询计划：将AST经过一系列的优化（比如，谓词下推等）成查询计划，提高执行性能与效率。 分布式逻辑查询计划：根据分布式环境（数据分布信息、 ......
为什么全序集降位和和逆序对在同一长度的排列的分布相同？
引入 在 q-analog 中，我们知道： \[\sum_{p\in S}q^{\operatorname{maj}(p)}=\sum_{p\in S}q^{\tau(p)}=\binom{\sum a_i}{a_1,a_2,\dots,a_n}_q \]其中 \(S\) 是 \(a_i\) 个 \ ......
全链路追踪
三个追踪级别： 跨进程追踪（cross-process）：调用另一个微服务 数据库追踪 进程内部的追踪（in-process）：在一个函数内部的追踪 可观察性 (Observability) 可观察性更关注的是从系统自身出发，去展现系统的运行状况，更像是一种对系统的自我审视。 可观察性目前主要包含以 ......
Jaeger Client Go 链路追踪|入门详解
目录 从何说起 Jaeger 部署 Jaeger 从示例了解 Jaeger Client Go 了解 trace、span tracer 配置 Sampler 配置 Reporter 配置 分布式系统与span 怎么调、怎么传 HTTP，跨进程追踪 客户端 Web 服务端 Tag 、 Log 和 R ......
可视化全链路日志追踪
来源：https://tech.meituan.com/2022/07/21/visualized-log-tracing.html 1. 背景 1.1 业务系统日益复杂 随着互联网产品的快速发展，不断变化的商业环境和用户诉求带来了纷繁复杂的业务需求。业务系统需要支撑的业务场景越来越广、涵盖的业务逻 ......
微服务链路追踪之Jaeger
一 Jaeger概述 在微服务为我们提供了模块分，低耦合的高效开发和DevOPS中，具体业务中当一个请求中，请求了多个服务单元，如果请求出现了错误或异常，很难去定位是哪个服务出了问题，这时就需要链路追踪。可能你会想在业务系统中请求中埋点，或写日志，但是这种都需要在业务代码中来写，而且耦合在代码中，不 ......
科普：多领域分布式协同仿真
分布式协同仿真是一种在分布式计算环境中进行协同工作的仿真方法。使用该方法进行协同仿真时，仿真任务将被分发到多个计算节点上，并且这些节点可以同时工作以模拟完整的系统行为。分布式协同仿真已被广泛应用于工程、科学和军事领域，以便更好地模拟和理解大规模和复杂系统的行为。 分布式协同仿真有以下特点： 1.集成 ......
Kafka分布式消息队列
一、Kafka的的介绍 （一）、概述 1、Kafka是由LinkedIn开发的一个分布式的消息系统，底层使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。 2、Kafka是一个分布 ......
m基于LTE的通信链路matlab仿真,上行为SC-FDMA和下行为OFDMA
1.算法仿真效果 matlab2022a仿真结果如下： 2.算法涉及理论知识概要 LTE（Long-Term Evolution）是下一代无线通信技术，它采用了SC-FDMA（Single-Carrier Frequency-Division Multiple Access）作为上行链路传输方案，以 ......
3高级篇--商城业务--压测--缓存--分布式锁
高级篇--商城业务 部分 本笔记从谷粒商城的P141（性能测试）开始记录 一、性能与压力测试 压力测试考察当前软硬件环境下系统所能承受的最大负荷并帮助找出系统瓶颈所在。压测都是为了系统在线上的处理能力和稳定性维持在一个标准范围内，做到心中有数。 使用压力测试，我们有希望找到很多种用其他测试方 ......
分布式通讯方式比较（RPC、RMI、JMS、WebService、TIBCO）
在分布式服务框架中，最基本的问题就是网络服务间的远程通讯。根据计算机网络通讯的基本原理，网络服务间的通讯就是将数据流从一台PC传输到另一台PC，这一切都是基于网络传输协议与网络IO实现的。网络传输技术发展至今，我们常用的协议都是基于Socket而扩展出的传输协议，主要有HTTP、TCP、UDP，网络 ......
利用 docker 实现JMeter分布式压测
在工作中经常需要对一些关键接口做高QPS的压测，JMeter是由Java 语言开发，没创建一个线程（虚拟用户），JVM默认会为每个线程分配1M的堆栈内存空间。受限于单台试压机的配置很难实现太高的并发。所以，通过JMeter实现分布式，可以整合多台主机的硬件资源，实现同时对被测试接口进行压力测试。 ......
二项分布
数学之美 今天你不看天气预报，不想昨天前天有没有下雨，不用任何知识去猜出明天是否会下雨，这是一个事件；如果你连续猜未来两天的，那就是两个事件，而且这两个事件是独立的 如果说第一天你猜中会下雨的概率为$P_0$，第二天你猜中下雨的概率为$P_1$，则两天都猜中下雨的概率$P_0$*\(P_1\)，如果 ......
聊聊分布式 SQL 数据库Doris(四)
FE层的架构都能在网上找到说明. 但BE层的架构模式、一致性保障、与FE层之间的请求逻辑，数据传输逻辑等，我个人暂时没有找到相应的博客说明这些的。当然这些是我个人在学习与使用Doris过程中，对内部交互逻辑与实现感兴趣才有这些疑问. 还好现在有GPT这类大模型，有了疑问，只要问题描述得当，大多可以解 ......
docker+docker-compose部署rocketmq集群遇到的大坑
搭建时间为2023-11-22 环境：CentOS7、Docker24.0.6、Docker-Compose2.23.0、RocketMQ镜像为apache/rocketmq:5.1.2 部署说明：两台Linux服务器，先是尝试了传统2主2从，没有实现主备自动切换，一步一步部署下来没有特别大的问题。 ......
Welcome to YARP - 8.分布式跟踪
Welcome to YARP - 1.认识YARP并搭建反向代理服务 Welcome to YARP - 2.配置功能 2.1 - 配置文件（Configuration Files） 2.2 - 配置提供者（Configuration Providers） 2.3 - 配置过滤器（Configur ......
keycloak~分布式缓存的使用
keycloak目前提供了几种分布式缓存，我们自己的缓存，如果希望是分布式的，可以将缓存添加到以下几个缓存里即可 actionTokens clientSessions loginFailures offlineClientSessions offlineSessions sessions work ......
聊聊分布式 SQL 数据库Doris(三)
详细内容阅读: Apache Doris 分区分桶新功能 与 数据划分. 在此基础上做总结与延伸. 在 Doris 的存储引擎规则: 表的数据是以分区为单位存储的，不指定分区创建时，默认就一个分区. 用户数据首先被划分成若干个分区（Partition），划分的规则通常是按照用户指定的分区列进行范围划 ......
为Oracle链接服务器使用分布式事务
1 现象 在SQL Server中创建指向Oracle的链接服务器，SQL语句在事务中向链接服务器插入数据。返回链接服务器无法启动分布式事务的报错。 2 解决 在Windows平台下，SQL Server依赖分布式事务协调器（MSDTC）来使用分布式事务，Oracle Client使用Oracle ......
分布式锁笔记
分布式锁 基于上课和教材（分布式中间件技术实战-java版-钟林森）的笔记 1 概述 因为集群、分布式部署的服务实例一般是部署在不同机器上的，在分布式系统架构下，此种资源共享将不再是传统的线程共享，而是跨JVM进程之间资源的共享了。因此，为了解决这种问题，我们引入了“分布式锁”。 1.1 锁机制 在 ......
码-分布式存储的研究现状及研究理论
1. 分布式存储的研究过程 分布式存储系统中最基本的两个性能要求是数据的可靠性和可用性。可靠性是指不会因为节点的失效而失效，可用性是指用户能从存储系统中获得所需的数据。分布式系统主要是依靠冗余来实现的。 冗余策略主要分为复制策略和纠删策略两种，只是相比于复制策略，纠删策略在存储上面的开销更小。 20 ......
聊聊分布式 SQL 数据库Doris(二)
Doris中，Leader节点与非Leader节点和Observer节点之间的元数据高可用和一致性，是通过bdbje(全称:Oracle Berkeley DB Java Edition)的一致性和高可用实现的。 元数据与同步流程 元数据主要存储四类数据： 用户数据信息. 包括数据库, 表的sche ......
分布式事务 Seata 集群搭建
Seata 是蚂蚁金服和阿里巴巴共同开源的一款分布式事务项目，致力于在微服务架构下提供高性能和简单易用的分布式事务解决方案。自诞生以来就备受国内开发人员推崇，在实际工作中使用者甚多。Seata 提供了四种不同的分布式事务解决方案： XA模式：强一致性分阶段事务模式，牺牲了一定的可用性，无业务侵入 T ......