架构 单体 分布式

分布式日志追踪ID实战 | 京东物流技术团队

本文通过介绍分布式应用下各个场景的全局日志ID透传思路,以及介绍分布式日志追踪ID简单实现原理和实战效果,从而达到通过提高日志查询排查问题的效率。 背景 开发排查系统问题用得最多的手段就是查看系统日志,相信不少人都值过班当过小秘吧:给下接口和出入参吧,麻烦看看日志里的有没有异常信息啊等等,但是在并发 ......
物流技术 分布式 实战 团队 物流

No Magic—复杂机电产品系统架构开发套件

CATIA Magic,原名MagicDraw,俗称No Magic,被达索收购后融入3DExperience产品协同研发管理平台中,形成更具协同体验的系统工程解决方案。该软件提供对SysML/UML/UAF语言的完整支持,提供独有的MagicGrid方法论,涵盖:业务和任务分析、利益攸关者需要及需... ......
机电产品 套件 架构 系统 Magic

中间件 ZK分布式专题与Dubbo微服务入门 2-3 zookeeper文件夹主要目录介绍

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12690 1 重点关注 1.1 最常用的目录 bin 执行启动关闭zookeeper命令 conifg 进行配置文件配置 recipes 案例代码 docs 文档参考 2 课程内容 2.1 zo ......

中间件 ZK分布式专题与Dubbo微服务入门 2-2 zookeeper下载、安装

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12686 1 重点关注 1.1 zookeeper的安装 下载zookeeper 在以下链接下载3.4.11 http://archive.apache.org/dist/zookeeper/ ......
分布式 中间件 zookeeper 专题 Dubbo

中间件 ZK分布式专题与Dubbo微服务入门 2-1 JDK的安装(linux)

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12684 1 重点关注 1.1 jdk的安装 下载jdk 用fileZilla上传jdk到linux环境 home路径下 在home路径下解压压缩包 tar -zxvf jdk-8u202-1i ......
分布式 中间件 专题 Dubbo linux

分布式数据库测试

分布式数据库的测试涉及多个方面,因为它们需要在多个节点上运行、处理大量数据并保证数据一致性和可靠性。以下是测试分布式数据库时可以考虑的不同方向和方法: 功能测试: 基本功能测试:验证数据库的基本功能,如数据插入、查询、更新和删除操作是否正常工作。 事务管理测试:确保分布式事务在不同节点上的协调与管理 ......
分布式 数据库 数据

分布式存储ceph——(2)部署ceph

前言: 很多朋友想学ceph,但是开始ceph部署就让初学者举步为艰,ceph部署时由于国外源的问题(具体大家应该懂得),下载和安装软件便会卡住,停止不前。即使配置搭建了国内源后,执行ceph-deploy install 时又跑去了国外的源下载,很是无语呀!!!这样导致我们停下了学习ceph的脚步 ......
分布式 ceph

分布式存储ceph——(1)ceph 讲解

一、Ceph简介: Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。ceph 的统一体现在可以提供文件系统、块存储和对象存储,分布式体现在可以动态扩展。在国内一些公司的云环境中,通常会采用 ceph 作为openstack 的唯一后端存储来提高数据转发效率。 Ceph项目 ......
分布式 ceph

似乎有点理解指令集和架构的区别了

架构就是造房子的图纸,而指令集就是造房子的材料【玩过俄罗斯方块可能就比较好理解什么是指令集了】 比如指令集里只有:L型的砖,I型的砖,田字形的砖等; 而架构就是基于上面的砖(指令集)设计好的房子的造法,即最底层是用什么砖,往上是用什么砖等等; 不过还是有疑问,如果真的是这么理解的话,那图纸一模一样, ......
指令 架构

云计算技术与应用 之 实验 10--分布式云计算部署

实验 10--分布式云计算部署 一、实验目的 掌握分布式云计算部署。 二、实验原理和内容 1.了解云解决方案; 2.了解 iaas、paas; 3.提交实验报告。 三、实验步骤 1.进入 win10 操作系统。 2.完成,步骤和结果如下: 3.完成,步骤和结果如下: 4.结果1,步骤和结果如下: 5 ......
分布式 技术 10

云计算技术与应用 之 实验六-分布式文件系统算法—MapReduce

实验六-分布式文件系统算法—MapReduce 一、实验目的 掌握 MapReduce 算法的设计与实现。 二、实验原理和内容 1.原理: MapReduce 的核心思想是“分而治之”,也就是把一个大的数据集拆分成多 个小数据集在多台机器上并行处理。 一个大的 MapReduce 作业,首先会被拆分 ......
分布式 算法 MapReduce 文件 系统

云计算技术与应用 之 实验 5-分布式文件系统并行编程— Producer-Consumer 模式

实验 5-分布式文件系统并行编程—Producer-Consumer 模式 一、实验目的 掌握并行编程 Producer-Consumer 模式的设计与实现。 二、实验原理和内容 原理: 系统有两类进程协作:Master 进程和 Worker 进程。Master 负责接收和分 配任务,Worker ......

云计算技术与应用 之 实验 4-分布式文件系统并行编程— Master-Worker 模式

实验 4-分布式文件系统并行编程—Master-Worker 模式 一、实验目的 掌握并行编程 Master-Worker 模式的设计与实现。 二、实验原理和内容 原理: 系统有两类进程协作:Master 进程和 Worker 进程。Master 负责接收和分 配任务,Worker 负责处理子任务。 ......
分布式 Master-Worker 模式 文件 Master

DDD落地实践-架构师眼中的餐厅 | 京东云技术团队

本文以餐厅场景为叙事主线,以领域驱动为核心思想,结合架构设计与功能设计方法论。是从领域分析到落地的全过程案例,内容偏重于落地,因此不乏一些探讨,欢迎指正。 文章较长、全程干货、耐心读完、必有收获。 本文不针对餐厅的实现细节,重在探讨设计思想和方法。 1、领域设计 让我们抛开技术人员的本能技术视角、站 ......
架构 餐厅 团队 技术 DDD

Ef Core花里胡哨系列(7) 使用Ef Core也能维护表架构?

Ef Core花里胡哨系列(7) 使用Ef Core也能维护表架构? 我们这里指的并不是查询,而是利用Ef的迁移原理,生成可用的其它表架构操作的Sql。 例如你想在Ef Core里建表,并且可能程序里有多个provider,那么写Sql将是一件痛苦的事情,我们就是利用Ef Core迁移时的操作,来为 ......
Core 架构 Ef

Docker+SEATA+Nacos+SpringBoot实现分布式事务

Docker+SEATA+Nacos+SpringBoot实现分布式事务 1. 服务端 示例SEATA版本:1.6.1 1.1. 配置的创建 docker pull seataio/seata-server:1.6.1 # 这里的运行只是为了获取里面的配置,将配置拿出来到宿主机后进行配置再删除容器再 ......
分布式 SpringBoot 事务 Docker SEATA

字节面试:DDD架构,如何落地?

文章很长,且持续更新,建议收藏起来,慢慢读!疯狂创客圈总目录 博客园版 为您奉上珍贵的学习资源 : 免费赠送 :《尼恩Java面试宝典》 持续更新+ 史上最全 + 面试必备 2000页+ 面试必备 + 大厂必备 +涨薪必备 免费赠送 :《尼恩技术圣经+高并发系列PDF》 ,帮你 实现技术自由,完成职 ......
字节 架构 DDD

API架构大全(SOAP、Restful、GraphQL、Grpc、Websocket)

一、SOAP SOAP是一种基于XML的简单对象访问协议,适合企业应用 二、Restful Restful基于HTTP应用,提供简介和可靠的网络通信 三、GraphQL GraphQL是一种用于构建和查询API的语言,用来请求特定数据应用,减少多次请求的网络开销,响应速度快 四、Grpc Grpc是 ......
架构 Websocket Restful GraphQL 大全

Config:Spring Cloud分布式配置组件

Config:Spring Cloud分布式配置组件 问题总结 Spring Cloud Config? Spring Cloud Config工作原理? Spring Cloud Config 的特点? Config+Bus 实现配置的动态刷新? 问题答案 Spring Cloud Config ......
分布式 组件 Config Spring Cloud

[go 面试] 为并发加锁:保障数据一致性(分布式锁)

原创 TimLiu 爱发白日梦的后端 2023-12-01 08:01 发表于广东 爱发白日梦的后端 专注 Go 语言领域的发展,学习成为更牛逼的架构师,日常分享 Go 语言、架构、软件工具的使用。 159篇原创内容 公众号 在单机程序中,当多个线程或协程同时修改全局变量时,为了保障数据一致性,我们 ......
一致性 分布式 数据 go

履机乘变,轻舟便楫:源启分布式PaaS深度赋能企业级技术平台建设

导语 源启分布式PaaS平台围绕应用视角为用户提供应用运行的全生命周期管控能力,提供注册中心、服务路由、网关、服务治理等中间件技术支持,实现应用之间的联通,解决客户多厂商产品不兼容、产品组合不可选择、孤岛效应等问题,满足企业级应用集成需要,实现降本增效。 在《洞若观火,明察秋毫:源启一体化监控平台构 ......
轻舟 分布式 深度 平台 技术

优惠券系统架构分层测试

数据层测试:主要测试优惠券数据存储的正确性和可靠性,包括优惠券的生成、存储、读取等操作是否符合要求。 网络层测试:主要测试网络通信的稳定性和安全性,包括网络连接、数据传输、加密传输等是否正常。 业务逻辑层测试:主要测试优惠券业务逻辑的正确性和合理性,包括优惠券的领取、使用、过期等逻辑是否符合业务需求 ......
优惠券 架构 系统

中间件 ZK分布式专题与Dubbo微服务入门 1-3 分布式系统的瓶颈以及zk的相关特性

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12661 1 重点关注 1.1 zk的相关特性 2 课程内容 2.1 zk的相关特性 一致性:数据一致性,数据按照顺序分批入库原子性:事务要么成功要么失败,不会局部化 单一视图:客户端连接集群中 ......
分布式 中间件 瓶颈 特性 专题

如何使用Redisson实现分布式锁?

在分布式系统中,当多个线程(或进程)同时操作同一个资源时,为了保证数据一致性问题,所以就需要一种机制来确保在同一时间只有一个线程(或进程)能够对资源进行修改,这就是分布式锁的作用。 分布式锁是一种在分布式环境下的锁实现,它允许在多个进程或服务器之间协调对共享资源的访问或操作。分布式锁的关键特性是它能 ......
分布式 Redisson

大数据开发的总体架构

很多小伙伴在学习了多年大数据后,最后不得不感慨:“大数据的知识太繁杂了,我已经被淹没在大数据的海洋里了!”确实是的,在大数据学习的过程中,随着学习的深入,越来越多的新名词和新框架让学习者有种欲哭无泪的感觉,那么,这篇博文就对大数据开发的一个总体架构做一个介绍吧,让大家学习过程中,不至于迷失方向。先上 ......
架构 总体 数据

什么是正态分布?

正态分布(Normal distribution),又名高斯分布(Gaussian distribution),简称正态曲线(Normal curve),是统计学中一种常见的连续概率分布,在许多自然现象中都十分常见。正态分布曲线呈钟形,两头低而中间高,左右对称。正态分布曲线的均值、中位数和众数都重合 ......
正态分布

分布式ID生成

王富贵 (lmlx66.top) 为什么要用分布式 ID 随着业务数据量的增长,存储在数据库中的数据越来越多,当索引占用的空间超出可用内存大小后,就会通过磁盘索引来查找数据,这样就会极大的降低数据查询速度。如何解决这样的问题呢?一般我们首先通过分库分表来解决,分库分表后就无法使用数据库自增 ID 来 ......
分布式

低代码如何实现插件化架构?

大家好,本文介绍了实现插件化的低代码架构的思路,以及在Meta3D(开源Web3D低代码平台)中具体实现的方案 需求 有同学想做个编辑器,希望可以随意替换引擎、编辑器UI,能以插件的形式进行扩展,问该如何实现? 下面,我们首先给出抽象的解决方案: 抽象的解决方案 如上图所示,编辑器由多个积木组成,其 ......
架构 插件 代码

Irwin-Hall 分布

Irwin-Hall 分布 对于 \(n\) 个均匀分布于 \([0,1]\) 的连续随机变量 \(X_1,X_2,\dots,X_n\),其和的随机变量 \(X\) 满足: \[P(X\le x)=\sum _{k=0}^{\lfloor x\rfloor}(-1)^k\binom nk\frac ......
Irwin-Hall Irwin Hall

浅谈sql执行流程、innodb架构设计、buffer pool缓存池

一.从服务端到数据库sql执行流程: 1.SQL接口:负责处理接收到sql的语句 2.查询解析器:负责将sql变成数据库可以看懂的语言 3.查询优化器:选择最优的查询路径(针对你编写的复杂sql语句生成查询路径树,然后从中选择一条最优的查询路径) 4.执行器:根据执行计划调用存储引擎接口(执行器会根 ......
缓存 架构 流程 innodb buffer
共5000篇  :4/167页 首页上一页4下一页尾页