分布式 体系
聊聊分布式 SQL 数据库Doris(三)
详细内容阅读: Apache Doris 分区分桶新功能 与 数据划分. 在此基础上做总结与延伸. 在 Doris 的存储引擎规则: 表的数据是以分区为单位存储的，不指定分区创建时，默认就一个分区. 用户数据首先被划分成若干个分区（Partition），划分的规则通常是按照用户指定的分区列进行范围划 ......
为Oracle链接服务器使用分布式事务
1 现象 在SQL Server中创建指向Oracle的链接服务器，SQL语句在事务中向链接服务器插入数据。返回链接服务器无法启动分布式事务的报错。 2 解决 在Windows平台下，SQL Server依赖分布式事务协调器（MSDTC）来使用分布式事务，Oracle Client使用Oracle ......
分布式锁笔记
分布式锁 基于上课和教材（分布式中间件技术实战-java版-钟林森）的笔记 1 概述 因为集群、分布式部署的服务实例一般是部署在不同机器上的，在分布式系统架构下，此种资源共享将不再是传统的线程共享，而是跨JVM进程之间资源的共享了。因此，为了解决这种问题，我们引入了“分布式锁”。 1.1 锁机制 在 ......
码-分布式存储的研究现状及研究理论
1. 分布式存储的研究过程 分布式存储系统中最基本的两个性能要求是数据的可靠性和可用性。可靠性是指不会因为节点的失效而失效，可用性是指用户能从存储系统中获得所需的数据。分布式系统主要是依靠冗余来实现的。 冗余策略主要分为复制策略和纠删策略两种，只是相比于复制策略，纠删策略在存储上面的开销更小。 20 ......
聊聊分布式 SQL 数据库Doris(二)
Doris中，Leader节点与非Leader节点和Observer节点之间的元数据高可用和一致性，是通过bdbje(全称:Oracle Berkeley DB Java Edition)的一致性和高可用实现的。 元数据与同步流程 元数据主要存储四类数据： 用户数据信息. 包括数据库, 表的sche ......
evm体系中data和value的区别
在区块链中，data和value是两个不同的字段，具有不同的含义和用途。 1.data字段： data字段用于存储任意的数据，可以是交易数据、智能合约代码、文本注释等。 在以太坊和其他智能合约平台中，data字段通常用于传递智能合约的调用或消息，其中包含了要执行的函数、参数等信息。 data字段的内 ......
分布式事务 Seata 集群搭建
Seata 是蚂蚁金服和阿里巴巴共同开源的一款分布式事务项目，致力于在微服务架构下提供高性能和简单易用的分布式事务解决方案。自诞生以来就备受国内开发人员推崇，在实际工作中使用者甚多。Seata 提供了四种不同的分布式事务解决方案： XA模式：强一致性分阶段事务模式，牺牲了一定的可用性，无业务侵入 T ......
聊聊分布式 SQL 数据库Doris(一)
MPP MPP:Massively Parallel Processing, 即大规模并行处理. 一般用来指多个SQL数据库节点搭建的数据仓库系统. 执行查询的时候, 查询可以分散到多个SQL数据库节点上执行, 然后汇总返回给用户. Doris Doris 作为一款开源的 MPP 架构 OLAP 高 ......
分布式追踪的核心概念是 Trace 和 Span
使用 OpenTelemetry 构建 .NET 应用可观测性（1）：什么是可观测性 目录 什么是系统的可观测性（Observability） 为什么软件系统需要可观测性 可观测性的三大支柱 日志（Logging） 指标（Metrics） 分布式追踪（Distributed Tracing） Tra ......
分布式锁
上一篇文章简单的介绍了单机的情况下如何进行加锁，防止高并发带来的问题。然而现实中，一般会高并发的应用，很少会单机部署。当用户量达到一定的程度，分布式、集群部署是必然的选择。在分布式部署的情况下，之前的单机锁还会有效吗？代码还是之前的代码： private static object lck = ne ......
每日一题003 | 证明：连续分布函数序列的点态收敛可以推出相应的分位数随机变量序列的依概率收敛。
?概率极限理论经典习题2：连续分布函数序列的点态收敛可以推出相应的分位数随机变量序列的依概率收敛。来自茆诗松《概率论与数理统计》第四章的习题。 ......
python 数据可视化：直方图、核密度估计图、箱线图、累积分布函数图
python数据可视化，以2023年数学建模c题数据为例，选择其中一小部分数据，绘制直方图、核密度估计图、箱线图、累积分布函数图 ......
Unity实现Voronoi图（性能友好，分布较为均匀
这是一种性能友好的并且生成较为均匀的Voronoi图的实现方式 在一张网格中生成随机点，然后在取每个点周围点就不需要去做全局遍历，在自己周围的格子遍历即可 using UnityEngine; using UnityEngine.UI; public class VoronoiDiagram : M ......
【第4章】网络安全体系与网络安全模型（信息安全工程师）
4.1 网络安全体系概述 4.1.1 网络安全体系概念 一般而言，网络安全体系是网络安全保障系统的最高层概念抽象，是由各种网络安全单元按照一定的规则组成的，共同实现网络安全的目标。网络安全体系包括法律法规政策文件、安全策略、组织管理、技术措施、标准规范、安全建设与运营、人员队伍、教育培训、产业生态、 ......
冯·诺依曼体系结构了解
冯·诺依曼计算机体系开端 自1946年第一台计算机ENIAC诞生，人类进入计算机时代，早期计算机是由门电路通过组装装出一个固定的电路板，来执行一个特定的程序，一旦程序修改，就要重新组装电路板，所以早期的计算机程序是硬件化的。同时，早期的程序和数据是两个截然不同的概念，数据放在存储器中，而程序作为控制 ......
记录代码审查发现的一处分布式锁错误用法
今天测试反应在商品入库存的时候会出现一个偶现的问题，多次入库后，突然发现商品的库存量是乱的，但是专门针对这个功能去测试的时候，却发现功能又是正常的，无法稳定复现问题，测试希望开发审查下代码看下是哪里的原因。 于是开发我们立马定位到商品入库存的那段代码，大致代码如下： 1 @Transactional ......
Redis之分布式锁
前言 日常开发中，秒杀下单、抢红包等等业务场景，都需要用到分布式锁。而Redis非常适合作为分布式锁使用。 什么是分布式锁 方案一：SETNX + EXPIRE 方案二：SETNX + value值是（系统时间+过期时间） 方案三：使用Lua脚本(包含SETNX + EXPIRE两条指令) 方案四： ......
分布式核心
1. CAP理论 cap理论是分布式系统的理论基石 Consistency (一致性)： “all nodes see the same data at the same time”,即更新操作成功并返回客户端后，所有节点在同一时间的数据完全一致，这就是分布式的一致性。一致性的问题在并发系统中不可避 ......
Hadoop学习(一) 搭建伪分布式集群
文章结构 1.准备工作 1.1 配置IP 1.2 关闭防火墙 1.3 修改主机名并与IP绑定 1.4 创建新用户 1.5 配置免密匙 2.安装并配置Hadoop伪分布式集群 2.1 安装Java 2.2 安装配置Hadoop伪分布式集群 1.准备工作 1.1 配置IP 首先进入该路径下 cd /et ......
408---CN三轮复习---计算机网络体系结构
计算机网络概论 计算机网络的功能 1、数据通信 计算机网络最基本的功能! 2、资源共享 3、分布式处理 4、提高可靠性 5、负载均衡 计算机网络的组成 从组成部分上来看，一个计算机网络由硬件、软件、协议组成 硬件组要由主机、通信链路、交换设备组成 软件主要包括各种实现资源共享的软件和方便用户使用工具 ......
Apache Kylin4 分布式的分析型数据仓库
https://kylin.apache.org/cn/docs/index.html Apache Kylin4 概述 欢迎来到 Apache Kylin™ Analytical Data Warehouse for Big Data Apache Kylin™是一个开源的、分布式的分析型数据仓库 ......
独立同分布
"独立同分布" 是统计学和机器学习中一个重要的概念。让我们更详细地探讨这个概念的含义： 独立性（Independence）： 独立性的意义： 当我们说随机变量是独立的时，意味着一个随机变量的取值不会提供关于另一个随机变量取值的任何信息。换句话说，知道一个随机变量的取值并不会改变对另一个随机变量的预测 ......
如何用AB测试完善产品激励体系
用户激励体系，也称用户激励机制，是为了让用户持续使用产品，而设计的一套对应规则。在用户激励体系建立过程中，产品可以通过一系列方式，如金币赚取、积分奖励等，让用户完成一系列动作，提升活动参与率、扩散传播率，最终提升用户的产品粘性。在这个过程中，产品经常用会用到AB测试，来进行激励策略的完善和优化。 ......
SignalR 分布式部署
分布式部署意味着有多台SignalR服务器，一台服务器有多个客户端连接。 SignalR 要求对于某一个特定连接的所有HTTP 请求都需要被一个相同服务进程处理，当SignalR 运行在一个服务场时（多个服务器），则必须使用“粘性会话”（服务器开启）或者”跳过协商“（用websocket） 问题：某 ......
IT服务管理领域的最佳实践知识体系ITIL4
ITIL 4相对于前一个版本有了大幅的变化，尤其是引入的SVS、SVC的理论对大家理解和掌握这套管理方法论带来了不少的挑战。在阅读itil 4 foundation资料时，发现市面上的一些中文资料良莠不齐，错误很多，所以边阅读官方英文材料，边翻译和整理出一份中文材料，有一些概念和理念是需要反复学习思 ......
一、如何构建一个可靠的分布式系统？
构师如何才能让一系列来自不同开发者、不同厂商、不同版本、不同语言、质量也良莠不齐的软件模块，在不同的物理硬件和拓扑结构随时变动的网络环境中，依然能保证可靠的运行质量。 我一直认为，技术人员的成长是有“捷径”的，做技术不仅要去看、去读、去想、去用，更要去写、去说。 把自己“认为掌握了的”知识给叙述出来 ......
分布式应用服务的拆分
需求落地分布式应用服务 将需求转化为分布式应用服务的过程可以按照以下步骤进行： 理解需求：首先，你需要仔细阅读和理解业务需求。与相关的利益相关者（如业务分析师、产品经理等）进行沟通，确保你对需求的理解是准确的。 设计架构：根据需求，设计一个适合的分布式应用架构。这包括确定应用的组件和模块，以及它们之 ......
Redisson分布式锁的实现
分布式锁 在多线程环境下，如果多个线程同时访问共享资源（数据库），往往会发生数据竞争。要想在某一线程访问资源时，令其他线程阻塞等待，就需要使用分布式锁，确保共享资源同时只有一个线程访问。 实现思路： 向Redis中插入同一key： A插入key，如果成功则获取到锁，B再来插入式发现key已经存在了， ......
云原生雪花改进型分布式id服务
1，概述 一个基于雪花改进型分布式id基础服务 demo地址：http://uid.activeclub.site/web/v1/uuid/get 1.1，入参样例： 请求路径：GET http://{url}:{port}/web/uuid/get 入参说明： 类目 字段名 说明 url 对外暴露 ......