一致性 分布式zookeeper原理
详解ZooKeeper在微服务注册中心的应用
本文分享自华为云社区《SpringCloud ZooKeeper 详解,以及与Go、Rust等非Java服务的集成》,作者: 张俭。 ZooKeeper,是一个开源的分布式协调服务,不仅支持分布式选举、任务分配,还可以用于微服务的注册中心和配置中心。本文,我们将深入探讨ZooKeeper用做微服务注 ......
protobuf原理(转)
原文:https://zhuanlan.zhihu.com/p/633656133 protobuf的优点有: 高效的编码和解码性能:protobuf使用二进制编码,相比于传统的文本格式如XML和JSON,可以更高效地进行数据的编码和解码,减少网络传输和存储的开销。 跨平台和语言支持:protobu ......
电路原理图_PCB_学习03_桌面电子时钟
学习视频:https://www.bilibili.com/video/BV12z4y1J7nQ/?spm_id_from=333.999.0.0&vd_source=516eee863e252e452d8dfe7cb01af532 这个工程跟着视频算是完成的走完了,从原理图到PCB,然后打板、贴片 ......
【我们尽量少说废话的讲完】C++红黑树原理
红黑树的出现 红黑树增删改查的时间复杂度都是O(logn)。 如果插入的数据随机,那么使用二叉搜索树即可保证树接近平衡。此时增删改查的效率都为O(logN)。 但如果插入的数据为有序的,此时二叉搜索树极其不平衡,退化为链表,时间复杂度降为O(N)。而红黑树就是为了应对这种极端情况。 红黑树的特点 红 ......
销售点分布调查
题目描述 终端部门按层级管理销售负责人,即:销售总裁直接对接公司分布在若干个国家的销售负责人,每个国家的销售负责人对接本国各大区负责人,大区负责人对接本区内各省负责人,各省负责人对接本省各市负责人等等…… 这里假设每个级别的负责人都仅向唯一的上级领导汇报。 假设共有N(N<100)位销售负责人,每人 ......
MySQL运维10-Mycat分库分表之一致性哈希分片
一、一致性哈希分片 一致性哈希分片的实现思路和我们之前介绍的水平分表中的取模分片是类似的。只不过取模分片,采用的是利用主键和分片数进行取模运算,然后根据取模后的结果,将数据写入到不同的分片数据中。但是这种分片方式有一个局限性就只能对id是整形的数据使用,如果id是个uuid类型这个的非整形的字段,就 ......
ES读写原理
一、写数据 segment file(磁盘文件) 存储倒排索引的文件,每个segment本质上就是一个倒排索引,每秒都会生成一个segment文件,当文件过多时es会自动进行segment merge(合并文件),合并时会同时将已经标注删除的文档物理删除 commit point(磁盘文件) 记录当 ......
分布式锁
一、为什么使用分布式锁 保障集群服务的一致性 二、Redis 分布式锁实现 1、Java客户端现有问题 在程序运行结束和释放锁的两步操作中会存在时间窗口,可能存在线程不安全问题 2、使用Lua脚本实现 -- 目标:获取缓存值,如值与预期相等,则释放分布式锁 -- Lua 内置了一个 redis 对象 ......
分布式架构的演变过程
1. 单应用架构 此时用户量很少,所有功能全部都在一个应用中,应用和数据库部署在一台机器上。 2. 应用服务器和数据库服务器分离 随着系统访问量的再度增加,webserver机器的压力在高峰期会上升到比较高,这个时候开始考虑增加一台服务器,将数据库分离出去。 3. 应用服务器集群 突然有一天,发现系 ......
OpenVX原理与技术杂谈
OpenVX原理与技术杂谈 OpenCV和OpenVX有什么联系和区别 联系和区别是:OpenCV是一个基于Apache2.0许可(开源)发行的跨平台计算机视觉和机器学习软件库。OpenVX 实现了跨平台加速处理,OpenVX在嵌入式和实时性系统中可以更好地发挥它的优势,在某些场合配合OpenCV的 ......
浅谈分布式事务
事务: 事务是指由一组操作组成的一个工作单元,这个工作单元具有原子性(atomicity)、一致性(consistency)、隔离性(isolation)和持久性(durability)。 原子性:执行单元中的操作要么全部执行成功,要么全部失败。如果有一部分成功一部分失败那么成功的操作要全部回滚到执 ......
数据库的历史-分布式数据库
数据库的历史-分布式数据库 分布式数据库 数据库承载的东西越来越多. 很容易进就超过了单机能够存放的极限. 并且就算没超过单机存放的极限, 插入/查询的性能也是无法保证的. 解决单机解决不了的问题, 其实就是scale-up 和 scale-out 之争 小型机,大型机就是典型的scale-up的方 ......
zookeeper及kafka在Linux下的安装与配置
一、Zookeeper的下载、安装、配置ZooKeeper服务器是用Java创建的,它需要在JVM上运行,所以需要使用JDK1.6及以上版本的支持。对于jdk的安装本文不做介绍。 1、zookeeper的下载:因为apache-zookeeper-3.5.5的在安装完启动时可能会报,"错误: 找不到 ......
Istio从入门到精通—— 流量治理的原理 —— VirutalService —— HTTPRedirect
流量治理的原理 —— VirutalService —— HTTPRedirect https://istio.io/latest/docs/reference/config/networking/virtual-service/#HTTPRedirect HTTPRedirect can be u ......
Istio从入门到精通—— 流量治理的原理 —— VirutalService —— L4MatchAttributes
流量治理的原理 —— VirutalService —— L4MatchAttributes https://istio.io/latest/docs/reference/config/networking/virtual-service/#L4MatchAttributes L4 connecti ......
zabbix分布式proxy
1.为什么要学zabbix-proxy https://www.zabbix.com/documentation/4.0/zh/manual/distributed_monitoring/proxies zabbix除了前面于超老师讲解的 zabbix-server / zabbix-agent模式 ......
Istio从入门到精通—— 流量治理的原理 —— VirutalService —— RouteDestination
流量治理的原理 —— VirutalService —— RouteDestination https://istio.io/latest/docs/reference/config/networking/virtual-service/#RouteDestination L4 routing ru ......
万字长文全面详解现代C++智能指针:原理、应用和陷阱
现代C++智能指针详解:原理、应用和陷阱 智能指针是C++11引入的新特性。本篇文章详细介绍了C++智能指针的原理、应用与陷阱,通过丰富的代码实例介绍了三种智能指针:std::unique_ptr、std::shared_ptr和std::weak_ptr的原理、使用方法和适用场景,还介绍了智能指针 ......
P2P网络下分布式文件共享场景的测试
P2P网络介绍 P2P是Peer-to-Peer的缩写,“Peer”在英语里有“对等者、伙伴、对端”的意义。因此,从字面意思来看,P2P可以理解为对等网络。国内一些媒体将P2P翻译成“点对点”或者“端对端”,学术界则统一称为对等网络(Peer-to-Peer networking)或对等计算(Pee ......
【LLMOps】vllm加速机制及推理不一致根因剖析
介绍 当前大模型主流推理方式包括:vllm、tgi、原生transformer 回顾 目前主流大模型都是由transformer演变过来,transformer核心是attention,参考《Attention is All You Need》 ,attention核心则是3个矩阵:Query、Ke ......
第三章 分布式配置中心
1. 简介 为什么需要分布式配置中心 分布式配置中心是为了解决在分布式系统中进行配置管理的需求而引入的。在传统的单体应用中,通常使用配置文件集中管理系统的配置信息。然而,在分布式系统中,由于系统规模变大、节点众多,并且可能部署在不同的服务器上,传统的配置文件方式会面临一些挑战。 首先,配置文件的修改 ......
Redis-缓存一致性问题
要想保证缓存和数据库「实时」一致 当数据发生更新时,我们不仅要操作数据库,还要一并操作缓存,数据库和缓存都更新,又存在先后问题,那对应的方案就有 2 个: 先更新缓存,后更新数据库 先更新数据库,后更新缓存 先不考虑并发问题,正常情况下,无论谁先谁后,都可以让两者保持一致,但现在我们需要重点考虑「异 ......
Java并发(十九)----Monitor原理及Synchronized原理
1、Java 对象头 以 32 位虚拟机为例 普通对象 | | | Object Header (64 bits) | | | | | Mark Word (32 bits) | klass Word (32 bits) | | | | 数组对象 | | | Object Header (96 bi ......
计算机组成原理 —— CPU
其实,发现自己处于 厦门马拉松的 30 公里状态,你知道还有更多的事情要干,但是就是动力很少。 鉴于知道厦门马拉松之后的体验很差,那么就坚持吧! Knowledge will be the only prescription of anxiety for uncertainty. ShoelessC ......
使用分布式锁实现定时任务的精确调度
使用分布式锁实现定时任务的精确调度 在分布式系统中,实现定时任务的精确调度是一项具有挑战性的任务。由于分布式环境中存在多个节点,传统的定时任务可能会出现并发执行、重复执行或者错过执行的问题。为了解决这些问题,我们可以使用分布式锁来实现定时任务的精确调度。 准备工作 在开始之前,我们需要准备以下环境和 ......
计算机组成原理 —— 指令系统
离考试还有7天,还有 2.5 门专业课。 这次复习还是没抓住主要的内容,还剩数据结构,操作系统,和一半计组,内容不难,知识点零碎。 今天早上 4点半起来,除了脑袋中思考出一个结论:Abuse 是不会有 like or love 这层含义的。因此,提示各位妹子,可能也有男士,远离斯德哥尔摩。 Need ......
Nginx 工作原理简介
在了解Nginx工作原理之前,我们先来了解下几个基本的概念 以及常见的I/O模型。 基本概念 同步:就是指调用方发起一个调用,在没有得到调用结果之前,该调用不返回。换句话说,也就是调用方发起一个调用后,一直等待被调用方返回结果,直到获取结果后才执行后续操作。 生活中的同步场景:等电梯: 按电梯方向键 ......
基本原理篇:什么是IO,为什么 I/O 会经常被阻塞?
我们应该都知道 socket(套接字),你可以认为我们的通信都要基于这个玩意,而常说的网络通信又分为 TCP 与 UDP 两种,下面我会以 TCP 通信为例来阐述下 socket 的通信流程。 不过在此之前,我先来说说什么叫 I/O。 1、I/O 到底是什么? I/O 其实就是 input 和 ou ......
MongoDB中的分布式集群架构
MongoDB 中的分布式集群架构 前言 Replica Set 副本集模式 副本集写和读的特性 Sharding 分片模式 分片的优势 MongoDB 分片的组件 分片键 chunk 是什么 分片的算法 哈希分片 范围分片 总结 参考 MongoDB 中的分布式集群架构 前言 前面我们了解了 Mo ......