容错性 可用性 一致性 理论
Nacos一致性协议
一、概要 Nacos是阿里开放的一款中间件，它主要提供三种功能：持久化节点注册，非持久化节点注册和配置管理。 二、一致性协议 - AP/CP Nacos不是纯粹的AP服务，也不是纯粹的CP服务，而是两者同时支持。 这要从服务注册说起，Provider启动时将自身的信息注册至注册中心，如果注册中心是Z ......
PyTorch大更新，编译代码速度暴增35倍！视觉模型一键部署，头显Quest 3可用
前言 最近，在Pytorch发布会上，发布移动端Pytorch解决方案ExecuTorch，实现在移动端设备上大范围地部署AI工具，并推出最新版本Pytorch2.1，推理速度大幅提升。 本文转载自新智元 仅用于学术分享，若侵权请联系删除 欢迎关注公众号CV技术指南，专注于计算机视觉的技术总结、最新 ......
GIL全局解释器锁、互斥锁、线程队列、进程池和线程池的使用、多线程爬取网页、协程理论、协程实现高并发
进程和线程的比较 进程的开销比线程的开销大很多 进程之间的数据是隔离的，但是，线程之间的数据不隔离 多个进程之间的线程数据不共享 >还是让进程通信(IPC) >进程下的线程也通信了 >队列 GIL全局解释器锁(重要理论) Python在设计之初就考虑到要在主循环中，同时只有一个线程在执行。虽然 Py ......
celery包结构、celery延迟任务和定时任务、django中使用celery、接口缓存、双写一致性、异步秒杀逻辑、课程列表页前端、课程相关表、课程表数据录入、课程列表页接口
celery包结构 project ├── celery_task # celery包 这个包可以放在任意位置 │ ├── __init__.py # 包文件 │ ├── celery.py # celery连接和配置相关文件，且名字必须叫celery.py │ └── tasks.py # 所有任 ......
如何保持数据一致性
如何保持数据一致性 数据库和缓存（比如：redis）双写数据一致性问题，是一个跟开发语言无关的公共问题。尤其在高并发的场景下，这个问题变得更加严重。 以下是我无意间了解很好的文章，分享给大家。 1. 常见方案 通常情况下，我们使用缓存的主要目的是为了提升查询的性能。大多数情况下，我们是这样使用缓存的 ......
随机采样一致性（RANSAC）
Random Sample Consensus: A Paradigm for Model Fitting with Apphcatlons to Image Analysis and Automated Cartography 在实现人脸姿态估计时，通过opencv自带的DLT（solvepnp） ......
Spring 在多线程环境下如何确保事务一致性?
问题在现 我先把问题抛出来，大家就明白本文目的在于解决什么样的业务痛点了: public void removeAuthorityModuleSeq(Integer authorityModuleId, IAuthorityService iAuthorityService, IRoleAuthor ......
ZEGO音视频服务的高可用架构设计与运营
前言： ZEGO 即构科技作为一家实时音视频的提供商，系统稳定性直接影响用户的主观体验，如何保障服务高可用且用户体验最优是行业面临的挑战，本文结合实际业务场景进行思考，介绍 ZEGO 即构在高可用架构和运营上所进行的探索和实践，希望对大家能有所帮助或启发。 一、背景与挑战 全球网络复杂多变，各个地区 ......
从理论到实践，实时湖仓功能架构设计与落地实战
在上篇文章中，我们向大家解释了为什么实时湖仓是当前企业数字化转型过程中的解决之道，介绍了实时计算和数据湖结合的应用场景。（“数据驱动”时代，企业为什么需要实时湖仓？） 在这篇文章中，我们将详细介绍在数栈实时开发平台内，实时湖仓的功能架构设计和具体实操案例。 功能架构介绍 实时湖仓并不是一个独立的产品 ......
MESI缓存一致性协议以及Volatile
MESI（Modified, Exclusive, Shared, Invalid）是一种缓存一致性协议，用于解决多处理器系统中，多个处理器对同一块内存的并发读写可能导致的数据不一致性问题。MESI协议维护了每个缓存行的四种状态： Modified（M）： 表示缓存行已被修改，并且是唯一的拷贝。当其 ......
轻松掌握组件启动之MongoDB（番外篇）：高可用复制集架构环境搭建-mtools
mtools是一个基于Python实现的MongoDB工具集，旨在提供一系列功能，包括MongoDB日志分析、报表生成以及简易的数据库安装等。它由MongoDB原生的工程师单独发起并进行开源维护。mtools包含了一些常用的组件，如mlaunch、mlogfilter、mplotqueries和ml... ......
Etcd集群换机导致etcd集群不可用
背景： 因为工作中有nj地域需要下线，需要我所有地域的机器包括vip全部换成其他临近地域 问题： 集群中的etcd正常替换，当时保持的是平移，由于历史原因，之前的同学上线都是手动变更，没有发起上线，导致使用的之前的版本，导致etcd只能读，不能写入，而且etcd监控查询是不健康的状态 排查： 检查了 ......
算法训练day34 贪心算法理论，455.376.53
算法训练day34 贪心算法理论，455.376.53 理论基础 概念 选择每一阶段的最优解，从而达到全局最优 一般步骤（鸡肋 问题分解为子问题 找出合适的贪心策略 求解每一个子问题的最优解 将局部最优叠加成全局最优解 455.分发饼干 题目 https://leetcode.cn/problems ......
java链表详解 理论+代码+图示
1、定义 链表是一种物理存储结构上非连续存储结构，数据元素的逻辑顺序是通过链表中的引用链接次序实现的。（即链表是一个个节点组成的，这些节点物理上不连续，但逻辑上连续） 一个节点就是一个Node对象。 2、链表结构 单向、双向； 带头、不带头； 循环、非循环； 以上情况组合起来就有8种链表结构 （双向 ......
Qt/C++开源作品45-CPU内存显示控件/和任务管理器一致
一、前言 在很多软件上，会在某个部位显示一个部件，专门显示当前的CPU使用率以及内存占用，方便用户判断当前程序或者当前环境中是否还有剩余的CPU和内存留给程序使用，在不用打开任务管理器或者资源查看器的时候直接得知当前系统的运行情况。尤其是视频监控系统，如果64路全开，肯定很占用CPU和内存情况，这样 ......
pytorch(10.2.2) 注意力汇聚理论 代码测试
https://zh.d2l.ai/chapter_attention-mechanisms/nadaraya-waston.html from d2l import torch as d2l import torch from torch import nn #@save def show_hea ......
轻松掌握组件启动之MongoDB（下）：高可用复制集架构环境搭建
本章介绍了MongoDB复制集的配置和使用方法，如何初始化和添加节点到复制集，验证主节点的写入和从节点的读取功能。了解如何查询复制集的状态，包括成员的健康状况、同步信息和角色等。最后，我们介绍了如何配置复制集的安全认证，包括创建用户和生成keyFile文件，并演示了使用认证信息连接复制集的方式。通过... ......
pytorch(10.2) 注意力汇聚理论
https://zh.d2l.ai/chapter_attention-mechanisms/nadaraya-waston.html https://zhuanlan.zhihu.com/p/265108616 Attention注意力机制与self-attention自注意力机制 Attenti ......
分布式一致性算法Raft
raft算法之所以容易理解，其一是他将一致性问题划分成几个子问题，这几个子问题都是独立、可理解和解释的。从传统的思维来讲，对于一个复杂的系统或者工程，都是大化小，分解实现，然后去尝试融合解决整体逻辑。 一、Raft详解 Raft算法是分布式系统开发首选的共识算法。比如现在流行Etcd、Consul、 ......
分布式一致性协议 之 Paxos协议
1、什么是Paxos Paxos协议其实说的就是Paxos算法, Paxos算法是基于消息传递且具有高度容错特性的一致性算法，是目前公认的解决分布式一致性问题最有效的算法之一。 Paxos由 莱斯利·兰伯特(Leslie Lamport)于1998年在《The Part-Time Parliamen ......
矩阵理论笔记1
第一讲 线性代数回顾 定理和性质 设\(A=(\alpha_{1},\alpha_{2},\alpha_{3},...,\alpha_{m})\)，其中\(\alpha_{i}\)是一个n维列向量，那么有下面命题等价： 1.1. \(b\in L(\alpha_{1},\alpha_{2},\alp ......
轻松掌握组件启动之MongoDB（上）：高可用复制集架构环境搭建
本文介绍了MongoDB复制集的架构和特点，强调了使用复制集提供数据的高可用性和冗余性的重要性。复制集由Primary节点和Secondary节点组成，确保数据一致性。复制集还具有数据分发、读写分离和异地容灾等附加功能。使用MongoDB复制集可以提供稳定可靠的数据存储和高可用性。 ......
高可用架构之异地多活
当谈到架构的高可用时，无论是高可用计算架构，还是高可用存储架构，其本质的设计目的都是为了解决部分服务器故障的场景下，如何保证系统能够继续提供服务。但在一些极端场景下，有可能所有服务器都出现故障。例如，典型的有机房断电、机房火灾、地震、水灾……这些极端情况会导致某个系统所有服务器都故障，或者业务整体瘫 ......
测试左移右移-理论篇
目录前言一、浅解左移1.什么是测试左移？1.1对产品1.2对开发1.3对测试1.4对运维二、浅解右移1.1对产品1.2对开发1.3对测试1.4对运维三、总结 前言 测试左移右移，很多人说能让测试更拥有主动权，展示出测试岗位也是有很大的价值，说白了就是整体效率与质量保障。其实不然，是测试业界的一种进步 ......
一致性详解
何谓一致性 分布式系统中，一致性（Consiitency）是指多副本(Replications)中的数据一致性。 一致性可分为数据一致性和事务一致性 事务的一致性，和原子性类似，都是从一个状态变到另一个状态，但不同的是，原子性追求这个过程不能出错，不论结果对不对，不能出错。但一致性更追求结果一致。 ......
云原生场景下高可用架构的最佳实践
本文会以阿里云容器服务 ACK（Alibaba Cloud Container Service for Kubernetes）为例，介绍基于 ACK 的应用高可用架构和治理的最佳实践。 ......
实数完备性理论
实数完备性 相关概念 实数基本性质： 有序性 传递性 Archimedes 性（对 \(\forall a,b\in\mathbb{R}\), 若 \(b>a>0\), 则 \(\exists n\in\mathbb{N}^+\), 使得 \(na>b.\) 稠密性 实数系基本定理： 确界原理：设 ......