分布式 理论
读发布！设计与部署稳定的分布式系统（第2版）笔记06_用户
 # 1. 系统的人类用户天生就具备进行创造性破坏的本事 ## 1.1. 用户会消耗内存 ## 1.2. 用户会做奇 ......
2023-06-19：讲一讲Redis分布式锁的实现？
2023-06-19：讲一讲Redis分布式锁的实现？ 答案2023-06-19： ### Redis分布式锁最简单的实现 要实现分布式锁，确实需要使用具备互斥性的Redis操作。其中一种常用的方式是使用`SETNX`命令，该命令表示"SET if Not Exists"，即只有在key不存在时才设 ......
分布式文件系统HDFS简介
HDFS实现目标： 兼容廉价的硬件设备 支持大数据集 实现流数据读写 支持简单的文件模型 强大的跨平台兼容性 自身的局限性： 不适合低延迟的数据访问 无法高效储存大量小文件 不支持多用户写入及任意修改文件 ......
自动化测试理论基础
现如今身处测试行业尤其是进行功能测试的小伙伴，点点点成为其工作中的唯一，不知道自已应该做什么，职业发展也变得非常迷茫。如何打破现有的局面? 互联网上有很多规划发展方向的文章，但是无论选择哪一个方向都离不开技术，技术型方向是最实在、最佳的选择，所以自动化测试技术也就成为现如今测试市场的炙热话题和升职加 ......
基于Redis实现分布式锁
**问题描述** 服务A和服务B都需要访问共享资源C。这时就会发生共服务A和服务B都去抢占享资源C，为了避免这种抢占，就需要引入分布式锁。 **分布式锁介绍** 分布式锁：控制分布式系统有序的去对共享资源进行操作，通过互斥来保证数据的一致性。 **解决方案**  # 1. 水平扩展 ## 1.1. 增加服务器来增加容量 ### 1.1.1. 这些服务器集群被称为“农场” ## ......
jmeter 分布式压测
# 什么是分布式测试？ 分布式测试是指通过局域网和Internet，把分布于不同地点、独立完成特定功能的测试计算机连接起来，以达到测试资源共享、分散操作、集中管理、协同工作、负载均衡、测试过程监控等目的的计算机网络测试。 # 为什么要使用分布式压力测试？ 普通压力测试一般是采用单台机器对目标服务器产 ......
TensorFlow05.3 神经网络反向传播算法-多层感知机梯度(理论知识)
首先这个是链式法则：   # 1. 第一个拥有10亿用户的网站 ## 1.1. 2016年，Facebook宣布其每日活跃用户数量为11.3 ......
redis单机、主从、哨兵、集群以及redisson分布式锁
# 1.搭建集群 Linux系统的Redis各版本下载路径：https://download.redis.io/releases/，建议下载5.0以上的版本，下载后进行解压安装 （1）单机版 安装环境 ``` yum install gcc-c++ -y ``` 关闭防火墙 ``` systemct ......
使用hashicorp Raft开发分布式服务
## 使用hashicorp Raft开发高可用服务 开发raft时用到的比较主流的两个库是Etcd [Raft](https://github.com/etcd-io/raft) 和hashicorp [Raft](https://github.com/hashicorp/raft)，网上也有一些 ......
Kotlin协程-从理论到实战
> 上一篇文章从理论上对Kotlin协程进行了部分说明，本文将在上一篇的基础上，从实战出发，继续协程之旅。 ### 从源头说起 在Kotlin中，要想使用协程，首先需要使用协程创建器创建，但还有个前提——协程作用域(`CoroutineScope`)。在早期的Kotlin实现中，协程创建器是一等函数 ......
Java分布式框架之Dubbo
分布式与微服务 1、传统架构 当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。此时，用于简化增删改查工作量的数据访问框架(ORM)是影响项目开发的关键。 存在的问题： 代码耦合，开发维护困难 无法对不同模块进行针对性优化 无法水平扩展 单点容错率低，并发能力差 2、系统 ......
数据库理论题
1. (计算题，20分) 设有两个关系R和S,求① $R \cup S$;② $R - S$;③ $R \times S$;④ $\prod_{C,A}(R)$;⑤ $\sigma_{B>'4'}(R)$ 关系R关系S  并执行 VaR 回测分析。这三种方法是： 正态分布 历史模拟 指数加权移动平均线 (EWMA) 风险价值是一种量化 ......
基于栅格的分布式新安江模型构建与分析 - 姚成 - 2007
摘要： 基于DEM的分布式水文模型是现代水文学同计算机,3S等高科技技术相结合的产物,是水文模型新的发展方向.本文是在数字高程模型的基础上,研究和归纳了流域信息提取的方法和算法,利用DEM数据提取了河网,水系,水流路径等相关的流域特征,并根据三水源新安江模型的理论,建立了一个基于DEM栅格的分布式新 ......
读发布！设计与部署稳定的分布式系统（第2版）笔记03_让系统稳定运行
 # 1. 概念 ## 1.1. 事务 ### 1.1.1. 系统处理的抽象工作单元 #### 1.1.1.1. 与 ......
CAP原则(CAP定理)、BASE理论
一、CAP原则 CAP原则又称CAP定理，指的是在一个分布式系统中， Consistency（一致性）、 Availability（可用性）、Partition tolerance（分区容错性），三者不可得兼。 CAP原则是NOSQL数据库的基石。 分布式系统的CAP理论：理论首先把分布式系统中的三 ......
opennmmlab实战营二期-mmagic理论课（十）
# opennmmlab实战营二期-mmagic理论课（十） 说明：mmagic是mmediting升级 - ## 图像超分辨率Super Resolution - ### 基于卷积网络的模型SRCNN与FSRCNN ### 损失函数 ### 对抗生成网络GAN简介 ### 基于GAN的模型SRGA ......
聊聊什么是分布式事务
### 概述 分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上，以上是百度百科的解释。 简单的说，就是一次大的操作由不同的小操作组成，这些小的操作分布在不同的服务器上，且属于不同的应用，分布式事务需要保证这些小操作要么全部成功，要么全部失 ......
谈论关于Redis产生的分布式ID获取为空问题
一:事故 在项目测试中，遇到一个事件创建失败问题，追踪日志发现分布式ID的获取值为空，导致后续表写入异常。 经排查锁定相关方法，具体方法经简化如下： @Transactional public String testRedisTrans(){ redisTemplate.setEnableTrans ......
minio分布式文件存储系统
1什么是minio？ MinlO是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据。例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。MinlO是一个非 ......
分布式事务实现
1）基于XA协议的两阶段提交（2PC） XA 规范主要 定义了 ( 全局 ) 事务管理器 ( Transaction Manager ) 和 ( 局部 ) 资源管理器 (Resource Manager ) 之间的接口。 2）两阶段提交 事务的提交分为两个阶段：预提交阶段(Pre-Commit Ph ......
对接三方支付平台 + 分布式锁
# 一、对接三方支付平台 > 第三方支付平台是指平台提供商在商家和银行之间建立连接，供以支付等交易活动 ### 1.1 支付宝支付、微信支付……（以支付宝为例） 1、通过支付宝的开放平台对接 ： https://open.alipay.com/ 2、进入平台API的当面付 ： https://ope ......