分布式 事务 理论cap
分布式锁
参考：https://www.cnblogs.com/wangyingshuo/p/14510524.html 介绍 多线程环境下控制对共享资源的访问以保证数据一致性。 特点：跨进程、跨服务、跨服务器 互斥性 ——任意时刻，只有一个客户持有锁 超时释放——持有锁超时，可以释放，防止死锁 可重入——一 ......
云原生K8S精选的分布式可靠的键值存储etcd原理和实践
今天再下一个Go语言编写分布式键值存储的云原生组件ectd，了解其定义理、应用场景和特性，熟悉其整体架构和常用术语，进一步研究其读写和日志复制的原理，最后完整部署单示例和多实例集群和介绍一些常见命令。 ......
对系统理论的一些认识
系统的定义：一个有一组相互联系的要素构成的，能够实现某个目标的整体。 创立时间：20世纪40年代左右，由贝塔朗菲提出“一般系统论‘’奠定了理论基础 三大要素：要素、联系、功能是系统的三大要素 系统的核心属性为整体性，强调整体功能大于部分功能之和；整体具有部分所不具有的优势。 系统静态特性：结构，层次 ......
对系统理论的认识
系统理论 系统是一个由一组相互连接的要素构成的，能够实现某个目标的整体。任何一个系统都包括三种构成要件：要素，连接，功能或目标。 System 系统，体系 要素，连接和目标，这三个要素。是系统的构成要件.它具有适应性,动态性,目的性,并可以自组织,自我保护与演进. 系统的静态特性 结构 又分为等级层 ......
对系统理论的认识
系统理论属于钱学森院士倡立的系统科学，是研究系统的一般模式，结构和规律的学问，它研究各种系统的共同特征，用系统理论知识定量地描述其功能，寻求并确立适用于一切系统的原理、原则和模型，主要对计算机、应用数学、管理等专业的某一方向有专门研究，掌握系统思维方法，能够从整体上系统地思考和分析问题，是具有逻辑和 ......
对系统理论的认识
系统理论是研究系统的一般模式，结构和规律的学问，它研究各种系统的共同特征，用数学方法定量地描述其功能，寻求并确立适用于一切系统的原理、原则和数字模型，是具有逻辑和数学性质的一门新兴的科学。 系统思想源远流长，但作为一门科学的系统论，人们公认是L.V.贝塔朗菲创立的。他在1932年提出“开放系统理论” ......
卷积神经网络理论
卷积基本概念 卷积操作 感受野计算 RFi = ( RFi+1 - 1)x si +Kisi为第i层的步长，Ki为第i层卷积核大小。 数据填充 图像填充后卷积输出的维度： n：图像大小 f：卷积核大小 p：填充的层数 s：卷积核的步幅 卷积模式 Full：全填充，扩大原图Same：填充保持原图大小V ......
JMeter+Jenkins分布式压测持续集成
Jenkins job配置 参数化构建 运行分布式shell脚本：sh ... 生成测试报告 配置生成html测试报告，需要安装插件 HTML Publisher JMeter 性能脚本 编写jmeter脚本/自定义Java脚本，脚本参数化，并且可带参数命令行执行 自定义Java脚本 jmeter脚 ......
@transactional注解原理_Spring 的事务实现原理和传播机制
@transactional注解原理_Spring 的事务实现原理和传播机制 本节思维导图 事务管理是应用系统开发中必不可少的一部分。Spring 为事务管理提供了丰富的功能支持。Spring 事务管理分为编程式和声明式两种。编程式事务指的是通过编码方式实现事务；声明式事务基于 AOP，将具体的逻辑 ......
DNS域名解析、回溯HTTP事务处理过程
DNS域名解析 通常我们访问一个网站，使用的是主机名或者域名来进行访问的。因为相对于IP地址（一组纯数字)，域名更容易让人记住。但TCP/IP协议使用的是IP地址进行访问的， 所以必须有个机制或服务把域名转换成IP地址。DNS服务就是用来解决这个问题的，它提供域名到IP地址之间的解析服务。 回溯HT ......
对系统理论的认识
系统理论是研究系统的一般模式，结构和规律的学问。它研究各种系统的共同特征，用系统理论知识定量描述其功能，寻求并确立适用于一切系统的原理，原则和模型，主要对计算机，应用数学，管理等专业的某一方面有专门的研究，掌握系统思维方法，能够从整体上系统地思考和分析问题，是具有逻辑和数学性质的一门新兴的科学。 ......
数据分析之营销管理方法论--4P营销理论
4P营销理论 4P营销理论被归结为四个基本策略的组合，即产品（Product）、价格（Price）、渠道（Place）、宣传（Promotion），由于这四个词的英文字头都是P，再加上策略（Strategy），所以简称为“4P’s” 产品：产品是营销组合中第一个和最重要的要素。产品是品牌的载体，是满 ......
MySQL事务隔离级别
事务 事务是一个不可分割的数据库操作序列，也是数据库并发控制的基本单位，其执行的结果必须使数据库从一种一致性状态变到另一种一致性状态。事务是逻辑上的一组操作，要么都执行，要么都不执行。 特征 事务就是一组原子性的操作，这些操作要么全部发生，要么全部不发生。事务把数据库从一种一致性状态转换成另一种一致 ......
7-springboot-多数据源事务管理-jta+atomikos的分布式事务
jta+atomikos的分布式事务 <!--jta+atomikos分布式事务--><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jta-atomikos</arti ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
动态规划理论基础
代码随想录_动态规划理论基础 对于动态规划问题，将拆解为如下五步曲。 确定dp数组（dp table）以及下标的含义 确定递推公式 dp数组如何初始化 确定遍历顺序 举例推导dp数组 动态规划中每一个状态一定是由上一个状态推导出来的，这一点就区分于贪心，贪心没有状态推导，而是从局部直接选最优的。 ......
0 爬取的数据，存到mysql中 、1 爬虫和下载中间件、 2 加代理，cookie，header，加入selenium、3 去重规则源码分析（布隆过滤器） 、4 scrapy-redis实现分布式爬虫
0 爬取的数据，存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
25、资源对象-Service【理论-回顾】
1、基础知识 1.1、场景 通过对Pod及其管理资源RC和Deployment的实践，我们知道，我们所有的应用服务都是工作在pod资源 中，由于每个Pod都有独立的ip地址，而大量的动态创建和销毁操作后，虽然pod资源的数量是控制住了，但 是由于pod重新启动，导致他的IP很有可能发生了变化，假设我 ......
SDN&VXLAN理论部分
SDN 传统网络 在传统网络当中，管理员通过管理平面的一些协议，不管是http、ssh、telnet连接到控制平面当中做一些配置，比如说配置OSPF，然后OSPF进程会生成路由表，形成FIB表用于指导数据转发，这就是控制层面，有了这些表项之后，流量过来之后设备才会如何如何转发，而转发这一层就是上图当 ......
C语言：理论知识点
1. && 左边表达式为0，则最后结果为0，右边的表达式不用计算 2. | 左边表达式为1，则最后结果为1，右边的表达式不用计算 3. unsigned 无符号整型 4. int a=4; //二进制： 原码 反码 补码：00000000 00000000 0000000000000100 int ......
Solon2 接口开发: 分布式 Api Gateway 开发预览
建议使用专业的分布式网关产品，比如： nginx apisix [推荐] k8s ingress controller 等... 对 Solon 来讲，只有 Gateway：它调用本地接口时，则为本地网关；调用远程接口时，则为分布式网关。 1、一个简单的分布式接口网关效果预览 基于上一节的 ApiG ......
分布式锁的实现
多线程对同一资源的竞争，需要用到锁，例如Java自带的Synchronized、ReentrantLock。但只能用于单机系统中，如果涉及到分布式环境（多机器）的资源竞争，则需要分布式锁。分布式锁的主要作用： 保证数据的正确性： 比如：秒杀的时候防止商品超卖，表单重复提交，接口幂等性。 避免重复处理 ......
django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法
前言 django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法。 在django-bootstrap4中没有内置的方法设置表单内容成几列分布，这里采用bootstrap4的栅格布局实现效果 具体操作 forms.py class RegisterForm(User ......
分布式理论
一、分布式理论 1.CAP理论 CAP理论是说对于分布式数据存储，最多只能同时满足一致性（C，Consistency）、可用性（A， Availability）、分区容忍性（P，Partition Tolerance）中的两者。 1.一致性 是指对于每一次读操作，都能够读到最新写入的数据，且每个节点 ......
C++ 迪利克雷（Dirichlet）分布
遇到一个要使用 dirichlet 分布的情形，发现 C++ 标准库中没有现成的。查阅维基百科发现，虽然它挺复杂，但是它跟 Gamma 分布有如下关系： 设有 K 个相互独立且分别满足 Gamma 分布的分布： $$Y_1 \sim Gamma(\alpha_1, \theta), ..., Y_K ......
分布式协议与算法实战 - 分布式算法 gossip QuorumNWR PBFT ZAB
Gossip 二阶段提交协议和Raft需要大部分节点能够工作，在极端情况，如只有一个节点能正常运行，这些方法就不适用了。根据Base理论要实现最终一致性。 Gossip协议利用一种随机、带有传染性的方式，将信息传播到网络中，并在一定时间内使所有节点数据一致。 直接邮寄（Direct Mail）：直接 ......
docker-selenium分布式环境搭建（基于selenium的grid分布式框架）
说明：docker-selenium分布式是基于selenium的grid分布式框架进行搭建 以下是docker-selenium分布式网络拓扑图： 从图中可以看出： 1）docker-selenium可以用作浏览器兼容性测试； 2）docker-selenium分布式，可以提高测试用例的执行效率， ......
Redis实现分布式锁
Redis实现分布式锁 前言 分布式锁的实现有三种方式 数据库乐观锁 基于Redis的分布式锁 基于Zookeeper的分布式锁 分布式锁满足的条件 为了确保分布式锁可用，我们至少要保证锁的实现同时满足以下几个条件 互斥性：在任意时刻只有一个客户端能持有锁 不会死锁：即使有一个客户端在持有锁的期间发 ......