分布式elasticsearch redis-cluster cluster
分布式事务
一、分布式基础 1、分布式事务： 2、CAP理论： 3、BASE理论： 使用分布式事务的原则：不用分布式事务最好。如何无法不得不用，则考虑业务出错的频率，频率低，可以走人工补偿，频率高则引入分布式事务。 最想说的话：很多时候，没有十全十美的方案，只能理论+实际，作出权衡。 二、常见的分布式解决方案 ......
风电分布式并网模型 Wind Farm Simulation Model。 Matlab/simulink
风电分布式并网模型 Wind Farm Simulation Model。Matlab/simulink 1、共2个火电厂，4个风电场，共15个节点。火电厂：1号火电厂，设定为Swing Bus； 2号火电厂，设定为PV Bus。 （在汽轮机调节器可进行调节励磁系统的控制方式）风电厂：4个风电厂； ......
matlab代码：计及条件风险价值的电-气综合能源系统能量-备用分布鲁棒优化
matlab代码：计及条件风险价值的电-气综合能源系统能量-备用分布鲁棒优化关键词：wasserstein距离 CVAR条件风险价值 分布鲁棒优化 电-气综合能源 能量-备用调度 主要内容：代码主要做的是电气综合能源系统的不确定性调度问题，首先，通过wasserstein距离构建不确定参数的模糊集， ......
读发布！设计与部署稳定的分布式系统（第2版）笔记22_实例层之日志
 # 1. 记录日志 ## 1.1. 传统的日志文件仍然是最可靠和最灵活的信息载体 ## 1.2. 日志文件反映应用 ......
ElasticSearch系列-核心概念
## 核心概念 ### 索引 **`一个索引就是一个拥有几分相似特征的文档的集合`**。比如说，你可以有一个商品数据的索引，一个订单数据的索引，还有一个用户数据的索引。**`一个索引由一个名字来标识`**`(必须全部是小写字母的)`**，**并且当我们要对这个索引中的文档进行索引、搜索、更新和删除的 ......
ElasticSearch系列-基础用法
## 基本操作 ### 索引 #### 创建 ```markdown # 1.创建索引 - PUT /索引名 > PUT /products - 注意: 1.ES中索引健康转态 red(索引不可用) 、yellwo(索引可用,存在风险)、green(健康) 2.默认ES在创建索引时回为索引创建1个备 ......
ElasticSearch系列-简介与安装
## 全文检索 讲ElasticSearch之前, 需要先提一下`全文检索`. `全文检索`是计算机程序通过扫描文章中的`每一个词，对每一个词建立一个索引，指明该词在文章中出现的次数和位置`。当用户`查询时根据建立的索引查找`，类似于通过字典的检索字表查字的过程。 索: 建立索引 文本 >切分 > ......
分布式锁面试
分布式锁是为了解决分布式服务节点间对共享资源的读写问题而产生的。 分布式锁实现方式有几种？各有哪些优缺点？ 1）数据库 mysql innodb （行锁） 创建表结构 create table if not exists dis_table_lock ( `id` int primary key , ......
基于redis的分布式锁
1 为什么要使用分布式锁的理解 分布式架构图： 例1：在电商业务采用分布式架构后，程序部署在3个tomcat容器中（1个tomcat容器代表一个服务器，3个tomcat可理解在北京上海深圳都有部署电商服务），成员变量A代表商品数量。在北京的Alice，上海的Bob，深圳的Tom，都分别发起了购买或取 ......
分布式锁及其实现
### 分布式锁 ### 1. 锁 有限资源的情况下，控制同一时间（段）只有某些线程（用户 / 服务器）能访问到资源。 Java 实现锁：synchronized 关键字、并发包的类 问题：只对单个 JVM 有效 ### 2. 分布式锁 为啥需要分布式锁？ - 有限资源的情况下，控制同一时间（ 段） ......
谷粒商城报错：虚拟机安装elasticsearch时出现 "Caused by: java.lang.IllegalArgumentException: unknown setting [“http.host
如果你的报错也是http.host这里的那么大概率是在前面 echo "http.host: 0.0.0.0" >> /mydata/elasticsearch/config/elasticsearch.yml 这个http.host:的后面有一个空格然后才加上0.0.0.0，当然也有可能是因为你的 ......
【论文解析】EJOR 2011 A clustering procedure for reducing the number of representative solutions in the Pareto Front of multiobjective optimization problems
> 论文名称：A clustering procedure for reducing the number of representative solutions in the Pareto Front of multiobjective optimization problems ### 动机 假 ......
Seata 分布式事务 XA 与 AT 全面解析
目录 XA模式是什么？ 什么是 Seata 的事务模式？ AT模式是什么？ 为什么Seata要支持XA模式？ AT与XA之间的关系 总结 1. XA模式是什么？ 首先正如煊檍兄所言，了解了什么是XA与什么是Seata定义的事务模式，便一目了然。 1.1 什么是XA 用非常官方的话来说 XA 规范 是 ......
jmeter分布式压测
1. jmeter分布式压测 1.1 非gui压测 1.1.1 参数 -n：非GUI模式执行Jmeter-t：执行测试文件所在的位置-e：测试结束后，生成html测试报告-o：指定html测试报告存放的位置-l：表示执行结果存放位置-R 可以指定部分压力机列表 -r： 启动远程服务（分布式压测用） ......
Hadoop 伪分布模式配置
etc/hadoop/core-site.xml <configuration> <!-- 指定HDFS中namenode地址--> <property> <name>fs.defaultFS</name> <value>hdfs://hadoop01:9000</value> </property ......
分布式 id
随着业务的增长，文章表可能要占用很大的物理存储空间，为了解决该问题，后期使用数据库分片技术。将一个数据库进行拆分，通过数据库中间件连接。如果数据库中该表选用 ID 自增策略，则可能产生重复的 ID，此时应该使用分布式 ID 生成策略来生成 ID。 ......
分布式-八股文
CAP理论与BASE理论-√ ``` CAP: consistent && avaliable && partition tolerance 一致性：整个系统的数据状态应该是一致的，不存在逻辑矛盾的 可用性：整个系统应该保证是可用的 分区容错性：整个系统应当有容灾性能，有哪个节点失效或者哪个服务挂掉 ......
分布式ID｜从源码角度深度解析美团Leaf双Buffer优化方案
分布式ID的使用场景 基于MySql的初步方案 第一次优化：Leaf-segment数据库方案 第二次优化：Leaf-segment 双buffer优化 源码解析双buffer优化方案 背景 在复杂分布式系统中，往往需要对大量的数据和消息进行唯一标识。如在美团点评的金融、支付、餐饮、酒店、猫眼电影等 ......
ElasticSearch基础知识
### 概述 底层基于Luence，用于全文检索和分析应用 #### 术语概念 - 索引（Index）：ES数据存储在索引上，索引是具有类似特性的文档的集合。 - 类型（Type）：索引内部的逻辑分区（paritition），一个索引可定义多个类型。 - 节点（Node）：一个运行中的Elastic ......
Elasticsearch 数据迁移
### Elasticsearch 数据迁移 - 使用elaticsearch-dump 方式进行迁移 ``` # 安装nodejs cd /opt wget https://npm.taobao.org/mirrors/node/v10.15.3/node-v10.15.3-linux-x64.t ......
Springcloud2021+Nacos2.2+Dubbo3+Seata1.6实现分布式事务
> 示例代码地址：https://gitee.com/gtnotgod/Springcloud-alibaba.git 更详细参考Gitee完整的项目：https://gitee.com/gtnotgod/Springcloud-alibaba.git # 官网下载Nacos > https://n ......
09-分布式缓存
## 一、使用分布式缓存Redis ### （一）分布式缓存和Redis 1、多级缓存 在一个简单的请求链路中，会经过Nginx、Redis、Tomcat、数据库，其中Nginx、Redis、Tomcat都有缓存存在，这也是常说的多级缓存。 2、缓存的作用与应用场景 使用缓存主要 ......
基于Redis的分布式锁实现方案
本文介绍基于Redis LUA脚本实现分布式锁的具体方案。为了便于在微服务架构的项目中使用，方案以注解切面的方式实现，可单独提炼项目打成jar包。 一、注解 核心注解有两个CacheLock和CacheParam。 @Target(ElementType.METHOD) @Retention(Ret ......
试用elasticsearch
Dockerfile ARG VERSION FROM docker.elastic.co/elasticsearch/elasticsearch:${VERSION} AS Baseline FROM openjdk:17-jdk-buster ARG VERSION ARG HTTP_PROXY ......
docker 部署elastic [Install Elasticsearch with Docker]
.env # Password for the 'elastic' user (at least 6 characters) ELASTIC_PASSWORD=elastic@password # Password for the 'kibana_system' user (at least 6 c ......
python下使用redis分布式锁
# python下使用redis分布式锁 ### 1.什么场景需要分布式锁? 我们在写业务逻辑的时候，如果多个线程同时访问某个共享变量，一般是对变量进行上锁或者使用 queue.Queue() 实现，以做到线程安全保证数据不被污染。 在单机部署的情况下这样做完全没问题，但是随着业务规模的发展，某些单 ......
读发布！设计与部署稳定的分布式系统（第2版）笔记21_实例层之配置
只要将配置信息存放在与源代码不同的存储库中，将其锁好，仅对有权访问的人开放，并且管理员能够根据过程、程序和执行人等授予或撤销对相关配置信息的访问权限，那么配置信息也可以存放在版本控制系统中 ......
Redis实战(黑马点评--分布式锁)
基本原理和不同的实现方式 分布式锁的核心思想就是让大家共用同一把锁，那么我们就能锁住线程，不让线程进行，让程序串行执行，这就是分布式锁的核心思路 可见性：多个线程都能看到相同的结果。 注意：这里说的可见性并不是并发编程中指的内存可见性，只是说多个进程之间都能感知到变化的意思 互斥：互斥是分布式锁的最 ......
Apache Pulsar 分布式部署
#1.Pulsar 简介 Pulsar 是一个支持多租户的、高性能的消息中间件；最初是由 Yahoo 研发的开源，分布式pub-sub系统，现在是Apache的一个顶级开源项目 Pulsar 提供了四种订阅类型，它们可以共存在同一个主题上，以订阅名进行区分： - 独享（exclusive）订阅——一 ......
HBase 分布式部署（进阶中级）
## 1. HBase 分布式部署（进阶中级） #### 1. 实验任务一：部署前期准备 ##### 1.1. 步骤一：安装部署 hadoop ha 分布式环境 ##### 1.2. 步骤二：解压安装文件 ~~~bash [root@master ~]# cd [root@master ~]# ls ......