分布式elasticsearch redis-cluster cluster
SequoiaDB分布式数据库2023.6月刊
本月看点速览 全球溯源中心系列成果发布，巨杉数据库受邀出席 聚焦产业升级，斩获新一代信息技术创新企业 推进产业生态，赋能行业发展 青杉计划2023已开启，一起攀登更高的“杉” 全球溯源中心系列成果发布，巨杉数据库受邀出席 6月19日，“链接世界 预鉴未来”——全球溯源中心系列成果发布活动在广州南沙成 ......
08-分布式消息
## 一、事件驱动架构和原理 ### （一）事件驱动架构组成结构 1、事件和事件驱动架构 但凡在业务需求中出现如“当…发生…时、一旦出现…”等，描述时，我们就应该考虑是否需要在这些场景中引入事件。 所谓事件（Event），就是将系统中所发生的业务状态变更抽取出来形成一系列独立的对象。 ......
IDEA+nacos2.2.1+seata1.6.1使用properties实现分布式事务
以前用过，现在突然忘了怎么配置，记录一下 默认你完成nacos的基础配置 修改properties后一定要重启模块项目，不要用热部署，不然有概率报错 我是通过cmd启动的seata，重启模块项目前必须重启seata否则模块一直报错，连接不上 seata-config-application.yml部 ......
es集群环境安装分词器elasticsearch-analysis-ik
环境:OS:Centos 7es:6.8.5拓扑:3节点的集群 1.下载地址https://github.com/medcl/elasticsearch-analysis-ik下载的版本需要跟es的版本保持一致我这里的es版本是6.8.5的,所以下载相应版本的分词器elasticsearch-ana ......
分布式事务解决方案
### 业务场景描述 > 下单时，需要扣减库存和生成订单，两个操作要求确保同时成功或同事失败，需要分别调用不同的服务便形成了分布式事务问题 ### 解决方案 采用弱一致性的解决方案 #### 1.重试机制 第一步执行成功后，将生成订单操作发送到消息队列中，消费生成订单消息，如果失败，采用重试机制，重 ......
随笔（二十二）『docker 安装 ElasticSearch 和 Kibana』
#### 1、拉取镜像 ``` 备注：ElasticSearch 和 Kibana 版本需要一致。 docker pull elasticsearch:7.12.1 docker pull kibana:7.12.1 ``` #### 2、创建ElasticSearch挂载目录 ``` mkdir ......
随机现象之: 样本空间的“分割”•随机事件(结果集)的“分布”•样本空间事件域(可测度性, 集合运算封闭性)
样本空间的分割：i~[1, n], 有A1, A2,…,An两两相互不相容，且 A1+A2+…+An = Omega(样本空间, 全集) 随机事件的概率分布：对随机事件E={e1, e2,…en}, 有: * e1,e2,…,en两两互不相容，且 P(e1) + P(e2) + … + P(en) ......
分布式事务(1)---2PC和3PC原理
分布式事物基本理论:基本遵循CPA理论，采用柔性事物特征，软状态或者最终一致性特点保证分布式事物一致性问题。 分布式事物常见解决方案: 2PC两段提交协议 3PC三段提交协议(弥补两端提交协议缺点) TCC或者GTS(阿里) 消息中间件最终一致性 更多信息查看https://www.cnblogs. ......
读发布！设计与部署稳定的分布式系统（第2版）笔记17_中间件、背压和调速器
 # 1. 完全的解耦 ## 1.1. 各台服务器、层级和应用程序解耦得越彻底，集成点、层叠失效、响应缓慢和线程阻 ......
Redis分布式锁
# 一、简介 单机器环境下，可以通过锁来解决共享资源的竞争问题；而在分布式集群环境下，机器与机器之间的资源竞争则需要依赖Redis、ZooKeeper等中间件去协调。 简单总结一下自己对Redis分布式锁的一些理解 # 二、代码实现 第一步先是获取锁，通过setnx操作，设置指定key及其过期时间。 ......
微信读书：从Paxos到Zookeeper：分布式一致性原理与实践（阅读摘录）
# 微信读书：从Paxos到Zookeeper：分布式一致性原理与实践（阅读摘录）  [阅读地址](https://w ......
Redis实现分布式锁的7种方案
7种方案前言 日常开发中，秒杀下单、抢红包等等业务场景，都需要用到分布式锁。而Redis非常适合作为分布式锁使用。本文将分七个方案展开，跟大家探讨Redis分布式锁的正确使用方式。如果有不正确的地方，欢迎大家指出哈，一起学习一起进步。 什么是分布式锁 方案一：SETNX + EXPIRE 方案二：S ......
分布式文件存储 - FastDFS 工具类
一、FastDFSClient package com.changgou.file.util; import org.csource.common.NameValuePair; import org.csource.fastdfs.*; import org.slf4j.LoggerFactory; ......
Elasticsearch03
# 1.Spring Data Elasticsearch高级查询 ## 1.1.基本查询 ```java /** * 高级查询-基本查询 * @return */ @RequestMapping("/matchQuery") public Iterable matchQuery(){ //词条查询 ......
Elasticsearch02
# 1.elasticsearch的查询 ## 1.1基本查询 ``` 基本查询的语法格式 GET /索引库名/_search { "query":{ "查询类型":{ "查询条件":"查询条件值" } } } ``` - 查询类型： - 例如： match_all ， match ， term ， ......
Elasticsearch01
# 1.Elasticsearch(ES)介绍和安装 ## 1.1为什么需要单独的搜索服务 - 用户访问我们的首页，一般都会直接搜索来寻找自己想要购买的商品。 - 而商品的数量非常多，而且分类繁杂。如何能正确的显示出用户想要的商品，并进行合理的过滤，尽快促成交易，是搜索系统要研究的核心。 - 面对这 ......
拓端tecdat|R语言贝叶斯Metropolis-Hastings Gibbs 吉布斯采样器估计变点指数分布分析泊松过程车站等待时间|附代码数据
原文链接：http://tecdat.cn/?p=26578 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于吉布斯采样器的研究报告，包括一些图形和统计输出。 指数分布是泊松过程中事件之间时间的概率分布，因此它用于预测到下一个事件的等待时间，例如，您需要在公共汽车站等待的时间，直到下一班车到 ......
开源通用高性能的分布式id序列组件
原文地址：[https://ntopic.cn/p/2023062101/](https://ntopic.cn/p/2023062101/) - Gitee源代码仓库：[https://gitee.com/obullxl/sequence-jdbc](https://gitee.com/obull ......
Docker-Elasticsearch安装
下载Elasticsearch7.17.3的docker镜像： docker pull elasticsearch:7.17.3 修改虚拟内存区域大小，否则会因为过小而无法启动: sysctl -w vm.max_map_count=262144 使用如下命令启动Elasticsearch服务，内存 ......
零侵入式分布式链路日志minbox-logging使用文档v1.0
MinBox Logging MinBox Logging 是一款分布式、零侵入式的链路日志分析框架，支持 SpringCloud 微服务架构下配置使用，内部封装了 RestTemplate 、 OpenFeign 两种方式透传链路信息。 零侵入式 MinBox Logging 无需使用注解配置采集 ......
Doris整合Elasticsearch
# 1、环境 >doris 1.2.4 >Elasticsearch 7.7 安装教程 https://www.cnblogs.com/yanzhong/p/17515917.html # 2、doris 配置外表（方法一） ## 1、添加语法 >详细 官网 https://doris.apache ......
Elasticsearch安装
# 安装Elasticsearch ## 1、拉取镜像 ```json docker pull elasticsearch:7.7.0 ``` ## 2、启动 ``` docker run --name elasticsearch -d -e ES_JAVA_OPTS="-Xms512m -Xmx5 ......
读发布！设计与部署稳定的分布式系统（第2版）笔记16_握手和考验机
 # 1. 握手 ## 1.1. 发送方和接收方之间的信号传递过程 ## 1.2. 模拟调制解调器使用一种握手形式 ......
8第八章 分布式任务调度&人工审核
# 第八章 分布式任务调度&人工审核 ## [目标](#目标) - 能够理解什么是分布式任务调度 - 能够掌握xxl-job的基本使用 - 能够使用xxl-job解决黑马头条项目中定时任务的功能 - 能够完成自媒体文章人工审核功能 - 能够完成自媒体端文章上下架同步的问题 ## [1 分布式任务调 ......
4第四章 分布式事务与自媒体素材管理
# 第四章 分布式事务与自媒体素材管理 ## 目标 - 能够理解什么是分布式事务 - 能够理解CAP定理和BASE理论 - 能够掌握seata要解决的问题 - 能够完成seata集成到项目中使用 - 能够掌握分布式文件系统fastdfs的基本使用 - 能够完成素材管理功能 - 能够完成自媒体文章列 ......
29.ElasticSearch分词
两种查询方式 这两种方式的结果都是一样的，实际使用中我们都是使用第二种方式。 在将所有的检索条件全部放在url里 GET /bank/_search?q=*&sort=account_number:asc 表示在banK索引下查询所有文档根据account_number正序 hits里有10条数据， ......
五、cluster
###一、什么是集群 cluster是什么？cluster就是一个应用下不同实例的分组，比如典型的可以按照数据中心分，把上海机房的应用实例分为一个集群，把北京机房的应用实例分为另一个集群。对不同的cluster，同一个配置可以有不一样的值，如zookeeper地址。集群默认是通过读取机器上的配置（s ......
redis cluster集群搭建
> redis 6.2 ### 使用docker搭建redis cluster集群(3主3从) **所有的操作都在根目录~/Developer/docker-compose/redis-cluster-6.2执行** #### 创建配置文件 为了方便，写了个shell脚本，懒人必备 createCo ......
elasticsearch8安装部署
环境:OS:Centos 7 1.下载下载地址:https://www.elastic.co/cn/downloads/past-releases#elasticsearch 2.解压缩并创建数据目录[root@localhost soft]# tar -xvf elasticsearch-8.8. ......
DeepSpeed + Kubernetes 如何轻松落地大规模分布式训练
随着 ChatGPT 的广泛应用，各种大规模语言模型层出不穷，其中包括 EleutherAI 推出的 200 亿参数的 GPT-NeoX-20B 和 BigScience 发布的 1760 亿参数的 Bloom 模型。 ......