分布式elasticsearch redis-cluster cluster
Redis学习之分布式锁
分布式锁：满足分布式系统或集群模式下多进程可见并且互斥的锁。 分布式锁的两个基本特征： 多线程（进程）可见（读写） 互斥 还应具备的特征： 高可用：不能挂机 高性能：读写要快 安全性：不能出现死锁 实现方式 主要有以下三种： 其中，MySQL 的实现成本相对最低、Redis 性能最高、Zookeep ......
redis cluster增加和移除主从节点【转】
Redis-Cluster集群之Cluster节点增减 上篇我们了解了Redis的cluster集群的搭建，现在我们来说一下cluster集群的节点的增减 集群增加主节点 1.新建一个7006的一个节点，让其作为一个新的主节点加入，在/redis-cluster目录下，新建一个7006目录，配置相应 ......
Redis Cluster手动搭建
目录redis cluster搭建准备快捷施法（集合了，加入集群，主从配置，分配槽位）加入集群查看端口监听主从配置分配槽位检查状态MOVED重定向-c参数故障转移 redis cluster搭建 准备 文件跳转 https://www.cnblogs.com/Yunya-Cnblogs/p/1460 ......
在 CentOS7/CentOS8 上使用 cephadm 安装分布式存储系统 Ceph【转】
Cephadm 介绍 官方文档：https://docs.ceph.com/en/latest/cephadm/ cephadm 用于部署和管理 Ceph 集群，它通过 SSH 将 manager 守护进程连接到主机来实现这一点。manager 守护进程支持添加、删除和更新 Ceph 容器。ceph ......
Redis——分布式锁
基本原理 synchronized是利用JVM内部的锁监视器控制线程，但是只能在一个JVM中生效。如果有多个JVM的时候，就会有多个线程获取到锁，就无法实现多JVM进程之间的互斥了。 因此不能使用JVM内部的锁监视器了，必须使用JVM外部的锁监视器，就能保证只有一个线程获取到锁，就能实现多进程之间的 ......
redis-cluster nodes命令信息说明
集群定义 1.1 每个字段的含义如下： 1. id: 节点ID，一个40字节的随机字符串，节点创建时生成，且不会变化（除非使用CLUSTER RESET HARD命令）。 2. ip:port: 客户端访问的地址。 3. flags: 逗号分隔的标记位，可能值有：myself, master, sl ......
分布式操作系统市场规模有万亿吗？你怎么看？
昨天参加一个饭局，席间和一位做ICT基础设施投资的朋友聊起我们团队研发的LAXCUS分布式操作系统，请他分析一下分布式操作系统和连带的产业市场规模价值，我给出的分析依据是：1. LAXCUS面向TO B市场，有广泛应用前景，包括AI、大数据、HPC的支持2. LAXCUS属于多机操作系统，和Wind ......
Kafka的分布式架构与高可用性
导语 一开始我们就说过Kafka是一款开源的高吞吐、分布式的消息队列系统，那么今天我们就来说下它的分布式架构和高可用性以及双/多中心部署。 Kafka 体系架构简介 以下是 Kafka 的软件架构，整个 Kafka 体系结构由 Producer、Consumer、Broker、ZooKeeper 组 ......
Redis分布式锁
简述 利用Redis的Setnx命令，来实现一个分布式的加锁方案。利用注解，在拥有该注解的方法上，进行切面处理，在方法执行前，进行加锁，执行结束后，根据是否自动释放锁，进行解锁。 将该注解用在定时任务的方法上，即可实现分布式定时任务，即获取到锁的方法，才会执行。 1 redis命令 1.1 setn ......
分布式事务：XA和Seata的XA模式
上一篇内容《从2PC和容错共识算法讨论zookeeper中的Create请求》介绍了保证分布式事务提交的两阶段提交协议，而XA是针对两阶段提交提出的接口实现标准，本文则对XA进行介绍 ......
Mysql 分布式序列算法
接上文 Mysql分库分表 1.分布式序列简介 在分布式系统下，怎么保证ID的生成满足以上需求？ ShardingJDBC支持以上两种算法自动生成ID。这里，使用ShardingJDBC让主键ID以雪花算法进行生成，首先配置数据库，因为默认的注解id是int类型，装不下64位，需要进行修改： # 在 ......
Redis Cluster扩、缩容
1、Redis Cluster扩容（Redis 5为例） 因公司业务发展迅猛，现有的三主三从的redis cluster架构可能无法满足现有业务的并发写入需求，因此公司紧急采购两台服务器10.0.0.68，10.0.0.78，需要将其动态添加到集群当中，但不能影响业务使用和数据丢失。 注意: 生产环 ......
tomcat session cluster的实现
#1.环境准备 IP 主机名 服务 10.0.0.150 proxy.tan.com httpd 10.0.0.160 tomcat1.tan.com JDK8、tomcat8 10.0.0.170 tomcat2.tan.com JDK8、tomcat8 #2.在proxy主机配置httpd实现后 ......
分布式系统笔记目录
分布式系统笔记目录 本目录源自我校的分布式系统课程，我觉得很有趣，就制作了笔记并分享 老师的笔记的目录结构感觉还是有些问题，但是当时学习时间比较紧，就没来得及排版 仅供学习使用 第一章：基本概念 分布式系统相关概念、与并行计算的关系、云计算概念、分布式计算的背景、目的、应用及展望 第二章：模型问题 ......
ElasticSearch快速入门
ElasticSearch快速入门 一、简介 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎 ......
基于redis5的redis cluster部署
1.创建 redis cluster集群的环境准备 1.1.#每个redis 节点采用相同的相同的redis版本、相同的密码、硬件配置；所有redis服务器必须没有任何数据；准备六台主机，地址如下： 10.0.0.150 10.0.0.160 10.0.0.170 10.0.0.180 10.0.0 ......
关于分布式操作系统
关于分布式操作系统，如果你不太理解的话，可以把它看成是传统操作系统延展。二者的区别在于，传统的操作系统都是单机系统，只能在一台计算机上运行，而分布式操作系统是多机系统，每台计算机都是系统中的一个计算单元，在此基础形成建立网络连接，统一输入输出，形成一个巨大的物理分布逻辑统一的计算机集群。 所以分布式 ......
ElasticSearch8.10.2接入SpringBoot3.+
pom.xml文件引入依赖 <!-- https://mvnrepository.com/artifact/org.elasticsearch.client/elasticsearch-rest-client --> <dependency> <groupId>co.elastic.clients< ......
Redis分布式锁演进架构
分布式锁相信大家一定不会陌生，想要用好或者自己写一个却没那么简单。想要达到上述的条件，一定要 **掌握分布式锁的应用场景**，以及分布式锁的不同实现，不同实现之间有什么区别。 ......
Redis学习之分布式全局id生成
介绍 为什么需要分布式全局 ID 生成器？ 对于订单这种数据，数据库自增的规律性太明显，会暴露一些信息（比如根据昨日和今日的订单号差值看出销量） 数据量过大时，不同表的 id 分别自增，容易出现 id 冲突 分布式全局 ID 生成应满足的特点： 唯一：整个系统每个 id 都是唯一的 递增：虽然不连续 ......
GJOI 2023.10.5 T1 雷老师的正偏态分布
雷老师的正偏态分布 题意：给出一个长度为 \(n\) 的 \(a\) 数组，其中 \(1 \le a_i \le V , 1 \le i \le n\) 。统计其中的满足平均数严格小于中位数且大小为奇数的子集数量，\(n \le 100 , V \le 800\)，时限 \(4\) s 。 输入： ......
ES 关于 remote_cluster 的一记小坑
最近有小伙伴找到我们说 Kibana 上添加不了 Remote Cluster，填完信息点 Save 直接跳回原界面了。具体页面，就和没添加前一样。 我们和小伙伴虽然隔着网线但还是进行了深入、详细的交流，梳理出来了如下信息： 两个集群：集群 A 和集群 B ，版本都是 7.10.0 ； 集群 A 没 ......
分布式事务 —— SpringCloud Alibaba Seata
Seata 简介 传统的单体应用中，业务操作使用同一条连接操作不同的数据表，一旦出现异常就可以整体回滚。随着公司的快速发展、业务需求的变化，单体应用被拆分成微服务应用，原来的单体应用被拆分成多个独立的微服务，分别使用独立的数据源，业务操作需要调用三个服务来完成。此时每个服务内部的数据一致性由本地事务 ......
ElasticSearch的初步使用
Elasticsearch是一种分布式、面向文档的NoSQL数据库，专门设计用于全文搜索、数据分析和日志存储。它不仅可以存储大量文档数据，还支持复杂的全文搜索、数据聚合和分析查询，使其非常适用于日志管理、搜索引擎、实时分析和大规模数据存储等场景。 Elasticsearch的数据结构由索引Index ......
安装ElasticSearch_基于Docker
注意版本，我最开始尝试比较新的版本，启动容器都发生了失败，将至7.8.0版本就启动成功了 拉取Docker镜像 docker pull docker.elastic.co/elasticsearch/elasticsearch:7.8.0 // ElasticSearch镜像 docker pull ......
分布式事务
目录CAP定义C- Consistency如何实现一致性分布式系统一致性特点A-Avalilability如何实现分布式可用性的特点P-Partition tolerance如何实现特点组合BASE CAP 定义 CAP，3者无法同时满足。 C- Consistency 一致性指写操作后读操作可读到 ......