526互联

分布式 事务 模式saga

HDFS集群搭建：完全分布式

本文介绍了HDFS集群中单点故障：HDFS-HA解决方案以及因此引入的Journal Node、ZKFC、Active NameNode切换过程以及HA环境搭建启动等细节。 ......
分布式 集群 HDFS

redis 用docker搭建哨兵模式

cd /home/soft/redis/config vi sentinel-26379.conf : port 26379sentinel monitor mymaster 192.168.75.10 6379 2 vi sentinel-26380.conf :port 26380sentine ......
哨兵 模式 docker redis

HDFS集群搭建：伪分布式

Hadoop集群的启动方式之一：伪分布式，特征是几个角色在相同的服务节点，细节讲解了如何做基础环境配置等。 ......
分布式 集群 HDFS

分布式锁

# zk分布式锁 海豚调度通过zk来做分布式锁，保证同一个时刻只有一台Master的scheduler来执行 或者只有一台worker执行任务的提交 ## 1.zk分布式锁核心流程算法 ![image](https://img2023.cnblogs.com/blog/680792/202307/6 ......
分布式

JAVA设计模式之建造者模式

设计模式 设计模式（Design Pattern）是前辈们对代码开发经验的总结，是解决特定问题的一系列套路。它不是语法规定，而是一套用来提高代码可复用性、可维护性、可读性、稳健性以及安全性的解决方案。 总体来说设计模式分为三大类： 创建型模式，共五种：工厂方法模式、抽象工厂模式、单例模式、建造者模式 ......
模式 设计模式 JAVA

分布式锁解决集群下的方法抢占执行

问题描述： 启动两台heima-leadnews-schedule服务，每台服务都会去执行refresh定时任务方法 分布式锁：控制分布式系统有序的去对共享资源进行操作，通过互斥来保证数据的一致性。 分布式锁的解决方案： sexnx （SET if Not eXists） 命令在指定的 key 不存 ......
分布式 集群 方法

数据仓库MPP架构&分布式架构

数据仓库MPP架构&分布式架构 一、MPP架构 1.1MPP架构概述 MPP（Massively Parallel Processing）架构是一种分布式数据处理技术，能够通过将工作负载分散到多个节点上来提高数据处理性能。与传统的共享架构不同，MPP采用非共享架构（Share Nothing），将单 ......
架构 分布式 仓库 数据 MPP

分布式锁

1 mysql唯一键 2 redis lua脚本保证原子性 setnx expire 看门狗保证执行的时间大于锁的时间 为了避免其他人误删除 值和对应的用户一一对应 保证唯一 比如值为uid 3 redisson 4 redis多台奇数master 超过一般就获取锁成功 5 zk 参考 https: ......
分布式

分布式数据库 Join 查询设计与实现浅析

相对于单例数据库的查询操作，分布式数据查询会有很多技术难题。本文记录 Mysql 分库分表 和 Elasticsearch Join 查询的实现思路，了解分布式场景数据处理的设计方案。 文章从常用的关系型数据库 MySQL 的分库分表Join 分析，再到非关系型 ElasticSearch 来分析... ......
分布式 数据库 数据 Join

【操作教程】EasyCVR视频融合平台鉴权模式的两种配置方式

在视频功能上，EasyCVR可提供视频监控直播、视频轮播、视频录像、云存储、回放与检索、智能告警、服务器集群、语音对讲、云台控制、电子地图、平台级联等。视频画面支持1、4、9、16个画面窗口播放，同时播放多路视频流。 ......
EasyCVR 模式 方式 教程 视频

6.29 celery分布式异步任务框架

1.celery：分步式异步任务框架 /1 异步任务 /2 延迟任务 /3 定时任务 /4 celery架构 消息中间件（broker）：消息队列：可以使用redis，rabbitmq 任务执行单元（worker）：执行单元 执行提交的任务 任务执行结果存储（banckend）：可以使用mysql， ......
分布式 框架 任务 celery 6.29

分布式事务实践-seata

Seata 是一款开源的分布式事务解决方案，致力于提供高性能和简单易用的分布式事务服务。 Seata 将为用户提供了 AT、TCC、SAGA 和 XA 事务模式，为用户打造一站式的分布式解决方案。 官网：https://seata.io/zh-cn/docs/overview/what-is-sea ......
分布式 事务 seata

读发布！设计与部署稳定的分布式系统（第2版）笔记19_基础层之设备

![](https://img2023.cnblogs.com/blog/3076680/202307/3076680-20230703164452820-448646113.png) # 1. 物理主机 ## 1.1. 以前数据中心硬件就是建立在单个物理机器的高可靠性上的 ## 1.2. 如今通过 ......
基础层 分布式 基础 笔记 设备

Java设计模式——23种设计模式总结

一、什么是设计模式 设计模式（Design pattern）是一套被反复使用、多数人知晓的、经过分类编目的、代码设计经验的总结。使用设计模式是为了可重用代码、让代码更容易被他人理解、保证代码可靠性。 毫无疑问，设计模式于己于他人于系统都是多赢的，设计模式使代码编制真正工程化，设计模式是软件工程的基石 ......
设计模式 模式 Java

java23种设计模式—— 一、设计模式介绍

Java23种设计模式全解析 一、设计模式简介 设计模式（Design pattern）代表了最佳的实践，通常被有经验的面向对象的软件开发人员所采用。设计模式是软件开发人员在软件开发过程中面临的一般问题的解决方案。这些解决方案是众多软件开发人员经过相当长的一段时间的试验和错误总结出来的。 设计模式是 ......
设计模式 模式 java 23

Java23种设计模式和六大设计原则

1、设计模式的六大原则 ☛开闭原则 对扩展开放，对修改关闭。在程序需要进行拓展的时候，不能去修改原有的代码，实现一个热插拔的效果。简言之，是为了使程序的扩展性好，易于维护和升级。想要达到这样的效果，我们需要使用接口和抽象类，后面的具体设计中我们会提到这点。 ☛里氏代换原则 里氏代换原则是面向对象设计 ......
设计模式 原则 模式 Java 23

PlayWright（十二）- PO模式

1、PO模式是什么？ PO，即Page Object，直译为页面对象，代表 Web 应用程序的一部分 具体什么意思呢，通俗来讲，一个页面有输入、点击、搜索功能，而且有很多页面，这时候我们就采用每个页面作为一个单独的page对象来维护编写，避免重复代码，层级也清晰，便于维护 2、以百度首页搜索为实例 ......
PlayWright 模式

基于Redis分布式缓存

1.安装包 使用Redis分布式缓存需要安装Redis的支持包，可以通过nuget命令安装，如下： install-package Microsoft.Extensions.Caching.StackExchangeRedis 2.在Program.cs文件中注册 builder.Services. ......
分布式 缓存 Redis

.Net下验证MongoDB 的 Linq 模式联合查询是否可用

MongoDB.Driver 类库提供了 Linq 查询的支持。然而，在使用 Linq 进行联合查询时，是否能够正确转换为 MongoDB 底层的查询语句还有待验证。今天，我将进行实验来验证一下。 ## 输出查询语句 首先，通过订阅 MongoClientSettings 的功能，将查询语句输出。 ......
MongoDB 模式 Linq Net

NLP | 数据集独立同分布的理解

在自然语言处理（NLP）中，**独立同分布是指一个数据集中的样本是从同一个总体分布中独立采样而来的**。这意味着数据集中的**每个样本都具有相同的概率分布**，并且这些样本之间是相互独立的，即**一个样本的出现不会影响其他样本的出现**。 例如，如果我们收集了一组用于训练文本分类器的新闻文章，并且这 ......
数据 NLP

分布式事务的几种实现方式

## 基础理论 ### CAP理论 一致性（Consistency） ：在分布式系统中所有的数据备份，在同一时刻都保持一致状态，如无法保证状态一致，直接返回错误； 可用性（Availability）：在集群中一部分节点故障，也能保证客户端访问系统并得到正确响应，允许一定时间内数据状态不一致； 分区容 ......
分布式 事务 方式

sv dist+Verilog 随机数及概率分布

1，sv dist 转自： https://zhidao.baidu.com/question/1705149255835699740.htmlSystemverilog中权重分布由操作符dist实现，百有两种形式：“：=”或“：/”。“：=”表示值的权重是相等的，“：/”表示值的权重是均分度的。权 ......
随机数 概率 Verilog dist sv

【Spring】事务传播机制

1、事务的实现思想 在spring中要想某个方法具有事务，只要在方法前加一个@Transactional注解。然后spring就会利用aop思想，在这个方法执行前开启事务， 在方法执行后选择提交事务或者回滚事务。 2、7种事务传播机制 @Transactional(propagation = Pro ......
机制 事务 Spring

Python中对open读取文件内容时的mode模式解析

### 1.Python可以使用open函数来实现文件的打开，关闭，读写操作； Python3中的open函数定义为： ```python open(file, mode='r', buffering=None, encoding=None, errors=None, newline=None, c ......
模式 文件 内容 Python open

《面向分布式云的直播及点播云技术创新方案》获中国信通院“分布式云技术创新先锋案例”

由中国信息通信研究院、中国通信标准化协会主办的第三届“云边协同大会”于 6 月 30 日在京举办。阿里云视频云团队凭借《面向分布式云的直播及点播云技术创新方案》在一众产品服务中脱颖而出，荣获「分布式云技术创新先锋案例」。 面向分布式云技术的直播及点播云服务在资源编排上基于多 Kubernetes，整 ......
分布式 技术创新 技术 案例 方案

DDD领域设计模式

微服务设计为什么要选择DDD？ 其实最近几年微服务架构的思想越来越普及，很多企业已经或者尝试从单体架构向微服务架构转型。微服务也成为很多中大型企业实施中台战略的不二之选。但是在微服务实施过程中有很多问题，单体应用到底应该如何去拆分微服务？边界到底怎么划分？微服务这个微字到底如何衡量，到底拆成到什么粒 ......
设计模式 领域 模式 DDD

应用技术架构 —— 分布式应用多运行时架构

应用技术架构 —— 分布式应用多运行时架构 发布于 2022-03-16 09:25:14 1K0 举报 本文作者：何文强 — CODING 高级解决方案架构师 具有一线互联网、物联网独角兽、全国股份制银行、新型智慧交通等跨行业从业经历，历任 Java 开发高级工程师、DevOps 技术专家、高级研 ......
架构 分布式 应用技术 技术

数据库内核：PostgreSQL 事务

# 事务处理 > 事务简介 事务是一个应用层面的操作 ，通过一系列的数据库操作执行。一个事务会影响数据库的状态。 ![事务对数据库的影响](https://img2023.cnblogs.com/blog/2306858/202307/2306858-20230704141717330-112468 ......
内核 PostgreSQL 事务 数据库 数据

大连人工智能计算平台——华为昇腾AI平台——高性能计算HPC的单任务task的多CPU运行模式

超算是离我们平时生活比较远的一个事情，即使是对于一个计算机专业方向的学生来说，正好实验室得到了华为的超算平台的使用账号，于是就摸索了一下，不得不承认这个东西确实不是普通人能搞的明白的。 基本概念： 一个工作Job可以开多个副本，每个副本都是mpirun -N 所开出的，每个副本又被叫做任务task， ......
平台 人工智能 高性能 人工 任务

Windows 环境下Docker 安装伪分布式 Hadoop

# 1、环境 Windows 11 Docker 20.0.2 # 2、拉取镜像 我选择 ubuntu20.04： ```powershell docker pull ubuntu:20.04 ``` ![在这里插入图片描述](https://img-blog.csdnimg.cn/6d91edc5 ......
分布式 Windows 环境 Docker Hadoop
共7000篇  :106/234页 首页上一页106下一页尾页