526互联

分布式 黑马 实战redis

HDFS集群搭建：完全分布式

本文介绍了HDFS集群中单点故障：HDFS-HA解决方案以及因此引入的Journal Node、ZKFC、Active NameNode切换过程以及HA环境搭建启动等细节。 ......
分布式 集群 HDFS

【笔试实战】LeetCode题单刷题-编程基础 0 到 1【三】

博客推行版本更新，成果积累制度，已经写过的博客还会再次更新，不断地琢磨，高质量高数量都是要追求的，工匠精神是学习必不可少的精神。因此，大家有何建议欢迎在评论区踊跃发言，你们的支持是我最大的动力，你们敢投，我就敢肝 ......
笔试 实战 LeetCode 基础

数据库任务定时同步到redis

把数据库任务定时存储到redis：当前时间 < 执行时间 <= 预设时间(当前时间+5分钟) 预加载：如果任务量特别大，一次将数据库所有future任务全都加载到redis内存，可能会导致阻塞。 1.清理缓存中的数据 2.查询小于未来5分钟的所有任务 3.新增任务到redis /** * 数据库任务 ......
任务 数据库 数据 redis

redis 用docker搭建哨兵模式

cd /home/soft/redis/config vi sentinel-26379.conf : port 26379sentinel monitor mymaster 192.168.75.10 6379 2 vi sentinel-26380.conf :port 26380sentine ......
哨兵 模式 docker redis

美团特供IDEA入门实战笔记CSDN显踪，竟无良程序员白嫖后举报下架

今天给大家带来的是：黄文毅，罗军老师著的 《IntelliJ IDEA入门与实战》 黄文毅，罗军是谁？ 黄文毅，CSDN博客专家，架构师。先后就职于厦门星耀蓝图、厦门美图、上海美团等公司。主要从事Java开发工作，具有丰富的软件开发经验，熟悉Java、高并发、分布式及相关的软件架构。出版《分布式微服 ......
程序员 实战 笔记 程序 IDEA

redis用docker 部署主从

docker pull redis cd /home/soft mkdir -p redis/configmkdir -p redis/data/data6379 redis/data/data6380 redis/data/data6381 cd /home/soft/redis/config v ......
主从 docker redis

【Redis】八股文(一)

### 什么是Redis - 基于key-value存储结构的NoSQL数据库 - 提供了String, Map, Set, ZSet, List等多种数据类型 - 功能丰富：支持发布订阅模式，能够为数据设置过期时间，能够对数据进行持久化，支持分布式存储和读写分离，支持创建事务 - 性能高：基于内存 ......
八股文 八股 Redis

HDFS集群搭建：伪分布式

Hadoop集群的启动方式之一：伪分布式，特征是几个角色在相同的服务节点，细节讲解了如何做基础环境配置等。 ......
分布式 集群 HDFS

分布式锁

# zk分布式锁 海豚调度通过zk来做分布式锁，保证同一个时刻只有一台Master的scheduler来执行 或者只有一台worker执行任务的提交 ## 1.zk分布式锁核心流程算法 ![image](https://img2023.cnblogs.com/blog/680792/202307/6 ......
分布式

redis初探——redis配置和redis的数据类型简述

0.Redis，启动！ 安装工作完成以后，我们需要到redis的目录下打开cmd，输入redis-server.exe redis.windows.conf，此时的界面应该如下 出现这样的界面代表成功，如果是其他的界面例如： 这个代表端口被占用，可能是之前开启的服务没有关闭，我们输入以下代码即可。 ......
redis 类型 数据

分布式锁解决集群下的方法抢占执行

问题描述： 启动两台heima-leadnews-schedule服务，每台服务都会去执行refresh定时任务方法 分布式锁：控制分布式系统有序的去对共享资源进行操作，通过互斥来保证数据的一致性。 分布式锁的解决方案： sexnx （SET if Not eXists） 命令在指定的 key 不存 ......
分布式 集群 方法

数据仓库MPP架构&分布式架构

数据仓库MPP架构&分布式架构 一、MPP架构 1.1MPP架构概述 MPP（Massively Parallel Processing）架构是一种分布式数据处理技术，能够通过将工作负载分散到多个节点上来提高数据处理性能。与传统的共享架构不同，MPP采用非共享架构（Share Nothing），将单 ......
架构 分布式 仓库 数据 MPP

Sentieon实战：NGS肿瘤变异检测流程

肿瘤基因突变检测是NGS的一个重要应用，其分析难点主要在于低频变异的准确性。不同于遗传病检测，肿瘤样本类型多样，测序方法和参数复杂，且缺乏对应各种场景的公共标准真集。再加上常用开源软件经常遇到的准确性低，稳定性差，速度慢等问题。这使得广大诊断公司在评估肿瘤变异检测工具、搭建高效稳定的生信流程上，面临 ......
变异 肿瘤 实战 Sentieon 流程

分布式锁

1 mysql唯一键 2 redis lua脚本保证原子性 setnx expire 看门狗保证执行的时间大于锁的时间 为了避免其他人误删除 值和对应的用户一一对应 保证唯一 比如值为uid 3 redisson 4 redis多台奇数master 超过一般就获取锁成功 5 zk 参考 https: ......
分布式

分布式数据库 Join 查询设计与实现浅析

相对于单例数据库的查询操作，分布式数据查询会有很多技术难题。本文记录 Mysql 分库分表 和 Elasticsearch Join 查询的实现思路，了解分布式场景数据处理的设计方案。 文章从常用的关系型数据库 MySQL 的分库分表Join 分析，再到非关系型 ElasticSearch 来分析... ......
分布式 数据库 数据 Join

6.29 celery分布式异步任务框架

1.celery：分步式异步任务框架 /1 异步任务 /2 延迟任务 /3 定时任务 /4 celery架构 消息中间件（broker）：消息队列：可以使用redis，rabbitmq 任务执行单元（worker）：执行单元 执行提交的任务 任务执行结果存储（banckend）：可以使用mysql， ......
分布式 框架 任务 celery 6.29

分布式事务实践-seata

Seata 是一款开源的分布式事务解决方案，致力于提供高性能和简单易用的分布式事务服务。 Seata 将为用户提供了 AT、TCC、SAGA 和 XA 事务模式，为用户打造一站式的分布式解决方案。 官网：https://seata.io/zh-cn/docs/overview/what-is-sea ......
分布式 事务 seata

读发布！设计与部署稳定的分布式系统（第2版）笔记19_基础层之设备

![](https://img2023.cnblogs.com/blog/3076680/202307/3076680-20230703164452820-448646113.png) # 1. 物理主机 ## 1.1. 以前数据中心硬件就是建立在单个物理机器的高可靠性上的 ## 1.2. 如今通过 ......
基础层 分布式 基础 笔记 设备

国产开源流批统一的数据同步工具Chunjun入门实战

前面我们学习过SeaTunnel这个优秀数据集成平台，今天再来研究一个与之相似开源产品ChunJun，原名为FlinkX其比SeaTunnel开源更早，本篇从了解其概况和特性；然后通过源码编译的方式部署，暂时先通过简单的Local和Standalone两种提交任务方式，通过几个示例一步步演示如何通过... ......
源流 实战 国产 Chunjun 工具

“阿里爸爸”上新！《2023阿里Java性能调优手册（实战参考）》

为什么要学Java性能调优？ 现在去学性能调优还有用么？ 现在行业变化太快，裁员缩招屡见不鲜，而应对的方法即是--核心竞争力。打磨自己的专业技能，成为本职行业的前百分之二十，行业再怎么变动，你总能安身立命。 在任何一个细分领域内，成为前1%，拼的是天赋，是智力决定的。但若仅仅想要成为20%，成为被二 ......
实战 爸爸 性能 手册 2023

Redis集群、部署Redis集群

Redis集群 集群概述 所谓集群，就是通过添加服务器的数量，提供相同的服务，从而让服务器达到一个稳定、高效的状态 单个redis存在不稳定性。当redis服务宕机了，就没有可用的服务了 单个redis的读写能力是有限的 Redis集群是为了强化redis的读写能力 redis集群中，每一个redi ......
集群 Redis

Redis 6.0 新特性-多线程连环13问！

导读：支持多线程的Redis6.0版本于2020-05-02终于发布了，为什么Redis忽然要支持多线程？如何开启多线程？开启后性能提升效果如何？线程数量该如何设置？开启多线程后会不会有线程安全问题？多线程的实现原理是怎样的？带着这些疑问，我们来开启Redis新特性-多线程连环13问。 image ......
线程 特性 Redis 6.0

SpringBoot3.0从入门到项目实战：解决Web应用痛点的最新解决方案

SpringBoot3.0从入门到项目实战：解决Web应用痛点的最新解决方案 SpringBoot是当前Java领域中应用最广的框架之一，而随着SpringBoot 3.0的发布，它迎来了更加全面和强大的一次升级。本文将深入浅出地介绍SpringBoot 3.0的新特性，同时结合实际项目经验，分享W ......
痛点 SpringBoot3 SpringBoot 实战 解决方案

Redis

[toc] # 一、Redis介绍 ```python # Redis ：软件，存储数据的，速度非常快，redis是一个key-value存储系统（没有表的概念），cs架构的软件 -服务端 客户端（python作为客户端，java，go，图形化界面，命令窗口的命令） # es：存数据的地方 ``` ......
Redis

JavaCV的摄像头实战之十四：口罩检测

### 欢迎访问我的GitHub > 这里分类和汇总了欣宸的全部原创(含配套源码)：[https://github.com/zq2599/blog_demos](https://github.com/zq2599/blog_demos) ### 本篇概览 - 本文是《JavaCV的摄像头实战》系列的 ......
口罩 实战 摄像头 JavaCV

基于Redis分布式缓存

1.安装包 使用Redis分布式缓存需要安装Redis的支持包，可以通过nuget命令安装，如下： install-package Microsoft.Extensions.Caching.StackExchangeRedis 2.在Program.cs文件中注册 builder.Services. ......
分布式 缓存 Redis

NLP | 数据集独立同分布的理解

在自然语言处理（NLP）中，**独立同分布是指一个数据集中的样本是从同一个总体分布中独立采样而来的**。这意味着数据集中的**每个样本都具有相同的概率分布**，并且这些样本之间是相互独立的，即**一个样本的出现不会影响其他样本的出现**。 例如，如果我们收集了一组用于训练文本分类器的新闻文章，并且这 ......
数据 NLP

rabbitmq在springboot中实战技巧

# 一.简介 rabbitmq是基于AMQP（Advanced Message Queuing Protocol：高级消息队列协议），采用Erlang语言编写的消息队列。 # 二、mq能用来做什么 - **异步处理**：将非核心业务（比如日志、邮件、监控等）从主流程剥离，提升主流程的响应时效。 - ......
springboot 实战 rabbitmq 技巧

redis实现延迟任务

1、添加任务到数据库 2、判断当前任务的执行时间 执行时间<=当前时间：存储到 list（当前消费队列） 当前时间<执行时间<=预设时间(预设时间=当前时间+5分钟)：存储zset （未来数据队列），定时刷新从zset中将任务存入list。 一、添加任务 1、创建task类，用于接收添加任务的参数 ......
任务 redis

Spring boot 1.x 升级2.x, swagger,redis 升级

# Spring boot 1.x 升级2.x boot 1.5.22 -> 2.7.0 swagger 2.9.2 -> 3.0.0 spring-data-redis 1.8.4.RELEASE -> 2.7.0 ## swagger: ```<dependency> <groupId>io.s ......
swagger Spring redis boot
共7000篇  :108/234页 首页上一页108下一页尾页