分布式 黑马 实战redis

vCenter下标准交换机迁移到分布式交换机

一、在vCenter上创建分布式交换机 可以创建默认端口组,或者后面手动创建 二、添加主机 分配上行链路,选择未使用的物理适配器,建议每台分配两个冗余的物理网卡 管理VMkernel适配器,这里先不迁移 迁移虚拟机网络,这也先不迁移,点完成即可; 三,迁移标准交换机端口组到分布式交换机 右击分布式交 ......
交换机 分布式 vCenter 标准

nginx虚拟主机实战

nginx虚拟主机实战 基于nginx部署网站 虚拟主机指的就是一个独立的站点,具有独立的域名,有完整的www服务,例如网站、FTP、邮件等。 Nginx支持多虚拟主机,在一台机器上可以运行完全独立的多个站点。 一、为什么配置虚拟主机 一些草根流量站长,常会搭建个人站点进行资源分享交流,并且可能有多 ......
实战 虚拟主机 主机 nginx

redis-cli连接并管理redis集群

> 某些场景下,redis集群以内网ip发现节点并提供服务,所以只能在服务器环境下以内网ip访问,此时redis-cli无疑是最可靠的工具。而各种gui工具都傻眼了(当然web ui类工具除外)。 ## redis-cli nodejs版 > redis-cli nodejs版可以脱离redis-s ......
redis 集群 redis-cli cli

通过redis学网络(1)-用go基于epoll实现最简单网络通信框架

![image.png](https://img2023.cnblogs.com/blog/1382767/202306/1382767-20230607105418219-574417823.png) > 本系列主要是为了对redis的网络模型进行学习,我会用golang实现一个reactor网络 ......
网络 网络通信 框架 redis epoll

Redis实现限流的三种方式

一、固定窗口 所谓固定窗口限流即时间窗口的起始和结束时间是固定的,在固定时间段内允许要求的请求数量访问,超过则拒绝;当固定时间段结束后,再重新开始下一个时间段进行计数。 我们可以根据当前的时间,以分钟为时间段,每分钟都生成一个key,用来inc,当达到请求数量就返回一些友好信息。 固定窗口 /** ......
方式 Redis

几种分布式文件系统的优缺点归纳与总结

1、常用的分布式文件系统有以下几种: 1. Hadoop HDFS:Hadoop Distributed File System(HDFS)是Apache Hadoop生态系统的一部分,用于存储和处理大数据。 2. Ceph:Ceph是一个开源的分布式存储系统,提供了高可用性、高性能和可扩展性。 3 ......
优缺点 分布式 文件 系统

【Redis】【缓存】什么是缓存雪崩、击穿、穿透?

1 前言 用户的数据一般都是存储于数据库,数据库的数据是落在磁盘上的,磁盘的读写速度可以说是计算机里最慢的硬件了。 当用户的请求,都访问数据库的话,请求数量一上来,数据库很容易就奔溃的了,所以为了避免用户直接访问数据库,会用 Redis 作为缓存层。 因为 Redis 是内存数据库,我们可以将数据库 ......
缓存 雪崩 Redis

【Redis】【功能】Redis 过期删除策略和内存淘汰策略有什么区别?

1 前言 我们都知道Redis中的key是可以设置过期时间的,那么问题来了,比如到期后是怎么被删除的呢?就是Redis 的「内存淘汰策略」和「过期删除策略」,这两个机制虽然都是做删除的操作,但是触发的条件和使用的策略都是不同的。我们这节就来看看哈。 2 过期时间 如何设置过期时间? 先说一下对 ke ......
Redis 内存 策略 功能

【Redis】【持久化】Redis 大 Key 对持久化有什么影响?

1 前言 这节我们来看看持久化中需要关注的一个问题哈,即Redis 的大 Key 对持久化有什么影响。 2 大 Key 对 AOF 日志的影响 先说说 AOF 日志三种写回磁盘的策略 Redis 提供了 3 种 AOF 日志写回硬盘的策略,分别是: Always,这个单词的意思是「总是」,所以它的意 ......
Redis Key

【Redis】【持久化】RDB 快照是怎么实现的?

1 前言 这节我们来看看持久化方式中的RDB哈。 2 RDB 快照 虽说 Redis 是内存数据库,但是它为数据的持久化提供了两个技术。 分别是「 AOF 日志和 RDB 快照」。 这两种技术都会各用一个日志文件来记录信息,但是记录的内容是不同的。 AOF 文件的内容是操作命令; RDB 文件的内容 ......
快照 Redis RDB

【Redis】【持久化】AOF 持久化是怎么实现的?

1 前言 这节我们来看看持久化方式中的AOF哈。 2 AOF 日志 试想一下,如果 Redis 每执行一条写操作命令,就把该命令以追加的方式写入到一个文件里,然后重启 Redis 的时候,先去读取这个文件里的命令,并且执行它,这不就相当于恢复了缓存数据了吗? 这种保存写操作命令到日志的持久化方式,就 ......
Redis AOF

k8s实战案例之部署redis单机和redis cluster

redis是一款基于BSD协议,开源的非关系型数据库(nosql数据库),作者是意大利开发者Salvatore Sanfilippo在2009年发布,使用C语言编写;redis是基于内存存储,而且是目前比较流行的键值数据库(key-value database),它提供将内存通过网络远程共享的一种服... ......
redis 单机 实战 案例 cluster

分布式缓存

常见缓存中间件:Memcached mongoDB RedisMemcached: 简单 key-value 数据结构,不支持持久化(可重启缓存功能并不算),不支持集群(客户端自己控制),性能强。mongoDB: 数据结构非常全面的文档型数据库,支持持久化,支持集群,性能中等。Redis:技能五种基 ......
分布式 缓存

opennmmlab实战营二期-mmpretrain代码课课(五)

# opennmmlab实战营二期-mmpretrain代码课课(五) [点我:视频课程](https://www.bilibili.com/video/BV1Ju4y1Z7ZE/?share_source=copy_web&vd_source=ffcf9b861e082755b1f5504b717 ......
课课 opennmmlab mmpretrain 实战 代码

EasyExcel实战 自定义动态化导出excel

1.Java操作excel表格,除了运用POI技术,阿里开发一个工具简易操作EasyExcel,接下来我们来实战操作下自定义动态化导出excel,自定义动态化为自定义标题,合并单元格 引入 pom <dependency> <groupId>com.alibaba</groupId> <artifa ......
实战 EasyExcel 动态 excel

期末复习--数据分析之黑马程序员-必背考点

填空:数据分析的目的将隐藏在大批乱的数据集中提炼出有用的数据。Anaconda中包含conda、Python等超过180个科学包及依赖项。Jupyter Notebook是支持实时代码、数学方程、可视化和Markdown的Web应用程序。数组对象ndarray执行一些科学计算。ndarray.ndi ......
数据分析 考点 黑马 程序员 程序

【Redis】Redis 数据类型详解

1 前言 Redis为什么快呢?除了它是内存数据库,使得所有的操作都在内存上进行之外,还有一个重要因素,它实现的数据结构,使得我们对数据进行增删查改操作时,Redis 能高效的处理。 因此,这次我们就来好好聊一下 Redis 数据结构。 注意,Redis 数据结构并不是指 String(字符串)对象 ......
Redis 类型 数据

Redis学习--Redis对过期键的处理

## Redis做RDB备份时对已过期键的处理 【待验证】执行SAVE和BGSAVE所产生的RDB文件不会包含"已过期键"。 ## Redis做RDB加载时对已过期键的处理 在Redis实例加载RDB时,会先加载"已过期键",如果当前实例为主节点则会通过decrRefCount操作来删除"已过期键" ......
Redis

Redis持久化

# Redis持久化 ## RDB持久化 ​ Redis 可以通过创建快照(RDB)来获得存储在内存里面的数据在 **某个时间点** 上的副本,它是经过压缩的二进制文件,用于主从数据传递和数据备份。 ​ Redis有两种方式创建RDB快照: ​ save:主线程进行 ​ **bgsave**:主线程 ......
Redis

Taurus.mvc .Net Core 微服务开源框架发布V3.1.7:让分布式应用更高效。

自首个带微服务版本的框架发布:Taurus.MVC V3.0.3 微服务开源框架发布:让.NET 架构在大并发的演进过程更简单,已经过去快1年了,在这近一年的时间里,版本经历了N个版本的迭代。如今,是时候写文章介绍一下了: ......
分布式 框架 Taurus Core Net

9.4. 分布式与微服务架构

在本章节中,我们将介绍分布式系统和微服务架构的基本概念。分布式系统解决了单体应用面临的可扩展性、高可用性等问题,而微服务架构进一步提升了系统的可维护性和灵活性。 #### 9.4.1. 分布式系统基本概念 分布式系统是由多个独立的计算节点组成的系统,这些节点通过网络进行通信和协作。 分布式系统的主要 ......
分布式 架构

昇腾实战丨DVPP媒体数据处理图片解码问题案例

摘要:本期就分享几个关于DVPP图片解码问题的典型案例,并给出原因分析及解决方法。 本文分享自华为云社区《DVPP媒体数据处理图片解码问题案例》,作者:昇腾CANN 。 DVPP(Digital Vision Pre-Processing)是昇腾AI处理器内置的图像处理单元,通过AscendCL媒体 ......
数据处理 实战 案例 媒体 数据

Ascend C sqrt算子实战

摘要:编写一个Ascend C的sqrt算子,并通过内核调用方式在cpu和npu模式下进行验证。 本文分享自华为云社区《【2023 · CANN训练营第一季】——Ascend C sqrt算子实战》,作者:dayao。 前言 编写一个Ascend C的sqrt算子,并通过内核调用方式在cpu和npu ......
算子 实战 Ascend sqrt

chatglm+langchain本地cpu实战.

#Setup envirnment #大概使用59个G内存. conda create -n langchain python=3.8.1 -y conda activate langchain # 拉取仓库 git clone https://github.com/imClumsyPanda/la ......
实战 langchain chatglm cpu

使用snap安装Redis并配置外网访问和访问密码

# 使用snap安装Redis并配置外网访问和访问密码 Redis是一个流行的开源内存数据库,用于处理数据存储和缓存。在本文中,我们将介绍如何使用snap安装Redis,并通过Redis的CLI(命令行界面)来配置外网访问和访问密码。 snap是一种用于在Linux系统上安装软件的包管理器,它提供了 ......
密码 Redis snap

seata的分布式事务处理机制

1、启动时,自动代理数据源,应用GlobalTransactionalInterceptor,初始化TM和RM 2、进入@GlobalTransactional业务方法时,TM向TC发请求申请开启全局事务,并获得全局事务ID 3、业务方法调用远程服务接口完成业务处理 4、RM执行本地逻辑,注册分支事 ......
处理机 分布式 事务 seata

应用问题解决-分布式锁(LUA保证删除原子性)

问题:删除操作缺乏原子性 场景 1、index1获得锁、执行具体操作、比较lock的uuid值确实和自己生成的uuid是否相等,相等则删除锁。 uuid = v1 set(lock, uuid) uuid.equals(get("lock")) 2、但是index1执行删除前,lock刚好过期时间已 ......
分布式 原子 问题 LUA

python redis 链接集群 阿里云集群

**前言** 集群redis不支持选db cluster方法里没有支持选中db的选项,java py 都不行 ``` python # pip install redis==3.5.3 # pip install redis-py-cluster==2.1.3 # 亲测,我是使用的这两个版本进行处理 ......
集群 链接 python redis

SpringBoot 大型线上商城项目实战总结

# SpringBoot 大型线上商城项目实战总结 知识点和可以借鉴到自己项目的点: ## 分页逻辑的处理操作 ​ 这里没有使用封装好的分页处理的相关工具类,而是自己去写分页封装的逻辑代码,帮助我们去了解分页操作的底层逻辑。 ​ 一个是**PageQueryUtil**工具类,这个工具类是作为分页查 ......
SpringBoot 实战 商城 项目

canal+RabbitMQ实现Redis与Mysql解决双写一致性

# canal+RabbitMQ实现Redis与Mysql的数据最终一致性问题 ## 配置mysql(windows版本) ![image-20230603221946517](https://img2023.cnblogs.com/blog/2415626/202306/2415626-20230 ......
一致性 RabbitMQ canal Mysql Redis