redis答卷 分布式 缓存
.NET使用分布式网络爬虫框架DotnetSpider快速开发爬虫功能
前言 前段时间有同学在微信群里提问，要使用.NET开发一个简单的爬虫功能但是没有做过无从下手。今天给大家推荐一个轻量、灵活、高性能、跨平台的分布式网络爬虫框架（可以帮助 .NET 工程师快速的完成爬虫的开发）：DotnetSpider。 注意：为了自身安全请在国家法律允许范围内开发网络爬虫功能。 框 ......
docker desktop 运行的 mysql、redis连接不上
docker desktop 运行的docker实例不能连接使用 原因：映射的宿主机端口没有写 填上端口号就好了 ......
分布式系统-异步
异步，是分布式系统重要的设计原则之一。 为什么异步很重要呢？ 试想一个场景，在电商业务中，用户下单并支付成功后，需要给店家推送一个消息，告诉店家来订单了，抓紧发货。 这个推送功能，如果和支付回调接口做成同步，会有什么问题呢？ 要知道，系统总是不可能绝对稳定的。如果推送接口异常或者超时了，主流程就会受 ......
分布式系统-负载均衡
分布式系统中，业务系统都是集群部署，而且一般会做微服务化。那么，从一个系统rpc请求到另一个系统，应该路由到哪一台节点呢？这，就涉及到负载均衡。 负载均衡的核心，便是负载均衡算法，算法有很多，主要介绍其中六种，并说一说各自算法的优缺点。 1. 加权随机 加权随机，顾名思义，就是路由到哪一台节点，是通 ......
npm、yarn、pnpm 如何删除缓存文件?
1.简介 在前端工程化的环境下，频繁的安装、更新、移除依赖，总会产生一些不活跃的 npm 依赖包，一直隐藏在某个角落里。 2.NPM 2.1.查看缓存路径 npm config get cache 2.2.删除缓存 npm cache clean --force 3.YARN 3.1.查看缓存路径 ......
分布式资源调度框架YARN
1、YARN=Yet Another Resource Negotiator 2、主从架构，一主多从3、主=ResourceManager,从=NodeManager4、ResourceManager由ApplicationManager和ResourceScheduler组成5、NodeManag ......
学习笔记—缓存穿透、缓存雪崩、缓存击穿
缓存穿透 定义：缓存穿透指的查询缓存和数据库(缓存找不到就会在数据库找)中都不存在的数据，这样每次请求直接打到数据库，就好像缓存不存在一样。 例:“当查询数据库时如果没有查询到数据，则直接返回Null给前端用户，流程结束”，如果前端频繁发起访问请求时，恶意提供数据库中不存在的Key，则此时数据库中查 ......
redis分布式锁实现原理
在.net core 中，可以使用StackExchange.Redis实现redis分布式锁， /// <summary>/// 分布式锁/// </summary>/// <param name="Redis">RedisDB</param>/// <param name="Key">锁标识</ ......
redis集群双活-数据迁移
一、redis双活 1、集群搭建 （一主两从） Redis-Sentinel是redis官方推荐的高可用性解决方案，sentinel哨兵是特殊的redis服务，不提供读写服务，主要用来监控redis实例节点，当用redis作master-slave的高可用时，如果master本身宕机，redis本身 ......
分布式系统的困难点
分布式系统在技术上需要注意的问题 问题1：异构系统的不标准问题 问题2：系统架构中的服务依赖性问题 问题3：故障发生的概率更大 问题4：多层架构的运维复杂度更大 ......
2台机器安装Redis主从
2台机器安装Redis主从 1. 配置redis.conf（主） bind 127.0.0.1 #注释掉 protected-mode no #关闭保护模式 daemonize yes #开启后台守护进程 logfile "/var/log/redis/redis.log" #日志文件路径 2.配置 ......
Windows 下部署Redis 主从模式+哨兵模式+JAVA连接方式
原文：Windows 下部署Redis 主从模式+哨兵模式+JAVA连接方式_java redis部署-CSDN博客 前言之前项目需求部署redis高可用，走了很多弯路以及相关配置来回折腾浪费了很多时间，特地记录下。 主从模式：实现多台redis实例进行服务运行，并且数据相互同步；哨兵模式：实现主服 ......
redis
简介： Redis（Remote Dictionary Server）是一个开源的高性能键值存储系统，它支持多种数据结构，包括字符串（String）、哈希（Hash）、列表（List）、集合（Set）和有序集合（Sorted Set）等。Redis以内存中的数据结构来存储数据，并通过持久化机制将数据 ......
分布式事务-Seata解决方案
一、定义 Seata解决方案是分布式事务解决方案之一。常用的分布式事务解决方案有：2PC,3PC,TCC,SAGA(seata)、本地消息表、MQ消息事务、最大努力通知。 Seata是一款分布式解决方案，致力于提供高性能和简单易用的分布式事务服务。提供事务模式有：AT,TCC,SAGA,XA。其中A ......
Redis发布订阅
是什么 是一种消息通信模式：发送者(PUBLISH)发送消息，订阅者(SUBSCRIBE)接收消息，可以实现进程间的消息传递。 Redis可以实现中间件的MQ功能，通过发布订阅实现消息的引导和分流。 能干嘛 Redis客户端可以订阅任意数量的频道，类似我们微信关注多个公众号。 当有新消息通过PUBL ......
分布式主键
核心概念 :: ShardingSphere https://shardingsphere.apache.org/document/current/cn/features/sharding/concept/ 分布式主键 传统数据库软件开发中，主键自动生成技术是基本需求。而各个数据库对于该需求也提供了 ......
Using Redis with FastAPI
Using Redis with FastAPI https://developer.redis.com/develop/python/fastapi/ https://github.com/fanqingsong/fastapi-redis-tutorial FastAPI is a Python ......
JAVA操作Redis工具类
import lombok.extern.slf4j.Slf4j; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.data.redis.core.RedisTempl ......
【项目学习】谷粒商城学习记录4 - 高级篇（性能压测 & 缓存）
【项目学习】谷粒商城学习记录4 - 高级篇（性能压测 & 缓存） 一、性能压测 1、Jmeter (1) Jmeter安装 jmeter官网download页 选择支持java 8+的.zip版本下载，解压后打开bin/jemter.bat, 并修改语言 2、Nginx动静分离 为什么要动静分离？ ......
Spring Boot 3.2项目中使用缓存Cache的正确姿势！！!
你是否曾想过为什么在 Spring Boot 应用中缓存是如此重要？答案在于它通过减少数据检索时间来提高性能。在本文中，我们将深入探讨缓存对微服务模式的影响，并探讨根据操作易用性、速度、可用性和可观测性等因素选择正确缓存的重要性。我们还将探讨如何最大程度地提高缓存性能和可用性。 1 缓存实现 1.1 ......
69.将ip段写入到redis白名单
import redis # Redis连接信息 redis_host = 'hostname' redis_port = 6379 redis_password = 'passwd' redis_db = 5 # 选择数据库5 # 连接到Redis服务器 redis_client = redis. ......
67.redis批量写入ip地址脚本
#要使用Python脚本连接到Redis主机、选择数据库、并执行设置操作，你可以使用redis库。请确保在运行脚本之前安装了该库（可以通过运行pip install redis安装）。 import redis import re # Redis连接信息 redis_host = 'hostname ......
68.删除redis中whiteKey开头的值
import redis # Redis连接信息 redis_host = 'hostname' redis_port = 6379 redis_password = 'passwd' redis_db = 5 # 选择数据库5 # 连接到Redis服务器 redis_client = redis. ......
Redis
Redis笔记 一、常用命令 登录 redis-cli auth password 二、数据类型 string String的数据结构为简单动态字符串（Simple Dynamic String，缩写SDS）。是可以修改的字符串，内部结构上类似于Java的ArrayList，采用分配冗余空间的方式来 ......
Redis集群
Redis Sentinel： 什么是 Sentinel？ 有什么用？ Sentinel 如何检测节点是否下线？主观下线与客观下线的区别? Sentinel 是如何实现故障转移的？ 为什么建议部署多个 sentinel 节点（哨兵集群）？ Sentinel 如何选择出新的 master（选举机制）? ......
Zookeeper——分布式一致性协议及Leader选举原理
一、引言 随着业务的增长，单体架构发展为分布式架构，大大提升了业务的处理能力，但同时也带来了很多单体架构不存在的问题，如： 各节点之间网络通信的异常以及因其引起的脑裂问题（网络分区）。 引出“三态”。在单体架构中只会存在“成功”或“失败”两种结果，但是在分布式架构中由于网络异常将会出现“未知”的结果 ......
Redis管道
背景 Redis是一种基于客户端-服务端模型以及请求/响应协议的TCP服务。一个请求会遵循以下步骤： 1 客户端向服务端发送命令分四步(发送命令→命令排队→命令执行→返回结果)，并监听Socket返回，通常以阻塞模式等待服务端响应。 2 服务端处理命令，并将结果返回给客户端。 上述两步称为：Roun ......
使用分布式事务 Seata 的 TCC 模式
Seata 的 TCC 模式需要通过人工编码来实现数据的回滚恢复，有点麻烦，但是性能最高。TCC 是 3 个方法的首字母缩写，即 Try 方法、Confirm 方法、Cancel 方法。Try 方法进行资源的检查和冻结，Confirm 方法是当所有事务都成功后调用的方法，Cancel 方法是当整体事 ......
Seata 分布式事务
Seata 分布式事务 #Seata中间件# Seata是 2019 年 1 月份蚂蚁金服和阿里巴巴共同开源的分布式事务解决方案。致力于提供高性能和简单易用的分布式事务服务，为用户打造一站式的分布式解决方案。 官网地址：http://seata.io/ CAP定理和Base理论 这两个在前面弄N ......