实战 短信redis

分拣平台API安全治理实战 | 京东物流技术团队

导读 本文主要基于京东物流的分拣业务平台在生产环境遇到的一些安全类问题,进行定位并采取合适的解决方案进行安全治理,引出对行业内不同业务领域、不同类型系统的安全治理方案的探究,最后笔者也基于自己在金融领域的经验进行了关于API网关治理方案的分享。 写在前面 随着互联网应用的多元化、复杂化、服务化成为显 ......
物流技术 实战 团队 物流 平台

高性能MySQL实战(二):索引 | 京东物流技术团队

我们在上篇 高性能MySQL实战(一):表结构 中已经建立好了表结构,这篇我们则是针对已有的表结构和搜索条件为表创建索引。 1. 根据搜索条件创建索引 我们还是先将表结构的初始化 SQL 拿过来: CREATE TABLE `service_log` ( `id` bigint UNSIGNED N ......
物流技术 高性能 实战 索引 团队

Redis缓存数据和表数据一致性之延时双删策略

一、什么是 Redis 延时双删? 1、延迟双删策略是分布式系统中数据库存储和缓存数据保持一致性的常用策略,但它不是强一致。不管哪种方案,都无法绝对避免Redis存在脏数据的问题,只能减轻这个问题 2、因为双删策略执行的结果是把redis中保存的那条数据删除了,以后的查询就都会去查询数据库。经常修改 ......
数据 一致性 缓存 策略 Redis

Redis.conf 详解

一、NETWORK 网络 bind 127.0.0.1 #绑定的 IP protected-mode no #保护模式 port 6379 #端口设置 二、GENERAL 通用 daemonize yes # 以守护进程的方式运行,默认是 no ,我们需要自己开启为 yes pidfile /var ......
Redis conf

我是如何用 redis 分布式锁来解决线上历史业务问题的

近期发现,开发功能的时候发现了一个 mq 消费顺序错乱(历史遗留问题),导致业务异常的问题,看看我是如何解决的 问题抛出 首先,简单介绍一下情况: 线上 k8s 有多个 pod 会去消费 mq 中的消息,可是生产者发送的消息是期望一定要有序去消费,此时要表达的是,例如 生产者如果发送了 3 个通知消 ......
分布式 业务 问题 历史 redis

Redis 缓存击穿,缓存穿透,缓存雪崩原因+解决方案

缓存击穿,缓存穿透,缓存雪崩的原因 缓存击穿:key对应的数据存在,但在redis中过期,此时若有大量并发请求过来,这些请求发现缓存过期一般都会从后端DB加载数据并回设到缓存,这个时候大并发的请求可能会瞬间把后端DB压垮。 缓存穿透:key对应的数据在数据源并不存在,每次针对此key的请求从缓存获取 ......
缓存 雪崩 解决方案 原因 方案

redis客户端2

......
客户端 客户 redis

Redis的几种数据类型

......
类型 数据 Redis

Redis从入门到放弃(12):pipeline管道技术

1、引言 在现代应用程序中,高性能和低延迟是至关重要的因素。而在处理大规模数据操作时,Redis作为一种快速、可靠的内存数据库,成为了许多开发人员的首选。 在Redis中,每个操作都需要与服务器进行往返通信,存在网络开销损耗,当有批量命令执行时,就会有较大的网络开销损耗。为了解决这个问题,Redis ......
管道 pipeline Redis 技术

redis连接失败

本次连接redis失败记录,密码全为0,不加“” 认证会失败 springboot yml配置 密码为0时,要加“” 很经典的错误,记录一下 ......
redis

【Python爬虫实战】爬虫封你ip就不会了?ip代理池安排上

前言 在进行网络爬取时,使用代理是经常遇到的问题。由于某些网站的限制,我们可能会被封禁或者频繁访问时会遇到访问速度变慢等问题。因此,我们需要使用代理池来避免这些问题。本文将为大家介绍如何使用IP代理池进行爬虫,并带有代码和案例。 1. 什么是IP代理池 IP代理池是一种能够动态获取大量代理IP地址的 ......
爬虫 实战 Python

Kubernetes----部署单节点Redis

一、创建ConfigMap (1)首先创建命名空间 kubectl create namespace ospp (2)编写redis-config.yaml文件,内容如下: apiVersion: v1 kind: ConfigMap metadata: name: redis-config nam ......
节点 Kubernetes Redis

redis 事务处理,一旦异常,则回滚

事务操作: RedisTemplate支持事务操作,您可以使用multi()、exec()和discard()来开启、提交或取消事务。 于是使用 /** * redis事务测试 * @author 陈惟鲜 * @date 2023年6月10日 下午2:07:03 * @throws Exceptio ......
事务 redis

redis集群

Redis集群 本章是基于CentOS7下的Redis集群教程,包括: 单机安装Redis Redis主从 Redis分片集群 1.单机安装Redis 首先需要安装Redis所需要的依赖: yum install -y gcc tcl 然后将课前资料提供的Redis安装包上传到虚拟机的任意目录: 例 ......
集群 redis

分享一个 SpringBoot + Redis 实现「查找附近的人」的小技巧

前言 SpringDataRedis提供了十分简单的地理位置定位的功能,今天我就用一小段代码告诉大家如何实现。 正文 1、引入依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-sta ......
SpringBoot 技巧 Redis

redis-实战篇-商户查询缓存

基本思路 添加缓存的原则:动态数据不要加缓存 缓存cache:数据交换的缓冲区。一般读写性能较高。比如浏览器缓存,浏览器会将一些经常使用的数据缓存到本机,这样在多次加载时就不需要访问服务器,而浏览器未命中的缓存则会去tomcat获取。 缓存的作用:降低后端负载、提高读写效率、降低响应时间 缓存的成本 ......
商户 缓存 实战 redis

redis-实战篇-短信登录

黑马点评,前后端分离的架构模式。前端分布在nginx上,后端分布在tomcat。 短信登陆 导入黑马点评项目: 打开项目,重新设置maven仓库位置。更新src/main/resources下的application.yaml中的数据库配置和redis配置。 后端部署: 点击services添加sp ......
实战 短信 redis

Redis的缓存穿透、缓存雪崩、缓存击穿问题及解决方案

Redis的缓存穿透、缓存雪崩、缓存击穿问题及解决方案 缓存穿透问题及解决思路 缓存穿透 :缓存穿透是指客户端请求的数据在缓存中和数据库中都不存在,这样缓存永远不会生效,这些请求都会打到数据库。因为我们查数据通常是现在redis缓存查数据,如果redis没有这个数据,就会去数据库查。如果张三想要搞垮 ......
缓存 雪崩 解决方案 方案 问题

Redis常用概念

Redis数据结构 Redis(Remote Dictionary Server)是一种开源的内存数据库,它支持多种数据结构。Redis的数据结构是其强大之处,它可以用于各种不同的用途,包括缓存、队列、计数器、发布/订阅系统等。以下是Redis支持的主要数据结构: 1. **字符串(String)* ......
概念 常用 Redis

Redis内存管理

1.Redis 给缓存数据设置过期时间有啥用? 因为内存是有限的,如果缓存中的所有数据都是一直保存的话,分分钟直接 Out of memory。 Redis自带了给缓存数据设置过期时间的功能,比如: 127.0.0.1:6379> expire key 60 # 数据在60s后过期 (integer ......
内存 Redis

Linux下安装Redis的详细安装步骤

一.Redis安装 1.下载linux压缩包 【redis-5.0.5.tar.gz】 2.通过FlashFXP把压缩包传送到服务器 3.解压缩 tar -zxvf redis-5.0.5.tar.gz 4.进入redis-5.0.5可以看到redis的配置文件redis.conf 5.基本的环境安 ......
步骤 Linux Redis

查询Redis

......
Redis

python学习笔记-redis缓存数据库

一、缓存数据库介绍 NoSQL (not only sql) redis是业界主流的Key-value nosql数据库之一,和memcached类似 redis优点: 速度快,每秒可执行大约110000设置操作,81000个/每秒的读取操作 支持丰富的数据类型,列表,结合,可排序集合,哈希等 操作 ......
缓存 数据库 笔记 数据 python

多级缓存-Redis缓存预热

......
缓存 Redis

ElasticSearch+Kibana on K8s 讲解与实战操作(版本7.17.3)

目录一、概述二、ElasticSearch 节点类型与作用三、K8s 集群部署四、ElasticSearch on K8s 开始部署1)下载安装包2)构建镜像3)修改yaml编排4)开始部署5)测试6)elasticsearch-head5)卸载五、Kibana 编排部署1)下载安装包2)构建镜像3 ......
ElasticSearch 实战 版本 Kibana K8s

Redis基础

1.什么是Redis Redis是一个基于C语言开发的内存数据库,读写速度非常快,广泛应用于缓存方向。并且,Redis存储的是KV键值对数据。 Redis内置了多种数据类型实现(比如 String、Hash、Sorted Set、Bitmap)。并且,Redis 还支持事务 、持久化、Lua 脚本、 ......
基础 Redis

redis

博客地址:https://www.cnblogs.com/zylyehuo/ 五大数据类型 参考链接:redis学习 string,字符串类型 hash,哈希类型,如同python的dict set,无序集合 zset,有序集合 list,双向队列,向左插入数据,向右插入数据,向左、右,提取数据 r ......
redis

【Redis总结】

【一】Redis介绍与安装 什么是Redis 非关系型数据库和关系型数据库 Redis的特点 Redis的安装 Redis的连接与停止 【二】Redis使用 Redis普通连接与连接池 Redis之字符串操作 Redis之hash类型操作 Redis之列表操作 Redis之其他操作 Redis之管道 ......
Redis

Redis的三大问题

一般我们对缓存读操作的时候有这么一个固定的套路: 如果我们的数据在缓存里边有,那么就直接取缓存的。 如果缓存里没有我们想要的数据,我们会先去查询数据库,然后将数据库查出来的数据写到缓存中。 最后将数据返回给请求 代码例子: 1 @Override 2 public R selectOrderById ......
三大 问题 Redis

【2.0】Redis使用

【一】redis普通链接和连接池 【1】普通链接 from redis import Redis # 建立redis连接 conn = Redis( host='127.0.0.1', # IP port=6379, # 端口 db=0, # 数据库 decode_responses=True # ......
Redis 2.0