分布式 黑马 实战redis
如何在kubernetes中实现分布式可扩展的WebSocket服务架构
如何在kubernetes中实现分布式可扩展的WebSocket服务架构 How to implement a distributed and auto-scalable WebSocket server architecture on Kubernetes一文中虽然解决是WebSocket长连接问 ......
高性能MySQL实战（三）：性能优化 | 京东物流技术团队
这篇主要介绍对慢 SQL 优化的一些手段，而在讲解具体的优化措施之前，我想先对 EXPLAIN 进行介绍，它是我们在分析查询时必要的操作，理解了它输出结果的内容更有利于我们优化 SQL。为了方便大家的阅读，在下文中规定类似 key1 的表示二级索引，key_part1 表示联合索引的第一部分，uni ......
web前端入门到实战：HTML5基础-新增标签+新增属性+布局案例
html5中常用的结构标签 article 文章 header 头部 nav 导航 section 区域 aside 侧边栏 hgroup 区块的相关信息 figure 定义一组内容及标题 figcaption 定义figure元素的标题 footer 底部 dialog 对话框 使用习惯： hea ......
Redis线程问题
Redis是单线程的吗 工作线程是单线程的，但是后台还有和IO有关、aof刷盘，释放内存，处理关闭文件的线程 为什么Redis采用单线程还是很快 Redis的数据存储在内存中 没有多线程切换导致的性能损耗 IO多路复用机制，可以一个线程处理多个IO Redis 6.0 之前为什么使用单线程？ 因为性 ......
Redis 过期删除与内存淘汰
Redis 过期删除与内存淘汰 Redis 使用的过期删除策略是什么？ redis将有过期时间的key带上过期时间的时间戳保存到一个字典中。 主要分为两大类： 一个是惰性删除，不会主动检查key是否过期，cpu使用到的时候先检查是否过期，过期了删除，没有过期返回 一个是定期删除,会定期检查key是否 ......
Redis 持久化和aof相关问题
Redis 持久化和aof Redis 如何实现数据不丢失？ 有三种方式实行持久化 aof，将执行成功的写命令保存到aof文件中，如果aof文件过大会发生aof重写 rdb，保存内存数据的快照 混合模式，同时使用aof和rdb，提高性能 为什么aof要先执行命令再保存命令 不用检查命令合法，不会阻塞 ......
Redis五种数据类型及其数据结构
Redis五种数据类型 String 数据结构：SDS 应用类型：缓存数据，计数，互斥锁 List 数据结构：压缩列表或者双向链表 应用类型：缓存链表或者作为队列 Hash 数据结构：压缩列表或者哈希表 应用类型：缓存对象 Set 数据结构：整型集合或者哈希表 应用类型：缓存集合，例如好友关系 Zs ......
分布式实时通信—DDS概述
https://blog.yanjingang.com/?p=6716 分布式实时通信—DDS概述 DDS最早应用在美国海军系统，目前已广泛应用于军工、机器人、自动驾驶等领域，国际主流军工厂商、ROS2操作系统等均将DDS作为其控制系统的核心中间件，为各类战舰、机器人等提供可靠、高实时的分布式通信功 ......
redis的持久化
redis支持两种持久化方式RDB(Redis Database)和AOF(Append only file)。 1. RDB a. 在指定的时间将内存中的数据集快照写入磁盘，默认存储文件的名称为dump.rdb b. RDB文件是一个紧凑压缩的二进制文件 c. 恢复大数据集的时候速度比AOF要快， ......
精通数据集成：轻易云数据集成平台应用实战与技术内幕
企业系统中数据交互的重要性不言而喻。一个系统如果孤立运行，即使积累了海量数据，仍然是一座信息孤岛。另一方面，一个积极参与数据交互的系统，成为各系统之间的“交际花”，具备中台的性质。 然而，大多数情况下，系统介于这两种极端之间，需要在自身生产和社交之间取得平衡，实现数据的高效对接。这种对接的核心目标是 ......
redis 哨兵模式配置
redis 哨兵模式配置 jimlu JustGotoStudy 2023-08-02 08:59 发表于甘肃 收录于合集#redis3个 1 前提： 先安装好redis （见redis安装） 配置好一主两从 （见redis一主两从配置） 哨兵模式的好处：当master挂了后，哨兵会随机指定一个sl ......
cookie和session的区别，分布式环境怎么保存用户状态
1、cookie数据存放在客户的浏览器上，session数据放在服务器上。 2、cookie不是很安全，别人可以分析存放在本地的COOKIE并进行COOKIE欺骗，考虑到安全应当使用session。 3、session会在一定时间内保存在服务器上。当访问增多，会比较占用你服务器的性能，考虑到减轻服务 ......
Redis - 出现ERROR：WRONGTYPE Operation against a key holding the wrong kind of value
原因：用的方法与redis服务器中存储数据的类型存在冲突。 比如：有一个key的数据存储的是list类型的，但使用redis执行数据操作的时候却使用了非list的操作方法。 对一个Redis键执行不兼容的操作，这个错误通常发生在以下情况： 1、类型不匹配：试图执行的操作与键存储的数据类型不匹配。例如 ......
Redis 高效、安全的不停机数据迁移方案
NineData 基于全量复制、增量日志复制技术，提供了高效、安全可靠的 Redis 不停机迁移方案。当然，除了 Redis，NineData 已经支持数十种常见数据库的迁移复制，实现数据库迁移、数据容灾、数据双活、数据仓库实时集成等业务场景。同时，除了 SAAS 模式外，还提供了企业专属集群模式，... ......
Redis从入门到放弃（5）：事务
Redis从入门到放弃（5）：事务 1、事务的定义 Redis的事务提供了一种“将多个命令打包， 然后一次性、按顺序地执行”的机制。 redis事务的主要作用就是串联多个命令防止别的命令插队。 但是，事务并不具有传统数据库事务的特性，如回滚。 2、事务命令 Redis中的事务可以通过以下命令来执行： ......
Redis从入门到放弃（7）：主从复制
Redis从入门到放弃（7）：主从复制 目录 1、概念 2、作用 3、配置 4、原理 4.1、第一阶段：建立链接、协商同步 4.2、第二阶段：数据同步 4.3、第三阶段：命令传播 1、概念 主从复制是Redis的一项重要特性，用于将一个Redis服务器（Master主节点）的数据复制到其他Redis ......
Redis从入门到放弃（2）：数据类型
Redis从入门到放弃（2）：数据类型 在Redis中，数据以键值对的形式存储。Redis支持五种主要的数据类型，每种类型都有不同的用途和特性。 本文将介绍Redis的五种数据类型：字符串（string），哈希（hash），列表（list），集合（set）和有序集合（sorted set）。 1. ......
Redis从入门到放弃（1）：安装配置
Redis从入门到放弃（1）：安装配置 1. 介绍 Redis是一个高性能的开源key-value数据库。它被广泛应用于缓存、会话存储、实时分析、消息队列等场景。Redis具有以下三个主要特点： 数据持久化：Redis支持将内存中的数据保存到磁盘上，确保数据在断电或重启后不丢失。 多样数据结构：除了 ......
Redis从入门到放弃（6）：持久化
Redis从入门到放弃（6）：持久化 1、引言 Redis作为一种高性能的内存数据存储系统，常被用作缓存、会话存储、消息队列等多种应用场景。然而，由于其数据存储在内存中，一旦发生意外或服务器重启，数据就会丢失。为了保障数据的持久性和安全性。 Redis提供了多种持久化方案： RDB（Redis Da ......
Redis从入门到放弃（3）：发布与订阅
Redis从入门到放弃（3）：发布与订阅 1、介绍 Redis是一个快速、开源的内存数据库，支持多种数据结构，如字符串、哈希、列表、集合、有序集合等。除了基本的数据存储和检索功能外，Redis还提供了许多高级功能，其中之一就是发布订阅（Pub/Sub）。 发布订阅是一种消息传递模式，它允许消息的发布 ......
Redis从入门到放弃（4）：3种新数据类型
Redis从入门到放弃（4）：3种新数据类型 1、介绍 前面的文章已经介绍了redis的5种基本数据类型，redis6中另外还有3种特殊的数据类型，分别是 Bitmaps (位图)、HyperLogLogs（基数统计）和 geospatial （地理位置）。本文将继续探讨它们的特性、原理以及应用场景 ......
Redis从入门到放弃（10）：分布式锁
Redis从入门到放弃（10）：分布式锁 在分布式系统中，实现对共享资源的安全访问是一个关键问题。Redis作为一种高性能的内存数据库，提供了多种方式来实现分布式锁，以解决多个节点之间对共享资源的并发访问问题。 本文将介绍五种Redis分布式锁的解决方案及其原理、应用场景以及Java代码的实现步骤。 ......
Redis从入门到放弃（8）：哨兵模式
Redis从入门到放弃（8）：哨兵模式 在前面的文章中介绍了Redis的主从复制，但主从复制存在一定的缺陷。如果Master节点宕机，因为不具备自动恢复功能，需要人工干预，那么在这个干预过程中Redis将不可用。 为了解决这一问题，Redis官方推荐一种高可用方案：哨兵模式（Sentinel）。 1 ......
Redis从入门到放弃（11）：雪崩、击穿、穿透
Redis从入门到放弃（11）：雪崩、击穿、穿透 1、前言 Redis作为一款高性能的缓存数据库，为许多应用提供了快速的数据访问和存储能力。然而，在使用Redis时，我们不可避免地会面对一些常见的问题，如缓存雪崩、缓存穿透和缓存击穿。本文将深入探讨这些问题的本质，以及针对这些问题的解决方案。 2、缓 ......
Redis从入门到放弃（12）：pipeline管道技术
Redis从入门到放弃（12）：pipeline管道技术 1、引言 在现代应用程序中，高性能和低延迟是至关重要的因素。而在处理大规模数据操作时，Redis作为一种快速、可靠的内存数据库，成为了许多开发人员的首选。 在Redis中，每个操作都需要与服务器进行往返通信，存在网络开销损耗，当有批量命令执行 ......
分拣平台API安全治理实战 | 京东物流技术团队
导读 本文主要基于京东物流的分拣业务平台在生产环境遇到的一些安全类问题，进行定位并采取合适的解决方案进行安全治理，引出对行业内不同业务领域、不同类型系统的安全治理方案的探究，最后笔者也基于自己在金融领域的经验进行了关于API网关治理方案的分享。 写在前面 随着互联网应用的多元化、复杂化、服务化成为显 ......
高性能MySQL实战（二）：索引 | 京东物流技术团队
我们在上篇 高性能MySQL实战（一）：表结构 中已经建立好了表结构，这篇我们则是针对已有的表结构和搜索条件为表创建索引。 1. 根据搜索条件创建索引 我们还是先将表结构的初始化 SQL 拿过来： CREATE TABLE `service_log` ( `id` bigint UNSIGNED N ......
Redis缓存数据和表数据一致性之延时双删策略
一、什么是 Redis 延时双删？ 1、延迟双删策略是分布式系统中数据库存储和缓存数据保持一致性的常用策略，但它不是强一致。不管哪种方案，都无法绝对避免Redis存在脏数据的问题，只能减轻这个问题 2、因为双删策略执行的结果是把redis中保存的那条数据删除了，以后的查询就都会去查询数据库。经常修改 ......
Redis.conf 详解
一、NETWORK 网络 bind 127.0.0.1 #绑定的 IP protected-mode no #保护模式 port 6379 #端口设置 二、GENERAL 通用 daemonize yes # 以守护进程的方式运行，默认是 no ，我们需要自己开启为 yes pidfile /var ......