数据结构 结构 数据redis

前言 数据分片是指将数据按某种方式存储到不同的服务上来解决单机服务容量不足的问题。 本文围绕 Redis 讲述逻辑拆分、随机分配、哈希取模、一致性哈希等分片算法原理和使用场景。并在此基础上对比客户端分片、代理(Proxy) 和 Redis Cluster 各自的优缺点。 客户端分片 三种普通方式 逻 ......

Docker 容器：数据持久化 每当从镜像创建容器时，它都会创建一个新容器，除了镜像数据之外没有任何数据 意味着如果在提交更改之前删除容器，我们将丢失数据 Docker 应该存在一种将数据的文件系统与容器的文件系统分开的技术 每当创建容器时，也会创建一个文件系统【这是默认的 Linux 文件系统】 ......

1.Redis 的 Sorted Set 数据类型 1.1 Sorted Set 数据类型的特点 Sorted Set 有序集合是 Redis 提供的一种重要的数据类型。它是由不重复且有序的字符串元素组成的，而且每个元素都会关联一个 double 类型的分数，通过该分数来为集合中的成员进行从小到大的 ......

前言 本文讲述 Redis 两种持久化方式 RDB 和 AOF 优缺点以及原理。 为何需要持久化？ Redis 是基于内存操作的，进程终止、服务器宕机后内存数据会丢失，但是在很多使用场景中我们希望数据不丢失，服务重启之后数据还能恢复到停机前的状态，特别是使用 Redis 做数据库的情况。 Redis ......

前言 本文讲述布隆过滤器 (RedisBloom) 的基本原理和安装使用。 RedisBloom是什么？ RedisBloom 是 Redis 中过滤器模块，可以用来判断值是否存在，常用来解决缓存穿透问题。 查询数据时，先用 RedisBloom 判断数据是否存在，不存在则直接返回，存在则从缓存 / ......

记录一下在阅读WiFi感知系列文章中对csi（信道状态信息）的获取过程 收集设备：nexus5 安卓版本6.0.1 版本号M4B302 root过 系统：虚拟机Ubuntu18.0.4 发送设备：小米路由器4C(R4CM){准备用别的路由器再测测，这2.4g的路由器收到的数据很怪} 首先sudo s ......

本文示例代码已上传至我的Github仓库https://github.com/CNFeffery/DataScienceStudyNotes 1 简介 大家好我是费老师，前两天pandas正式发布了其2.0.0版本，作为一次大版本更新，pandas针对底层进行了大量的重构以优化性能和稳定性，其有关这 ......

承接上文 承接之前的【精华推荐 |【算法数据结构专题】「延时队列算法」史上非常详细分析和介绍如何通过时间轮（TimingWheel）实现延时队列的原理指南】，让我们基本上已经知道了「时间轮算法」原理和核心算法机制，接下来我们需要面向于实战开发以及落地角度进行分析如何实现时间轮的算法机制体系。 前言回 ......

十大词性：前六个是实词 后四个是虚词 名词：n. 表示人，事物，地点，或抽象概念的名称 代词：pron. 代替名词的一种词，分为：人称代词，物主代词，反身代词，指示代词，不定代词，相互代词（例：each other） 形容词：adj. 修饰名词，代词，表示人和物的性质，状态，特征 副词：adv. 修 ......

1.Redis 在 Session 共享问题中的应用 传统 Session-Cookeis 身份认证方法中，一个 Session 只保存在一台服务器上，适合域单体应用。随着项目规模的增加，项目的架构也不断向微服务分布式集群演进，传统的 Session-Cookie 方式在集群环境下就不能很好的工作了 ......

layout: post cid: 5 title: Docker启动MySQL、MongoDB、Redis、Elasticsearch、Grafana，数据库 slug: 5 date: 2021/12/30 16:57:00 updated: 2022/03/25 15:53:08 status ......

#上下文管理和SQLHelper import pymysql from DBUtils.PooledDB import PooledDB class SqlHelper(object): def __init__(self): self.pool = PooledDB( creator=pymys ......

蓝图使用 中大型项目推进使用蓝图来构建文件目录 1.导入蓝图类 from flask import Blueprint 2.实例化得到蓝图对象 order_bp = Blueprint('order', name) 3.在app中注册蓝图 app.register_blueprint(order_b ......

1.Redis 缓存 缓存（cache），原始意义是指访问速度比一般随机存取存储器（RAM）快的一种高速存储器，通常它不像系统主存那样使用 DRAM 技术，而使用昂贵但较快速的 SRAM 技术。缓存的设置是所有现代计算机系统发挥高性能的重要因素之一。 Redis 因读写性能较高，它非常适合作为存贮数 ......

人们对宠物的关注和重视程度不断提高，越来越多的人开始选择养宠物。然而，宠物的健康管理一直是宠物主人们关注的重点。如何更好地管理宠物的健康，让宠物生活更加健康和幸福，成为了宠物主人们需要思考的问题。近年来，随着人工智能和大数据技术的迅速发展，宠物app已经成为了宠物健康管理的新选择。 一、人工智能技术 ......

宠物越来越成为了人们生活中不可或缺的一部分。越来越多的人开始养宠物，而宠物的养护也变得越来越重要。为了更好地照顾宠物，宠物app应运而生。但是，如何利用大数据分析来提供更贴心的宠物养护呢？ 一、宠物健康监测 宠物健康监测是宠物app的一个重要功能。通过在app中记录宠物的体重、食欲、精神状态等信息， ......

前言 本文主要讲述在 Linux 系统中配置和部署 Redis 主从集群和哨兵，实现高可用和自动故障迁移。 准备工作 参考 Redis 单机部署 安装 3 个 Redis 服务作一主二从，本文准备了 6380(主)、6381(从) 和 6382(从)。 参考 Redis 单机部署 安装 3 个 Re ......

前言 本文主要讲述 Redis 代理 Twemproxy 安装过程。 Twemproxy 是推特开源用于 Memcached 和 Redis 的轻量级代理。这里以0.5.0版本为例。 我们可以通过取模、随机、一致性哈希等算法将数据分散在多个 Redis 服务来实现水平扩展。但是客户端直连就需要跟每个 ......

前言 本文以predixy-1.0.5为例，讲述 Redis 代理 Predixy 安装过程。 Predixy 是一款高性能全特征 Redis 代理，支持 Redis-sentinel 和 Redis-cluster。作者拿其它常用代理做了 性能测评，Predixy 在各个维度性能都是最优的，与其他 ......

Java结构 顺序结构 1.JAVA的基本结构就是顺序结构，除非特别指明，否则就按照顺序一句一句执行。 2.顺序结构是最简单的算法结构。 3.语句与语句之间，框与框之间是按从上到下的顺序进行的，它是由若干个依次执行的处理步骤组成的，它是任何一个算法都离不开的一种基本算法结构。 选择结构 1.if单选 ......

前言 本文讲述在 Linux 系统部署 Redis Cluster 实现数据分片的具体步骤。 请参考 Redis 单机部署 下载编译。 Redis Cluster是什么？ Redis Cluster 是官方提供的一种用数据分片来实现横向扩容的解决方案，由一个或多个 Redis 服务组成一个无主集群。 ......

批处理 rewriteBatchedStatements=true 项目原来使用的大批量数据插入方法是Mybatis的foreach拼接SQL的方法。 我发现不管改成Mybatis Batch提交或者原生JDBC Batch的方法都不起作用，实际上在插入的时候仍然是一条条记录的插，速度远不如原来My ......

重点： 主从复制：主从复制是高可用redis的基础，主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。 哨兵和集群都是在主从复制基础上实现高可用的。 缺点：故障恢复无法自动化，写操作无法负载均衡，存储能力受到单机的限制。 哨兵：在主从复制的基础上，哨兵实现了自动化的故障恢复 ......

前言 本文以redis-6.2.5为例，讲述在 Linux 系统下单机 Redis 下载、编译、打包、安装为服务、启动和访问的整个过程。 安装环境为 Linux CentOS 64，本文用的 7.5 版本. 下载编译目录在当前目录soft/redis下，最终服务可执行程序在/opt/soft/red ......

一、基本参数 1.定义：使用删除/保留实体特征选择要保留或删除的实体。这在与具有多个配置的多实体零件一起使用时非常有用 二、操作演示 1.打开命令 2.点击删除实体命令，则实体被删除 3.点击保留实体后，除了选择的实体，其余实体被被删除 4.实体删除影响默认体积及质量，可能影响直接生成工程图的质量体 ......

前一篇文章写了如何的安装yolo5。基于上面的一章，记录下用yolo5来训练自己的数据。 split_train_val.py import os import random trainval_percent = 0.1 train_percent = 0.9 xmlfilepath = '/Use ......

Redis系列1：深刻理解高性能Redis的本质 Redis系列2：数据持久化提高可用性 Redis系列3：高可用之主从架构 Redis系列4：高可用之Sentinel(哨兵模式） Redis系列5：深入分析Cluster 集群模式 追求性能极致：Redis6.0的多线程模型 追求性能极致：客户端缓 ......

数组中重复的数据 给你一个长度为 n 的整数数组 nums ，其中 nums 的所有整数都在范围 [1, n] 内，且每个整数出现 一次 或 两次 。请你找出所有出现 两次 的整数，并以数组形式返回。 你必须设计并实现一个时间复杂度为 O(n) 且仅使用常量额外空间的算法解决此问题。 示例 1： 输 ......

1. labelme标注完的json Labelme标注工具的JSON文件包含了标注信息、图片路径、以及图片的高度和宽度等信息， 2. coco的json COCO数据集格式包含了多个JSON文件，包括标注信息、图片信息、类别信息、图片与类别的关联信息等 3.怎么转换 有两种方式 使用 Labelm ......

INFS3200 Advanced Database SystemsPrac 2: Data Warehousing (5%)Semester 1, 2023Due time: 4:00pm, Friday, 21 April 2023 (Week 8)Submission: Submit your ......