redis集群 最新版redis-py
redis数据迁移工具
redis shake 开源的工具，地址：tair-opensource/RedisShake: redis-shake is a tool for Redis data migration and data filtering. redis-shake 是一个用于 Redis 数据迁移与过滤的工具 ......
redis配置文件
1）绑定的ip地址，多个ip用空格隔开 bind 127.0.0.1 2）端口，默认6379，一般不做修改 port 6379 3）是否以守护进程启动，默认为no，一般改为yes代表后台启动（windows系统不支持） daemonize no 4）定义日志级别，默认值为notice，有如下4种取值 ......
第一天（redis，linux，mv）
#redis > set k v /key = value get k /输出对应value flushall /清空全部（16个） flushdb /清空当前 select 0 /（16个下标从0开始） 
一.背景 最近项目中有需要使用到Websocket做长连接推送，这里整理在具体实现过程中的细节和踩过的坑 二.问题点 在实现过程中，这里自己整理了一些问题点 1.WebsocketSession无法序列化到Redis以及MySQL中,集群环境下，如果进行服务端推送到指定客户端，如何知道该客户端与后台 ......
基于Redis的消息发布和订阅(广播模式)
> 最近在优化一个redis的大key问题, 原先的同事写法是将所有的配置都放在一个key里面, value是一个map. 但是随着配置越来越多, 这个map也变得很大, 已经影响redis的性能.遂决定将map里面的每个配置单独出来一个key, 当有配置变动的时候, 通过redis的消息队列通知到 ......
“面试造飞机，上岗拧螺丝“？2023软件测试岗面试真题超全面整理（最新版）
软件测试这个岗位，想要找到一份高薪的工作，离不开繁杂的面试程序，这相信是很多准备应聘软件测试岗的朋友难题，很多已经在职多年的软件测试工程师对于这个岗位面试都谈虎色变，那么，为什么软件测试岗位的面试这么难呢？ 第一，软件测试属于互联网IT行业，可以说包罗万象，虽然真正入职后，公司不会要求你运用很多很多 ......
Redis——字符串、hash类型的基本使用
# day09——Redis ## Redis介绍和安装 ```python # Redis:软件，存储数据的，速度非常快，Redis是一个key-value存储系统(没有表的概念)，cs架构的软件 服务端 客户端(python作为客户端，java，go都可以，图形化界面，命令窗口的命令) # es ......
redis压缩列表ziplist
压缩列表（ziplist）是 Redis 的一种内存紧凑型的数据结构，它是一个字节数组，可以包含任意多个元素，每个元素可以是一个字节数组或一个整数。 压缩列表的结构由多个字段组成，包括 zlbytes（压缩列表的字节长度），zltail（压缩列表尾元素的偏移量），zllen（压缩列表的元素数目），e ......
redis介绍和安装，redis普通链接和连接池，redis字符串类型，redis hash类型
# 1 Redis介绍和安装 ```python # Redis ：软件，存储数据的，速度非常快，redis是一个key-value存储系统（没有表的概念），cs架构的软件 -服务端 客户端（python作为客户端，java，go，图形化界面，命令窗口的命令） # es：存数据的地方 # 关系型数据 ......
Redis
Redis介绍： redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/ ......
「路飞项目09」redis
## 1 Redis介绍和安装 ```python # Redis ：软件，存储数据的，速度非常快，redis是一个key-value存储系统（没有表的概念），cs架构的软件 -服务端 客户端（python作为客户端，java，go，图形化界面，命令窗口的命令） # es：存数据的地方 # 关系型数 ......
promethues + grafana 监测ceph集群状态
##### 前 最近在使用海量小文件压测ceph集群，想着搭建一个可视化的界面来监测集群状态，由于很久之前使用过promethues + grafana 监测k8s集群状态，用来监测 ceph 集群应该问题不大，那么就开始吧！ 首先了解下 promethues 和 grafana 是什么？ prom ......
2023-06-27：redis中什么是缓存雪崩？该如何解决？
2023-06-27：redis中什么是缓存雪崩？该如何解决？ 答案2023-06-27： 缓存雪崩是指当缓存层承载大量请求并有效保护存储层时，如果缓存层由于某些原因无法提供服务，例如缓存数据大面积失效，那一瞬间 Redis 就像不存在一样，导致所有请求都到达存储层。存储层的请求量急剧增加，可能导致 ......
Redis跳跃表是如何添加元素的？
今天分享的这道题来自于蔚来的真实面试题。 Java 面试不可能不问 Redis，问到 Redis 不可能不问 Redis 的常用数据类型，问到 Redis 的常用数据类型，不可能不问跳跃表，当问到跳跃表经常会被问到跳跃表的查询和添加流程，所以接下来我们一起来看这道题的答案吧。 Redis 有序集合 ......
使用kubeadm快速部署一个K8s集群
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。 这个工具能通过两条指令完成一个kubernetes集群的部署： ``` # 创建一个 Master 节点 $ kubeadm init # 将一个 Node 节点加入到当前集群中 $ kubeadm join ``` # ......
minio对象存储四台服务器部署4个节点集群
# 环境说明 **·** 分布式Minio至少需要4个节点 **·** 如果资源不够，可以采用两个节点每个节点启动两个实例的方式来实现四节点的集群，仅用于测试环境 **·** 生产环境建议最少4节点 # 环境准备 ``` #所有节点执行下列操作 # 配置时间同步，配置时间同步的方式不做讲述 # 创建 ......
Redis集群环境下keys被禁用，该怎么实现keys?
> 在生产环境中，禁用Redis的keys命令是为了避免对Redis实例的性能造成负面影响。keys命令会遍历整个 Redis数据库，查找与给定模式匹配的所有键，这在大规模的Redis数据库中可能会非常耗时; 那么，在keys禁用的情况下，仍然需要使用keys该怎么办呢？我们搜索一些处理方案大多是建 ......
redis-分布式锁优化思路
1.加锁的代码块，粒度越小越好，语句越少越好，更不容易出现"插队"的现象 2.分段锁思路：以"超卖"为例，原本是待促销200件商品，一把锁，现改成10款20件商品的促销，改成10把锁，当并发小于10的时候，甚至都不需要锁，就可以并发安全 ......
redis-分布式锁样例
redisTemplate： ``` string lockKey = "product_101" string clientID = UUID.randomUUID().toString() bool result = redisTemplate.opsForValue().setIfAbsent ......
Hive3.1.3集群安装
一、安装mysql Hive默认的Derby数据库一次只能打开一个会话，不支持多用户并发访问，需要替换Hive的存储引擎为mysql 1. 下载mysql安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch. ......
python 批量删除 redis 大量数据
#!/usr/bin/env python # Scan and delete keys in Redis. # Author: cdfive from redis import Redis import time def RedisScanAndDelete(host, port, passwor ......
redis-分布式锁注意事项
lockKey:商品标识 value:当前线程标识 1.确保每把锁同一时间能且仅能上一次 setnx(set if not exists):当锁不存在时才上锁 redisTemplate.opsForValue().setIfAbsent(lockKey,value) 没加上锁需要返回错误码 直接让 ......
Java使用redis-Redis是并发安全的吗？
大家都清楚，Redis 是一个开源的高性能键值对存储系统，被开发者广泛应用于缓存、消息队列、排行榜、计数器等场景。由于其高效的读写性能和丰富的数据类型，Redis 受到了越来越多开发者的青睐。然而，在并发操作下，Redis 是否能够保证数据的一致性和安全性呢？接下来小岳将跟大家一起来探讨 Redis... ......
006.hdfs-查看各节点磁盘使用情况,集群平衡
查看各节点磁盘使用情况 hdfs dfsadmin -report | grep -E "Name:|DFS Used%:" 集群平衡 mv balance.sh /home/hdfs/ su hdfs vim balance.sh chmod +x balance.sh ls hdfs dfsad ......
爬虫：爬到的数据存到mysql中、爬虫和下载中间件、加代理，cookie、header、加入selenium、集成selenium、==去重规则源码分析(布隆过滤器)、布隆过滤器、scrapy-redis实现分布式爬虫
[toc] ### 爬到的数据存到mysql中 ```python class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root' ......