集群 水平cluster redis
Redis随笔
Redis 简介 Redis是一个开源的key-value存储系统。存储在内存中。 相比于Memcached，value类型相对更多，string、list、set、zset、hash。 Redis操作都是原子性的，单线程多路IO复用 Redis支持各种不同方式的排序。 keys * 查看当前库所有 ......
MongoDB、Redis、HBase、Cassandra、Elasticsearch、ClickHouse等NoSQL数据库简介及优缺点说明
MongoDB MongoDB是一个基于文档的NoSQL数据库，它使用BSON（二进制JSON）格式存储数据。MongoDB支持动态查询，可以轻松地处理非结构化数据。它还支持水平扩展，可以在多个节点上分布数据。 优点： 灵活性高，支持非结构化数据存储。 支持水平扩展，可以在多个节点上分布数据。 支持 ......
基于k8s的web集群项目
准备5台linux机器 系统是centos7.9 2核/4G的配置 1.k8s的部署安装 1.1.准备环境： 先给每台服务器起好名字，使用固定的ip地址，防止后面因为ip地址的变化，导致整个集群异常(每台机器) master 192.168.18.139 node1 192.168.18.138 n ......
分片集群之 添加删除节点
redis cluster 节点加入集群 环境说明：3主3从 集群模式 redis version 5.0.14 模拟集群中一个实例长期离线(比如虚拟机损坏、pod损坏)，重启一个实例从新接入到当前集群 第一步 停止pod,模拟损坏环境 docker rm -f 6380 随后查询集群节点状态，发现 ......
Zookeeper集群
一、Zookeeper概述 1. Zookeeper定义及工作机制 定义：Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。 工作机制：Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观 ......
Linux安装Redis
1.下载 下载地址：https://redis.io/download 本人选择的是5.0.14版本 上传服务器。本人上传至usr/local目录下。 2.解压 将解压后的redis-5.0.14文件夹改名为redis 3.编译 cd到/usr/local/redis目录，输入命令make执行编译命 ......
爬虫最后一天,爬取到的数据存到mysql中，爬虫和下载中间件、加代理、cookie、header、selenium、随机生成uersagent、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫、扩展去重规则
==爬到的数据存到mysql中== class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', password="", h ......
Hadoop与Hadoop集群介绍
1、什么是Hadoop 狭义上Hadoop指的是Apache软件基金会的一款开源软件。用java语言实现，开源。允许用户使用简单的编程模型实现跨机器集群对海量数据进行分布式计算处理 广义上Hadoop指的是围绕Hadoop打造的大数据生态圈。 2、Hadoop核心组件 Hadoop HDFS（分布式 ......
Redis之父萨尔瓦多·桑菲利波又名安蒂雷斯
萨尔瓦多·桑菲利波又名安蒂雷斯 个人博客连接 嗨，我是萨尔瓦多·桑菲利波，也被称为安提雷斯， 一位居住在卡塔尼亚的意大利计算机程序员。 我于7年1977月2020日出生在坎波贝洛迪利卡塔。 2022 年，我停止编写代码，开始全职写小说。现在，从 <> 年底开始，我再次编码，交替写作和编码。 萨尔瓦多 ......
[zookeeper] 集群搭建及启动后查询服务器状态异常解决
一、集群搭建 1、每台服务器上部署zookeeper 1、将zookeeper压缩包解压到指定位置，在zookeeper解压后目录下创建数据目录zkData 2、在zkData下创建myid文件，内容写上数字，代表该zookeeper的唯一id 3、修改conf目录下的zoo_sample.cfg为 ......
mysql与redis如何保证数据一致性
1.先更新MySQL数据库，再删除缓存，再从数据库查询到的最新的数据同步到redis。采用最终一致性性策略。 缺点：相较于mq的方式，这种方式由于要查数据库并将最新数据写到redis，可能会造成接口响应速度变慢。 2.更新mysql数据库，再采用mq异步的方式，将数据同步到redis中。 缺点：数据 ......
一文讲透 Redis 事务 （事务模式 VS Lua 脚本）
准确的讲，Redis 事务包含两种模式 : 事务模式 和 Lua 脚本。 先说结论： Redis 的事务模式具备如下特点： 保证隔离性； 无法保证持久性； 具备了一定的原子性，但不支持回滚； 一致性的概念有分歧，假设在一致性的核心是约束的语意下，Redis 的事务可以保证一致性。 但 Lua 脚本更 ......
1 REDIS 入门1
1 连接 登录认证 redis-cli -h hostip -p port -a pwd 命令行登录认证。入门常用，可用于登录远程redis库。出于安全考虑，可以不带密码先进行连接，然后再通过 auth pwd 进行认证 redis-cli 客户端工具。如果本机安装并启动了redis服务，redis ......
go操作redis
前言： 使用第三方开源的redis库: github.com/gomodule/redigo/redis 需要先安装redis包 go get github.com/gomodule/redigo/redis 正文： window下打开redis服务： 打开cmd命令行窗口 cd C:\Progra ......
Redis 数据库
Redis 数据库 客户端和服务端命令 服务器端 服务器端的命令为redis-server 可以使⽤help查看帮助⽂档redis-server --help 服务器操作 ps aux | grep redis 查看redis服务器进程 sudo kill -9 pid 杀死redis服务器 sud ......
Redis 源码解析之通用双向链表(adlist)
Redis源码中广泛使用 **adlist(A generic doubly linked list)**，作为一种通用的双向链表，用于简单的数据集合操作。adlist提供了基本的增删改查能力，并支持用户自定义深拷贝、释放和匹配操作来维护数据集合中的泛化数据 `value`。 ......
Nginx 集群搭建
Nginx 集群搭建 https://huaweicloud.csdn.net/63560e7dd3efff3090b591dc.html?spm=1001.2101.3001.6650.14&utm_medium=distribute.pc_relevant.none-task-blog-2%7E ......
redis——缓存双写一致性问题
缓存双写一致性 如果redis中有数据 需要和数据库中的值相同 如果redis中无数据 数据库中的值是最新值，且准备回写redis 缓存按照操作分 只读缓存 读写缓存 同步直写策略 写数据库后也同步写 redis 缓存，缓存中的数据和数据中的一致 对于读写缓存来说，要想保证缓存和数据库中的数据一致 ......
【Azure Redis 缓存】对于Azure Redis 从 Redis 4 升级到 Redis 6 的一些疑问
问题描述 使用Azure Redis服务，客户端使用Redisson 3.X , 在近期Microsoft Azure对Redis服务进行大规模变动升级( Redis 版本由 4 升级到 6），对于这次升级的影响有以下的问题？ 问题解释 问题一：Redis 6.0 和 Redisson 3.X 之间 ......
centos7 mongodb4.4分片集群部署
#创建mongo相应的目录 mkdir -pv /data/app/mongodb/conf mkdir -pv /data/app/mongodb/{configset,shared1,shared2,shared3}/log mkdir -pv /data/mongodb/{configset, ......
redis-2，redis持久化
持久化 **rdb:**snapshot快照，持久化快照 **aof:**append only file 写命令操作全部记录下来 RDB rdb持久性以指定的时间间隔，执行数据集的时间点快照，全量快照 rbd保存到磁盘的文件就是dump.rdb 案例 配置文件redis.conf 在配置文件中找到 ......
Proxmox VE Ceph 集群部署
1、集群安装 参考：https://www.cnblogs.com/a120608yby/p/17295938.html 2、业务及管理网络创建 参考：https://www.cnblogs.com/a120608yby/p/17140953.html 3、Ceph网络创建 # 配置ceph多网卡绑 ......
和 chatgpt 聊了一会儿分布式锁 redis/zookeeper distributed lock
前言 最近的 chatGPT 很火爆，听说取代程序员指日可待。 于是和 TA 聊了一会儿分布式锁，我的感受是，超过大部分程序员的水平。 Q1: 谈一谈 java 通过 redis 实现分布式 锁 chatGPT: Java通过Redis实现分布式锁，是在多个Java应用程序之间实现同步的一种方式。通 ......
非关系数据库型--Redis集群和哨兵
redis集群和高可用 redis主从复制 主从复制特点 一个master可以有多个slave 一个slave只能有一个master 数据流向是单向的，master到slave 主从复制实现 建议redis master和slave开启持久化，设置相同连接密码，slave提升为maste ......
非关系数据库型--Redis
Redis Redis安装 1.yum/apt安装 root@ubuntu:~# apt info redis Package: redis Version: 5:6.0.16-1ubuntu1 Priority: optional Section: universe/database Origin ......
yum方式安装Redis
Redis（Remote Dictionary Server )，即远程字典服务，是一个Key-Value数据库。 yum方式安装Redis服务 1.下载epel仓库 yum install epel-release -y 2.下载redis数据库 yum install redis -y 3.启动 ......