集群 单机docker redis
在java中操作Redis
Redis的Java客户端有很多，官方推荐的有三种： * Jedis * Lettuce * Redisson Spring对Redis客户端进行了整合，提供了Spring Data Redis，在Spring Boot项目中还提供了对应的Starter，即spring-boot-starter-d ......
2台机器安装Redis主从
1. 配置redis.conf（主） bind 127.0.0.1 #注释掉 protected-mode no #关闭保护模式 daemonize yes #开启后台守护进程 logfile "/var/log/redis/redis.log" #日志文件路径 2.配置redis.conf（从） ......
Redis 使用Redisson+Rlock实现分布式锁
使用setnx+Lua脚本实现分布式锁会有一个问题：如果操作共享资源的时间大于过期时间，就会出现锁提前过期的问题，进而导致分布式锁直接失效。如果锁的超时时间设置过长，又会影响到性能。 如果操作共享资源的操作还未完成，锁过期时间能够自己续期就好了 对这个问题 Redisson 提供了现成的解决方案。 ......
ELK+kafka集群部署
前言 业务层可以直接写入到kafka队列中，不用担心elasticsearch的写入效率问题。 消息系统主要功能 1、解耦 允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束 2、冗余 消息队列把数据进行持久化直到它们已经被完全处理，通过这一方式规避了数据丢失风险。许多消息队列所采 ......
docker compose的v1\v2版本安装及使用上的区别
【docker系列】docker compose的v1\v2版本安装及使用上的区别 文章目录一、简介二、 安装 docker Compose 1.x版本三、安装docker compose v2版本一、简介Docker Compose 可以按照规范的定义文件(docker-compose.yml)一 ......
A0--集群基础环境
文件下载： ansible_v2.9.9 flink-1.16.0 hadoop-3.1.3 hive-3.1.3 kafka_2.13-3.3.1 python-3.8.10 spark-3.2.1 tools.tgz zookeeper-3.6.3 一、安装并配置ansible自动化工具 1）上 ......
docker打包、压缩镜像并载入
1、打包镜像 #docker 打包所有镜像 docker save $(docker images --format '{{.Repository}}:{{.Tag}}') -o allimages.tar #打包指定镜像，使用grep过滤 docker save $(docker images - ......
hdfs集群的扩容和缩容
1、背景 当我们的hadoop集群运行了一段时间之后，原有的数据节点的容量已经不能满足我们的存储了，这个时候就需要往集群中增加新的数据节点。此时我们就需要动态的对hdfs集群进行扩容操作(节点服役)。 2、集群黑白名单 在hdfs集群中是存在黑名单和白名单的。 黑名单： 该文件包含不允许连接到nam ......
.NET/C#操作Redis的简单方法
.NET/C#操作Redis的简单方法 本文属于Redis初级应用，只起初步引路作用，高手们可略过。 支持.Net Core(2.0及以上)/.Net Framework(4.5及以上)，可以部署在Docker, Windows, Linux, Mac。 Redis作为一款主流的缓存工具在业内已广受 ......
Apache/doris docker启动异常
环境 CPU: x86_64 操作系统: ArchLinux(单节点, 虚拟机, in vmware workstation 16 player) Kernel: Linux archlinux 6.2.9-arch1-1 doris docker版本: apache/doris 1.2.2-be- ......
Linux安装Redis
1.下载redis http://download.redis.io/releases/ 2. 解压 cd /root/tools/redis [root@hadoop3 redis]# tar -zxvf redis-5.0.14.tar.gz 3. 切换到目录下 [root@hadoop3 re ......
windows本地部署redis
1：了解自己php扩展版本，在php文件里输入phpinfo();执行看php版本，看 php Extension Biuld的值。 2：下载redis配置文件：址：https://windows.php.net/downloads/pecl/releases/redis/ 点5.3.4版本里的根据 ......
#docker基础命令
一、镜像命令 1、拉取镜像 从镜像仓库中下载镜像到本地，一般是保存在/var/lib/docker目录（分层下载） # 拉取最新版本的镜像 docker pull ubuntu # 拉取指定版本镜像 docker pull ubuntu:14.04 2、查看本地镜像列表 同一个仓库源可以有多个 TA ......
docker 部署mongoDB集群与读写分离
一.生成key文件 需要注意集群中所有机器都需要用同一个文件，否则会出现验证失败的情况 # 生成key openssl rand -base64 756 > /data/volume/mongodb/configdb/mongo.key # 设置访问权限 chmod 400 /data/volume ......
Redis-cluster调整主从关系
一、概述 Redis集群创建后，可能会出现互为主从关系的节点从属于同一台服务器的情况。在此种情况下，若服务器故障宕机或需要停机维护，互为主从关系的节点同时停止运行，导致redis集群暂时失去一部分slot插槽。此时，redis集群为fail状态，对其进行的数据读写操作均无法正常进行。为避免此种情况的 ......
redis-Q&A-挖坑
ps: 挖坑代填 1. 如何用Redis高效实现12306的复杂售票业务 2. 新浪微博突发事件如何做好Redis缓存的高可用 3. 高并发场景缓存穿透&失效&雪崩如何解决 4. Redis高并发场景热点缓存如何重建 5. Redis集群架构如何抗住12306与双11的洪峰流量 6. Redis缓存 ......
hyperf 框架 redis 安装和使用
安装Redis 的框架扩张 composer require hyperf/redis 配置redis的参数 -> .env文件中 REDIS_HOST=127.0.0.1 REDIS_AUTH=Fl REDIS_PORT=6379 REDIS_DB=0 在模型文件中 <?php declare(s ......
Docker 镜像及容器命令
授人以鱼不如授人以渔，先列出官方命令文档 docker命令文档地址：https://docs.docker.com/engine/reference/commandline/images/ 镜像相关指令 镜像是容器的模板，这句话是考点，记住啦 docker 镜像基本命令大致分为，查看镜像，搜索镜像， ......
微服务docker 命令
Consul 的 Docker 镜像使用 1.镜像官方网址：https://hub.docker.com/_/consul2.pull 镜像(拉取consul镜像)： docker pull consul:1.15.1 3.创建容器（默认http管理端口：8500） docker run -p 85 ......
安装docker-compose
安装docker-compose 下载安装文件 sudo curl -L https://get.daocloud.io/docker/compose/releases/download/1.25.1/docker-compose-uname -s-uname -m -o /opt/docker-c ......
Docker 常用命令
docker run -p 80:80 nginx input docker will get the command in the console sage: docker [OPTIONS] COMMAND A self-sufficient runtime for containers Man ......
决战圣地玛丽乔亚Day48----Redis常见问题处理
热点数据倾斜是什么？如何解决和处理？ 数据量倾斜和访问热点数据造成倾斜： 数据量倾斜：1.bigkey 2.hashtag不规范 3. 槽位分配不均 数据访问倾斜：1.拆key 2.扩容 3.本地缓存 如果是bigkey导致的倾斜： 在业务层生成数据时，要尽量避免把过多的数据保存在同一个键值对中。如 ......
练习：docker部署
部署nginx 搜索镜像（最好取hub官网搜索一下）--search 拉取下载镜像--pull 使用后台运行，并起名字，-p 宿主机端口：容器内部端口 [root@bytest01 ~]# docker search nginx NAME DESCRIPTION STARS OFFICIAL AUT ......
Ubuntu20.04 LTS国内源安装指定版本Docker
1.卸载旧版本Docker #卸载旧版本 apt-get autoremove docker docker-ce docker-engine docker.io containerd runc #清空旧版docker占用的内存 sudo apt-get remove --auto-remove do ......
Redis哨兵和cluster集群
1、什么是哨兵模式哨兵模式：可以自动切换解决单点故障，但是不能负载均衡，存储能力受限制。 哨兵核心功能：在主从复制的基础上，实现了主节点的自动故障转移 2、哨兵的作用监控：监控主节点和从节点是否在正常运行 故障自动转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从 ......
决战圣地玛丽乔亚Day47----Redis集群
4.Redis Cluster 集群模式 如果单机吞吐量过大，我们可以横向和纵向进行扩展，横向就是加节点（scale out），纵向就是加配置（scale up）。 如果加配置，治标不治本，单机局限性和持久化问题无法解决（如轮式RDB快照还是AOF指令） 横向扩展更容易扩展，可以解决很多问题，包括单 ......
实战篇：使用rook在k8s上搭建ceph集群
写在开篇 “ 上一次，我发了一篇：《理论篇：让我们一起鲁克鲁克——rook（开源存储编排）》。这次，来一篇实战，使用rook在k8s上把ceph集群搞起来。后续，还会陆续分享如何对接k8s（作为k8s的后端存储）、以及分享一些在生产上的实践经验。 ” 环境规划 | 主机名 | IP | 角色 | 数 ......
常用软件Docker部署命令
前言 我们在日常开发中经常会用到一些中间件，用docker快速部署是一个不错的选择。本帖将记录一些日常开发中用到的一些软件的docker部署命令，方便查阅。 PostgreSql docker run --name dockerPG11 -e POSTGRES_PASSWORD=123456 -p ......
Quarkus系列——集成Redis（四）
前言 reids是我们在进行后端开发的时候常用到的一个中间件，常用于实现分布式缓存，分布式锁。我们在SpringBoot中可以很方便的通过stater来集成redis。在Quarkus中官方为我们提供了redis的client虽然比起Spring用起来略显简陋但是稍微改造下也能满足我们日常需要。 准 ......