postgresql redis lamp
Redis管道
背景 Redis是一种基于客户端-服务端模型以及请求/响应协议的TCP服务。一个请求会遵循以下步骤： 1 客户端向服务端发送命令分四步(发送命令→命令排队→命令执行→返回结果)，并监听Socket返回，通常以阻塞模式等待服务端响应。 2 服务端处理命令，并将结果返回给客户端。 上述两步称为：Roun ......
springboot整合redis
spring: redis: port: 6379 host: 192.168.88.101 password: 111111 lettuce: pool: max-active: 8 max-wait: -1ms database: 0 yml配置 <dependency> <groupId>or ......
StackGres 数据库平台工程，使用 Citus + Patroni 创建生产级高可用分布式 PostgreSQL 分片集群
系列 StackGres, 可私有部署的云原生数据库平台工程 StackGres 数据库平台工程功能介绍与快速上手 StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer) StackGres 1.6 数据库平台工程，集群高可用(Patro ......
pyhton显示redis base64编码图片
1、直接显示已存储的图片： from PIL import Image im = Image.open(r'e:\p1.jpeg' ) im.show() 2、python存储redis图片： db = redis.Redis(host='127.0.0.1', port= 6379, passwo ......
PostgreSQL: select for update实战
场景 需要获取用户申请的流水号，其值记录在number_of_form表中。但当多个用户同时申请时，会出现单号重复的情况，现在需要保证单据号码的一致性 解决方案 以我搜寻来看，大体有两种做法。 悲观锁：总是假设最坏的情况，也就是每次拿数据的时候，都认为别人会修改，所以每次拿数据，都会对符合条件的数据 ......
pyhton操作redis返回中文处理
使用pyhton操作redis返回为：b'\xe4\xb8\xad\xe5\x8d\x8e\xe4\xba\xba\xe6\xb0\x91\xe5\x85\xb1\xe5\x92\x8c\xe5\x9b\xbd' 或b'Zarten_4'，处理办法： 需在连接池中加入编码及字符集： redis_co ......
redis 规则设置
必须明确应用场景，1）作为缓存还是存储；2）数据丢失对应用的影响 解释：与持久化关系数据库（MySQL通过Redo可保证数据不丢）不同，Redis在故障时会丢失分钟级别数据，业务必须确保不会受到影响 禁止命令：keys、flushall、flushdb；针对大key禁止命令：hgetall，hkey ......
redis系列（03）：redis客户端使用
本系列汇总，请查看这里：https://www.cnblogs.com/uncleyong/p/10950727.html redis配置 redis的配置文件中，注释下面 杀掉redis服务进程：ps -ef | grep redis | grep -v grep | awk '{print $2 ......
redis2
redis为什么这么快 1、纯内存操作，避免io操作 2、单线程架构（数据读写）避免了线程，进程间切换 3、使用了io多路复用网络模型 -io模型 -同步io -异步io -io多路复用 -poll -epoll -select 读写都是单线程，不需要锁，不会出现数据错乱 字符串类型 1、基本使用g ......
【Azure Redis】中国区Redis在东三区的资源无法在通过门户上与北三区资源之间建立灾备链接
问题描述 为应用启用灾备管理，在北三区建立了一个Azure Redis，同时，在东三区也建立了一个同样的Prem级Redis服务。但是在建立灾备(DR:Disease Recovery)时候，却无法选择东三区的资源。 问题解答 目前(2023-12-05)，中国Azure的东三区是作为北三区的Ava ......
debian11 bullsye postgresql-11
curl http://mirrors.zju.edu.cn/postgresql/repos/apt/ACCC4CF8.asc | apt-key add - vim /etc/apt/sources.list.d/pgdg.list deb http://mirrors.zju.edu.cn/p ......
redis集群
集群：支持多个master，一个master挂载多个slave cluster自带了sentinel的故障转移机制，内置了高可用的支持，无需再去使用哨兵功能 客户端不再需要连接所有节点，只需连接一个可用节点 槽位slot负责分配各个物理节点，对应的节点来维护节点，插槽，数据之间的关系 集群算法--分 ......
StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer)
Postgres 配置 PostgreSQL 的配置在 SGPostgresConfig CRD 中指定。如果在创建集群时没有指定自定义配置，StackGres 将创建一个默认配置，您可以在 这里 看到。 https://stackgres.io/doc/latest/reference/crd/s ......
redis系列（01）：redis简介
本系列汇总，请查看这里：https://www.cnblogs.com/uncleyong/p/10950727.html 出现背景 关系型数据库的不足：数据是存储在磁盘上的，磁盘的 I/O 读写瓶颈会直接影响性能 所以，我们可以用速度更快的内存来存储常用但数据量不算大、且结构简单的数据 这样可以较 ......
记录一次 postgresql 优化案例（ volatility 自定义函数无法并行查询 ）
同事最近做个金融适配项目，找我看条SQL，告知ORACLE跑1分钟，PG要跑30分钟(其实并没有这么夸张)😎， 废话不说，贴慢SQL。 慢SQL（关键信息已经加密）： explain analyze SELECT c_qxxxxaode, '2023-03-22 00:00:00' AS d_cd ......
Redis缓存和MySQL数据一致性方案详解
需求起因在高并发的业务场景下，数据库大多数情况都是用户并发访问最薄弱的环节。所以，就需要使用redis做一个缓冲操作，让请求先访问到redis，而不是直接访问MySQL等数据库 读取缓存步骤一般没有什么问题，但是一旦涉及到数据更新:数据库和缓存更新，就容易出现缓存(Redis)和数据库(MYSQL) ......
Redis的内存回收原理，及内存过期淘汰策略详解
Redis内存回收机制 Redis的内存回收主要围绕以下两个方面1Redis过期策略:删除过期时间的key值2Redis淘汰策略:内存使用到达maxmemory上限时触发内存淘汰数据Redis的过期策略和内存淘汰策略不是一件事，实际研发中不要弄混淆了，下面会完整的介绍两者。 Redis过期策略过期策 ......
redis、nginx、Linux常用命令整理
redis相关命令 服务器相关命令 ping ： 检测连接是否存活 echo： 在命令行打印一些内容 quit、exit： 退出客户端 shutdown： 退出服务器端 info： 返回redis相关信息 config get dir/* 实时传递接收的请求 showlog： 显示慢查询 selec ......
CentOS中安装redis源码包
下载地址 # 将redis压缩包上传到服务器/home/software，并解压 tar -zxvf redis-6.0.6.tar.gz # 安装gcc yum install gcc-c++ -y # 查看版本 gcc -v # 进入解压目录 # 编译 make # 安装（默认安装到/usr/l ......
redis哨兵
妈耶，哨兵数=主从数。主从复制就三台了，六台我开不来。按尚硅谷的教程先把哨兵文件配在6379端口上的那台机器了 哨兵文件中的<quorum>代表确认客观下线的最少的哨兵数量 先启动哨兵 redis-sentinel /export/database/myredis/sentinel.conf --s ......
Django连接Redis
1、安装redis库 pip install django-redis 2、配置django中的settings.py # redis配置 CACHES = { "default": { "BACKEND": "django_redis.cache.RedisCache", "LOCATION": ......
在Docker中安装Redis
拉取Redis镜像：首先，你需要从Docker Hub上拉取Redis的镜像。你可以使用以下命令来完成这个操作1： docker pull redis:latest 创建数据目录和配置文件：在你的宿主机上创建一个目录来存放Redis的配置文件和数据。你还需要为这个目录设置适当的权限1： mkdir ......
Github Actions - Creating PostgreSQL service containers
# Service containers to run with `container-job` services: # Label used to access the service container postgres: # Docker Hub image image: postgres # ......
redis_demo
redis安装：Redis 安装 | 菜鸟教程 (runoob.com) redis概念：Jedis入门 - 知乎 (zhihu.com) jedis参考demo：Jedis入门教程_jedis教程-CSDN博客 模块目录结构： pom.xml: <project xmlns="http://mav ......
Redis哨兵、复制、集群的设计原理与区别
本篇主要谈Redis的高可用 谈到Redis服务器的高可用，如何保证备份的机器是原始服务器的完整备份呢? 这时候就需要哨兵和复制 1.哨兵(Sentinel): 可以管理多个Redis服务器，它提供了监控，提醒以及自动的故转移的功能 2.复制(Replication): 则是负责让一个Redis服务 ......
PostgreSQL - ERROR: deadlock detected
ERROR: deadlock detectedDETAIL: Process 209 waits for ShareLock on transaction 1034; blocked by process 201.Process 201 waits for ShareLock on transac ......
PostgreSQL - Check blocking SQL statements
pg_locks view Looking at pg_locks shows you what locks are granted and what processes are waiting for locks to be acquired. A good query to start look ......
如何解决Redis缓存雪崩、缓存穿透、缓存并发等5大难题
缓存雪崩数据末加载到缓存中，或者缓存同一时间大面积的失效，从而导致所有请求都去查数据库，导致数据库CPU和内存负载过高，甚至宕机。比如一个雪崩的简单过程1、redis集群大面积故障2、缓存失效，但依然大量请求访问缓存服务redis3、redis大量失效后，大量请求转向到mysql数据库4、mysql ......
redis复制replica
通过查看log信息即可观察主机是否与从机正确连接，一般来说主机上有succeeded就是可以了 可以通过info replication查看自己的身份 role:master connected_slaves:2 slave0:ip=192.168.88.102,port=6380,state=on ......
「安装odoo Windows版，无法勾选PostgreSQL Database」的解决方案
存在问题 安装odoo Windows版时，PostgreSQL Database无法被勾选。 出现的原因是，曾经安装过PostgreSQL Database；虽然可能已被卸载，但注册表内还有残余信息，导致odoo认为PostgreSQL Database仍存在于系统之中。 解决方案 删除注册表内的 ......