postgresql redis lamp

postgresql数据预热

test=# select * from pg_available_extensions where name like '%prewarm%' order by name; name | default_version | installed_version | comment + + + sys ......
postgresql 数据

shp数据插入sde连接的PostgreSQL库(二)---利用GeoTools读取shp数据并插入到空间数据库表中

前言 上一篇介绍了如何利用Maven构建GeoTools,这一节将介绍下一步内容,如何读取shp文件里面的信息并插入到SDE连接的PostgresSQL现有表中。 背景 从搭建环境到实现上述功能,大概用了7个工作日,从4月25日开始的,中间有个五一假期。公司的后端都不愿意接这活,只能自己上了。目前已 ......
数据 PostgreSQL shp GeoTools 数据库

知乎问题:如何说服技术老大用 Redis ?

这个问题很微妙,可能这位同学内心深处,觉得 Redis 是所有应用缓存的标配。 缓存的世界很广阔,对于应用系统来讲,我们经常将缓存划分为本地缓存和分布式缓存。 本地缓存 :应用中的缓存组件,缓存组件和应用在同一进程中,缓存的读写非常快,没有网络开销。但各应用或集群的各节点都需要维护自己的单独缓存,无 ......
老大 问题 Redis 技术

redis分布式锁

分布式锁是可以跨越多个实例,多个进程的锁。 一个tomcat实例是一个JVM进程,单体锁(synchronized、ReentrantLock)是JVM层面的锁,只能控制单个实例上的并发访问安全,多实例下依然存在数据一致性问题。 分布式锁:所有实例的所有线程都去获取同一把锁,但只有一个线程可以成功的 ......
分布式 redis

redis的持久化

################################ save [work@a8-cloud-dba-db08 ~]$ redis-cli -a root -p 6381127.0.0.1:6381> save OK save命令对应的日志: [work@a8-cloud-dba-db0 ......
redis

【Redis】-使用Lua脚本解决多线程下的超卖问题以及为什么?

一.多线程下引起的超卖问题呈现1.1.我先初始化库存数量为1、订单数量为0 1.2.开启3个线程去执行业务 业务为:判断如果说库存数量大于0,则库存减1,订单数量加1 结果为:库存为-2,订单数量为3 原因:如下图所示,这是因为分别有6个指令(3个库存减1指令,3个订单数量加1指令)在redis服务 ......
线程 脚本 问题 Redis Lua

laravel-permission 缓存导致的Redis带宽占用问题

先决条件 spatie/laravel-permission: 3.18.0 权限数: 634 角色数: 94 问题 laravel-permission 的缓存机制设计的不太合理 将所有的权限存放在一个大set中,且存放了许多不必要的信息。 当项目拥有大量的角色权限,使得这个set达到了11mb, ......

CentOS7搭建LAMP环境

一、LMAP版本 VMware版本: 16.2.4 Linux版本:CentOS 7.7 Apache版本:Apache 2.4.6 MySQL版本:MySQL 5.6.51 PHP版本:PHP 7.2.34 二、Apache环境配置 1. 安装配置 LAMP 环境需要的辅助工具( vim、tmux ......
CentOS7 环境 CentOS LAMP

Linux 搭建redis集群(哨兵模式)

环境: 192.168.56.101 192.168.56.102 192.168.56.103 1、在三台服务器上都安装redis 安装步骤:https://www.cnblogs.com/leihongnu/p/14734603.html 2、配置主从 192.168.556.101:配置文件r ......
哨兵 集群 模式 Linux redis

ubuntu安装redis

首先下载安装redis,并测试是否安装正确 wget http://download.redis.io/releases/redis-6.0.8.tar.gz tar -zxvf redis-6.0.8.tar.gz cd redis-6.0.8 make make test 如果make失败,则需 ......
ubuntu redis

配置docker启动的redis密码

一、配置docker启动的redis密码 在docker中通过命令进入redis容器 docker exec -it redis redis-cli 查看当前redis有没有设置密码:config get requirepass 127.0.0.1:6379> config get requirep ......
密码 docker redis

PostgreSQL versions shipped with Omnibus GitLab

PostgreSQL versions shipped with Omnibus GitLab ALL TIERS SELF-MANAGED This table lists only GitLab versions where a significant change happened in th ......
PostgreSQL versions Omnibus shipped GitLab

PostgreSQL索引的负面影响和相关成本

原创 七月流火 紧到说 2023-05-04 10:37 发表于四川 索引的负面影响和相关成本 曾经维护过一个系统,单个表有400多个字段,表上面有40多个索引,并且大量的索引是组合索引,日积月累就造成很多无效索引,对于维护重建索引非常耗时 索引通常被认为是SQL性能调优的灵丹妙药,且PG数据库支持 ......
PostgreSQL 索引 成本

PostgreSQL数据块损坏一例

PostgreSQL数据块损坏一例 原创 七月流火 紧到说 2022-07-06 09:00 发表于四川 背景 数据库备份报错 ERROR: invalid memory alloc request size 18446744073709551613 这种问题可以首先想到使用zero_damaged ......
PostgreSQL 数据

PostgreSQL块损坏模拟修复

PostgreSQL块损坏模拟修复 原创 七月流火 紧到说 2022-07-05 10:11 发表于四川 PG块损坏模拟修复 报错信息:ERROR: invalid page in block 10 of relation "base/13593/11025587" 测试环境 服务器:CentOS ......
PostgreSQL

PostgreSQL存储大量base64

PostgreSQL存储大量base64 原创 七月流火 紧到说 2022-05-28 09:00 发表于四川 背景 现场反馈数据库pg_wal日志有2.3TB,占满了磁盘空间,数据库处于宕机状态。并且数据库没有做备份。日志堆积的主要原因是配置的归档失败了。 排查过程中发现主要以下几点问题: 1、数 ......
PostgreSQL base 64

postgresql-​WalMiner使用

postgresql-​WalMiner使用 什么是WalMiner主要功能版本支持安装案例1(还原delete的数据)案例2(还原vacuum full的数据)从非wal产生的数据库中执行wal日志解析注意事项 什么是WalMiner WalMiner是从PostgreSQL的WAL(write ......
postgresql WalMiner

PostgresQL-丢失各种数据文件如何恢复

PostgresQL-丢失各种数据文件如何恢复 环境准备索引文件丢失fsm文件丢失mv文件丢失数据文件丢失pg_wal日志丢失pg_xact日志丢失pg_authid系统表数据丢失总结 环境准备 --创建测试表postgres=# create table test (n_bh int4 prima ......
PostgresQL 文件 数据

PostgresQL-toast表数据损坏修复案例

PostgresQL-toast表数据损坏修复案例 pg_statistic-toast表块损坏修复 当访问该表的时候报错:missing chunk number 0 for toast value 59747165 in pg_toast_2619 首先我们要找到出问题的表:toast表的表名是 ......

PostgreSQL 基础知识:psql 提示和技巧

对于积极使用和连接到 PostgreSQL 数据库的任何开发人员或 DBA 来说,能够访问psql命令行工具是必不可少的。在我们的第一篇文章中,我们讨论了 psql的简要历史,并演示了如何在您选择的平台上安装它并连接到 PostgreSQL 数据库。 在本文中,我们将帮助您了解成为高级用户所需了解的 ......
基础知识 PostgreSQL 技巧 基础 知识

PostgreSQL数据库支持中文拼音和笔画排序

PostgreSQL数据库支持中文拼音和笔画排序 1.前言 默认安装,PG是不支持中文拼音和笔画排序的。 1postgres=# select * from pg_settings where name ~ 'collate'; 2 name | setting | unit | category ......
笔画 PostgreSQL 拼音 数据库 数据

springboot整合redis做简单缓存

一、引入依赖 <!-- 引入redis依赖--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> </dependency ......
缓存 springboot redis

使用StackExchange.Redis组件C#模糊删除模糊查找

C# StackExchange.Redis 模糊删除 模糊查找 /// <summary> /// 模糊查找 /// </summary> /// <param name="key"></param> public List<XJDataDll.Tag.Point> SelectTags(stri ......
StackExchange 组件 Redis

高级Java程序员必问,Redis事务终极篇

Redis事务(Transaction)通过将多个Redis操作封装为一个原子性的操作序列,确保在事务执行过程中,不会受到其他客户端的干扰。从而在保证数据一致性的同时,协调并发,提高数据操作的效率和性能 ......
程序员 终极 事务 程序 Redis

PostgreSQL 性能优化: EXPLAIN 使用教程

PostgreSQL为每个收到的查询产生一个查询计划。选择正确的计划来匹配查询结构和数据的属性对于好的性能来说绝对是最关键的,因此系统包含了一个复杂的规划器来尝试选择好的计划。你可以使用EXPLAIN命令察看规划器为任何查询生成的查询计划。 ......
PostgreSQL 性能 EXPLAIN 教程

redis多线程部分

前几天面试被问到除了redis6.0引入的网络io多线程,redis还有哪些部分使用了多线程。 当时只答出了redis的bgsave会通过fork子线程去写入RDB。 现在总结一下我目前查到的: 6.0针对网络IO引入了多线程 bgsave会通过fork子进程去写入RDB 通过bgrewriteao ......
线程 部分 redis

PostgreSQL 12 文档: PostgreSQL 服务端程序

PostgreSQL 服务器应用 这一部分包含PostgreSQL服务器应用和支持工具的参考信息。这些命令只在数据库服务器所在的主机上运行才有用。其他工具程序在PostgreSQL 客户端应用中列出。 目录 ......
PostgreSQL 文档 程序 12

PostgreSQL 12 文档: PostgreSQL 客户端工具

PostgreSQL 客户端应用 这部份包含PostgreSQL客户端应用和工具的参考信息。不是所有这些命令都是通用工具,某些需要特殊权限。这些应用的共同特征是它们可以被运行在任何主机上,而不管数据库服务器在哪里。 当在命令行上指定用户和数据库名时,它们的大小写会被保留 — 空格或特殊字符的出现可能... ......
PostgreSQL 客户端 客户 文档 工具

PostgreSQL使用

下载源码 git clone https://github.com/postgres/postgres.git cd postgres git checkout REL_11_STABLE 编译安装 ./configure --prefix=/Users/oyld/work/pghome --ena ......
PostgreSQL

【IT老齐018】Redis高可用Sentinel架构方案

【IT老齐018】Redis高可用Sentinel架构方案 主从复制 master主要负责写入,slave负责读取。有读写分离的功能 主从同步原理 slave执行命令向master建立连接 master执行bgsave(后台存储),生成rdb快照(redis备份方式,data以二进制方式保存在本地) ......
架构 Sentinel 方案 Redis 018