postgresql备份postgres高手
linux文件上传至百度网盘备份
一、摘要说明 1.工具：百度网盘的python客户端--bypy 2.下载方式：通过pip下载 3.实现方案：安装pip-->安装bypy-->百度网盘授权-->测试验证-->扩展 4.注意事项：使用bypy工具绑定后，由于百度PCS API权限限制，程序只能存取百度云端/apps（我的应用数据）/ ......
Mysql的备份与恢复
1.数据备份的重要性 备份的主要目的是灾难恢复。 在生产环境中，数据的安全性至关重要。 任何数据的丢失都可能产生严重的后果。 造成数据丢失的原因： 程序错误 人为操作错误 运算错误 磁盘故障 灾难（如火灾、地震）和盗窃 2. 数据库备份的分类和备份策略 2.1 数据库备份的分类 1）物理备份 物理备 ......
爱数anybackup——控制台建立对应的ofs卷、重删卷、自备份卷、元数据卷
以admin登录系统，点击【存储】>【节点管理】>【配置】>【卷管理】 选择对应的【卷类型】 点击【+新建】 输入【卷名称】，选择【挂载路径】，输入【容量】，然后点击创建即可 ......
postgresql 长事务导致未vacuum
故障发生 Postgresql某系统数据库反馈数据库慢，使用Pgbadger 分析慢日志发现以下SQL执行消耗较高，执行时间平均2S。 分析索引表上列msg_source存在索引，该表可以正常走索引。既然能走索引，PG中考虑就是表死元组过多了。 一、分析表的死元组：表有273852002 行死元组未 ......
PostgreSQL数据库WAL日志空间大小以及不清理的原因深入分析
1. 背景很多初学者会对WAL日志占用多少空间比较疑惑，听网上的一些文章说是由max_wal_size来控制的，但发现很多时候WAL日志空间会超过这个设置的值，不知道为什么? 同时有时会发现WAL日志不清理了，占用空间在不停的增长，然后不知道为什么？看一些网上的文章，发现情况不是网上说的那种情况。中 ......
成为 Go 高手的 8 个 GitHub 开源项目
想成为 Go 高手吗？那推荐看看这些开源项目 Go 从 2009 年开始正式对外公布，随着时间的推移，Go 在当前的编程语言中占有良好的地位，在 WEB 领域、云原生领域、底层服务领域都有广泛的应用。Go 是一门相对年轻的语言，具有 C/C++ 等编译语言的性能和安全性，同时也具有良好的开发速度。本 ......
Linux CentOS 7.x离线安装PostgreSQL操作手册
一、准备环节 rpm -qa | grep postgres 检查PostgreSQL 是否已经安装 rpm -qal | grep postgres 检查PostgreSQL 安装位置 postgresql-12.2.tar.gz 二、Pgsql数据库安装下载 下载地址: http://www.p ......
DBA容灾与备份恢复：闪回应用及实践(一)
闪回应用及实践第一天：以时间戳方式恢复被勿更新数据：1.查看UNDO的空间是否充足2.询问操作发生时间23:48:48，经确认这个表中数据变化很小。如果能把这个时间点前的表中数据恢复出来，就能把问题的影响降到最低。先尝试使用闪回查询来做，依赖一些缓存空间和系统的负载，在反复确认时间后，写了如下的语句 ......
读高性能MySQL（第4版）笔记15_备份与恢复（下）
1. 二进制日志 1.1. 服务器的二进制日志是需要备份的最重要元素之一 1.2. 对于基于时间点的恢复是必需的，并且通常比数据要小，所以更容易被进行频繁的备份 1.3. 如果有某个时间点的数据备份和所有从那时以后的二进制日志，就可以重放从上次全备份以来的二进制日志并“向前回滚”所有的变更 1.4. ......
实现基于分布式的LAMP架构，并将NFS实时同步到备份服务
1. 实现基于分布式的LAMP架构，并将NFS实时同步到备份服务 1.1 web服务器配置 服务器环境准备 需配置DNS解析，将域名解析成web服务器的地址 服务名称 IP地址 web01-server 10.0.0.8 web02-server 10.0.0.18 mysql-server 10. ......
mysql备份常用方案及使用
mysql中一个表的字段 删除 如果需要备份的话，有几种方案，以及选择哪一种方案 MySQL 是一种流行的关系型数据库管理系统 (RDBMS)，在生产环境中被广泛使用。对 MySQL 数据库进行备份是非常重要的，以防止数据丢失或损坏。以下是几种常见的 MySQL 备份方案及其使用场景。 1. mys ......
Mysql数据库定时备份到OSS
背景 mysql运行在Docker中，计划每天定时备份数据并存储到阿里云OSS。其中用到了定时任务crontab、云存储管理rclone、shell脚本 部署脚本 # 创建目录 mkdir -p ~/task cd ~/task # 创建主备份脚本 touch backup_main.sh # 创建 ......
PostgreSQL排序字段不唯一导致分页查询结果出现重复数据
背景 pg单字段排序，排序字段中可能会出现重复，这样就会导致我们在进行分页查询时会出现一些和预期不相符的现象，如这个数据在第一页出现了，然后再第二页又出现。 复现步骤 create table test_select_order_page_duplicate ( id varchar(36) not ......
MySQL备份与恢复
一、MySQL 日志管理 MySQL 的日志默认保存位置为 /usr/local/mysql/datavim /etc/my.cnf[mysqld]##错误日志，用来记录当MySQL启动、停止或运行时发生的错误信息，默认已开启log-error=/usr/local/mysql/data/mysql ......
MySQL数据库备份命令
转载自：https://www.cnblogs.com/acpp/archive/2010/01/06/1640542.html mysqldump -hhostname -uusername -ppassword databasename > backupfile.sql备份MySQL数据库为带删 ......
Linux数据库备份：高效使用mysqldump工具
在现代企业管理中，数据库是企业重要的数据资产linux 备份数据库，因此备份数据库显得尤为重要。Linux系统下有各种不同的工具可以用于备份数据库，其中最常用的是 mysqldump 工具。在本文中，我们将介绍如何使用 mysqldump 工具备份 MySQL 数据库，并探讨其他备份工具和备份策略。 ......
ES数据备份还原
ES数据备份还原 1. 创建备份目录并更改权限 执行以下命令创建备份文件存储的路径 mkdir -p /mount/backups/my_backup 更改权限以及属性 chmod 775 /mount/backups/my_backup chown elasticsearch:elasticsea ......
漏洞修复系列-如何升级linux系统Upgrade to PostgreSQL JDBC Driver version 42.2.27, 42.3.8, 42.4.3, 42.5.1, or later
问题 遇到一个PostgreSQL JDBC Driver漏洞 PostgreSQL JDBC Driver that is 42.2.x prior to 42.2.27, 42.3.x prior to 42.3.8, 42.4.x prior to 42.4.3 or 42.5.x prior ......
读高性能MySQL（第4版）笔记14_备份与恢复（中）
1. 在线备份 2. 离线备份 2.1. 关闭MySQL做备份是最简单、最安全的 2.2. 所有获取一致性副本的方法中最好的 2.3. 损坏或不一致的风险最小 2.4. 根本不用关心InnoDB缓冲池中的脏页或其他缓存 2.5. 不需要担心数据在尝试备份的过程中被修改 2.5.1. 服务器不对应用提 ......
PostgreSQL逻辑复制技术与项目实战
一、风哥PG-DBA培训20：PostgreSQL逻辑复制技术与项目实战 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL逻辑复制技术与项目实战，学完本课程可以掌握PostgreSQL逻辑复制基础与架构，Post ......
PostgreSQL高可用集群项目实战之Repmgr
一、风哥PG-DBA培训18：PostgreSQL高可用集群项目实战之Repmgr 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL高可用集群项目实战之Repmgr，学完本课程可以掌握Repmgr运行 ......
PostgreSQL高可用集群项目实战之Patroni
一、风哥PG-DBA培训19：PostgreSQL高可用集群项目实战之Patroni 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL高可用集群项目实战之Patroni，学完本课程可以掌握Patron ......
PostgreSQL负载均衡分发与双主HA架构
一、风哥PG-DBA培训16：PostgreSQL负载均衡分发与双主HA架构 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL负载均衡分发与双主HA架构，学完本课程可以掌握PostgreSQL高可用负载均衡解决方 ......
PostgreSQL集群解决方案与流复制项目实战
一、风哥PG-DBA培训15：PostgreSQL集群解决方案与流复制项目实战 课程目标： 本课程由风哥发布的基于PostgreSQL数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL集群解决方案与流复制项目实战，学完本课程可以掌握PostgreSQL集群 ......
PostgreSQL技术大讲堂 - 第30讲：多表连接方式
PostgreSQL从小白到专家，是从入门逐渐能力提升的一个系列教程，内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容，希望对热爱PG、学习PG的同学们有帮助，欢迎持续关注CUUG PG技术大讲堂。 第30讲：多表连接方式 第30讲预告：9月23日(周六)19:30-20 ......
浅析Postgresql cache hit ratio
一、查找cache hit ratio 查看cache hit ratio 这个东西其实放到其他数据库也是一样，如果你的内存对于系统的缓冲支持不足，需要的数据无法驻留在内存，经常会产生 fault page (有些数据库对于读取的数据不在内存中的一种叫法)， 那就必须要要查看你的一个系统参数 cac ......
MySQL备份与恢复
数据库备份的分类 数据备份的重要性 备份的主要目的是灾难恢复 在生产环境中，数据的安全性至关重要 任何数据的丢失都可能产生严重的后果 任何数据丢失的原因 程序错误 人为操作错误 运算错误 磁盘故障 灾难（如火宅、地震）个盗窃 从物理与逻辑的角度，备份可分为 物理备份:对数据库操作系统的物理文件(如数 ......
读高性能MySQL（第4版）笔记13_备份与恢复（上）
1. 每个人都知道需要备份，但并不是每个人都能意识到需要的是可恢复的备份 1.1. 如果你没有提前做好备份规划，也许以后会发现已经错失了一些最佳的选择 1.2. 在服务器已经配置好以后，才想起应该使用LVM，以便获取文件系统的快照——但这时已经太迟了 1.3. 如果你没有计划做定期的恢复演练，当真的 ......
PostgreSQL 9.6修改数据存储路径
说明 使用的 PostgreSQL 版本是 9.6 版本的。 实际项目部署过程中，数据库的数据有时候被要求保留5-10年，甚至更久。随着数据量的增大，磁盘占用空间也会随之增大。 当数据库默认的安装路径所在目录的磁盘空间不够大时，可以考虑扩容，或者修改数据库数据存放的路径，将路径指定到一个足够大的磁盘 ......