磁盘 碎片pg
KVM虚拟机怎么扩容磁盘
当KVM虚拟机磁盘不够用则可以扩容磁盘 扩容虚拟磁盘 在宿主机操作扩容 # 需满足以下条件才能执行扩容 # 1. 虚拟机已关机 # 2. 虚拟机无快照 qemu-img resize /kvm/CentOS7K8SHarbor061.qcow2 +100G 主机格式化磁盘 磁盘扩容后需要格式化才能使 ......
13.PG之逻辑复制
1.逻辑复制介绍 PostgreSQL10版本中增加了一个新特性，即逻辑复制（Logical Replication）。PostgreSQL 9的流复制是基于WAL日志的物理复制，其原理是主库不间断地发送WAL日志流到备库，备库接收主库发送的WAL日志流后应用WAL；而逻辑复制是基于逻辑解析（Log ......
linux下以lvm的方式挂载磁盘到指定目录
1.创建PV pvcreate /dev/vdb 2.创建VG分组 vgcreate vg_data /dev/vdb 3.创建逻辑卷 lvcreate -l 100%VG -n lv_data vg_data 4、mkfs(格式化) mkfs.xfs /dev/vg_data/lv_data 5. ......
12.PG主备搭建
1.环境 主库：172.16.191.133(pg16) 备库：172.16.191.136(pg16) 2.主库配置 要使用流复制，需要允许主库接受流复制的连接，这就需要在pg_hba.conf中做如下配置： host replication all 0/0 md5 修改配置参数文件postgre ......
tdsql(pg版本)安装文档
tdsql(pg版本)安装文档 一、安装的前置条件：1、需要在开通oss机器的80和8080端口；2、准备NAS，大小为2T. 二、安装前检查：1、部署DN节点的服务器数据盘必须是SSD，不能用HDD：通过cat /sys/block/sda/queue/rotational进行查看，返回值0即为S ......
TDSQL(PG版本)天巡系统安装与配置
参考文档：https://doc.weixin.qq.com/doc/w3_AFwAeQZ3ACcJA0Z3mpITzyrQuymvJ?scode=AJEAIQdfAAoexq79g0AFwAeQZ3ACc 安装前准备：1、需要下载安装包，包括：tbase-update.zip；2、天巡可以安装在虚 ......
磁盘的访问问题
1、例题一 某磁盘有100个磁道，磁头从一个磁道移至另一个磁道需要6ms。文件在磁盘上非连续存放，逻辑上相邻数据块的平均距离为10个磁道，每块的旋转延迟时间及传输时间分别为100ms和20ms，则读取一个100块的文件需要（ ）ms。 相关公式：读取时间=（寻道时间+旋转延迟时间+传输时间）*文件数 ......
查看磁盘io利用率
一、概述作用iostat是I/O statistics(输入/输出统计)的缩写，主要对系统的磁盘操作活动进行监视 iostat的特点是汇报磁盘活动及CPU使用情况，输出磁盘IO和CPU的统计信息 劣势iostat有一个弱点，即并不能对某个进程进行深入分析，仅对系统的整体情况进行分析 二、安装 ios ......
死锁、内部碎片、外部碎片、多进程/多线程、服务器高并发、集群
死锁：两个（多个）线程互相等待对方数据的过程 1.死锁产生条件（解决办法）： 🔴 互斥条件：所需求的资源具有排他性，其他请求进程只能等待（可以允许多进程、多线程访问） 🔴 不剥夺条件：未主动释放，不能被其他进程夺走（可以强制剥夺） 🔴 请求和保持：进程或线程至少持有一个资源，并且在等待其他资源 ......
磁盘调度算法、虚拟内存、抖动（颠簸）、堆栈访问速度、内存分配、内存交换、编码（ASCII、Unicode、UTF-8）
常见的几种磁盘调度算法： 读写一个磁盘块的时间的影响因素有： 🔴 旋转时间（主轴转动盘面，使得磁头移动到适当的扇区上） 🔴 寻道时间（制动手臂移动，使得磁头移动道适当的磁道上） 🔴 实际的数据传输时间 其中，寻道时间最长，因此磁盘调度的主要目标是使磁盘的平均寻道时间最短 1.先来先服务： 按照 ......
2.主机规划与磁盘分区
第2章 主机规划与磁盘分区 2.1.3 各硬件设备在 Linux 中的文件名 在 Linux 系统中，每个设备都被当成一个文件来对待。举例来说，SATA接口的硬盘的文件名称即为/dev/sd[a-d]，其中， 括号内的字母为a-d当中的任意一个，亦即有/dev/sda、/dev/sdb、/dev/s ......
使用pg_dump导出postgresql数据
使用pg_dump导出postgresql数据 参考：如何使用 PostgreSQL 进行数据迁移和整合？ 导出命令 pg_dump -U username -d dbname -a --inserts -f backup.sql -a 只导出数据，不导出schema --inserts 将数据转储 ......
Redis哨兵内存碎片化故障处理
背景介绍 近期研发同学反馈业务响应波动厉害，怀疑是Redis操作key比较慢的缘故。由于该环境是我一手安装部署的，我将进行问题排查。 Redis环境以及业务环境都已经使用Prometheus进行了监控。 环境说明 我们有两套一样的环境来服务不同的客户，另外一套环境中业务一直平稳运行，Redis并没有 ......
C/C++ 中运用WMI接口查询系统各类信息，如软件信息、磁盘信息...
在C/C++中使用WMI（Windows Management Instrumentation）接口查询系统信息是一种强大的方法。下面是一个简单的例子，演示如何使用WMI查询系统信息，包括安装的软件信息、磁盘信息、网络适配器信息、操作系统信息等。请注意，这里使用的是COM接口，因此需要在代码中进行C ......
windows使用rclone挂载alist为本地磁盘，设置开机自启
前言 实现在windows下将alist挂载为本地磁盘，并设置开机自启，使得重启后依然生效。 教程 下载软件 Rclone: Rclone downloads WinFsp: https://winfsp.dev/rel/ 配置Rclone 假设Rclone所在目录是：D:\rclone-v1.64 ......
PG数据库存储验证
PG数据库存储验证 背景 最近学习了SQLServer数据库的varchar和nvarchar的存储 想到PG数据库其实没让选择字符集,也没有nvarchar 所以想学习一下nvarchar的使用情况 建表以及插入sql su - postgres psql create database zhao ......
10.磁盘的组织与管理
磁盘访问时间 1. 寻道时间（时间最长） 2. 旋转延迟时间 3. 传输时间 磁盘调度算法(减少寻找时间) 先来先服务算法（FCFS） 按进程提出访问的先后次序予以服务 但在对磁盘访问频繁的系统中，平均寻道距离大，因而平均访问时间长 最短寻道时间优先算法（SSTF） 每次从等待队列中选择要访问的目标 ......
RAID磁盘阵列
目录一、RAID的介绍1、RAID存储方式2、RAID逻辑卷二、RAID的分类1、RAID 02、RAID 13、RAID 24、RAID 35、RAID 46、RAID 57、RAID 68、RAID 10三、RAID比较四、部署磁盘阵列五、损坏磁盘阵列及修复取消挂载扩展六、磁盘阵列+备份盘 一、 ......
11.PG表之pg_class和pg_stats
1. pg_class表 postgres=# \d pg_class Table "pg_catalog.pg_class" Column | Type | Collation | Nullable | Default + + + + oid | oid | | not null | 行标识符号 ......
10.PG的统计信息
1.PG的统计信息 数据的统计信息反映的是数据的分布情况，PG执行SQL语句会经过解析的过程和查询优化过程。 解析过程：解析器将sql语句分解成数据结构并传递给后续步骤 查询优化过程：查询优化器发现执行sql语句的最佳方案，并生产执行计划。 查询优化器sql决定sql语句如何执行依赖于数据库的统计信 ......
9.PG表的磁盘碎片清理
1.磁盘碎片 在PG中删除行时，这些行为只是被标记为 'dead' , 并不是真正从物理存储上进行删除，因为空间也没有被释放回收。 在PG中，除非进行自动的清理(vacuum)或者手工的清理，否则数据块所占用的物理空间是不会释放，在物理存储空间被回收之前，会导致存储空间中存在很多空洞。 大量的更新操 ......
8.PG的日志文件
Postgresql的日志分为运行日志、预写日志、事务日志和服务器日志。 1）运行日志 运行日志，在默认情况下是不开启的，通过主要的参数文件postgresql.conf的配置可以看到相关的参数设置。运行日志一般用来记录数据库服务器端与数据库的状态，如各种错误信息、定位慢日志、数据库的启动、关闭信息 ......
7.PG的控制文件
控制文件 控制文件记录了数据库运行时的一些信息，如数据库OID,是否为打开状态，预写日志的位置、检查点的信息等。 控制文件位置默认保存在$PGDATA/global目录下，pg_control 这个就是。 控制文件内容 [postgres@iZwz909xeqcc7ouqk8528zZ 16]$ p ......
磁盘性能检测（time&&fio）
一、time命令：time dd if=/tmp/test1 of=/tmp/test2 bs=8k count=51200 oflag=dsync参数说明：1、time 有计时作用，dd 用于复制，从 if 读出，写到 of；2、if=/dev/zero 不产生 IO，因此可以用来测试纯写速度；3 ......
6.PG数据库管理
1.PG数据库库属主 PG中的数据库属主属于创建者，只要有cretedb权限就可以创建数据库，数据库属主不一定拥有存放在该数据库中其它用户创建的对象的访问权限。 数据库在创建后，允许public角色连接，即允许任何人连接 数据库在创建后，不允许除了超级用户和owner之外的任何人在数据库中创建sch ......
Linux磁盘分区和挂载
一、准备工作(1)查看主机磁盘命令：lsblk(2)查看主机磁盘挂载文件系统情况命令：df -h二、磁盘分区(1)分区命令：fdisk -b 1024 /dev/vda其中：b 1024，一个sector size的大小；1GB;使用-b指定sector时，每个sector的大小是： sector ......
vm exsi 扩展linux虚拟机磁盘空间，ubuntu系统扩容
在虚拟机的管理中为了不浪费资源空间，有一个原则，就是宁可初始化空间分的比较小，随着使用情况而逐步增加，也不要初始化空间分很大，造成物理磁盘空间的浪费和不够用 因为虚拟机扩容相对容易，缩容比较困难（有丢失数据的风险） 下面为我的一次扩容操作记录，用于日后回顾备忘 ......
centos安装pg数据库
1.下载yum源 yum install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm 2.安装libzstd 否则安装数据库报错Req ......
磁盘io问题排查
环境: OS:Centos 7 1.top查看wa很高 avg-cpu: %user %nice %system %iowait %steal %idle top - 08:45:04 up 722 days, 17:33, 1 user, load average: 3.28, 3.12, 3.0 ......
基于pg driver 的dremio cratedb arp 扩展
实际上pg 驱动是可以直接链接cratedb 的但是因为默认实现会自动添加一个编码造成生成的sql 在cratedb 运行异常 参考代码 核心是arp 方言处理上，移除了关于编码的处理，实际上与mssql server 处理是一样的,主要代码实际上来自ce 版本的pg 扩展 public SqlCo ......