硬盘 数据linux
linux 中/bin/bash 和/bin/sh 有点区别
在执行脚本时候我们习惯 /bin/sh /home/grid/ogg_check.sh 或者 /bin/bash /home/grid/ogg_check.sh 但是/bin/bash 不能执行脚本中的alias 的对象，只能用/bin/sh执行才可以 ......
linux内核离线升级
查看当前内核版本 下载内核地址 https://mirrors.aliyun.com/elrepo/kernel/el7/x86_64/RPMS 安装内核 rpm -ivh kernel-lt-* --nodeps --force awk -F\' '$1=="menuentry " {print ......
Linux下chmod常用指令
1.符号模式 u 表示用户（文件所有者）。g 表示组（文件所属的群组）。o 表示其他（其他人）。a 表示所有（所有人，即 u+g+o）。+ 用于添加权限。- 用于移除权限。= 用于设置精确的权限。 例如： chmod u+w file：给文件所有者添加写权限。chmod g-r file：移除组的读 ......
linux df -h 命令卡住 解决方法
用 df -h 查看磁盘情况，无奈卡住无法显示 解决方法： 1、首先就是使用strace去追踪到底在哪里卡住了 strace df -h 2、如果没有strace命令则进行安装即可 yum install strace 3、显示出卡住的地方 stat("/proc/sys/fs/binfmt_mis ......
vm - 释放linux删除文件后的物理磁盘
关闭vm的需要释放磁盘的虚拟机 然后进入vm 的安装根目录 需要用到里面的 vmware-vdiskmanager.exe 工具 找到需要释放的虚拟机的vmdk文件 拼接指令后执行 vmware-vdiskmanager.exe -k "F:/vm/xxx/CentOS 7 64 位-cl4.vmd ......
数据治理9大核心领域（转）
转自：https://blog.csdn.net/xiyuzhanshen123/article/details/96484520 数据治理不仅需要完善的保障机制，还需要理解具体的治理内容，比如我们的数据该怎么进行规范，元数据又该怎么来管理，每个过程需要哪些系统或者工具来进行配合呢？这些问题都是数据 ......
GaussDB(for MySQL)新特性TDE发布：支持透明数据加密
透明数据加密（Transparent Data Encryption，简称TDE），作为一种在数据“静止”时保护数据的机制，对数据文件执行实时I/O加密和解密 ......
Linux_Centos
Linux_Centos2023年5月29日11:541, 安装SNMP服务[root@zlm log]# yum -y install net-snmp net-snmp-utils注意：特殊情况需要添加iptable策略iptables -I INPUT -s 192.168.201.29 -p ......
linux shell脚本for循环批量对bam文件构建索引并绘制geneBody coverage曲线
#首先设置所用程序的路径 samtools='samtools的路径' geneBody_coverage='geneBody_coverage.py的路径' bedFile='hg38_GENCODE_V42_Comprehensive.bed文件的路径' #然后，获取bam文件列表并进行排序 f ......
pytest框架之yaml详解以及Parametrize数据驱动
1. YAML语法详解 yaml是一个完全类似于json数据序列化格式 重点： yaml完全兼容json yaml和json，都是数据，不是语句 序列化：将内存中的对象，转为文件 反序列化：将文件内容，转为内存中的对象 文本文件（可以使用记事本进行创建，编辑，修改） 优点： 结构更加清晰 语法高级， ......
元数据管理系统
产品背景 市场分析 元数据管理是数据治理的基础，企业以元数据为基础进行数据治理，能帮助企业更好地对数据资产进行管理，理清数据之间的关系，实现精准高效的分析和决策。就国内而言，目前完备成熟的元数据产品较少，市场正处于上升期，是抢占市场份额的好时机。 用户痛点 随着大数据技术的发展和日渐成熟，如何进行海 ......
sqlserver查询某数据库下表的占用空间
要查看 SQL Server 中哪个表占用的空间最多，您可以使用以下查询来列出所有表及其占用的空间大小，并按照占用空间从大到小进行排序： SELECT t.NAME AS TableName, p.rows AS RowCounts, SUM(a.total_pages) * 8 / 1024 AS ......
数据治理之元数据管理（转）
转自：https://blog.csdn.net/jiangzhenbo/article/details/85255240 这篇文章主要讲数据治理的基础和核心之一：元数据。从关于元数据的三个概念谈起，讲到元数据的分布范围和如何获取元数据，最后从几个常见的应用出发，谈谈元数据的一些实际应用场景。 一、 ......
大数据治理技术核心，可扩展的元数据架构设计（转）
转自：https://blog.csdn.net/weixin_45727359/article/details/127662364 元数据管理是随着数据仓库的建设逐渐完善起来的，这也决定了元数据管理主要集中在数据领域。例如数据结构、数据加工转换关系等。而随着我们对元数据理解的不断深入，其实元数据广 ......
元数据分类
•技术元数据：存储位置、数据模型、数据库表、字段长度、字段类型、ETL脚本、SQL脚本、 接口程序、数据关系等•业务元数据：业务定义、业务术语、 业务规则、业务指标等•管理元数据：数据所有者、数据质量定责、数据安全等级等。 描述数据的数据 数据 业务元数据(描述数据定义的数据) 1. 企业数据标准; ......
元数据管理功能列表
1. 数据地图 数据地图展现是以拓扑图的形式对数据系统的各类数据实体、数据处理过程元数据进行分层次的图形化展现，并通过不同层次的图形展现粒度控制，满足开发、运维或者业务上不同应用场景的图形查询和辅助分析需要。 2. 元数据分析 血缘分析 血缘分析（也称血统分析）是指从某一实体出发，往回追溯其处理过程 ......
AIX小机Oracle数据库还原
环境说明：中百由于断电导致小机异常关机，正常后启动小机系统正常，数据库未启动。 登陆到oracle用户下启动数据库发现数据库文件丢失。 查看底层vg卷，发现pv处于激活状态，df-g查看lv未挂载。 将所有vg卷dbvg、appvg、mndhb_vg_01下的lv手动挂载 挂载成功后再测试数据库是否 ......
高级数据结构
并查集 普通并查集的应用只需要注意边带权的转化。 合并方式优化按深度大小要更合理一些。 可持久化并查集：把原来的 \(fa\) 数组变成可持久化数组，注意不要路径压缩，直接按秩合并即可。 可撤销并查集：还是不要路径压缩，只用按秩合并，每次记录一下修改了什么，撤销的时候倒回去就行。只需要撤销的时候就不 ......
021 数据库学习笔记--求百分比
--通过函数处理除法，获取百分比 alter function [dbo].[fungetrate]( @num1 int, @num2 int) returns nvarchar(10) as begin declare @res varchar(10) select @res = case wh ......
IBM DS5020存储更换硬盘操作
前期准备：笔记本、网线 连接存储控制器操作，在笔记本上安装DS Storage Manager 11 Client，然后在笔记本IP设备为192.168.128.X（A控制器管理口1和2的管理IP地址为A1：192.168.128.101、A2：192.168.128.102；B控制器管理口1和2的 ......
Atlas关系型数据库元数据模型
[ { "category": "ENTITY", "guid": "00b4a314-1185-4cd4-84e9-20275990d58d", "createdBy": "hadoop", "updatedBy": "hadoop", "createTime": 1615973091411, " ......
SAP-DB-HANA-数据库-基于AWS平台-Backint-数据备份还原功能的安装与配置
1、先创建S3桶，相关的信息：project-backup-qq-5201351，配置自己的KMS 2、创建一个IAM-Role，名称：Role-For-awtxxx05 ，这个Role需要绑定在EC2上面，此Role要包含如下两个policy (a)，aws托管的：AmazonSSMManaged ......
Linux Debian12将本地项目上传到码云(gitee)远程仓库
一、注册码云gitee账号 这个可以参考其他教程，本文不做介绍。 gitee官网：https://gitee.com/ 二、Linux Debian12安装git 如果Linux系统没有安装git，可以使用下面命令安装git sudo apt install git 三、gitee新建仓库 我这只做 ......
Linux Debian12使用git将本地项目打标签、创建分支和分支合并到master再上传到码云(gitee)远程仓库
一、git创建分支并克隆指定分支到本地 gitee官网：https://gitee.com/ 登录上gitee账号,我这用test仓库作测试。新建分支名称为develop，分支起点选择master，创建即可，如下图所示： 使用git管理代码版本时，本地分支默认与远程同名分支建立追踪关系。git cl ......
linux 中 bzip2压缩与解压缩
001、测试文件 [root@pc1 test]# ls a.txt [root@pc1 test]# ll -h ## 测试文件 total 113M -rw-r--r--. 1 root root 113M Jan 9 12:03 a.txt 002、压缩文件（不保留源文件） [root@pc1 ......
数据汇总的第一个案例：数据汇总
原始数据： 格式为xls格式： 代码如下： import xlrdfrom xlutils.copy import copydef read_data(): wb = xlrd.open_workbook('C:/Users/admin/Desktop/baihuo.xls') sh = wb.sh ......
linux 中 gzip命令设置压缩等级
001、生成测试文件 [root@pc1 test]# ls [root@pc1 test]# seq -f %010g 10000000 > a.txt ## 测试文件 [root@pc1 test]# ll -h total 113M -rw-r--r--. 1 root root 113M J ......
[刷题班] LeetCode442. 数组中重复的数据
题目描述 思路 原地哈希： 利用值域与数组下标空间大小的等同关系，我们可以构造一种对应"关系" 找到数字i时，将位置i-1处的数字翻转为负数 如果位置i-1上的数组已经为负数，则i是出现两次的数字，并将其加入到结果集中 方法一： class Solution { public List<Intege ......