集群 参数 文件oracle
Hive文件存储格式
结论： Text File，Parquet ，ORC Files结合使用，优先使用前两种，对存储及查询性能有极高要求时使用ORC。 存储格式 使用场景 Text File 数据直观，便于查看和编辑，数据量较小的维表可以使用. Parquet 支持深度嵌套，可用于多种数据处理框架（Hive/Spark ......
SpringBoot 如何进行参数校验
第一步，引入依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency> <dependency> <groupId ......
Flink写文件
简介 StreamingFileSink 提供了将数据分桶写入文件系统的功能。 如何分桶是可以配置，默认使用基于时间的分桶策略，每个小时创建一个新的桶，也可以自定义分桶策略。 文件滚动策略支持两种方式，基于时间和文件大小的DefaultRollingPolicy策略和基于Flink检查点的OnChe ......
超大日志文件分割工具和方法
来源：https://blog.csdn.net/sangser/article/details/123169275 1. 直接运行：MobaXterm1_CHS1.exe，如下画面： 2. 点击：Start local terminal： 切换到大文件所在目录，执行命令：split -l 6000 ......
scrapy使用文件管道FilesPipeline下载视频
1.爬虫文件 class MeiShiSpider(scrapy.Spider): name = 'meishi' allowed_domains = ['baidu.com'] start_urls = ['https://tieba.baidu.com/f?kw=美食'] def parse(s ......
文件加密解密工具类
：需求：文件上传到系统后，只能通过系统预览或者下载，其他方式下载下来的文件，对方看不了， 实现思路：上传文件时，对文件进行加密处理，数据库存放文件名，把加密文件存到指定目录下 预览、下载文件时，通过指定目录+文件名，找到该文件，并进行解密处理，根据前端需求，对解密后的文件进行处理（下载到指定目录/直 ......
安防视频云平台/可视化监控云平台ARM版EasyCVR无法下载录像文件，如何解决？
视频集中存储/云存储/视频监控管理平台EasyCVR能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，实现视频资源的鉴权管理、按需调阅、全网分发、智能分析等。GB28181视频监控/AI智能大数据视频分析EasyCVR平台已经广泛应用在工地、工厂、园区、楼宇、校园、仓储等场景中 ......
如何直接将GitHub中的notebook/ipynb文件在colab中打开
Colab可直接从github打开Jupyter notebooks，只需将“http:// github.com/”替换为“https://colab.research.google.com/github/”，就会直接加载到Colab中。 ......
java springboot项目启动脚本，指定jdk、指定yml配置文件
start.bat @echo off rem 设置Java路径，根据你的实际情况修改 set JAVA_PATH="./jdk-17_windows-x64_bin/jdk-17.0.6/bin/java.exe" rem 设置JAR文件路径，根据你的实际情况修改 set JAR_PATH="./ ......
WSL2镜像文件压缩
WSL2的镜像文件（*.vhdx）支持自动扩容，但是一般不会自动缩容。一旦某次存放过大文件以后，即使后续删除，镜像文件体积仍然不会缩小，导致大量磁盘空间浪费。因此，可以定期对镜像文件进行手动压缩。 ......
Oracle
Oracle 2023年6月19日 10:59 1， 部署Oracle环境，获取Oracle拥有dba权限的用户，service_name等信息 创建一个用户 create user zlm identified by 用户名； grant dba to 用户名； 关于dba授权过大可以使用只读角色 ......
C# 如何读取Excel文件
当处理Excel文件时，从中读取数据是一个常见的需求。通过读取Excel数据，可以获取电子表格中包含的信息，并在其他应用程序或编程环境中使用这些数据进行进一步的处理和分析。本文将分享一个使用免费库来实现C#中读取Excel数据的方法。具体如下： 准备工作： 在VS中通过Nuget安装免费Excel读 ......
vm - 释放linux删除文件后的物理磁盘
关闭vm的需要释放磁盘的虚拟机 然后进入vm 的安装根目录 需要用到里面的 vmware-vdiskmanager.exe 工具 找到需要释放的虚拟机的vmdk文件 拼接指令后执行 vmware-vdiskmanager.exe -k "F:/vm/xxx/CentOS 7 64 位-cl4.vmd ......
linux shell脚本for循环批量对bam文件构建索引并绘制geneBody coverage曲线
#首先设置所用程序的路径 samtools='samtools的路径' geneBody_coverage='geneBody_coverage.py的路径' bedFile='hg38_GENCODE_V42_Comprehensive.bed文件的路径' #然后，获取bam文件列表并进行排序 f ......
Oracle 11g OGG单实例RAC同步
Oracle 11g OGG单实例/RAC同步2021年8月4日15:14测试环境 ip数据库版本SID源端10.32.50.8811gorcl目标端10.32.68.11211gorcl同步两端的SID可以不一致 RAC中的ASM及TNS配置环境注意：RAC所有节点都要配置(grid)cat li ......
SQL Server Profiler的trc文件生成阻止
很奇葩，sqlserver自动生成trc文件，每分钟一个，重启服务器也没用。 解决思路： 查询现在正在跑的trace进程 select * from sys.fn_trace_getinfo(0); 关闭C2审计功能 EXEC sp_configure 'c2 audit mode', '0'; 重 ......
Oracle11 集群（一）
集群安装准备2019年7月18日15:29https://www.cnblogs.com/xshrim/p/5952211.html #参考文章rac环境节点1节点2ip10.56.85.23510.56.85.236hostnamerac1rac2hosts10.56.85.235 rac110. ......
Oracle11 集群（二）
集群grid软件安装2019年7月19日10:30grid安装需要登录到grid用户下进行，绝大多数操作仅需在节点1上执行即可。解压安装介质：#仅节点1执行[grid@rac1 u01]$unzip p13390677_112040_Linux-x86-64_1of7.zip[grid@rac1 u ......
Oracle11 集群（三）
集群oracle软件安装2019年7月19日15:31ORACLE软件安装集群框架GRID安装完成并开启后，剩下的所有操作均只需在节点1执行即可，其余节点会自动完成配置同步。接下来登入节点1的oracle账户，开始oracle数据库软件的安装。如同验证grid先决条件一样，先运行runcluvfy. ......
Oracle11 集群（四）
集群建库2019年7月17日17:23开始实例和数据库的创建，以oracle用户登录节点1，开启数据库配置助手开始创建：#仅节点1执行[oracle@rac1 u01]$ export LANG=en_US[oracle@rac1 u01]$ dbca弹出配置界面：1, 创建集群数据库2, 创建单节 ......
Oracle 19c 单机 DG同步
19c 单机 DG同步2022年1月7日9:44 sidservice_namesiphostname主库orclorcl10.56.87.202orcl备库orclorcldg10.56.87.203orcl 主开启归档模式 #切换到归档模式alter system set log_archive ......
idea properties文件乱码解决
java文件是好的，但是遇到properties文件，默认就成了iso制式乱码了。 虽说不影响程序执行，但是看起来真的让人心烦。 问题点是出在properties文件是GBK的，需要单独设置一下。 解决方法： IDEA- File->Settings->Editor->File Encodings ......
使用RandomAccessFile监听日志文件，并实时一行行读取出来
public static void main(String[] args) { String filePath = "E:\\codes\\work\\product-parent\\logs\\alarm_log_info.log"; try { RandomAccessFile randomA ......
Oracle 11g 单机静默安装
配置数据库软件及安装静默安装的默认配置文件/u01/database/response/db_install.rsp编辑该文件[oracle@orcl response]$ vim db_install.rsp关键参数说明oracle.install.option=INSTALL_DB_SWONLY ......
Oracle 11g 安装
[root@ha2 ~]# cat /etc/redhat-release Red Hat Enterprise Linux Server release 7.4 (Maipo) [root@ha2 ~]# uname -a Linux ha2 3.10.0-693.el7.x86_64 #1 SM ......
AIX小机Oracle数据库还原
环境说明：中百由于断电导致小机异常关机，正常后启动小机系统正常，数据库未启动。 登陆到oracle用户下启动数据库发现数据库文件丢失。 查看底层vg卷，发现pv处于激活状态，df-g查看lv未挂载。 将所有vg卷dbvg、appvg、mndhb_vg_01下的lv手动挂载 挂载成功后再测试数据库是否 ......
vue文件压缩与解压-JSZip库
const downloading = ref(true); const modeldownload = (path: String) => { downloading.value = true; let path1 = "download4dtbd02?fileName=" + path; ret ......
Day1 - 大规模Elasticsearch集群管理心得（转）
转自：https://elasticsearch.cn/article/110 【携程旅行网 吴晓刚】 ElasticSearch目前在互联网公司主要用于两种应用场景，其一是用于构建业务的搜索功能模块且多是垂直领域的搜索，数据量级一般在千万至数十亿这个级别；其二用于大规模数据的实时OLAP，经典的如 ......
Redis集群详解
Redis集群详解 1. 如何保证 Redis 服务高可用？ Redis Sentinel 集群 2. Sentinel（哨兵）有什么用？ 监控 Redis 节点的运行状态并自动实现故障转移 3. Redis 缓存的数据量太大怎么办？ Redis Cluster 4. Redis Cluster 虚 ......
C#日志写入text文件
public static void SaveLog(string LogMessage, int Level, string PreLogDir = "") { int LogLevel = 0; int.TryParse(ConfigurationManager.AppSettings["Log ......