框架conftest文件pytest
Parquet格式文件读写&合并小文件
Parquet格式文件读写 依赖工具parquet-tools： parquet-tools-1.6.0rc3-SNAPSHOT.jar 查看结构： java -jar parquet-tools-1.6.0rc3-SNAPSHOT.jar schema -d pane-0-00000-of-000 ......
某菠菜任意文件上传漏洞
0x01 漏洞描述网络dubo是指通过互联网手段（非法dubo网站、菠菜App、微信群等）进行的赌博活动。由于网络dubo不合法，资金不受法律保护，有很多“出老千”的行为，很多人被骗后往往不敢报警，导致家破人亡，所以打击dubo，刻不容缓。某菠菜系统系统存在任意文件上传漏洞，攻击者通过漏洞可以上传木 ......
C 语言文件处理全攻略：创建、写入、追加操作解析
C 语言中的文件处理 在 C 语言中，您可以通过声明类型为 FILE 的指针，并使用 fopen() 函数来创建、打开、读取和写入文件： FILE *fptr; fptr = fopen(filename, mode); FILE 基本上是一个数据类型，我们需要创建一个指针变量来使用它 (fptr) ......
文件批量拷贝的脚本（尤其适用于大小写敏感向不敏感的磁盘拷贝时发生冲突的情形）
在Linux系统下，NTFS可以支持文件名大小写区分；但在MaxOS的exFAT格式中，则无法区分大小写。 当从NTFS向exFAT拷贝文件时，当同一个目录下而在文件名相同但大小写不同的两个及以上文件时，向exFAT写入会中断，使得文件拷贝操作无法完成。 因此，特别编写了下面这个脚本，用来解决这个问 ......
QFile::exists()判断文件是否存在的注意事项
1、当判断的文件名为一个目录时，返回也为true存在（注意：当拼接文件路径时，文件名为空，则结果为一个目录，则会判断为该文件也是存在的，应该判断该文件是否为一个文件，使用QFileInfo判断） 2、如果文件名是一个不存在的文件的快捷方式，返回false ......
44python 删除 linux 系统中的文件夹或文件
# 删除文件 import os os.remove('/path') # 删除文件夹(不为空也可以删除) import shutil shutil.rmtree('path') ......
k8s 对接 cephfs 文件系统
创建资源池 ceph osd pool create cephfs_data 128 ceph osd pool create cephfs_metadata 128 文件系统需要两个资源池，一个用于存储数据体，一个用于存放索引信息及其他数据相关信息。 创建文件系统 ceph fs new ceph ......
KQL如何写和表示 winodws的文件路径
在 Kusto Query Language (KQL) 中表示 Windows 文件路径时，需要特别注意路径分隔符和转义字符。Windows 文件系统通常使用反斜杠 \ 作为路径分隔符，但在 KQL 查询中，反斜杠是一个特殊字符，用作转义字符。因此，当你在 KQL 查询中写入 Windows 路径 ......
拥有root权限却无法修改文件内容
一、故障现象 E45: 'readonly' option is set (add ! to override)当前登录用户为root，修改文件时提示"W10: Warning: Changing a readonly file",保存时提示'E45 ‘readonly‘ option is set ......
Hive文件存储格式
结论： Text File，Parquet ，ORC Files结合使用，优先使用前两种，对存储及查询性能有极高要求时使用ORC。 存储格式 使用场景 Text File 数据直观，便于查看和编辑，数据量较小的维表可以使用. Parquet 支持深度嵌套，可用于多种数据处理框架（Hive/Spark ......
Flink写文件
简介 StreamingFileSink 提供了将数据分桶写入文件系统的功能。 如何分桶是可以配置，默认使用基于时间的分桶策略，每个小时创建一个新的桶，也可以自定义分桶策略。 文件滚动策略支持两种方式，基于时间和文件大小的DefaultRollingPolicy策略和基于Flink检查点的OnChe ......
超大日志文件分割工具和方法
来源：https://blog.csdn.net/sangser/article/details/123169275 1. 直接运行：MobaXterm1_CHS1.exe，如下画面： 2. 点击：Start local terminal： 切换到大文件所在目录，执行命令：split -l 6000 ......
scrapy使用文件管道FilesPipeline下载视频
1.爬虫文件 class MeiShiSpider(scrapy.Spider): name = 'meishi' allowed_domains = ['baidu.com'] start_urls = ['https://tieba.baidu.com/f?kw=美食'] def parse(s ......
文件加密解密工具类
：需求：文件上传到系统后，只能通过系统预览或者下载，其他方式下载下来的文件，对方看不了， 实现思路：上传文件时，对文件进行加密处理，数据库存放文件名，把加密文件存到指定目录下 预览、下载文件时，通过指定目录+文件名，找到该文件，并进行解密处理，根据前端需求，对解密后的文件进行处理（下载到指定目录/直 ......
安防视频云平台/可视化监控云平台ARM版EasyCVR无法下载录像文件，如何解决？
视频集中存储/云存储/视频监控管理平台EasyCVR能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，实现视频资源的鉴权管理、按需调阅、全网分发、智能分析等。GB28181视频监控/AI智能大数据视频分析EasyCVR平台已经广泛应用在工地、工厂、园区、楼宇、校园、仓储等场景中 ......
如何直接将GitHub中的notebook/ipynb文件在colab中打开
Colab可直接从github打开Jupyter notebooks，只需将“http:// github.com/”替换为“https://colab.research.google.com/github/”，就会直接加载到Colab中。 ......
Jax框架 —— 如何在没有GPU和TPU的设备上debug代码 —— 在CPU上使用GPU仿真设置 —— Jax框架在多卡设备上的自动并行特性的仿真体验
Jax计算框架是Google用来取代Tensorflow的新一代计算框架，这个框架使用类似pytorch的技术，但是在pytorch技术之上加入了更加强大的技术，但是这也导致该框架使用起来要比pytorch难一些，但是该框架的计算性能又比较优秀，因此依旧具有较大的吸引力。 Jax框架的性能优势主要体 ......
java springboot项目启动脚本，指定jdk、指定yml配置文件
start.bat @echo off rem 设置Java路径，根据你的实际情况修改 set JAVA_PATH="./jdk-17_windows-x64_bin/jdk-17.0.6/bin/java.exe" rem 设置JAR文件路径，根据你的实际情况修改 set JAR_PATH="./ ......
WSL2镜像文件压缩
WSL2的镜像文件（*.vhdx）支持自动扩容，但是一般不会自动缩容。一旦某次存放过大文件以后，即使后续删除，镜像文件体积仍然不会缩小，导致大量磁盘空间浪费。因此，可以定期对镜像文件进行手动压缩。 ......
C# 如何读取Excel文件
当处理Excel文件时，从中读取数据是一个常见的需求。通过读取Excel数据，可以获取电子表格中包含的信息，并在其他应用程序或编程环境中使用这些数据进行进一步的处理和分析。本文将分享一个使用免费库来实现C#中读取Excel数据的方法。具体如下： 准备工作： 在VS中通过Nuget安装免费Excel读 ......
vm - 释放linux删除文件后的物理磁盘
关闭vm的需要释放磁盘的虚拟机 然后进入vm 的安装根目录 需要用到里面的 vmware-vdiskmanager.exe 工具 找到需要释放的虚拟机的vmdk文件 拼接指令后执行 vmware-vdiskmanager.exe -k "F:/vm/xxx/CentOS 7 64 位-cl4.vmd ......
BSP视频教程第29期：J1939协议栈CAN总线专题，源码框架，执行流程和应用实战解析，面向车通讯，充电桩，模组通信等(2024-01-08)
视频教程汇总帖：https://www.armbbs.cn/forum.php?mod=viewthread&tid=110519 继前面CANopen专题视频教程后，再推出CAN总线的又一个重要协议栈J1939专题视频 J1939在车通讯上应用比较多，现在电动车充电桩还有各种模组的通信也非常多基于 ......
linux shell脚本for循环批量对bam文件构建索引并绘制geneBody coverage曲线
#首先设置所用程序的路径 samtools='samtools的路径' geneBody_coverage='geneBody_coverage.py的路径' bedFile='hg38_GENCODE_V42_Comprehensive.bed文件的路径' #然后，获取bam文件列表并进行排序 f ......
SQL Server Profiler的trc文件生成阻止
很奇葩，sqlserver自动生成trc文件，每分钟一个，重启服务器也没用。 解决思路： 查询现在正在跑的trace进程 select * from sys.fn_trace_getinfo(0); 关闭C2审计功能 EXEC sp_configure 'c2 audit mode', '0'; 重 ......
pytest框架之yaml详解以及Parametrize数据驱动
1. YAML语法详解 yaml是一个完全类似于json数据序列化格式 重点： yaml完全兼容json yaml和json，都是数据，不是语句 序列化：将内存中的对象，转为文件 反序列化：将文件内容，转为内存中的对象 文本文件（可以使用记事本进行创建，编辑，修改） 优点： 结构更加清晰 语法高级， ......
idea properties文件乱码解决
java文件是好的，但是遇到properties文件，默认就成了iso制式乱码了。 虽说不影响程序执行，但是看起来真的让人心烦。 问题点是出在properties文件是GBK的，需要单独设置一下。 解决方法： IDEA- File->Settings->Editor->File Encodings ......
使用RandomAccessFile监听日志文件，并实时一行行读取出来
public static void main(String[] args) { String filePath = "E:\\codes\\work\\product-parent\\logs\\alarm_log_info.log"; try { RandomAccessFile randomA ......
Java框架设计方案之ddd中领域事件发布的时机
领域事件作为ddd的核心组件之一，在ddd框架中处于一个重要地位，也是开发中非常常用的功能之一。 在基于Spring boot的框架开发中，Spring自带的事件可以很好地作为领域事件的基础（功能齐全且自带事务支持）。但开发框架过程中，遇到了一个设计难点。即：领域事件的发布时机。 1、抛开编程语言， ......
vue文件压缩与解压-JSZip库
const downloading = ref(true); const modeldownload = (path: String) => { downloading.value = true; let path1 = "download4dtbd02?fileName=" + path; ret ......
.NET 6 轻量级 WebApi 框架 FastEndpoints 入门
原文：.NET 6 轻量级 WebApi 框架 FastEndpoints 入门_.net api框架-CSDN博客 (一)前言 前段时间我从公众号：dotNET跨平台了解到了一个webapi框架叫：基于 .NET 6 的轻量级 Webapi 框架 FastEndpoints (qq.com) 随后 ......