文件 只需windows全文
Iceberg小文件合并测试
总结 指标 合并前 合并后（因测试中多次合并，数据会偏多） 查询速度 246秒 13秒 表总大小 9.2G 26.4G 单个文件大小 1-25MB 60MB左右 metadata目录文件数 37 75 data目录文件数 900 1501 小文件合并后历史版本数据不会自动清理，需要做快照清理 快照清 ......
Iceberg元数据合并-metadata.json文件
一、背景描述 元数据文件随时间增多，导致查询变慢。通过如下方式可以指定metadata个数，超过指定数量自动清理。 metadata文件对应Iceberg概念是Snapshots 二、解决方案 1、在建表时增加参数 ‘write.metadata.delete-after-commit.enable ......
hdf5文件读取orm
点击查看代码 class BaseNode: """hdf5 file object relational model basic node class Including establishing model relationships and data sets, attribute value ......
安全数据交换系统：大幅提升网间文件交换能力
各级政府部门和金融、能源、电力这些行业，以及一些大中型企业组织，为了保护内部的重要数据不外泄，普遍都采用了多网络并行的方式，也是做了网络隔离划分，不同的网络拥有不同的密级以及人员权限。然后再通过安全数据交换系统来进行跨网络、跨区域的文件数据交互，解决“数据孤岛”的问题。 然后，要解决网络隔离下的数据 ......
hackthebox escape medium windows
RECON TLS certificate openssl s_client -showcerts -connect 10.10.11.202:3269 | openssl x509 -noout -text- "openssl s_client" initiates an SSL/TLS conn ......
windows快速启动创建的几种方式
启动优先级：服务>注册表>启动文件夹>计划1.Win + R 打开运行，输入：shell:startup把要开机自启的程序文件或快捷方式复制到打开的窗口中即可。此方法是打开开始菜单-程序-启动文件夹。 2.Win + R 打开运行，输入：regedit.exe进入注册表。打开HKEY_LOCAL_M ......
PowerShell 启用 Windows 11 上的远程桌面
PowerShell 启用 Windows 11 上的远程桌面，可以按照以下步骤进行操作： 打开 PowerShell：在开始菜单中搜索 "PowerShell"，然后点击打开 PowerShell。 运行以下命令以获取当前远程桌面设置的状态： powershellCopy Code Get-Rem ......
3种依赖管理工具实现requirements.txt文件生成
1.pip 实现方式 要使用 pip 生成 requirements.txt 文件，可以使用以下命令： pip freeze > requirements.txt 这个命令会将当前环境中所有已安装的 Python 包及其版本信息输出到 requirements.txt 文件中。这个文件可以用于共享项 ......
windows lsass转储总结
前言lsass.exe（Local Security Authority Subsystem Service进程空间中，存有着机器的域、本地用户名和密码等重要信息。如果获取本地高权限，用户便可以访问LSASS进程内存，从而可以导出内部数据（password），用于横向移动和权限提升。通过lsass转 ......
Mac 使用 open 命令，快速打开文件
今天突然发现Mac 有个很好用的命令，open xxx，使用这个命令可以用默认软件打开这个文件，比如各种文本格式的文件会用txt文本打开，mp4 格式的文件会用 player打开。 open aaa.txt open ddd.mp4 ......
国内的开源AI模型共享网站（AI模型的GitHub）—— mindscope —— 使用git lfs方式下载模型文件基本不可行——速度太慢，几十KB/s的速度
参考前文： 国内的开源AI模型共享网站（AI模型的GitHub）—— mindscope —— 对标外网的“huggingface”，mindscope好用吗？ ......
Windows下的VScode用Docker(WSL2)容器做运行环境
这个业务需求看起来挺奇葩，因为想用rapids包换掉sklearn，用GPU跑更快，但我想用Docker版本的。 docker run，不要-rm 对官方的初始化bash命令做了小修改，会创建一个名为cupy的容器，将Windows本机d:\Code\Python\硬链接到Linux的/data。 ......
pid文件关闭进程
/* 你必须定义一个 `main()` 函数入口。 you must define a `main()` function entry.*/#include <iostream>#include <string>using namespace std;#include <stdio.h>#inclu ......
扩容swap文件
扩容swap文件 查看/卸载/删除已有swap文件 # 查看交换分区的大小和使用量 jiangxin@ubuntu11:~$ free -m total used free shared buff/cache available 内存： 9815 297 6438 1 3080 9214 交换： 1 ......
文件操作及异常处理
文件操作 ''' open() 打开文件 file：要操作的文件名，绝对路径（从根目录开始）/相对路径（./ ../） mode：r只读（默认）/ w只写（没有就创建，且覆盖源文件）/ x（创建并写入）/ a追加 encoding：utf-8（一个汉字转成3个字节）/gbk（一个汉字转成2个字节） ......
linux 中 文件检索命令 find 和locate的区别
两者都适用在linux 中进行文件查找。 001、find 01、通过对目录、子目录遍历进行查找 02、支持各种条件，比如文件名、类型 -type、大小-size、所有者-user、权限-perm、时间-mtime等 03、结合-exec，支持后续的操作，比如删除、查看、压缩，重命名等 002、lo ......
基于WebRTC的局域网文件传输
基于WebRTC的局域网文件传输 WebRTC(Web Real-Time Communications)是一项实时通讯技术，允许网络应用或者站点，在不借助中间媒介的情况下，建立浏览器之间点对点P2P(Peer-To-Peer)的连接，实现视频流、音频流、文件等等任意数据的传输，WebRTC包含的这 ......
Jenkins 系列：Jenkins 安装（Windows、Mac、Centos）和简介
目录简介发展历史应用场景Jenkins 安装部署先决条件硬件要求软件包下载war 包部署linux 系统部署mac 系统部署windows 系统部署安装后基本配置解锁自定义 jenkins 插件创建用户配置更新站点配置文件null 简介 Jenkins前身是 Hudson，使用 java 语言开发的 ......
JS 根据文件Magic Number判断文件是否是图片
原理:检测文件的 Magic Number 代码示例： var pngMagic = [ 0x89, 0x50, 0x4e, 0x47, 0x0d, 0x0a, 0x1a, 0x0a ]; var jpeg_jfif = [ 0x4a, 0x46, 0x49, 0x46 ]; var jpeg_ex ......
CMakeLists.txt文件qt自定义测试项目
cmake_minimum_required(VERSION 3.24.2) project(test LANGUAGES CXX) set(CMAKE_CXX_STANDARD 11) set(CMAKE_CXX_STANDARD_REQUIRED ON) set(CMAKE_AUTOUIC ON ......
Spring学习记录之引入外部属性配置文件
Spring学习记录之引入外部属性配置文件 前言 这篇文章是我第二次学习b站老杜的spring相关课程所进行的学习记录，算是对课程内容及笔记的二次整理，以自己的理解方式进行二次记录，其中理解可能存在错误，欢迎且接受各位大佬们的批评指正； 关于本笔记，只是我对于相关知识遗忘时快速查阅了解使用，至于课程 ......
matlab读写pgm文件
读文件1 @4 l# |, g3 m/ X$ g$ p+ t %function disp_pgm(pgm_image_name) %不支持文件中有注释 pgm_image_name='tmp.pgm'; f = fopen(pgm_image_name,'r'); if f == -1 error ......
MD-NEXT 2.0 (Windows) - 移动取证软件
MD-NEXT 2.0 (Windows) - 移动取证软件 Mobile Forensic Software 请访问原文链接：https://sysin.org/blog/md-next/，查看最新版。原创作品，转载请保留出处。 作者主页：sysin.org MD-NEXT - 移动取证软件 适用 ......
Cellebrite Physical Analyzer 7.65 (Windows) - 数字数据审查
Cellebrite Physical Analyzer 7.65 (Windows) - 数字数据审查 The Industry Standard for Digital Data Examination 请访问原文链接：https://sysin.org/blog/cellebrite-phys ......
Cisco Jabber 14.3 (Andriod, iOS, macOS, Windows) - 面向企业的多合一通信工具
Cisco Jabber 14.3 (Andriod, iOS, macOS, Windows) - 面向企业的多合一通信工具 即时消息、语音和视频通话、语音邮件、桌面共享、会议和在线状态 请访问原文链接：https://sysin.org/blog/cisco-jabber-14/，查看最新版。原 ......
Windows Terminal的资料
Windows Terminal是微软Windows平台难得好用的工具。 由于工作内容的原因，需要打开多个CMD窗口、多个git bash窗口，并且在多个窗口间切换，因此命令行窗口支持多TAB的特性，变成了一个刚需，而这正是Windows Terminal的卖点。 在网上查找资料时无意中看到工具的介 ......
使用windbg分析dump文件
使用windbg分析dump文件的步骤。 准备工作。 打开dump文件。 指定符号表文件的路径。 指定可执行文件的路径。 指定源码文件的路径。 在windbg的命令行，输入并执行如下命令 .reload，重新加载前述数据文件。 !analyze -v，分析dump文件。 kbn，得到崩溃时的调用栈信 ......
Apache POI 操作Excel文件--写入数据至客户端
public void exprotBusinessData(HttpServletResponse httpServletResponse) { // 1. 查询数据库 LocalDateTime begin=LocalDateTime.of(LocalDate.now().minusDays(3 ......