扩展名 文件net
Iceberg小文件合并测试
总结 指标 合并前 合并后（因测试中多次合并，数据会偏多） 查询速度 246秒 13秒 表总大小 9.2G 26.4G 单个文件大小 1-25MB 60MB左右 metadata目录文件数 37 75 data目录文件数 900 1501 小文件合并后历史版本数据不会自动清理，需要做快照清理 快照清 ......
Iceberg元数据合并-metadata.json文件
一、背景描述 元数据文件随时间增多，导致查询变慢。通过如下方式可以指定metadata个数，超过指定数量自动清理。 metadata文件对应Iceberg概念是Snapshots 二、解决方案 1、在建表时增加参数 ‘write.metadata.delete-after-commit.enable ......
hdf5文件读取orm
点击查看代码 class BaseNode: """hdf5 file object relational model basic node class Including establishing model relationships and data sets, attribute value ......
安全数据交换系统：大幅提升网间文件交换能力
各级政府部门和金融、能源、电力这些行业，以及一些大中型企业组织，为了保护内部的重要数据不外泄，普遍都采用了多网络并行的方式，也是做了网络隔离划分，不同的网络拥有不同的密级以及人员权限。然后再通过安全数据交换系统来进行跨网络、跨区域的文件数据交互，解决“数据孤岛”的问题。 然后，要解决网络隔离下的数据 ......
3种依赖管理工具实现requirements.txt文件生成
1.pip 实现方式 要使用 pip 生成 requirements.txt 文件，可以使用以下命令： pip freeze > requirements.txt 这个命令会将当前环境中所有已安装的 Python 包及其版本信息输出到 requirements.txt 文件中。这个文件可以用于共享项 ......
MYSQL 高级SQL语句扩展
扩展 CASE CASE 是 SQL 用来做为 IF-THEN-ELSE 之类逻辑的关键字 语法： SELECT CASE ("字段名") WHEN "条件1" THEN "结果1" WHEN "条件2" THEN "结果2" ... [ELSE "结果N"] END FROM "表名"; # "条 ......
Mac 使用 open 命令，快速打开文件
今天突然发现Mac 有个很好用的命令，open xxx，使用这个命令可以用默认软件打开这个文件，比如各种文本格式的文件会用txt文本打开，mp4 格式的文件会用 player打开。 open aaa.txt open ddd.mp4 ......
国内的开源AI模型共享网站（AI模型的GitHub）—— mindscope —— 使用git lfs方式下载模型文件基本不可行——速度太慢，几十KB/s的速度
参考前文： 国内的开源AI模型共享网站（AI模型的GitHub）—— mindscope —— 对标外网的“huggingface”，mindscope好用吗？ ......
C# 扩展方法 对象和XML字符串相互转换
1. ToXml方法：将对象转换为XML字符串。可以传入可选的参数deserializeRootElementName和writeArrayAttribute，用于指定反序列化的根元素名称和是否写入数组属性。还可以通过options参数指定保存选项，以指定返回的XML字符串格式。
2. FromXm... ......
pid文件关闭进程
/* 你必须定义一个 `main()` 函数入口。 you must define a `main()` function entry.*/#include <iostream>#include <string>using namespace std;#include <stdio.h>#inclu ......
【ASP.NET Core】使用SignalR推送服务器日志
一个多月前接手了一个产线机器人项目，上位机以读写寄存器的方式控制机器人，服务器就是用 ASP.NET Core 写的 Web API。由于前一位开发者写的代码质量问题，导致上位机需要16秒才能启动。经过我近一个月的改造，除了保留业务逻辑代码，其他的基本重写。如今上位机的启动时间在网络状态良好的条件下 ......
ASP.NET Core 配置系列一
ASP.NET Core 配置主要通过这3个文件设置： 1 项目文件也叫.csproj 文件 2 Program.cs 3 appsettings.json 这些配置告诉ASP.NET Core 应用程序基于用户的交互是如何工作的，在本节中我们理解ASP.NET Core 项目配置文件，我们创建一下 ......
扩容swap文件
扩容swap文件 查看/卸载/删除已有swap文件 # 查看交换分区的大小和使用量 jiangxin@ubuntu11:~$ free -m total used free shared buff/cache available 内存： 9815 297 6438 1 3080 9214 交换： 1 ......
文件操作及异常处理
文件操作 ''' open() 打开文件 file：要操作的文件名，绝对路径（从根目录开始）/相对路径（./ ../） mode：r只读（默认）/ w只写（没有就创建，且覆盖源文件）/ x（创建并写入）/ a追加 encoding：utf-8（一个汉字转成3个字节）/gbk（一个汉字转成2个字节） ......
ASP.NET Core Razor融合JS库Demo
cshtml.cs using Microsoft.AspNetCore.Mvc; using Microsoft.AspNetCore.Mvc.RazorPages; namespace RazorTest.Pages { public class PrivacyModel : PageModel ......
linux 中 文件检索命令 find 和locate的区别
两者都适用在linux 中进行文件查找。 001、find 01、通过对目录、子目录遍历进行查找 02、支持各种条件，比如文件名、类型 -type、大小-size、所有者-user、权限-perm、时间-mtime等 03、结合-exec，支持后续的操作，比如删除、查看、压缩，重命名等 002、lo ......
基于WebRTC的局域网文件传输
基于WebRTC的局域网文件传输 WebRTC(Web Real-Time Communications)是一项实时通讯技术，允许网络应用或者站点，在不借助中间媒介的情况下，建立浏览器之间点对点P2P(Peer-To-Peer)的连接，实现视频流、音频流、文件等等任意数据的传输，WebRTC包含的这 ......
Jupyter Notebook的10个常用扩展介绍
Jupyter Notebook（前身为IPython Notebook）是一种开源的交互式计算和数据可视化的工具，广泛用于数据科学、机器学习、科学研究和教育等领域。它提供了一个基于Web的界面，允许用户创建和共享文档，这些文档包含实时代码、方程、可视化和文本。 在数据科学和人工智能领域，Jupyt ......
全面对比 Python、Go、VB、PHP、C/C++、C#、.Net、Java、… 等多种编程语言的区别
1. 语言类型：首先，C/C++、Java 、Python都是强类型的语言。强类型语言的定义如下： 强类型语言是一种强制类型定义的语言，即一旦某一个变量被定义类型，如果不经强制转换，那么它永远就是该数据类型。而弱类型语言是一种弱类型定义的语言，某一个变量被定义类型，该变量可以根据环境变化自动进行转换 ......
全面对比 汇编、易语言、Shell、Lua、Ruby、Perl、Erlang、Rust、Scala、Python、Go、VB、PHP、C/C++、C#、.Net、Java、…… 等多种编程语言的区别
1. 语言类型：首先，C/C++、Java 、Python都是强类型的语言。强类型语言的定义如下： 强类型语言是一种强制类型定义的语言，即一旦某一个变量被定义类型，如果不经强制转换，那么它永远就是该数据类型。而弱类型语言是一种弱类型定义的语言，某一个变量被定义类型，该变量可以根据环境变化自动进行转换 ......
ASP.NET Core （.NET 7） 中的速率限制中间件
ASP.NET Core 中的速率限制中间件可以用于限制特定资源在一段时间内允许的请求次数。速率限制可以用于保护服务器资源，防止拒绝服务 (DoS) 攻击。Microsoft.AspNetCore.RateLimiting 或 AspNetCoreRateLimit 中间件提供速率限制中间件。 ......
JS 根据文件Magic Number判断文件是否是图片
原理:检测文件的 Magic Number 代码示例： var pngMagic = [ 0x89, 0x50, 0x4e, 0x47, 0x0d, 0x0a, 0x1a, 0x0a ]; var jpeg_jfif = [ 0x4a, 0x46, 0x49, 0x46 ]; var jpeg_ex ......
CMakeLists.txt文件qt自定义测试项目
cmake_minimum_required(VERSION 3.24.2) project(test LANGUAGES CXX) set(CMAKE_CXX_STANDARD 11) set(CMAKE_CXX_STANDARD_REQUIRED ON) set(CMAKE_AUTOUIC ON ......
Spring学习记录之引入外部属性配置文件
Spring学习记录之引入外部属性配置文件 前言 这篇文章是我第二次学习b站老杜的spring相关课程所进行的学习记录，算是对课程内容及笔记的二次整理，以自己的理解方式进行二次记录，其中理解可能存在错误，欢迎且接受各位大佬们的批评指正； 关于本笔记，只是我对于相关知识遗忘时快速查阅了解使用，至于课程 ......
matlab读写pgm文件
读文件1 @4 l# |, g3 m/ X$ g$ p+ t %function disp_pgm(pgm_image_name) %不支持文件中有注释 pgm_image_name='tmp.pgm'; f = fopen(pgm_image_name,'r'); if f == -1 error ......
使用windbg分析dump文件
使用windbg分析dump文件的步骤。 准备工作。 打开dump文件。 指定符号表文件的路径。 指定可执行文件的路径。 指定源码文件的路径。 在windbg的命令行，输入并执行如下命令 .reload，重新加载前述数据文件。 !analyze -v，分析dump文件。 kbn，得到崩溃时的调用栈信 ......
Apache POI 操作Excel文件--写入数据至客户端
public void exprotBusinessData(HttpServletResponse httpServletResponse) { // 1. 查询数据库 LocalDateTime begin=LocalDateTime.of(LocalDate.now().minusDays(3 ......
前端数据流组装指定格式的文件下载
有的时候，我们从后端获取了文件数据，需要在前端组合成指定格式的文件，并下载。 组合文件，除了数据，还需要规定格式，才知道组合成什么格式的文件。 主要代码如下： /* * responseText 后端获取的文件数据 * 这里以 pdf 格式的文件举例，设置 type 为 pdf 文件需要的类型 * ......
fsproj 相关 net481
net481是.net framework 4.8.1的标识名称，F# xunit默认下拉列表目标没有包含它，如果你必须测试net481，对于项目文件作如下修改： <PropertyGroup> <!--<TargetFramework>net6.0</TargetFramework>--> <Ta ......