对象 序列 内存 文件
解决Spark读取tmp结尾的文件报错的问题
业务场景 flume采集文件到hdfs中，在采集中的文件会添加.tmp后缀。一个批次完成提交后，会将.tmp后缀重名名，将tmp去掉。 所以，当Spark程序读取到该hive外部表映射的路径时，在出现找不到xxx.tmp文件的问题出现。 解决思路： Hdfs提供了读取文件筛选的接口PathFilte ......
C#上传大型视频文件到服务器,解决方案
前言 文件上传是一个老生常谈的话题了，在文件相对比较小的情况下，可以直接把文件转化为字节流上传到服务器，但在文件比较大的情况下，用普通的方式进行上传，这可不是一个好的办法，毕竟很少有人会忍受，当文件上传到一半中断后，继续上传却只能重头开始上传，这种让人不爽的体验。那有没有比较好的上传体验呢，答案 ......
删除或移动c盘hiberfil.sys文件的方法
第一步、在开始的功能表的搜索栏里输入 cmd，然后在搜索结果中的 cmd 按下右键，点选【以系统管理员身份运行】 第二步、在命令提示符窗口里输入下面命令然后按下Enter： powercfg –h off hiberfil.sys文件会自动消失。 如果想让这个文件不放在系统盘中，使用注册表编辑器 打 ......
Filezilla的使用（作用是从我们自己电脑上将文件传到服务器上面）
1.Filezilla的作用：方便远程上传文件到远程的虚拟机。 如果虚拟机和要上传的文件都处于同一个电脑，那么想把该电脑上的桌面文件上传到该电脑上的虚拟机的话，可以把桌面上的文件直接拖拽到虚拟机的可视化界面中，直接完成文件上传，就像下面这样子（如果虚拟机和要上传的文件不处于同一个电脑中，就得通过Fi ......
oracel将序列值改为当前系统最大值方法
--修改序列为表中最大值declare Max_Id NUMBER(10); Current_Value NUMBER(10); BEGIN SELECT max(to_number(user_code)) INTO Max_Id FROM F_USERINFO t where t.user_cod ......
如何在Linux服务器上后台运行python程序，并将输出加载到指定文件中
如何在Linux服务器上后台运行python程序，并将输出加载到指定文件中 一、后台运行命令：nohup 示例： nohup python3 -u xxx.py >> xxx.txt 2>&1 & -u（可选，指不开启缓冲区，xxx.txt实时更新） 2>&1（2为错误输出，1为标准输出，整体意思是 ......
序列化导致的数据库连接泄漏
最近遇到一个数据库连接异常，Connection is not available, request timed out after 30000ms. 刚开始以为连接不够，然后改配置增加连接数，但是还没有解决问题 后来通过调试发现是由于AOP日志记录的时候会进行序列化，结果这个对象是个Mapper， ......
Linux查找某个大小范围内的文件
查找大小在某个范围内的文件使用-size参数，-size +n表示大于n单位的范围，-size –n表示小于n单位的范围。例如，查找大于100k且小于400k的文件： find . -type f -mtime -1 -size +100k -size-400k 说明： -type f表示只查找文件 ......
14面向对象
面向对象 面向对象编程介绍 面向对象编程：Object Oriented Programming，简称OOP，是一种程序设计思想。需要注意的是，与之对应的是面向过程编程思想。实际上，能够使用面向对象编程思想实现的程序，也都能通过面向过程完成。只是看哪种思想更适合当前开发需求。 面向过程与面向对象区别 ......
Fabric生成身份信息文件
以Ubuntu为例 fabric网络架构为3order节点，2org组织，2peer节点 1.创建文件并下载二进制文件 mkdir 3order-2peer cd 3order-2peer/ 生成身份信息文件需要一些可执行文件，因此我们需要下载fabric的二进制文件，文件路径如下： fabric二 ......
JAVA使用stream流对对象集合根据某个字段去重
userList = userList.stream().collect(Collectors.collectingAndThen(Collectors.toCollection(()->new TreeSet<>(Comparator.comparing(User::getCity))), Arr ......
npm安装html2pdf后出现缺少文件的情况
当时发现这个问题的时候,我就去node_modules里面找,确实没有这个文件,故判定是没有完全安装导致的错误信息 最终解决方案: 在终端中进入项目文件夹，执行以下命令： npm uninstall html2pdfnpm install html2pdf这将卸载旧的 html2pdf 模块并重新安 ......
使用java.util.zip对生成的字节数组输出文件流 进行打包压缩（单个、批量），并返回压缩包文件的字节数组输出文件流用于（文件不落地）下载
废话不多说 直接上代码 package gov.test.util; import java.io.ByteArrayInputStream;import java.io.ByteArrayOutputStream;import java.io.IOException;import java.uti ......
还在用分割字符获取文件名等信息吗？
string filespath = @"D:\Files\测试文件.doc"; string strFilename = Path.GetFileName(filespath);//返回完整的文件名 测试文件.doc Response.Write("返回完整的文件名：" + strFilename ......
python面向对象（绑定方法与非绑定方法）
# 一、绑定方法：特殊之处在于将调用者本身当做第一个参数自动传入 # 1）绑定给对象的方法：调用者是对象，自动传入的是对象 # 2）绑定给类的方法：调用者是类，自动传入的是类 # 类方法的应用 # 需求一 class MySQL: def __init__(self, host, port): se ......
python面向对象（多态）
# 1、什么是多态：同一事物有多种形态 class Animal: # 同一类事物:动物 def talk(self): pass class Cat(Animal): # 动物的形态之一:猫 def talk(self): print('喵喵喵') class Dog(Animal): # 动物的 ......
贴图运行内存占用计算
以128x128的图片为例 1) 没有任何压缩的格式，RGBA 32bit=128x128x(32bit/8)=64kb，勾上MipMap会变成85.3kb 2) RGBA Compressed ETC2 8bits=128x128x(8bit/8)=16kb，勾上MipMap会变成21.4kb 3 ......
动态规划04——300. 最长递增子序列
300. 最长递增子序列 给你一个整数数组 nums ，找到其中最长严格递增子序列的长度。 子序列 是由数组派生而来的序列，删除（或不删除）数组中的元素而不改变其余元素的顺序。例如，[3,6,2,7] 是数组 [0,3,1,6,2,2,7] 的子序列。 示例 1： 输入：nums = [10,9,2 ......
Semantic Kernel 入门系列：🥑Memory内存
了解的运作原理之后，就可以开始使用Semantic Kernel来制作应用了。 Semantic Kernel将embedding的功能封装到了Memory中，用来存储上下文信息，就好像电脑的内存一样，而LLM就像是CPU一样，我们所需要做的就是从内存中取出相关的信息交给CPU处理就好了。 内存配置 ......
Git之github上传大文件
github默认情况下不允许上传大文件，但是我想在github上备份重要文件，借助lfs实现上传大文件 1、下载并安装Git Large File Storage 2、git lfs 配置 在git仓库所在文件夹中输入如下代码进行安装配置 git lfs install 3、文件上传 git lfs ......
Node.js文件路径：Path模块
path模块是nodejs的内置模块，便于我们去获取、操作文件路径 记录一些注意事项： 文件的绝对位置 cjs console.log(__filename) mjs mjs中，不能使用__filename和__dirname console.log(import.meta.url) 文件所处的目录 ......
python面向对象（继承）
一 继承 1、什么是继承1）继承是一种创建新类的方式，新建的类可称为子类或派生类，父类又可称为基类或超类子类会遗传父类的属性2）需要注意的是：python支持多继承 在python中，新建的类可以继承一个或多个父类 class Parent1: pass class Parent2: pass cl ......
Git之文件名乱码
现象 利用git status查看待提交的文件，其中文件名中有中文，但是显示的中文字符是乱码 乱码原因 在默认设置下，中文文件名在工作区状态输出，中文名不能正确显示，而是显示为八进制的字符编码。 解决方式 设置 git 的** core.quotepath **选项为false，quotepath表 ......
文件
1、文件和文件夹 计算机中将具有一定联系的数据作为一个单位进行保存和操作，即文件。 文件夹是用于管理文件的结构。在linux中，将文件夹视作特殊的文件。 2、文件基本属性 文件名称、路径、大小 创建时间、访问时间、更新时间 3、权限 4、隐藏文件 5、文本文件和二进制文件 文本文件，即其内是文本内容 ......
S蛋白序列进化树构建
NCBI下载PrC31、RaGT13、Wu-Han-1、YN2021、RpYN06的spike蛋白序核酸序列 下面是各spike蛋白核酸序列 利用mega序列比对 利用比对后的结果进行进化树构建 ......
数据结构与对象------Redis
参考《Redis设计与实现》 系列文章目录和关于我 一丶简单动态字符串 当redis需要的不仅仅是一个字符串字面量，而是一个可以被修改的字符串值时，就会使用SDS（simple dynamic string）来表示字符串值。比如set msg "hello world"将创建一个新键值对，键值对的键 ......
js中一个移除对象中子数组中空值的函数
js中一个移除对象中子集数组中空值（null，undefined）的函数 function removeNull(obj){ let delarr = []; for(let i in obj){ // 排除法寻找对象类型 if(typeof(obj[i]) 'boolean' || typeof( ......
java 处理常量字符串过长 & springboot 项目读取 resouces 文件夹下的文件内容
长字符串起因 项目里面有一长串的加密字符串(最长的万多个字符)，需要拼接作为参数发送给第三方。 如果我们使用 枚举 定义的话，idea 编译的时候就会出现编译报错 Error: java:常量字符串过长 解决想法 网上还有一个说法，说是编译器问题，修改 idea 工具的编译为 eclipse 即可。 ......