笔记spark
spark3的bug
1.[SPARK-39936][SQL] Store schema in properties for Spark Views，spark视图保存到hive metastore时未清空tableschema导致解析失败 Hive DataType解析器主要发生在Hive的元数据存储（Hive Met ......
学习笔记——博弈论
> 博弈论中玩家的选择均为对自己最有利の理论最优解. > >文中提到的必胜状态和必败状态来自要求的游戏起始状态, 但不由其推得. 这句话可能有些抽象，我也不太会表达(重度社恐),所以举个例子: $nim$游戏,3堆石子,分别为1,2,3. 最暴力的解法,我们枚举所有可能的状态, 然后把他们构成一个有 ......
『学习笔记』欧拉函数、莫比乌斯函数、高位前缀和、狄利克雷前后缀和
## 欧拉函数 ### 定义 又叫做 $\varphi$ 函数，$\varphi(x)$ 用来描述不大于 $x$ 且与 $x$ 互素的数的个数。 ### 性质 - 满足一切积性函数的性质。 - 若 $a \bot b$，则 $f(a\times b) = f(a) \times f(b)$. - 能 ......
读高性能MySQL（第4版）笔记01_MySQL架构（上）
 # 1. 逻辑架构 ## 1.1. 大多数基于网络的客户端/服务器工具或服务器都有类似的服务 ### 1.1.1. ......
spring boot集成getway笔记
# spring boot集成getway笔记 ### 1.get-way介绍 Spring Cloud Gateway是一个基于Spring Framework 5，使用非阻塞编程模型的轻量级API网关。它的主要目标是通过提供一种简单而有效的方式来路由请求。Spring Cloud Gateway ......
Stable Diffusion学习笔记
一、使用讯飞星火大模型生成Stable Diffusion prompt(提示词) # Stable Diffusion prompt 助理 你来充当一位有艺术气息的Stable Diffusion prompt 助理。 ## 任务 我用自然语言告诉你要生成的prompt的主题，你的任务是根据这个主 ......
git 笔记
1：删除远端分支 假设 git branch -va 后显示存在名为 test_dev 的远端分支， 则通过 git push origin :test_dev 命令即可删除远端的 test_dev 分支 2： 在网页上创建仓库，pull到本地后将变更在本地修改commit后 git push or ......
最短路&差分约束笔记
# 最短路径 ## 基础算法 ### 单源最短路径 单元最短路径指的是在一张联通图中，起点 $s$ 到其他所有点的最短路径。 计算单元最短路的常见算法有：$spfa$，$dijkstra$。 若图带负边权（注意，此时只能是有向图，无向图负边权类似负环），则必须使用 $spfa$，时间复杂度 $O(k ......
斜率优化 dp 学习笔记
~~仍然是算导风格的学习笔记~~ 例题：[[HNOI2008] 玩具装箱](https://www.luogu.com.cn/problem/P3195) P 教授要去看奥运，但是他舍不下他的玩具，于是他决定把所有的玩具运到北京。他使用自己的压缩器进行压缩，其可以将任意物品变成一堆，再放到一种特殊的 ......
搜索学习笔记
贪心最优搜索 基本思路：贪心。 实现方法： 从起点开始，每次选择与他相邻的点离终点更近的一个。 怎么判断哪个离终点更近呢？ 需要用到估价函数，通常有三种方式： 1.曼哈顿距离 2.对角线距离 3.欧式距离 注意：从起点到终点，使用的估价函数应当总是相同。 使用方法与 BFS 相似，不过入队的是从当前 ......
《深入理解Java虚拟机》读书笔记：虚拟机性能监控与故障处理工具
一、JDK的命令行 虚拟机性能监控与故障处理工具 工具 1、jps：虚拟机进程状况工具 jps主要用来输出JVM中运行的进程状态信息,它的功能也和ps命令类似：可以列出正在运行的虚拟机进程，并显示虚拟机执行主类（Main Class，main()函数所在的类）名称以及这些进程的本地虚拟机唯一ID（L ......
拓扑排序 学习笔记
[模板题](https://www.luogu.com.cn/problem/B3644) ## 分析题目 求一个图的拓扑序。需要用到拓扑排序。 ## 拓扑排序 将一张图中的顶点以线性方式进行排序，使得对于任何的顶点 $u$ 到 $v$ 的有向边 $(u,v)$, 都可以有 $u$ 在 $v$ 的前 ......
新人笔记-参数的传递
public class MethodDemo03 { public static void main(String[] args) { int number = 100; System.out.println("调用方法前" + number); change(number); System.ou ......
新人笔记-方法重载基本知识
方法重载： 多个方法在同一个类中 多个方法具有相同的方法名 多个方法的参数不相同，类型不同或者数量不同 与返回值无关 在调用时，Java虚拟机会通过参数的不同来区分同名的方法 public class MethodDemo02 { public static void main(String[] a ......
『学习笔记』插入类dp
## 概述 可以说是一个套路化问题，想出来了就非常好做。前提是你得想出来。 转移方程一般也都是特定的：设 $dp_{i, j}$ 表示往一个序列里插入了 $i$ 个数，这 $i$ 个数被分成了 $j$ 段的方案数。 初始化：$\begin{cases} dp_{1, i = 1} = 1 \\ dp ......
学习笔记 - Java 数组
## 数组的概述 数组（Array），是多个相同类型数据按一定顺序排列的集合，并使用一个名字命名，并通过编号的方式对这些数据进行统一管理。 数组是有序排列的，且数组属于引用数据类型，但数组中的元素既可以是基本数据类型，又可以是引用数据类型。 数组的存储是在内存中开启一片连续的空间，长度一旦确定就不能 ......
前端进化笔记-JavaScript（四）
生活想要将我活埋，怎料我是一颗种子 #基本引用类型 > 对象是引用类型的实例：new后面跟一个构造函数就创建了一个新对象，例如`let now = new Date(); `，这样就创建了一个Date对象. ### Date类型 ####方法 - Date.parse（ ）：根据传入的参数返回毫秒数 ......
数论学习笔记
# 逻辑 ### 1. 充分条件、必要条件与充要条件的概念 若 $p\Rightarrow q$，则 $p$ 是 $q$ 的充分条件，$q$ 是 $p$ 的必要条件。 $p$ 是 $q$ 的充分不必要条件，$p\Rightarrow q$ 且 $q\not\Rightarrow p$。 $p$ 是 ......
OpenCV笔记：cv2.VideoCapture 完成视频的跳帧输出操作
前言 我开始关注这个问题，是在使用PaddleOCR+ OpenCV 进行视频文字识别的时候，因为OpenCV 需要循环读取视频的每一帧进行解析，这就导致视频播放特别卡顿。由于视频中相邻帧的内容是一样的，重复识别也没有意义，所以我就在考虑：有没有办法跳帧输出？ 来源：https://blog.csd ......
unity学习笔记------游戏对象和脚本
创建工程 在开始使用Unity编辑器之前，我们需要首先创建一个项目。 打开UnityHub，这个是Unity的启动程序和安装程序应用程序，你可以在其中创建或打开项目， 安装Unity版本以及执行其他操作。 创建新项目时，可以选择其Unity版本和模板。创建之后，它将添加到项目列表中，并在相应版本的U ......
位运算 学习笔记【C++ 算法竞赛】
> 大家好，欢迎来到我的第一篇博客 > > 位运算和移位运算作为计算机的基本运算之⼀，其都是对⼆进制位进⾏操作。作为近年算法竞赛笔试较热门的考点，它能够快捷地完成特定的应用。掌握它是⾮常有必要的。 以下是目录： [TOC] ## 1. 位运算的优先级 C++运算符的具体优先级详见[大佬的文章](ht ......
(笔记)Ethercat解析之命令行工具的使用教程
说明：EtherCAT为了方便用户空间对主站进行调试，因此提供一套用户空间使用的工具来设置从站参数，观察调试信息等等。正常情况下，每个主站的实例都会生成一个字符设备，名字为：/dev/EtherCATx。 欲想深入了解其他命令，可通过执行ethercat –help命令来查看详细使用方法。 一、et ......
PADS应用笔记：Layout中多块覆铜填充时个别不生效 ##
# PADS应用笔记：Layout中多块覆铜填充时个别不生效 ## 解决方法 需要在覆铜的参数设置中修改优先级  ......
PADS应用笔记：如何提取其他人图纸中画好的元件符号和封装库 ## Logic中
# PADS应用笔记：如何提取其他人图纸中画好的元件符号和封装库 ## Logic中 选中要保存的符号，或者过滤器选择元器件，然后右键全选。 全选后再右键，选择保存到库中  生成.asc格式的网表文件 ## ......
vlunhub笔记（四）drippingblues
（一）信息收集 查询目标靶机ip，目标机：192.168.241.142 arp-scan -l 照常扫一下端口，发现开放21（ftp服务），22（ssh服务），80（web服务）三个端口 nmap -A -T4 192.168.241.142 发现开放21ftp端口，尝试访问。发现一个压缩包，下载 ......
[42000][3] Error while processing statement: FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.spark.SparkTask.
[42000][3] Error while processing statement: FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.spark.SparkTask. Spark job fai ......
CaltechCS122 笔记：Assignment 1: NanoDB Set-Up and Storage Layer
# Assignment 1: NanoDB Set-Up and Storage Layer NanoDB 是加州理工大学 Caltech CS122 课程使用的教学数据库系统 ## buffer pool manager lab1 的第二部分是实现充分利用空间的 bpm，当前所给出的 bpm 代 ......