函数coalesce笔记hive
python数据分析师入门-学习笔记（第十节 数据获取）
# 工具使用 1. Anaconda - 官网下载 - 安装一路next(默认就行) 2. Chrome - 默认安装就行 3. 打开jupyter notebook - 打开anaconda prompt - 输入jupyter notebook - 系统自动打开一个网页 4. 快手掌握开发工具 ......
杜教筛学习笔记
# 杜教筛 ## 杜教筛的基本形式 对于积性函数$g(n)$我们希望求他的前缀和$S_g(n)$，如果有另一积性函数$f(n)$满足$f*g=h$，且$fh$的前缀和易求，那么我们可以通过$S_f(n) S_h(n)$快速的求出$S_g(n)$。 $$ \begin{aligned} S_h(n)& ......
python数据分析师入门-学习笔记（第九节 爬虫的核心流程）
## 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # 爬虫的核心流程 1. 明确目标 - 汽 ......
python数据分析师入门-学习笔记（第八节 python爬虫的准备工作）
## 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # python爬虫的准备工作 1. 一台 ......
ZROI 学习笔记之数学相关
都别催！！！等我有时间了例题和详细讲解都会补回来的！！！ # 7.29 数论基础 ## 你不会不知道吧 首先，你要知道 $$a \equiv b \pmod p$$ 是什么意思。然后， $$\dfrac{a}{d} \equiv \dfrac{b}{d} \pmod \dfrac{p}{d}$$ 也 ......
408-数据结构算法题笔记
# 常用基本操作 ```cpp 1.定义整数无穷大 #define INT_MAX=0x7f7f7f7f; 2.绝对值函数 int abs_(int x){ if(x<0)return -x; return x; } 3.最大最小值函数(一般可以直接写吧) int min(int a,int b){ ......
python数据分析师入门-学习笔记（第七节 爬虫如何搞钱）
## 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # 爬虫如何搞钱 1. 入职企业，找一份爬 ......
3-2 编写一个函数 escape(s, t)，将字符串 t 复制到字符串 s 中，并在复制 过程中将换行符、制表符等不可见字符分别转换为\n、\t 等相应的可见的转义字符序列。要 求使用 swich 语句。再编写一个具有相反功能的函数，在复制过程中将转义字符序列转换为 实际字符
# Archlinux GCC 13.1.1 20230429 2023-07-30 12:57:46 星期日 点击查看代码 ``` #include void escape( char s[], char t[] ) { int i, j; i = j = 0; while( t[i] != '\ ......
python数据分析师入门-学习笔记（第六节 爬虫合法吗）
## 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # 爬虫合法吗 ## 机器人协议 - ro ......
python数据分析师入门-学习笔记（第五节 爬虫分类）
### 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # 爬虫分类 ### 1. 聚焦爬虫 - ......
python数据分析师入门-学习笔记（第四节 爬虫的应用场景）
### 学习链接：[Python数据分析师入门](Https://Www.Bilibili.Com/Video/Bv15v4y1f7ju/?Vd_source=22d1d62b22f4b9c7051c7601ab55d92c "Python数据分析师入门") # 实际应用 企业中： 竞品调研数据采集 ......
python数据分析师入门-学习笔记（第三节）
### 学习链接：[python数据分析师入门](https://www.bilibili.com/video/BV15V4y1f7Ju/?vd_source=22d1d62b22f4b9c7051c7601ab55d92c "python数据分析师入门") # 爬虫到底是什么 ## 概括 ### ......
虚函数的一个实例,
处理MDI的关闭过程（仿MFC程序）： MDI窗口关闭是需要遍历关闭子窗口，在子窗口中须判断是否关闭。 MDI主框架和Child子窗口，一般都是继承类 在基类中会有一些框架的基本操作函数，用虚函数可以隐藏固定的中间调用过程WM_QUERYENDSESSION 消息响应 OnQueryEndSessi ......
哈希函数如何工作 ?
动动发财的小手，点个赞吧！ 作为一名程序员，您每天都会使用哈希函数。它们在数据库中用于优化查询，在数据结构中用于使速度更快，在安全性中用于保证数据安全。几乎每次与技术的交互都会以某种方式涉及哈希函数。 哈希函数是基础函数，而且无处不在。但什么是哈希函数，它们如何工作？ 在[这篇文章](https:/ ......
python数据分析师入门-学习笔记（第二节）
# 爬虫（数据采集） 1. ## 序言 - 爬虫到底是什么 - 爬虫的应用场景 - 爬虫的分类 - 爬虫合法吗 - 爬虫如何搞钱 2. ## 初级 1. 开始爬虫的准备工作 2. 爬虫的核心流程 3. 数据获取 4. 数据提取 5. 数据存储 6. 应对反爬虫 3. ## 中级 #### 1. 提升 ......
网络流学习笔记
由于本人太弱，可能讲解有误，请读者指出。 # 什么是网络流 网络流是通过构建从源点到汇点的有向图模型来解决图论问题。从理论上讲，网络流可以处理所有二分图问题。 二分图和网络流的难度都在于问题建模，一般不会特意去卡算法效率，所以只需要背一两个简单算法的模板就能应付大部分题目了。 # 最大流问题 ## ......
python数据分析师入门-学习笔记
# 第一节 数据分析整体介绍 ## 应用领域 - 数据分析 - 爬虫开发 - 数据存储 - 数据可视化 ## 数据分析内容 ### 1. 语言基础 - python基础 ### 2. 数据获取 - 爬虫课程 ### 3. 数据存储 - MySQL数据库 ### 4. 数据处理 - Numpy - P ......
函数传参中，形参类型为何使用const char*,而不是用char*
1.当传递常量字符串给 char* 类型的形参时，C++ 编译器可能会发出警告，因为 char* 可以用于修改字符串内容。而使用 const char* 类型，则指示调用者不应该修改传入的字符串内容，从而避免了可能的副作用。 2.在构造函数中使用 const char* 参数类型还有一个优点，它可以 ......
完善PS端YOLO网络前向计算函数
# 完善PS端YOLO网络前向计算函数 - ## 解决隐藏的bug - 在yolo_accel_ctrl.c文件中，修改读DMA时的命令，将原来的0x2改为与上一层卷积计算命令相或的结果，即`cmd |= 0x2` - 这样可以保持is_padding和is_pool等比特不变，避免影响PL端的池化 ......
24-Hive优化(下)
# 1. 分组聚合优化 ## 1.1 优化说明 Hive 中未经优化的分组聚合，是通过一个 MapReduce Job 实现的。Map 端负责读取数据，并按照分组字段分区，通过 Shuffle，将数据发往 Reduce 端，各组数据在 Reduce 端完成最终的聚合运算。 Hive 对分组聚合的优化 ......
23-Hive优化(上)
# 1. Hive 表设计优化 ## 1.1 分区表 ### a. 基本查询原理 Hive 的设计思想是通过元数据将 HDFS 上的文件映射成表，基本的查询原理是当用户通过 HQL 语句对 Hive 中的表进行复杂数据处理和计算时，默认将其转换为分布式计算 MapReduce 程序对 HDFS 中的 ......
22-Hive函数应用
# 1. 多字节分隔符 ## 1.1 问题与需求 【**默认规则**】Hive 默认序列化类是 LazySimpleSerDe，其只支持使用单字节分隔符（char）来加载文本数据，例如逗号、制表符、空格等等，默认的分隔符为”\001”。根据不同文件的不同分隔符，我们可以通过在创建表时使用 `row ......
21-Hive运算符&函数
# 1. Hive 内置运算符 整体上，Hive 支持的运算符可以分为三大类：关系运算、算术运算、逻辑运算。 官方参考文档：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 也可以使用下述方式查看运算符的使用方式： ......
LeetCode做题笔记
LeetCode做题笔记 3. 无重复字符的最长子串 最核心的就是维护一个字符串区间，同时保证其中的每个字符都只出现过一次。最最最暴力的就是枚举可能出现的每个字符串区间，然后确保里边元素不重复，然后找出最长的字符串有多少元素。再进一步的想法就是由小到大的构建这样的字符串。用双指针滑动窗口的思想来维护 ......
20-Hive-DML&DQL
# 1. Load DATA 回想一下，当在 Hive 中创建好表之后，默认就会在 HDFS 上创建一个与之对应的文件夹，默认路径是由参数 hive.metastore.warehouse.dir 控制，默认值是 /user/hive/warehouse。 要想让 Hive 的表和结构化的数据文件产 ......
19-Hive-DDL
数据定义语言（Data Definition Language，DDL）是 SQL 语言集中对数据库内部的对象结构进行创建，删除，修改等的操作语言，这些数据库对象包括 database(schema)、table、view、index 等。核心语法由 CREATE、ALTER 与 DROP 三个所组 ......
【d2l】【常见函数】【20】 torch.bmm( )
**局部矩阵乘法** 参考：https://pytorch.org/docs/stable/generated/torch.bmm.html ![image](https://img2023.cnblogs.com/blog/3240132/202307/3240132-20230729221513 ......
Day6: Shell函数和参数传递
学习目标学习内容1. 函数的定义和调用2. 参数传递3. 返回值4. 练习任务大树哥个人信息 学习目标 学习Shell中函数的概念和用法。 理解如何在函数中定义和调用命令序列。 掌握如何传递参数给函数并获取返回值。 练习编写脚本，使用函数进行模块化编程。 学习内容 今天我们将学习如何在Shell编程 ......
18-Hive入门&安装
# 1. Hive 概述 ## 1.1 什么是 Hive？ Apache Hive 是一款**建立在 Hadoop 之上的开源数据仓库工具**，可以将存储在 Hadoop 文件中的结构化、半结构化数据文件映射为一张数据库表，基于表提供了一种类似 SQL 的查询模型，称为 Hive 查询语言（HQL） ......
Go语言中init函数执行的顺序
`init` 函数的执行规则： 1. 对于同一个 go 文件，`init` 函数的执行顺序从上到下，即在代码中先出现的 `init` 函数会先执行。 2. 对于同一个 package，不同文件是按照文件名字符串比较的结果决定执行顺序的，字符串越小的文件越早被初始化。 3. 对于不同的 package ......